汉武帝正有志于求学，热衷于书札、笔墨之事，用毛颖的后人毛纯做中书舍人。一天毛纯启奏说：“我有幸被您录用得以供您的驱使。然而依我的愚钝，不能独自担当重任。如今我的同僚们，不仅才能都不高，度量都不大，又都愚妄奸猾，不足以侍奉在您的身边，希望能够征召我的朋友罗文来帮助你。”汉武帝诏令罗文随计吏荐举入朝。在文德殿被汉武帝召见，皇上看着罗文，大为惊奇。让罗文在中书省待命。不久授予罗文中书舍人的职位。

　　此时，墨卿、楮先生，都因为擅长文墨而被宠幸，四人同心同德，意趣相投，相处非常愉快。当时人们称他们为文苑四贵。皇上曾慨叹喟叹说：“这四个人，都是国宝啊。” 然而（罗文在四人中尤其显得）持重敦厚、节操坚定、品行高洁，（本朝）从二千石到百石的官吏中，都没有比得上罗文的。

　　汉武帝拥有各色人才并任用他们，各种书札公文笔墨之事，都有罗文等人参与。皇上考虑到他的功劳，就把歙县祁门的三百户分封给罗文，号称万石君。

　　罗文为人方正，不可侵犯，然而与人争斗不是罗文所擅长的，（罗文）喜欢与老成持重知书达礼的人交往，（他）常常说：“我与年轻后生相处，往往担心有被污损的危险。”他自爱不苟且到这般境地，因此小人们大多对他怀有轻蔑痛恨之情。有人在皇上面前说他的坏话说：“罗文天性贪墨，没有廉洁的美誉。”汉武帝说：“我用罗文掌管书札翰墨，图的是利于治国罢了。罗文虽然贪墨，我原本是了解的，但不这样又如何显现他的才能呢？”从此左右的人不敢再说什么了。

　　元狩年中，汉武帝诏令天下举荐贤良方正之人。淮南王刘安推荐端紫，与罗文一起掌管文墨履行职责。端紫虽然缺乏文才，但善谄媚特别讨人喜欢，因此常常伴随在汉武帝的左右，罗文渐渐不被重用。皇上幸临甘泉，（到）河东祭祀，巡视朔方，端紫往往随奉左右，而罗文留守在长安的宫中。汉武帝出巡归来，见罗文蒙尘垢面，颇怜惜他。罗文借此进言道：“陛下用人，确实如汲黯所说，后来者居上啊。”皇上说：“我并非不挂念你，因为你年纪大，不能稍有变通的缘故啊。”左右侍从听了汉武帝的话，以为皇上心里不再喜欢（罗文），于是不再顾恤省视罗文了。　　罗文伏地叩拜恳请告老还乡，皇上命令驸马都尉金日磾从旁搀扶起罗文。金日磾，是胡人，起初不通文墨，一向憎恨罗文的作为，趁此（将罗文）挤摔在大殿的地上，（罗文）跌倒在地而亡。皇上深为罗文而忧伤，令宦官将罗文安葬在南山下。