对杜牧李珏的这种见解后世仅范摅王夫之附和，其他批评家对此大多持反对意见，如唐人皮日休《论白居易荐徐凝屈张祜》、胡震亨《唐音癸签·诂笺》、贺贻孙《诗筏》、清人钱大昕《十驾斋养新录·文人勿相轻》、刘熙载《艺概》等都认为杜牧李珏指责元稹白居易的话是“户门相轧”、“文人相轻之言，未免失实”。如唐人黄滔《答陈磻隐论诗书》云：

　　大唐前有李杜后有元白，信若沧溟无际华岳干天，然自李飞数贤多以粉黛为乐天之罪，殊不谓《三百篇》多乎女子，盖在所指说如何耳!

　　又如宋人叶梦得《避暑录话·馀话下》、宋人刘克庄《后村诗话》云：

　　杜牧作《李戡墓志》，载戡诋元白诗话，所谓非庄士雅士所为，淫言媟语入人肌骨者……戡不知何人，而牧称之过甚。古今妄人不自量，好仰扬予夺，而人辄信之，类尔!

　　杜牧罪元白诗歌传播，使子父女母交口诲淫，且曰“吾无位不得以法绳之”……牧风情不浅，如《杜秋娘》《张好好》诸篇、“青楼薄倖”之句“街吏平安”之报，未知去元白几何?以燕伐燕，元白岂肯心服?

　　明人杨慎《升庵诗话》、王世懋《艺圃撷馀》云：

　　杜牧尝讥元白云：“淫言媟语入人肌骨，吾恨不在位，不得以法治之。”而牧之诗淫媟者与元白等耳!岂所谓“睫在眼前常不见”乎?

　　杜紫薇掊击元白，不减霜台之笔;至赋《秋娘》诗，乃全法其遗响，何也?

　　清人尤侗《艮斋杂说》云：

　　杜牧之尝言：“近日有元白者喜为淫言媟语，鼓扇浮嚣，吾恨在下位，未能以法治之。”此直以门户相轧耳!扬州梦，真浪子行径，杜书记平善又谁治耶?文人不自反如此!

　　历来的批评家认为杜牧是因不满元稹白居易荐徐凝屈张祜而对元白进行攻击，纯粹出于个人意气。我们以为这种攻击主要是出于政治斗争的原因。杜牧与牛党党魁关系极为密切，他与李珏曾分别为牛僧儒撰写墓志和墓碑;他又是三朝宰相杜佑之孙，元稹白居易在年轻时曾弹劾讥讽过时相杜佑，元稹在左拾遗任之时，有《论追制表》加以弹劾，矛头所指即是当时的宰相杜佑，杜佑护佑杜兼，授职苏州刺史，行未半途又追改杜兼的官职，文云：