李清照到莱州来探望赵明诚，赵明诚也无暇陪伴，其实是无心思陪伴，他整日燕舞笙歌，沉湎于官场的杯盏之间，不亦乐乎，怎么能不让词人伤心?让李清照彻底的心灰意冷。在那个时代，封建士大夫每个人都会有三妻四妾，蓄养歌伎舞女，来供自己消遣。暂且不论赵明诚是否移情别恋，但是对李清照情感的转移是肯定的。李清照本是个恃才傲物的女子，自尊心非常强，这件事对李清照的伤害是很深的。

　　如果说纳妾是对李清照的伤害，而后来发生的两件事，则让李清照对赵明诚非常失望与愤怒。

　　公元1129年，已经做了一年多江宁知府的赵明诚，得到调任湖州知府的命令，正当他办理交接手续的时候，下属李谟带来紧急情报：驻扎在江宁附近的御营统制官王亦准备起兵叛乱。作为过渡时期的官员，赵明诚这时候至少应该报告上级，或者调遣兵力作好平乱的准备，但是他的表现非常不男人、不丈夫。在当天晚上，他看到叛军纵火呐喊，吓得不知所措。慌乱之中，竟然当了可耻的逃兵，与另两位官员用蝇子爬到城外逃跑了，竟置全城百姓安危而不顾，这当中，也包括妻子李清照。幸亏李谟事先做了防备，平定了王亦的叛乱。但赵明诚等官员则被革职罢官。

　　赵明诚的自私与贪生怕死，让李清照寒心、痛心、羞愧之至。被罢官的赵明诚带着李清照开始流亡生涯。当他们途经芜湖、前往江西，船行到乌江镇时，李清照忽然想起这正是当年项羽兵败自刎之处，不由百感交集。她自然而然将项羽与赵明诚作了比较，生平第一次觉得饱读诗书的赵明诚是那般渺小，而一介武夫的项羽是那样高大，面对奔腾不息的长江水，她心潮起伏，写下了这首千古绝句：“生当作人杰，死亦为鬼雄。至今思项羽，不肯过江东。”