那么合起来不就是子虚乌有，什么都没有了吗？这是何等的孤寂。李清照在《〈金石录〉后序》中记述赵明诚去世时的情景时写道：“取笔作诗，绝笔而终，殊无分香卖履之意。在古代，一个不能生育男孩甚至根本不能生育的妻子，在家中几乎是没有什么地位的，而且最终也会丧失丈夫的关爱以及对家庭财产的继承权。
赵明诚去世时，李清照为什么说他“素无分香卖履之意”？分香卖履有什么典故？
据说李清照在闺阁之中，就名动京城，引得太学生赵明诚为她大做相思之梦。据《琅娘记》卷中引《外传》里记载，赵明诚小时候，一日做梦，在梦中朗诵一首诗，醒来只记得三句话：“言与司合，安上已脱，芝芙草拔。”百思不得其解，就向父亲讨教。他的父亲听了哈哈大笑：“吾儿要得一能文词妇也。”明诚大惑不解。他父亲说：“‘言与司合’，是‘词’字，安上已脱，是‘女’字，‘芝芙草拔是‘之夫’ 二字。
合起来就是‘词女之夫’。”长大后有一年正月，赵明诚与李清照从兄李迥外出游玩，在元宵节相国寺赏花灯时与李清照相识。赵明诚早就读过李清照的诗词，本已赞赏不已，此时一见，便产生了爱慕之意。赵明诚回去后，便以“言与司合，安上已脱，芝芙草拔”的字谜方式，委婉地向父亲谈及此事。赵挺之恍然大悟，便派人去向李清照家去求亲。
于是李清照十八岁时，在汴京与太学生、丞相赵挺之的儿子赵明诚结婚。婚后，夫妻感情笃深，常投诗报词。他俩是古今人人共同羡慕的恩爱夫妻，神仙眷侣。这些都可以从李清照本人大量情感深挚缠绵的词里找到证据。“花自飘零水自流，一种相思，两处闲愁。此情无计可消除，才下眉头，却上心头。”（《一剪梅》）然而好事多磨，由于赵明诚的父亲赵挺之首先倡议打击元佑党人，因而造成了李清照父亲李格非的不幸命运，并进而连累李清照。
使得李清照不得不与她丈夫分离，只身离京去投奔先行被遣归的娘家人，夫妻之间也就产生了感情的隔阂。另外在宋代达官贵人以及文人士大夫有蓄养侍妾与歌妓的风气。宋真宗就曾多次鼓励大臣们应当充分地蓄养歌妓来享受生活，他说：“时和岁丰，中外康富，恨不得与卿等日夕相会。太平难遇，此物助卿等燕集之费。”（沈括《梦溪笔谈》卷25）宰相王曾非常节俭，真宗居然专门派人为他购买侍妾。
李清照与赵明诚特别尊崇的文坛前辈苏轼，平生并不好色，但苏轼自己却蓄养有朝云之类的一群侍妾，而且也不时的携妓吟诗作画，甚至携妓拜见佛门子弟大通禅师，自称“我也逢场作戏莫相疑”(详见胡仔《苕溪渔隐丛话》前集卷五十七引《冷斋夜话》)。在这种风气的影响下，赵明诚无论是在太学读书还是在官府为官，都不可能免俗。纳几个姬妾多半出于娱乐的目的，不过是逢场作戏，他的全部感情与心思还是放在李清照的身上。
