赵光义在世前后有三位皇后，先娶淑德尹皇后，不久薨逝；再娶懿德符皇后，公元975年薨逝，两人都没有赶上赵光义称帝的好日子，她们的皇后名分是赵光义后来追封的。而且她们都没有生育儿子。
第三位皇后明德李皇后，她是李处耘的女儿。公元978年入宫，时年十九岁。公元984年册封为皇后，李皇后生育过儿子，可是夭折了。此后再无生养。
皇后无子，皇帝赵光义年龄逐渐见老，到公元990年，赵光义已经五十二岁了，似乎根本还没有立太子的意向！皇帝不急大臣急！
这些大臣是左正言（左右正言是谏议官）冯拯、黄裳、右正言王世则、宋沆、洪湛等人。
他们一起出动，伏阁上疏请立许王赵元僖为皇太子，赵光义览疏，勃然大怒，认为他们词意狂率，妄议国体。
赵光义对宰相道：“储副，国家之根本，朕岂不知？但近世浅薄，若立太子，东宫僚属皆须对太子称臣，人情深所不安。此事朕自有安排。”
赵光义一股脑儿将他们贬到岭南。冯拯知端州（广东肇庆）黄裳知邕州（广西南宁），宋沆知湖南靖州，王世则知蒙州（广西蒙山），洪湛知容州（广西容县）。
公元994年九月，寇准从山东青州奉诏回京。入宫见赵光义。赵光义腿伤复发，溃烂疼痛。撩起裤脚让寇准看，并且可怜兮兮地问：“爱卿怎么来得这么迟缓啊？”
寇准委屈地回答：“臣非奉诏不敢到京都来啊！”