李攸烨一想也对, 多出来一年的时间, 正好可以帮她慢慢建立威信。于是就把封后的事情推迟到了明年。可是她不急，那剩下的八位大臣当中有人却急了，因为几位千金已经到了出阁年纪, 婚事拖不得了。他们本以为皇帝孝顺，即便对先皇后用情至深，有皇太后的赐婚诏书在，自己女儿就一定能够入宫当贵人。谁能料到，慈和宫的一场大火，顷刻间将一切化为乌有。他们岂能甘心。
李攸烨单独封权洛颖为妃，绝口不提她人的时候, 他们已经心有芥蒂，只是不敢去李攸烨面前闹，就把高显给纠缠住不放, 责备他保管遗诏不力，另外还限期要求他向皇帝表明确实有这么一道诏书。
谁料, 这个老家伙不识抬举, 竟然闭门谢客, 公然不把他们放在眼里, 后来干脆拍拍屁股辞官回乡了。八臣里头大半是武将, 高显又是文臣之首，在玉瑞, 文臣武将相互制衡已经是朝廷的惯例，而他这一举动被有心人理解成了文官势力见不得武将势力在后宫抬头。
八臣哪里能咽下这口气，找不着高显，他们就找高显那位在京中任职的长子高慎出气，以各种由头处处找茬、打压、刁难。令这位五品翰林学士的日子很不好过。
尽管他已经多次解释，诏书原本的确在家父手中，准备等合适的时机就发布。但是，因为太皇太后想在诏书上加几个名字，所以，临时就给要了回去，那场大火实在是出乎了所有人的预料。
但武将们根本不理会，性情火爆的平南侯石卫锋一天三本地参高慎，逐渐成为了这股势力的头。而玉瑞的文臣们也敏感地嗅到到了这股针对翰林学士的打压力量，开始奋起反击。
李攸烨烦透了这种文武相互倾轧的局面，两边各打一棒子，先把高慎迁到最南边的郡县任县令，又把石卫锋给调去了最北边燕地当守将。其余武将一看皇帝雷厉风行的做法，知道再闹下去与己无利，也纷纷偃旗息鼓。
本以为事态已经平息，但是没想到八臣之一镇东将军杜家的小姐不久后却悬梁自尽了。此事在朝廷中影响极为恶劣。
原来镇东将军知道女儿入宫没戏后，匆忙间给她另找婆家，选定了自己的副将，一个面貌粗鄙，斗大字不识一箩筐的粗莽汉子，据说杜小姐不愿意，于是在夜里趁下人熟睡之际，用一条白绫了结了自己的性命。这件事在朝中影响很大，不知谁透的口风，牵出了太皇太后赐婚遗诏的事情，虽然没有人敢当面指责李攸烨“不孝、背信弃义”，但是私底下关于她抵赖退婚导致杜小姐自寻短见的流言传得沸沸扬扬。
“气死朕了，明明是当爹的不负责任，随便将女儿许人，结果把罪过全都推到朕头上，别以为朕不知道他们打得什么主意，有了这一次就有下一次，休想让朕妥协，我看他们是过得太舒坦了，非要朕给他们点颜色瞧瞧！”
李攸烨在御书房发了一通脾气，又是内疚，又是生气，最后生气压过了内疚，一怒之下就把那位镇东将军也给贬谪了。因为这件事一连贬了三位大臣，朝中难免人心惶惶，胡万里上奏建议她尽快平息流言，免得惹出什么乱子。