进入开皇二十年之后，整个朝堂也仿佛进入多事之秋。
正月，突厥、高丽、契丹遣使奉献，隋帝杨坚派杨广主持对各藩国事务，之前被打压的晋王一党再次显赫起来。
冰冻三尺，非一日之寒。杨坚对杨勇的厌恶不是一时的怜惜可以的，自然也不会一次机会便有大的改观。杨勇该怎么行事便怎么行事，依旧如往昔一般。
杨坚对杨勇绝望了，到了这个时候，太子连个驱逐佞臣，亲近贤良的面子活都不会做，自己如何敢把大隋江山交给他。虽然通过上次高颎一事杨坚也看到二儿子杨广并不是表面上的那么仁孝，但作为天子，总得有点手段不是。杨坚没有办法，为了杨家天下，只得再次扶持起杨广来。
二月，熙州人李英林率众造反。三月初二，隋文帝任命扬州总管府司马张衡为行军总管，统帅步、骑共计五万人讨伐李英林，予以平定。
这是一个很明显的信号。杨坚又恢复了杨广被禁止许久的领兵权，而同时也意味着太子杨勇的储位更加风雨飘摇。
次日，前相国齐国公高颎被人告发，以心怀怨怼、意图谋反之罪，被再次下狱。
杨坚为了彻底翦除高颎一党，已经无所不用其极了。
高颎回到渤海后不久，高颎封国的国令上告高颎私下做的一些事，说：“他的儿子高表仁对他说：‘司马仲达当初托病不朝，于是拥有天下。您今天也遇到类似情况，怎知不是福份？’”
杨坚大怒，便把高颎召回，又将其囚禁在内史省拷问他。
或许高表仁真的说过这种话，但杨坚却是一点体面也不给高颎留了。他在一步一步的利用舆论，创造舆论，直至把高颎给废掉。
接着司法部门又上奏高颎别的事，说：“沙门真觉曾对高颎说：‘明年国家将有大丧。’尼姑令晖又说：‘开皇十七、八年，皇帝有大灾难，十九年不可能活过去。’”
杨坚听了，更加震怒，回头对群臣们说：“帝王之位，岂可力求？孔子以大圣之才，作法传世，难道他不想当帝王吗？天命不可罢了。高颎和他儿子交谈，自比晋宣帝，这是什么心思呢？”
有关部门请求杀高颎，还有不少人为高颎求情。杨坚将所有求情者一律罢官黜落。只是到最后，杨坚怕事情扩大化，才说道：“去年杀虞庆则，现在又杀王世积，如再杀高颎，天下人会怎么说我？”于是除掉高颎的官籍，让他作平民。
之后不久，贺若弼复坐事下狱。这