哪里得罪太子了，让他总憋着害我。我整天提心吊胆的，不是担心他在背后诋毁我就是担心他在我饭菜里下毒。
独孤皇后气愤地说：我给他娶的媳妇中毒而死，我怀疑就是他干的。我还活着他就这么迫不及待。要是我死了，不知道他会怎么欺负你呢！皇后说罢悲不自胜，眼泪不由自主掉下来。
杨广一看皇后这个反应，知道有门，又去找杨素。
杨素出将入相现在是尚书右仆射，位居百官之首。杨素也知道皇上有换太子之意，决定顺水推舟帮杨广一把，稳固自己日后在朝中的地位。
杨素借一次宴会的机会假装跟皇后聊天，夸赞杨广“晋王（杨广）孝悌恭俭，有类至尊（隋文帝）”，以此试探皇后的心意。
皇后听他这么说不禁掉下眼泪，说：可不是吗。杨广孝顺仁厚，不像杨勇四六不懂。我常担心杨勇害了杨广。
杨素一听皇后这么说，心里有底了。他开始放心大胆地说杨勇的坏话。
皇后让他把这些话也去说给皇上听。杨素于是联络群臣，暗中搜集杨勇的黑材料，不断去隋文帝那里诋毁杨勇。
隋文帝终于打定主意废太子。
600年，隋文帝下旨废黜太子杨勇，改立杨