独孤皇后已经有了罢黜杨勇的意思，但是她一个人的力量似乎还不够，而且杨勇的人缘不错，在朝廷里面也有很多的粉丝，尤其是高熲这个重量级的人物，深受杨广的器重，所以独孤皇后就打算给他一点暗示，于是把他叫过来问：“前些天有个神仙告诉萧妃，说晋王一定能够统治天下，你说这事儿该怎么办？！”
高熲是杨勇的死党，坚定的拥护者，不然也不会在南陈不顾杨广的反对杀掉了南陈第一美女张丽华，这时候，他赶紧跪在地上说：“长幼有序，兄长就应该当皇帝，这是天意，不可以更改。”独孤皇后一句话就把高熲的底牌给问出来了，而且高熲前面还得罪过他，所以她打算踢开这块绊脚石。
正巧这时候，杨坚下令把东宫的一部分卫队调往别的地方，高熲却不知死活的站出来反对，认为这样太子会有危险。实际上，满朝文武之中，最不应该反对这件事情的人就是高熲，因为高熲和杨勇是儿女亲家。
前段时间，百官前往东宫朝贺，杨坚已经对杨勇产生了怀疑，这次征调侍卫可能就是怕杨勇造反，而杨勇造反，最大可能性就是和高熲联合里应外合，偏偏他还敢站出来反对这件事情。杨坚脸色大变，说道：“你是不是想要走前人的路子！”高熲吓得差点尿了裤子。
杨坚说的前人的路子应该是刘义隆，当然刘义隆就是害怕太子有危险，所以特地给太子宫增加了一万名侍卫，可是没想到这一万人最后反而要了他的命，杨坚吸取了这方面的教训，这才有今天的举动。高熲这么一说，杨坚对他的防范心理也就更大了。连带着对太子杨勇的疑心也就更重了。
前面说过高熲小老婆的事情，其实这里的事儿并不那么简单。高熲的老婆去世的时候，独孤皇后早就知道他的小妾怀了孩子，所以故意对杨坚说：“高熲年纪这么大了，却死了老婆一个人挺孤独的，要不给他重新娶一个吧。”
高熲在隋朝屡立战功，不但平定了尉迟迥而且还灭掉了南陈，是杨坚的股肱之臣，所以杨坚对这件事情也非常的重视，赶紧就把高熲找来，把这个好消息跟他说了。可是高熲并不高兴，流着眼泪说：“我都这么大年纪了，还娶什么老婆呀，我现在下班回家，也就是看看佛经，吃斋念佛，其他的事儿我都不想，我觉得这样活着挺好的，清心寡欲，还能多为陛下做点工作。”
杨坚听了之后很感动，觉得高熲同志的觉悟还是挺高的嘛，就对独孤皇后说了，独孤皇后也没说什么，其实她早就胸有成竹了，只等着那个孩子呱呱落地。果然不久之后，那个怀孕很久的小妾为高熲生了个男孩出来。