而且，高颎还不怎么专情。高颎的妻子去世。隋文帝要他重新娶个妻子，
高颎摇摇头说，“臣已经这把年纪，也不想再娶，虽然陛下垂爱很深，甚至想帮我纳妻，但这不是我的意愿。”
隋文帝只好随他的意。但是没多久，高颎的小妾就生下了孩子。这让独孤皇后很是嗤之以鼻，对杨坚说：“陛下，这高颎，明明是宠爱自己