李渊见他在喜庆宴会上落泪，顿觉大煞风景，脸上当即露出不悦之色。一旁的后宫妃嫔见状，立刻抓住机会，你一言我一语暗中诋毁李世民：“如今天下安定，四海无事，陛下年事已高，正该安心享乐、颐养天年。可秦王偏偏闷闷不乐、暗自落泪，分明是心中记恨我等。倘若他日陛下百年之后，我们母子众人，必定难以被秦王容下，恐怕难逃杀身之祸！”
说罢，一众妃嫔纷纷假意落泪，又转而称颂李建成：“太子心性仁厚、孝顺温良，若是日后由太子主持大局，我等母子定然能得以保全安稳。”
这番话语句句戳中李渊的顾虑，他越想越是忧心忡忡，对李世民的猜忌愈发深重。自这以后，李渊渐渐疏远了战功卓著的秦王李世民，反倒对太子李建成、齐王李元吉越发亲近信任，兄弟三人之间的矛盾，也在这般日复一日的倾轧与猜忌中，愈发尖锐难解。