李建成剿灭刘黑闼，趁势安抚河北军民，所得刘黑闼余部，尽数编入齐王李元吉军中。

李建成趁机拉拢三弟李元吉，说欲扶植他统领军队，共同排挤秦王李世民。李元吉也深知二哥兵雄将广，怕自己永无出头之日。如今有大哥支撑，觉得机会来了，做起了以后李建成当皇帝，他做天下兵马大元帅的梦。在他看来，李建成继承皇位，应该是板板上钉钉子的事情，所以对建成言听计从。

见天下大定，李渊也开始了享乐生活，宠幸的嫔妃很多，接连生了滕王李元婴等近二十位小皇子。他们的母亲争相交结各位年长的皇子来巩固自己的地位。

李建成和李元吉都曲意奉迎各位妃嫔，奉承、献媚、贿赂、馈赠，无所不用，以求得皇帝的宠爱。并时刻准备着通过她们向李渊进谗言诋毁李世民。

当时，太子东宫、各王公、妃主之家以及后宫妃嫔的亲属，在长安横行霸道，为非作歹，而主管部门却不敢追究。

由于李世民不去讨好诸位妃嫔，所以嫔妃们很生气，争相称赞李建成、李元吉而诋毁李世民。

李世民平定盘踞在洛阳的王世充以后，李渊让贵妃等几人到洛阳挑选隋朝宫女和收取仓库里的珍宝。贵妃等人私下向李世民索要宝物并为自己的亲戚求官，李世民回答道：“宝物都已经登记在册上报朝廷了，官位应当授予贤德有才能和有功劳的人。”没有答应她们的任何要求，因此妃嫔们并不怎么待见他。

李世民因为淮安王李神通有功劳，赏赐给他几十顷田地。而李渊的嫔妃张婕妤得知后向李渊索要这些土地给自己的父亲，李渊便将属于李神通的土地赐给了张婕妤的父亲。

而李神通因为秦王的赏赐命令在先，就没有将土地让出。张婕妤就向李渊告状，说李世民擅自作主，分封土地与下属，完全是目无君上，把自己当成了天下之主一般。李渊因此发怒，把秦王李世民叫来狠狠斥责了一番。

李渊的嫔妃尹德妃的父亲尹阿鼠骄横跋扈，秦王府的官员杜如晦经过他的门前，尹阿鼠的几名家僮把杜如晦拽下马，揍了他一顿并打断了他一根手指，说道：“你是什么人，胆敢过我的门前不下马！”

尹阿鼠怕李世民告诉李渊，便指示尹德妃诬告李世民，反而对李渊说秦王李世民欺负她的家人。

于是李渊又大为生气，训斥了李世民一顿，弄得李世民莫名其妙的受了顿气。李世民反复为自己澄清，但李渊始终不相信，认为他约束部下不严，自恃有功，尽都骄横起来目中无人了。