好像是他在和李世民争位，而不是李建成。

有一次，李世民随李渊到齐王府，李元吉暗伏刺客欲在席间击杀李世民，却被李建成察觉并且及时制止。事后，李建成责备他不顾亲情，大胆妄为，李元吉却振振有辞：“我不过是为大哥你着想罢了，这对我又有什么好处？”这句话在李建成耳朵里听起来颇有些“此地无银三百两”的味道。

李元吉与李世民性格极为不合，因此认为宽厚重亲情的李建成当了皇帝，自己肯定能当个逍遥快活王爷，而严厉冷面的李世民若当了皇帝，自己只怕连性命也难保住，于是投靠了李建成，全力打压李世民。这仅仅是表面的原因，或许李元吉还有一份更大更深藏的野心。只看他终日里勤练武功，拼命收纳江湖好手的种种举动，便知道他决非表面上那么狂躁肤浅。或许干掉雄才大略的二哥之后，下一个目标就是仁慈宽厚的大哥了，皇位才是他真正想要的。

李建成眼中望着四弟李元吉，心中却思道：“如果三弟还活着，那该多好？或许三弟能调解二弟与父皇之间的矛盾，能让我们兄弟齐心合力，共创大唐盛世。”

李渊的头四个儿子全是窦皇后所出：长子李建成、次子李世民、三子李玄霸、四子李元吉。李玄霸天生神力，性格单纯，为人敦厚，深受父亲与两个兄长所宠爱。李玄霸在练武方面极有天赋，年仅仅十二岁之时，便已经是李阀第一高手了，众人都深信日后他的武学成就能达到宁道奇那种大宗师级数。李玄霸擅使一对玄铁重锤，冲锋陷阵，如入无人之境，勇不可挡。李玄霸十四岁之时，便随着李世民出征，立下了不少战功。后来，李建成也开始带兵出战，李玄霸赶来助大哥一臂之力，结果还没上战场，却意外被雷霹死了。李玄霸的死，让李阀上下全都悲痛万分。此时，又有谣言传出，说是李建成诱骗弟弟指天大骂，结果才害李玄霸遭天打雷霹而死。李建成一方面对无耻谣言相当愤怒，另一方面也深深自责，不管如何，三弟若不是赶来帮助自己，也不会遭此无妄之灾了。三弟李玄霸死的时候，年仅十六岁，并无儿女。

因为李世民的一伙手下不遗余力的四处大肆渲染，李建成在民间的传闻并不怎么好听，李建成在很多人心目中也成为无能善妒，刻薄寡恩，不念亲情的典型了。事实上李建成还是极为看重亲情的，他总是制止李元吉对李世民暗下的毒手杀招，也多次与李世民倾吐兄弟之情，希望能感化李世民，化解兄弟之间的矛盾。然而李世民的城府实在太深，他总是能流露真情，发自内心的说出一些虚伪得不得了的漂亮话，这或许是他招揽人才的看家本领吧！连妹妹李秀宁也被他这看家本领给吸引住了。想到李秀宁，李建成更是觉得一阵心疼，他一直以为妹妹应该无忧无虑的呆在家种种花，养养鸟，看看书，弹弹琴，将来找个如意郎君嫁了才是幸福。没想到妹妹却对战争和政治如此感兴趣，和二弟李世民越走越近，总日里抛头露面，卷入了那些就连男人也嫌其残忍肮脏的权利旋涡争霸激流之中。听说她与那个白手起家的寇仲产生了一段感情，弄得现在终日里郁郁寡欢。

“大哥，你在想什么？魏征呢？怎么不见他的人影？”李元吉消灭了一坛美酒之后，发问道。

“魏征他走了。”李建成叹息道。

“什么？”李元吉惊得跳了起来，大吼道“这混蛋，大哥如此看重信任他，他竟敢背叛大哥！我这就去把他找出来，一刀宰了。”

“四弟，万万不可！就让他去吧！良禽择木而栖，贤士择主而侍。是我不值得让他效力，他要离开也是天经地义的。”李建成颓然道。

“这怎么行？万一他投靠李世民了呢？必须杀了他才是！”李元吉叫道。

“魏征这种人，不管为谁效力，最终都会造福天下，泽及百姓。绝对不能杀他。让他去吧！”李建成坚定的说道“四弟，再陪我喝一坛。明日就要进入敌境了，那时侯军中可是要禁酒的，现在不喝，就没得喝了。”