李元吉失了眉州兵權，灰熘熘地返回了成都。這對於野心勃勃的李元吉是一個重大的打擊，因為這不是簡單的被奪權的事，而是意味著李淵對李元吉能力的不信任。在這緊要關頭，被貼上一個能力不足的標籤，想再獲得軍權，就很困難了。

李元吉也意識到這一點，如一隻暴怒的獅子一般，將整個軍帳砸了一個稀巴爛，以發洩怒氣，可木已成舟，即使他再歇斯底里，亦沒法改變此事。

返回眉州的李元吉，憤憤不平。

可李淵現在對於巴蜀的內亂焦頭爛額，恨不得全部的精力都用在平亂上，可沒有精力在意李元吉的心情。也就是李建成勸了李元吉兩句，承諾過段時間會向李淵舉薦，幫著李元吉重新領軍。

但福無雙至，禍不單行。

李元吉回到成都沒兩日，李世民在眉州大破獠人的訊息便傳來。

現在的李世民有多次兵敗的經歷，因此在李唐內部，也只能算一個有能力之人，並未被神化。所以對於李世民迅速平亂，大家的想法不是李世民能打，而是眉州獠人太弱。

獠人未開化，中原王朝亦從未將其放在眼中。

所以李世民迅速平亂和之前李元吉連戰不勝立刻形成了一個鮮明的對比，在所有人看來，李元吉就是能力不夠，才未能平亂。

再加上李元吉風評本就不好，當初丟了太原，就是因為李元吉的臨陣脫逃。

所以很快眾人便形成了一個統一的意見，李元吉空有一副壞脾氣，實則無能的很。

此評越來越廣，連李淵和李建成都懷疑，這李元吉是不是真的沒多少腦子，根本不會領軍。

面對這個說法，李元吉恨不得殺人以洩憤。他自問勇武過人，天賦卓絕，雖古之名將亦不可比。雖然有敗，但也只是時運不濟而已。

至於李世民，敗仗不比他大嗎？憑什麼還能被父親委以重任。

李元吉甚至想告訴每個人自己的本事，讓他們知道自己的能耐，可惜只能想想而已。表面上，大家對他還是客客氣氣的，讓李元吉有氣無處撒。

李元吉三番五次地去找李建成，請求李建成幫他再次領兵，可李建成也不太敢再用他，只得委婉拒絕。

連李建成都不信任他，這讓李元吉很受傷。

因為全身精力無處發洩，李元吉只得整日打獵遊玩。李元吉愛好打獵，號稱“寧可三天不吃東西，不能一天不打獵”。當初跟宇文歆的矛盾，就是因為打獵而爆發的。可惜李元吉丟了太原，也沒能改掉這個惡習。

原本還有李淵、李建成約束他，可現在所有人的目光都在平亂上，李元吉如脫韁的野馬一般，四處遊獵，踐踏農田莊稼，公開掠奪百姓財物，簡直如土匪一般。

可惜沒人敢管，即使有人彈劾，也被裴寂給壓下，美其名曰“勿使唐王分神。”

李元吉更瘋狂了，西到灌縣，北到綿竹，到處都有他肆虐的身影。

這天李元吉來到青城山打獵，中午歇息的時候，便遇到了學道的李密。

李密自當初邙山兵敗之後，帶著殘部入蜀投奔了李淵。李密歸唐，李淵大喜，拜李密為光祿卿，封邢國公，還將表妹獨孤氏嫁給了李密，稱呼李密為弟。