可惜對於李淵來說，李密是頭勐虎，可以用他千金買馬骨，收服人心，但真若是對其委以重任，那是不行的。

於是李淵將李密舊部等人一一調出，分化瓦解，使得李密空有光祿卿的高位，卻無一點實權。

光祿卿在秦漢之時屬於御林軍總管，但到了大隋，專司皇室膳食，轄太官、餚藏、良醞、掌醢四署，也就是個天子司務長了。

油水或許不少，但權利是真沒有。

這對於野心勃勃的李密來說，如何能接受。

於是心有不甘的李密便準備以返回中原招撫舊部的名義叛逃。

可惜李密還沒準備行動，便有舊部示警，言“李淵正嚴密監視，若其一旦有異動，立刻處置。”

這把李密嚇得，倒是再不敢逃了。

從成都出蜀，各處險關要地，李淵要是不允他離開，李密飛也出不去。

此事之後，李密眼看李淵對其不放心，為了打消其戒備，便放飛自我，不理政事，亦不和舊部接觸，整日裡以學道求仙的名義，四處尋訪道觀。而作為道家名山的青城山，李密更是隔三差五的來，一來就是半個多月，都快把青城山當作自己家了。

李淵剛開始當然不相信李密是真的尋道，於是天天派人緊盯著他。但之後李密果然像是一個政治的失意者一般，不再過問政事，一門心思做起了道士。不管是日常監視還是李淵發起的試探，皆沒有發現異常。

時間一長，李淵也就不太注意李密了。

畢竟李淵事多，哪能天天盯著李密一個人。

李密不愧是一個頂級的智者，他雖然不斷地尋仙求道，但亦沒有放下心中的理想抱負。而且在不斷的求道過程中，讓他在瓦崗產生的燥心漸漸消解，他的心性也變得更加的穩健和堅毅。

隨著黃明遠在中原的屢戰屢捷， 李密也不想著再重返中原。

以他的力量，回去也沒有容身之地。

於是李密再次打起了鳩佔鵲巢的主意，李淵年級大了，時日無多，只要他掌握了李唐的權利，再憑藉巴蜀天線，以他的能力，必然能擋住明軍。

不過李淵老辣，定不會給李密這個機會。

李建成、李世民也是一代英傑，不會讓他架空，於是李密便將目標放在了文不成、武亦不成的李元吉身上。

在李密看來，李元吉除了有點蠻力，一無是處，以其為主，簡直是對自己的侮辱。可越是如此，李元吉越容易被他控制。

於是李密便故意製造一些機會和李元吉相遇，還投其所好，獲取對方的好感。時間一長，李元吉還真記住了李密，且對其印象不錯。

今日青城山再見，李元吉便客氣地邀請了李密兩句，本來只是隨口說說，可沒想到的是，李密竟然真的來了。