起初,，李林甫認(rèn)為楊國忠才學(xué)淺薄,，不會(huì)威脅到自己的地位，況且他又是楊貴妃的族兄,，因而對(duì)他善加禮遇,。楊國忠與王鉷同為御史中丞，李林甫卻舉薦王鉷為御史大夫,，楊國忠懷恨在心,。天寶十一年(752年)，王鉷之弟王焊與刑縡圖謀作亂,，欲殺死李林甫,、陳希烈、楊國忠,，卻遭到鎮(zhèn)壓,。
唐玄宗命楊國忠與陳希烈一同審訊。楊國忠奏稱王鉷也曾參與密謀,，并借此案牽引李林甫,，稱他暗中勾結(jié)王鉷。陳希烈則從旁作證。最終,，王鉷被賜死,。李林甫雖未獲罪，也逐漸被唐玄宗疏遠(yuǎn),。
同年十月,，南詔寇邊，劍南告急,。當(dāng)時(shí),，楊國忠兼任劍南節(jié)度使。李林甫便奏請(qǐng)玄宗,，建議讓楊國忠到劍南赴任,，想借機(jī)把他調(diào)離朝廷。楊國忠哭著對(duì)玄宗道：“臣一旦離朝,，必為李林甫所害,。”
唐玄宗安慰道：“你暫且先到劍南處理軍務(wù),，朕很快就會(huì)召你回來,，讓你當(dāng)宰相?！崩盍指Φ弥?，憤憒發(fā)病。不久,，李林甫隨唐玄宗前往華清宮,，結(jié)果病情加劇。
巫師道：“只要您能見一下皇帝,，病情就會(huì)好轉(zhuǎn),。”唐玄宗本欲前去探視,，卻被侍臣諫止,，便讓人將李林甫抬到庭院中，自己則登上降圣閣,，舉起紅巾招手慰問,。李林甫已病重不能起身，只能讓家人代拜謝恩,。
楊國忠剛到劍南,，便被唐玄宗派宦官召回朝中，并到華清宮謁見李林甫,，拜于床下,。此時(shí),，李林甫已無力再對(duì)付楊國忠。他流著淚對(duì)楊國忠道：“我很快就要死了,，你一定會(huì)繼任宰相,，我的后事就托付給你了?！?/span>
楊國忠對(duì)李林甫仍非常忌憚,，汗流滿面，連稱不敢,。同年十一月二十四日(753年1月3日),，李林甫病逝，由諸子護(hù)靈返回長安,，發(fā)喪于平康坊府邸,。唐玄宗追贈(zèng)他為太尉,、揚(yáng)州大都督,，并賜班劍武士、西園秘器,。不久,，楊國忠拜相。
天寶十二年(753年),，楊國忠與安祿山合謀,，誣告李林甫與叛將阿布思約為父子，同謀造反,。安祿山還派阿布思部落的降將入朝作證,。唐玄宗命有司審理。李林甫的女婿楊齊宣擔(dān)心自己受到牽連,，便附和楊國忠,，出面證實(shí)。
當(dāng)時(shí),，李林甫尚未下葬,，被削去官爵，抄沒家產(chǎn),。諸子被除名流放嶺南,、黔中，親黨中則有五十余人被貶,。唐玄宗還命人劈開李林甫的棺木,，挖出口內(nèi)含珠，剝下金紫朝服,，改用小棺以庶人之禮安葬,。
