安禄山很看不起杨国忠，经常在李林甫耳边表达对杨国忠的不屑“十郎，杨钊这小瘪三不是个做大事的料，我非常看不起他，我每天早上起床都问候他先人几百遍。”
李林甫笑了笑说道“禄儿，长矛有长矛的用处，烂树枝有烂树枝的用处。杨国忠这个人虽然是小混混出身，但是他还是个聪明人，拎得清方向。他自恃有杨贵妃的撑腰，朝堂之上他什么话都敢说，嘴巴比宋祖德都贱，简直就是杨大炮，我们整李亨他可是出了不少力啊。虽然现在太子没有什么大碍，但是他必然对杨国忠忌惮，这对我们来说反而是好事情。只是我感觉这老小子有点野心，不服管，总是先斩后奏不把我放在眼里，我要敲打敲打他让他长点记性。”
在李林甫的精心策划下，杨国忠不断被李林甫整治，一段时期内要不是凭借杨贵妃说好话，他真是求生不得，求死不能。杨国忠对李林甫恨之入骨“这老东西，简直就是个疯狗啊，逮谁咬谁，你妈了个b的。”
李林甫年纪越来越大，身体愈发脆弱了。他每天都担心杨国忠会在他死了之后，挖他历史问题翻他旧账清算他，于是决定弄死这个小混混再去见阎王。
于是他上书给唐玄宗，大致意思说“南诏国联合吐蕃，对四川形成威胁，杨国忠是四川人，又有鲜于仲通这样的好基友作为支援，派他去镇守四川绝对是不二人选。”
杨国忠看到这个奏章吓得半死，跪在唐玄宗面前哭得跟孙子一样“皇上，你不能让我去四川啊，我去四川肯定死翘翘了，李林甫这个老狐狸打着为国家考虑的旗号来整我啊。我一旦离开京城，要不路上被他派去的刺客弄死；要不就是被南诏军队杀死；要不李林甫随便安个罪状给我以丞相的名义治我的死罪，皇上你不能眼睁睁地看着我往火坑里跳啊。”
唐玄宗赶紧将他扶了起来，笑着说道“杨爱卿你不要害怕啊，李林甫现在还是宰相，他呈上的奏折合情合理，我没有什么理由驳倒他。这样吧，我派大内高手护送你去四川，你到了四川之后2个月后我再把你调回京师，这样一举两得，到时候，李丞相也不会说什么。”
原来，杨国忠和李林甫在对待王鉷的问题上也有矛盾，王鉷本是李林甫和杨国忠共同嫉妒的对象，但是为了牵制杨国忠，李林甫则极力提拔王鉷，当杨国忠陷害王鉷时，李林甫又竭力为其开月兑罪责。由于杨国忠在背后做了手脚，唐玄宗便开始疏远李林甫，王鉷也以莫须有的罪名被致于死地，王鉷所兼职务全部归杨国忠。这唐玄宗虽然年纪大了，可不糊涂。唐玄宗深知他们矛盾很深，他偏心杨国忠一方面是为了取悦于杨贵妃，另一方面是借以牵制李林甫的专权，同时为取代已经衰老了的李林甫做人才储备。
皇上把话说道这个份上了，杨国忠只能咬牙答应下来。他觉得两个月应该不会出什么幺蛾子，何况唐玄宗答应他派长安皇家卫队保护他，他更加放心了。
经过一番精心准备，杨国忠的队伍就开始往四川方向出发了，出发那天，杨玉环在长安车站送行“杨兄保重啊，祝你一路顺风。”
杨国忠挥一挥手，没有带走一片云彩。
出了长安城，杨国忠回了回头，愤愤地说道“我一定还会回来的。”他的心里满是对李林甫的仇恨，这老狐狸没有几天好活了，心还是那么歹毒。
再说李林甫府上，安禄山正在和李林甫商量着什么。
“十郎，杨国忠这孬孙上当了，他现在已经出发去四川了，我派我的特种部队在路上弄死他，这样省的你心神不宁，你看如何？”
“禄儿，现在不急，你派特种部队一路尾随，快到四川的时候，假扮成南诏国的杀手将这个孬种的猪头都给切了。我到时就跟皇上禀报说杨国忠得罪当地土人，被报复杀死，那大家都相安无事。”李林甫平静的说着，脸上露出一股杀气。
安禄山抚掌哈哈大笑，大肚子随着笑声一颤一颤的，很有节奏，仿佛在唱rap。这安禄山是个杂胡，朝廷之内最怕的人就是李林甫，最佩服的也就是李林甫。主要有两点：
第一，李林甫举荐安禄山任边关老大，他对安禄山显然是有知遇之恩。当然李林甫不是活雷锋，他这么做当然是为了巩固他自己的权位，也透露出他对蕃将的轻蔑，认为安禄山这种胡人不能举大事。
第二，李林甫的政治手腕镇住了安禄山。安禄山初见李林甫的时候，仗着有玄唐宗的恩宠，态度怠慢，拽得跟二五八万一样。李林甫瞧在眼中，却不动声色。当时大夫王鉷也专权用事，和杨国忠齐名，李林甫故意把王鉷叫来，让安禄山站在一旁。当时王鉷身兼二十余职，恩宠无比，见了李林甫也只能卑词趋拜，满脸媚笑。李林甫向王鉷问对，十分精审，王鉷对答，百倍地恭敬。安禄山在一旁不觉瞪大了眼睛，态度也恭敬起来。王鉷说话越谨慎，安禄山的态度也就越恭敬。李林甫看见安禄山态度的转变，这才胸有成竹地对安禄山说道：“小朋友你来长安，深得皇上欢迎，这是好事，我恭喜你。你也要好自为之，好好报效祖国，做祖国栋梁之才，皇上虽然老了，但是我李林甫可不老，你的一举一动我都看在眼里。”安禄山听了李林甫的话，吓得半死。李林甫收买了唐玄宗身边的侍从，所以能及时得到唐玄宗那里的小道消息，每次他和安禄山讲话，都和玄宗对安禄山所讲一字不差，安禄山心里暗暗惊服。李林甫问安禄山任何事情，安禄山丝毫不敢隐瞒，将李林甫奉若神明。
李林甫对安禄山恩威并施，慢慢地，二人关系亲密起来。安禄山人在范阳时，每逢派人向朝廷奏事，便叮咛来人问候李林甫。奏事之人从长安回来，所问的第一句话不是别的，而是问“十郎何如”。安禄山曾对亲近之人说：“我安禄山出生入死，天不怕地不怕，当今天子我也不怕，只是害怕李相公。”对李林甫的忌惮之心可见一斑。
安禄山经常入朝向玄宗表白自己的忠贞不二，向李林甫倾诉自己只愿作宰相的骁将，绝对不会对他朝廷地位形成威胁，只会助他一臂之力。因此进一步使李林甫觉得放心。这样，安禄山一路平步青云，直至被赐铁券、封王爵。
在安禄山的眼中，李林甫是唐帝国最牛逼——最牛逼的男人。