另外李休在军队也拥有极高的声望，别的不说，李休的儿子李晋独掌海军，另外还有苏定方、王方翼等人在陆军，这些人都可以算是李休背后的潜势力，也就是因为李休以前不入朝堂，所以这些人才没有联合在一起，但若是李休铁了心要进入朝堂和他争权，恐怕长孙无忌也争不过他。
当然上面这些都只是外力，真正让长孙无忌忌惮的还是李休本身的能力，他是亲眼看着李休从一个庶子，一步步的成为大唐国公，这可全都靠李休自己的能力，哪怕是认识李休这么多年，长孙无忌也依然看不透他，这也让他心中对李休十分的忌惮。
“长孙兄，我的性格你也了解，权势对我来说并没有什么意义，只不过一来我不忍心看到大唐因你和陛下而产生动荡，二来也不忍心看着你这个多年的好友再错下去，所以才不得不出此下策，还望你能体谅我的苦心！”李休这时再次劝说道。
听到李休的这些话，长孙无忌脸上的表情也是阴晴不定，不说李休的能力以及背后的潜势力，另外他还有一个更大的依仗，那就是李治对他们两人的态度，虽然长孙无忌是李治的舅舅，但李休也是李治的姑父，更是他的老师，再加上这些年李治对长孙无忌日渐不满，但对李休却越来越亲近。
也正是在这种亲疏有别之下，若是李休真的进入朝堂，恐怕立刻就会得到李治的信任，到时他们两人联手，恐怕长孙无忌也只会被排挤出去，而到了那时，恐怕长孙无忌也会变得十分狼狈，甚至之前积累的声望也会付之东流。
“罢了罢了！”长孙无忌坐在那里纠结半晌，最后终于身子萎顿的摇头道，“看样子你是铁了心的要让我退出朝堂，甚至不惜我和撕破脸皮，既然如此，那我就遂了你的心愿，反正我的年纪也不小了，为了最后几年的风光而失去你这个朋友，的确是有些不值得！”
“哈哈哈~，长孙兄果然没有让我失望，我敬你一杯！”李休看到长孙无忌终于被自己说服，当下也不由得大笑一声，并且亲自给对方斟酒道，其实他也害怕长孙无忌一意孤行，到时自己真的要进入朝堂的话，恐怕最后两人之间也会因此而决裂。
“我也是怕了你了，毕竟你我都这么大年纪了，若是再因为这些事而在朝堂上斗的头破血流，恐怕会被后世子孙耻笑！”长孙无忌这时也开口笑道，这时他脸上的神情也轻松了许多，他也是个十分果决的人，只要做出了决定，就不会再因此而后悔。
李休也深知长孙无忌的性子，既然他已经答应，那就不用担心他再反悔，而且这件事了结后，压在他心中数年的那块大石头也终于消失了，这让他也感觉心中轻松，当下也破了不喝酒的戒，禁不住连连举杯敬长孙无忌，结果最后两人都喝得有了几分醉意，而这时窗外的雪粒也变成了雪花，不一会的功夫，外面的山川就被蒙上了一层白色。
半个月后，长孙无忌上书辞官，李治再三挽留，但长孙无忌去意已决，最后李治只能无奈同意，而随着长孙无忌退出朝堂，李世民时代遗留下的影响也终于完全退去。