秦皇嬴政也是心恨吕不韦，在大势之下没有多想，就采纳了他们的建议，下了一道逐客令，要求大小官员，凡不是秦国人，都得离开秦国，当时李斯也在被驱逐之列。
有道是搬起石头砸自己的脚，朝堂上这番变化让李斯目瞪口呆，他千算万算都没有料到原本要烧死吕不韦的火，竟然会烧到自己身上，眼看自己的地位不保，李斯心中很是不甘，就在他离开咸阳的时候，给秦王上了一道奏章。李斯在奏章里说:从前秦穆公用了百里奚、蹇叔，当了霸主;秦孝公用了商鞅，变法图强;惠文王用了张仪，拆散了六国联盟;昭襄王有了范雎，提高了朝廷的威望，这四位君主，都是依靠客卿建立了功业。
李斯在奏章里又说:泰山不舍弃任何土壤，所以能那样高大;河海不排斥任何细流，所以能那样深广;帝王不拒绝任何臣民，所以能显示他们的恩德。因此，土地不论东西南北，民众不问那个国家，一年四季都充满美好，鬼神也降恩赐福，这就是五帝三皇之所以无敌于天下的原因。如今竟然抛弃百姓去资助敌对国家，排斥客卿以成就其他诸侯，使天下的贤士退缩而不敢向西方来，停步而不愿意进入秦国，这可就是所谓的“借给敌人兵器，送给敌人粮食“啊!
李斯的奏章言辞恳切，情意真诚，理据服人，令秦王大为感动。秦王政觉得李斯说得有道理，放弃了逐客的打算，连忙派人把李斯从半路上找回来。
逐客令废了，重新回到秦国朝堂的李斯，依旧对驱逐吕不韦实力不死心，不过有了之前的教训李斯做事更加谨慎。
他先是找到一位名为茅焦的齐国辩士，以他胸中帝王之术，为其推演了一番朝堂局势，果然不期然茅焦立刻上当，开始说服了秦王释放了因嫪毐之乱而被囚禁的赵姬。
“齐人茅焦说秦王曰，‘秦方以天下为事，而大王有迁母太后之名，恐诸侯闻之，由此倍秦也’。嬴政听后觉得十分有道理，便将自己的生母接回咸阳，同时赦免了嫪毐的一众门客。
不过，赵姬被释放，吕不韦的日子就不好过了。因为嬴政始终不能忘记两人当年因情人而发展成的政治联盟关系。为了防止这种联盟再度形成，秦王嬴政遂下达了一道诏令：文信侯就国河南。也就是要吕不韦回到自己的洛阳封地去，彻底离开咸阳政坛。
吕不韦回到洛阳封地后仍不知收敛，依旧大肆广招宾客，扩大社会影响。山东六国见吕不韦功名之心尤盛，遂不断派人携带重金赶去洛阳请吕不韦出山。吕不韦倒是来者不拒，对任何一位使臣都奉为上宾，只是绝口不提受聘一事。叫人不由地回忆起孟尝君的事迹。当年，齐国孟尝君权倾朝野，引起了齐愍王的猜忌而被逐出临淄。