由于敌众我寡，长城防线也很快被攻破，秦军占领番吾重镇。这时，赵葱率领援军到来，与司马尚兵马合在一处，组织赵军进行反攻。
秦军在番吾立足未稳，又被赵军夺了回去。赵军乘胜猛打秦军，把长城防线也夺回来了。韩军、魏军见大势不好，抢先渡河退回了南岸。留下秦军背水作战，被赵军打得屁滚尿流。士卒们不听杨端和阻止，纷纷地泅水游往对岸。赵军箭弩齐射，多少士卒被射杀和淹死。
赵军把秦军撵过南岸，两军隔着漳水对峙，秦军南线进攻也被击退了。
这一场较量，李牧率领兵马击退秦军，双方损失都非常惨重，谁也没办法消灭对方，只得进入了对峙状态。
这种两军对峙的状态，秦王和赵王都不满意。
秦王召来大臣们商量，责怪将领们用兵无方，怎么就不能打败一个李牧呢。
尉缭说：“大王不必操之过急，有时胜负并不取决于战场对决，而是取决于朝堂之上。”
秦王问：“先生是什么意思呢？”
尉缭说：“上次大王派王敖到邯郸活动，他跟赵国的太后、相国郭开混得非常熟了。他们接受了王敖赠送的珠宝、金帛，在王敖面前已无话不谈了。”
秦王：“王敖有什么新的信息？”
尉缭说：“王敖来信说，赵王对李牧很不满，而郭开与李牧更势不两立。只要用计除掉了李牧，赵军还能阻挡我军进军吗？”
秦王说：“好！”
于是，尉缭让王敖去想办法，离间赵王与李牧的关系。只要赵王罢黜了李牧，赵国根本没人能阻挡秦军进军的步伐。
王敖得到指令，在郭开面前散布一些李牧刚愎自用的事情。郭开得到这些信息，转眼就进宫汇报给赵王。赵王正为李牧不顺从而抱怨，听了郭开的汇报，心里更加窝火了。
他派人向李牧传令，让李牧率领兵马冲出井陉关，把秦军从赵国彻底驱逐出去，不能这样半死不活地耗着。
李牧接到赵王命令，依然不为所动。
他对部下说：“将领在外，君令有所不受！”
李牧加固关塞壁垒，坚守不肯出战。在营中每天杀牛犒劳士卒，让他们分队训练射箭。士卒们受到赏赐，纷纷要求出战，李牧也始终不答应。
他说：“从前廉颇就是用这个办法对付王龁的。”
赵王见李牧毫无动静，心里更加不高兴。他想派别人去取代李牧，可实在找不到一个合适的人，便只能听任李牧维持现状。
李牧不听赵王的命令，郭开在赵王面前更添油加醋诋毁李牧，说他贪污军费了，说他拥兵自重了，说他与公子嘉暗中勾结了……
赵王派人暗中调查，没有发现丝毫真凭实据，便让李牧继续主持军事。
吕不韦门客司空马，游说赵王失败后离开邯郸。在经过平原津时，平源津令郭遗热情地接待了他，向他打听赵国情况：“听说秦军攻打赵国，客人自邯郸来，请问战况如何呢？”
司空马说：“我为赵王设谋图存，而赵王不肯采纳。恐怕赵国很难逃脱灭亡的命运了。”
郭遗问：“先生估计赵国还能支持多久呢？”
司空马说：“赵王如果能坚持让武安君统领兵马，赵国还可支持一年；如果罢黜了武安君的兵权，赵国不出半年就会灭亡。我听说赵王的相国郭开，善于阿谀奉承、曲意迎上，很得赵王的欢心。这个人妒贤嫉能，每每谗害有功之臣。如今赵国风雨飘摇之时，赵王听从郭开之言，武安君的下场可想而知了。”
郭遗听了，似有所悟。