虎牢关战场的局势对翟李联军越来越不妙了，就实力对比而言，兵多将广的翟李联军其实不管是对东都隋军还是对王世充都占据优势，正面硬拼就算灭不了陈丧良，至少也可以把陈丧良打得元气大伤，对王世充的优势更大，如果不是陈丧良破天荒的良心发现一次，在这段时间里频繁出击威胁翟李联军的背后，翟李联军的主力也许早就已经打败了王世充，就算灭不了王世充也肯定能够把王世充打跑，把王世充军撵回管城去继续啃菜团子。
对陈丧良和王世充的任何其中之一都拥有优势，但是陈丧良和王世充联起手来，翟让和李密就有些皱眉头了，陈丧良占据洛口仓有城池可守，王世充的麾下兵马顽强，百折不挠，最擅长打持久战，翟李联军即便拥有优势，也没办法在短时间内击败他们，而时间一旦迁延日久，后方就必然生变——比方说这次，翟李联军的精锐主力才刚被王世充牵制在板渚战场，陈丧良就马上在西线小丑跳梁，把李密军偏师打得鬼哭狼嚎，无法招架，不得不一再向翟让和李密求援。
偏师损失惨重还只是小事，最让李密和翟让窝火的还是陈丧良那令人防不胜防的卑鄙奸计，诡计百出连连坑蒙拐骗得手不说，硬生生拐跑了潜力无限的刘黑闼也不说，最可恨的还是陈丧良拼命挑拨李密军的内部关系，离间李密军与瓦岗军的亲密联盟关系，最后还硬生生的让李密军重将郝孝德恨瓦岗军入骨，随时可能到向东都隋军帮陈丧良攻打虎牢关，不得已之下，李密只能是匆匆决定暂时放过仍然还在苦苦支撑的王世充，劝说翟让立即率领主力回师虎牢关，处理善后事宜，避免局面更进一步恶化下去。
翟让迟疑着有些不想退兵，因为翟李联军不仅在板渚战场占尽优势，还一度攻破王世充军营寨的鹿角拒马防线，只差一步就能杀进王世充营中，虽说最终被隋军骁将费青奴率领敢死队夺回了防线，但翟李联军只要继续猛攻下去，彻底打败王世充只是时间问题，所以翟让有些想先彻底解决王世充，然后再回师去救虎牢关。
深知隋军内部情况的裴仁基帮着李密说动了翟让，裴仁基指出道：“王世充虽不足惧，注定不是我军对手，但他的麾下将士大都是江淮士兵，彼此间不是同乡就是亲戚，凝聚力很强，在战场上打败他们容易，把他们打溃散却很难，我们如果继续进攻下去，就算最终歼灭或者打走王世充，我们的精锐主力也必然会付出惨重代价，到时候再回头去和陈应良决战，我们就很难再有必胜把握。而我们与王世充之间的战事继续迁延日久下去，虎牢关一旦有什么闪失，我们就会彻底丧失东都战场的主动权，到时候陈应良不用和我们交战，也不用指望王世充继续在背后牵制我们，光是靠耗粮草就能把我们彻底耗死！”
“如果东郡公担心王世充会效仿陈应良，乘着我们的主力移师西进的机会兴风作浪，这点更没有必要。”裴仁基又说道：“之前我就已经说过，王世充为人过于自私，最喜欢保存实力隔岸观火，眼下他又已经损失惨重伤及元气，肯定更加不想继续进攻，所以我们就算撤出板渚战场，王世充也定然不敢效仿陈应良主动出击，为陈应良那边分担压力。而王世充千里而来，粮草补给困难，身后诸郡又一片糜烂，无法为他提供粮草补给，只要时间一久，王世充的粮草不济，必然不战自退。”
考虑到虎牢关那边确实形势危急，翟让还是被迫接受了李密和裴仁基的提议，同意撤回虎牢关收拾残局，结果也正如裴仁基所料，得知翟李联军西撤之后，王世充的营地里虽然爆发出了持续不断的欢呼之外，果然没有出动一兵一卒追击，还迫不及待的立即修复工事坚固营寨，没有任何移营西进的迹象。而翟让和李密如果能够知道王世充对此发表的言论，那么他们肯定会更加钦佩裴仁基的高论——王世充是这么说的，“轮到陈应良小贼硬扛贼军主力了，也终于轮到老子躲在后面坐山观虎斗了。”
翟李联军撤回虎牢关时，时间已经是郝孝德军惨败的第二天上午，隋军将士早已把打下来的营地烧成一片废墟，期间单雄信始终没敢打开城门放郝孝德回城，仅仅只是为郝孝德的残兵败将提供了一顿晚饭。这次吃了大亏的李密也很有风度，并没有追究单雄信拒放郝孝德回城一事，倒是翟让碍不过面子，主动开口把单雄信臭骂了一顿，逼着单雄信向郝孝德谢罪，然后翟让才下令打开城门，遣使邀请郝孝德入城，说是要当面向郝孝德赔罪。
回城后的郝孝德表现得十分冷静，不仅没有闹事纠缠，还面无表情的接受了单雄信和翟让的谢罪，仅仅只是要求翟让和李密尽快为他的残军提供营地休息，但郝孝德表现得越是冷静，李密和翟让就越对他不敢放心，低声商议了几句，就借口郝孝德军连战疲惫，打发郝孝德率军撤到虎牢关东面营地驻扎休息，郝孝德也很爽快的接受了这个安排，谢过之后就立即率军出城，到李密和翟让指定的营地去驻扎休息。而看到郝孝德头也不回的离去背影，翟让和李密心头也生出了同样的念头，“郝孝德，靠不住了。”
也不没有好事，李密和翟让撤回虎牢关立足刚定，很快就有亲兵将一道书信呈到了李密的面前，低声说了送信人身份后，李密赶紧拆开书信观看，然后只看得几眼，李密很快就得意的放声狂笑了起来