美尔对着话筒吼道。托马迟疑了一阵，终于同意道 ：“遵命。不过那是总的策略。我们还得作一些小小的撤退 。”隆美尔认可了这个办法。下午４ 点，他又派伯尔恩德中尉去柏林劝谏希特勒，请他撤消那道灾难性的命令。此时隆美尔已认为自己已在劫难逃。 他把所有积蓄的２.５ 万意大利里拉(约合６０ 美元)塞进信箱，请伯尔恩德一定平安地转交给露西。１１ 月４ 日早晨７ 点，陆军元帅凯塞林赶到隆美尔这里。他本来是敦促隆美尔坚决执行元首命令的，可当他看到德军仅剩下２２ 辆坦克时，便对隆美尔说：“我觉得应把元首的电话看成是呼吁，而不是一成不变的命令 。”隆美尔却诚惶诚恐地说 ：“我认为元首的指令是绝对不能更改的”。

凯塞林劝他立即电告希特勒，就说部队损失惨重，人员剧减，不可能再守住防线。要在非洲立足的唯一机会完全取决于这次撤退战。凯塞林答应本人也劝谏希特勒。上午１１ 时，他得知几支意军部队正在没命地溃逃，他又命令他们的指挥强迫部队重新调头去战斗。中午１２ 点，拜尔莱因向隆美尔报告，冯·托马将军谴责坚守命令是“发疯 ”，他挂上自己所有的勋章，乘坦克到战斗最激烈的地方去了。拜尔莱因还说，他还在前沿看到托马削瘦的身影伫立在一辆燃烧的坦克旁，当英军坦克迎上来时，他手里拿着一个小帆布包。隆美尔确信托马是有意投降英国人。不一会，隆美尔监听人员听到英军广播：“我们俘虏了一名德国将军，他供认自己是冯·托马 。”下午３ 点３０ 分，意大利阿雷艾特装甲师发来最后一份电报，该师战斗到了自我毁灭的地步。此时英军已在轴心国防卫核心上撕开了一个２０ 多公里宽的突破口。意第２０ 军已全军覆没。再打下去，必将越加危险，隆美尔最后下决心不再等希特勒收回成命，他断然下令撤退。晚上８ 点，希特勒终于同意撤退。就这样，隆美尔率德意部队开始了艰难的撤退。尽管英军情报工作做得好，但直到１１ 月３ 日上午１１ 时，蒙哥马利都未发现隆美尔已在撤退，英军炮兵仍朝德意几小时前已放弃的阵地猛轰。这天下午，隆美尔按希特勒的命令终止了撤军，也使英国人感到迷惑不解。１１ 月４ 日凌晨，蒙哥马利令部队继续进攻，但被非洲军阻止。天黑以后，英军小心地停下宿营。第二天才开始了真正的追击。阿拉曼大战终于结束了。隆美尔损失了大部分步兵和摩托化步兵，意大利的阿雷艾特装甲师和的里斯特装甲师已名存实亡。隆美尔率领他的残兵败将向西溃逃了。