但是，李显忠对此早有准备，陷坑、拒马、鹿角、绊马索、铁蒺藜一应俱全，对金军骑兵的冲击产生了很大的阻碍作用。虽然每天都要准备这些玩意大量消耗了士兵们的体力，也造成了物资的极大浪费，但从实战来看，效果相当令人满意。金军现在以轻骑为主，而且每个战士都是骑射的能手，按理说应该采用效费比最高的弓骑战术，然而宋军中得到完整叠阵和大量障碍物掩护的八千多张神臂弓射出漫天箭雨，令纥石烈志宁很快便放弃了这个打算，而下定决心从正面突破宋军的阵形。与此同时，纥石烈志宁也没有停止进行心理战，宋军中越来越多的人开始相信他们的年轻皇帝真的已经不在人世，开小差的人也不断增加，这令李显忠越来越忧心忡忡。
虽然李显忠这段时间已经竭力澄清所谓的“谣言”，但在军心浮动之下宋军渐渐难以抵挡金军的疯狂攻势。不过现在占据优势的纥石烈志宁其实也是心如刀绞，按现在的战况来看，金军虽然胜面稍大，但恐怕最后也得伤亡过半，这种胜利和失败有什么差别？
说是这么说，但惨胜也比失败要好，纥石烈志宁还是毫不犹豫地下达了总攻的命令。就在这时，地平线上却出现了宋军的旗帜，纥石烈志宁的脸色刷地一下变得煞白
李显忠则终于松了一口气，看来邵宏渊这个人虽然心胸狭窄，在公事上还能不计前嫌，也算不错了。可是没过多久，纥石烈志宁的担忧就烟消云散，反而是李显忠的脸上蒙上了一层阴霾，原来这支新出现的宋军的确是邵宏渊的队伍没错，可他们不是自己过来的，而是被人赶过来的，一群败兵而已
原来，完颜亮发现几十万大军在全速撤退中要立即掉头并不是一件容易的事，为了避免纥石烈志宁那边独立难支，他亲率一万五千精锐骑兵先行回击，一日一夜的时间突进三百多里，邵宏渊部军纪松懈、警戒不严，一下子就被打了个措手不及。眼见局势不妙，邵宏渊立即秉承南宋武将的光荣传统，让手下殿后，自己则带着亲兵拼命南逃。主将带头逃跑之后，宋军很快便土崩瓦解，而完颜亮急着与纥石烈志宁会合，连南宋降兵都顾不上缴械，便一鼓作气追着邵宏渊部的屁股来到了这里。
李显忠虽然能力不俗，但在军心浮动的情况下再被这些溃兵一冲，实在是没有回天之力。结果等金军的大队人马跟上来之后，战场都打扫完毕了，金军以不足万人的伤亡，将南宋二十万北伐军彻底打垮，只有少数宋兵向东逃到海州，在水师的接应下撤回了江南，这时他们的总人数已经不足两万人。虽然李显忠在亲兵的拼死保护下突出重围，但是现在的他已经是“巧妇难为无米之炊”了
在基本摧毁了南宋的陆战力量之后，金军五十万人再度南下，南宋官吏在知道赵昚的死讯后纷纷投降，即使是临安的重臣之中也有不少人偷偷和金军进行联系，局势已经变得比采石大捷前更加糟糕。赵抗自然知道出现这种情况主要是由于南宋士大夫阶层对自己的恐惧，担心自己登基后会大幅度地损害他们的利益，但其实并不是只有赵抗可以继承南宋皇位的，大家似乎都忘记了一个人选