年之力，废于一旦！”然而在赵构的高压下，岳飞不得不下令班师。百姓闻讯拦阻在岳飞的马前，哭诉说担心受金兵报复：“我等戴香盆、运粮草以迎官军，金人悉知之。相公去，我辈无噍类矣。”
岳飞无奈，含泪取诏书出示众人，说道：“我食君禄，尽君事，既奉君命，不敢擅留。”百姓听了岳飞的话，顿时哭声震野。岳飞于是下令道：“愿从我去的人，速去整装，我会再等候五日。”大众齐声应命。大军班师鄂州，岳飞则往临安朝见。北方忠义军孤掌难鸣，金兀术回到开封，整军弹压，又攻取了被宋军收复的河南地区。岳飞在班师途中得知噩耗，不由仰天悲叹：“所得诸郡，一旦都休！社稷江山，难以中兴！乾坤世界，无由再复！”
岳飞因此上奏，请求罢免兵权，赵构却不肯答应。接着岳飞由庐州进京觐见，赵构装模作样地问了问战况，安慰了几句。岳飞只是叩头拜谢，并不道说自己的战功。退朝之后，岳飞静待命令。秦桧又派遣使者令韩世忠等，也罢兵回镇，还贬秘阁修撰张九成等人的官阶。
张九成一向不主张和议，到了此时和同僚喻樗、陈刚中、凌景夏、樊光远、毛叔度、元盥等六人，一同被降职，秦桧专意与金人议和。金兀朮留屯京亳，出入于许、郑各州，调集两河军与旧部，共有十余万人，准备再图大举。撤离喝攻打泾州不克，于是转而攻破庆阳、河东。经略使王忠植率兵去救援，被叛将赵惟清所擒，送到了金军里，王忠植不屈遇害。
金兀术听说庆阳得手，也向南进军，攻陷寿春，又渡过淮河进入庐州。赵构诏令张俊、杨沂中去救淮西，岳飞进驻江州，还令韩世忠、刘锜也督兵出援。张俊准备分军守南岸，王德说道：“淮河是长江的屏障，弃淮河不守，这是唇亡齿寒啊。敌军从数千里外远来，粮道肯定不继，趁他们尚未准备好进攻，可以挫他们的士气；如果耽误了战机，淮河一带就非我们所有了。”
张俊犹豫不决，王德坚持道：“我父子愿意先渡江，待攻下和州后北渡。”张俊于是准许王德立刻渡江，张俊率军随后。王德在渡江时说：“明天在和州吃早饭。”果然在夜间攻下和州，早晨迎接张俊大军进入。金军退保昭关，又被王德打得败逃。追至柘皋，与金人隔石梁河对峙。当地地势平坦，利于骑兵作战。适逢大雨，河水暴涨，金军毁桥以阻止宋军渡河。
当时刘锜也自太平渡江，与张俊、杨沂中商议，图谋收复庐州。刘锜先引兵出清溪，两战两胜。