。间谍报告金军急攻濠州，张俊仓忙退回，邀刘锜在黄连埠会合，距离濠州六十里。张俊听说濠州城已失陷，召见杨沂中、刘锜商议。
刘锜对杨存中说道：“对此我们应怎么办？”杨沂中说道：“不过一战，你和张太尉在后，我应居前攻敌。”刘锜说道：“本来是救援濠州，濠州既已失陷，进无所依，士兵盼望回去，士气已经低落，同敌交战是危险之道。不如退兵占据险要之处，等敌军离去，再商计对策。”众将都说道：“好。”于一是三人鼎足立营，派人侦察敌情，报告说道：“敌军已经离去了。”
张俊为了自己独立战功，叫刘锜不要前去，而命令杨沂中与王德到达濠州。阵势排列未定，城中烟火升起，金军埋伏的骑兵一万多人分两翼而出。杨沂中回首对王德说道：“怎么办？”王德答道：“我是小将，怎么敢参预表达意见？”杨沂中用鞭指挥军队说道：“那么回去。”各军以为命令他们逃走，于是散乱南逃，再无行列，金军趁机追杀。过了一天，韩世忠率领大军来到，但已经来不及了。杨沂中从宣化渡江回到行在，被加封检校少保、开府仪同三司兼领殿前都指挥使，赵构是奖赏他柘皋大胜之功，而免去濠梁战败的过错。
绍兴十四年，杨存中请求到太学拜谒先圣，赵构说道：“学校既兴，武将也应知崇尚，如汉朝羽林士都精通《孝经》，更何况其他呢？”绍兴二十八年，他拜为少师，地位视同枢密使。杨存中由于凡是军事重地都有统制官，唯独荆、襄地区没有，请示朝廷，于是才在荆南、襄阳设诸统制。
杨存中在殿中共二十五年，权力恩宠日盛，太常寺主簿李浩、敕令所删定官陆游、司封员外郎王十朋、殿中侍御史陈俊卿相继谏言。绍兴三十一年，杨存中被罢为太傅、醴泉观使，进封同安郡王。
杨存中封王之后，一日到郊外巡视，遇到一位测字的相者。杨存中用杖在地上写了一画，测字的人见了，鞠躬不迭地说道：“阁下为什么以便服出巡到此地来，应该自爱自重才是。”杨存中惊奇得不得了，问他怎么知道自己的身份。测字的人说道：“土上一画就是‘王’字啊。”杨存中很高兴，亲自批示给相者五百万钱，用平日签名的方式，命令看相的第二天去找王府管财物的人领取。
管财物的司帑拿着票券仔细察看，说道：“你是什么人，竟敢伪造我家郡王的签名来骗取财物，该把你送到官衙去治罪。”看相的说出事情经过，故意说得很大声、很委屈，希望引起杨存中的注意。杨存中的管家和司帑于是谈好给他五千钱，看相的非常悲痛，大骂司帑后，这才离开。
后来司帑告诉了杨存中此事，
杨存中很奇怪，就问司帑是何故。司帑说道：“他现在说你是亲王，如果将来又胡乱加些言辞，大王您就会遭毁谤了。而且恩王已经设立王社，何须再用到看相的人？”杨存中听了，即说道：“你说得很对。”就把原来准备给看相的几百万钱，赏赐给了司帑。
杨存中的祖父杨