他为制置使。徐晞稷来到楚州，李全也赶到。李全假装责备刘庆福不能弹压众人，戮杀了几个乱兵，自己上表请罪，一面参拜徐晞稷。徐晞稷连忙免了他的参拜，李全大喜。
从此以后，李全更加骄纵，不可哪抑制。徐晞稷却一意谄媚李全，甚至称李全为恩府，称李全的妻子杨妙真为恩堂，尊卑倒置，极为可笑。李全又发檄文到恩州，声称许国谋反，已经伏诛，你们众军应听我节制。
恩州守将也是一个降盗彭义斌，他原是红袄军首领刘二祖的部下。刘二祖死后，余部由他和郝定等领导在滕、兖等州，建天齐政权，改元为顺天。郝定死后，他率余部归附李全。接着随李全降宋，官至统制，成为宋朝“忠义军”的将领。
他还有些忠心，接到李全来书后，扯碎来书，奋然大骂道：“逆贼背国厚恩，擅杀制使，我必定报此大仇。”于是誓师讨逆。李全得报大怒，当即率军来攻打恩州。彭义斌出城迎战，击败了李全。刘庆福引兵来救李全，又被彭义斌打得大败。李全组建的扬州强勇军惨兵折将，两千多匹战马全部被彭义斌抓获。彭义斌打败李全的北进，又增补了两千匹战马，兵势大振。
李全不禁气馁，写信给徐晞稷，请他代向彭义斌讲和。徐晞稷居然也替他来劝解，彭义斌知道徐晞稷是无用之人，于是自己写信给沿江制置使赵善湘，表示愿意一起诛杀李全。盱眙四总管，也想协力讨贼。知扬州赵范又上书史弥远，认为不能姑息李全等人。偏偏史弥远要姑息偷安，命令众人不可妄动，于是李全得以逍遥法外。
这时恰好铁木真发动西征，木华黎率领蒙古军回了漠南，河北空虚。彭义斌趁机北上，收复了汴京以东的州县。他占领了河北大名府，击败河北的蒙古走狗史天倪，以恩州为据点，大力发展自己的军事势力。彭义斌收复京东州县的胜利刺激了武仙，武仙联系彭义斌，在真定反叛了蒙古。彭义斌从山东率军进攻真定，援助武仙，乘势攻取河北的邢、洺、磁等州。河北各军纷纷投靠彭义斌，他的军队声势浩大，达数十万人。
当时严实是蒙古东平府的守将，彭义斌挥军直捣东平。严实手下兵少，向蒙古大将孛里海请授，可是蒙古军队已经从山东撤离，严实坚守到东平府粮尽，被迫向彭义斌投降。彭义斌敬重严实是一个人才，因此想团结严实，增加自己实力，以便收复河北。所以他对严实非常尊敬，以兄长称之，依旧让他统领旧部，只扣留严实在青崖的家眷做为人质。
虽然卫士的人数上略有削减，但还是留给了严实几千名卫士。
攻占东平府以后，彭义斌基本控制京东地区，
北面跟真定的武仙遥相呼应，河北、山东结成一体，声势十分浩大。彭义斌接下来准备消灭李全这支地方武装力量，他致书宋朝道：“不诛逆全，恢复不成。但能遣兵扼淮，进据涟、海以蹙之，断其南路，如此贼者，或生禽，或斩首，惟朝廷所命。贼平之后，收复一京三府，然后义斌战河北，盱眙诸将、襄阳