会分散各处，这些失去军纪约束的溃兵，会为祸乡里。那时候才会有大批的流民南下躲避战乱。晋国在淮北并没有建立起有效的统治，这里坞壁林立，每一个都是独自的小社会。晋国在淮北以军将为太守，眼下各军随谢万北伐，还从各家征调了不少民夫，后方处于无政府状态，完全地坞壁自治。
刘牢之等人虽然低调行事，不过此举在当地士民之间造成了一定的恐慌，也有一些人被他招募了去，这就惹恼了当地的一个豪族：翟氏。
据《元和姓纂》记载，翟姓，通“狄”，乃是夷狄之后，在春秋时世居北地（今陕西省耀县、富平一带），后灭于晋。在两汉之际，翟姓人已西入陕西，南入四川、江苏。为避北方之乱，翟氏家主率领部曲乡里三百余家南下，定居在了项县。
进入慎县的这支翟姓，现在的家主叫做翟贞。五十出头的年纪，长着满脸络腮胡，看起来孔武有力。他共有三子两女，以幼子翟羌武艺最好。因为原来的豪族逃亡，翟氏便成了项县最大的势力。他们修建了坞壁，聚众自保，经常劫掠过路的商贾和逃难流民，欺压附近百姓，成了附近名副其实的“山大王”。十年间来投的人户和侵占的户口不少，现在已经有四百家，近两千人。东晋政府对淮北控制能力非常有限，只要不是扯旗造反，对这些豪强一向优容。
这日翟贞听手下回报说，有从淮南来的一支队伍，鼓动周围村民南下，不禁恚怒：这附近的人家要是都搬空了，我们在这还混个屁啊？翟氏近十年来跋扈惯了的，如何肯让人在自己的地盘上胡来，忙让下面的人详细打探。待得听说为首的是一个四十来岁的汉字，带着五百多个骑兵，其中还有一些半大孩子，翟贞却不由得在心里打起了退堂鼓。怎奈他的几个儿子不肯甘休，吵着闹着要打发了这群南方人，于是翟贞便召集堡内诸人议事。
议事堂内除了翟家诸子，还有同乡卢氏和曾氏的人，这些年还兼并了一些小家族，议事堂里坐了十来个汉字。不过听说来人有五百骑兵，这些人大多面露惧色，不赞同出兵。
翟羌听到众人惧怕，不敢出兵，怒道：“一群胆小鬼！不过是五百个南方人，就把你们吓成这样！南方历来缺马，南方人也历来不会骑马，这些人骑着马也不过是代步罢了，——真以为骑着马就是骑兵了！”
一旁的曾顺笑道：“翟羌，你打听清楚了没有？你也说南方缺马，那么怎么会有人家有这么多的马匹，这些人只怕是军中的人吧！现在晋国要跟燕国打仗，胜负还未分呢，我们怎么就敢随意攻击晋国的军队？一旦晋国胜了，我们这些人可就死无葬身之地了！”
翟羌怒道：“怎么没有打听清楚！那些人招募人手说是往寿春刘家去的，家主是什么征虏将军刘建！”
一旁的卢辉一拍大腿，笑道：“这就对了，这刘家不就是这两年卖白酒和红糖的人家，他们家拿得出来五百匹马不奇怪！”
曾顺听了，也笑道：“我说什么来着，是军方的