当时杜伏威、阚棱、王君廓、西门君仪诸将皆已率主力精锐离开，留守的军将料不到被他们称为陈姥的陈棱，居然还敢出来袭营，于是大败。
陈棱大败江都城下之兵，斩敌数千，俘虏两万余，杜伏威留守的三万人马，几乎全军尽没。
而解了江都之围后，陈棱趁机率军再追击杜伏威。
但他很狡猾，率着兵马在后面吊着，杜伏威要战，他又后退，杜伏威要走，他又跟着，到了晚上又来袭扰，一有机会，还要上来咬几口，弄的杜伏威不胜其烦。
结果这一耽误，辅公祜把江宁城丢了。
辅公祏率着几千残兵等不到援军，最终弃城突围来到江北找杜伏威，兄弟俩一见面，顿时觉得无比窝囊，大好局面，怎么的一下子成了丧家之犬了？
没办法，往西去吧。
哥俩这时兵马不过万把人，也不回身再跟陈姥打了，而是调头去打淮西了。
首攻庐江郡，那里原是孟让的齐国都城，现在是李密的地盘。
哥俩调头向西，一通猛攻猛打，居然把驻守庐江的孟让旧部杀的嗷嗷叫，纷纷不是败逃就是投降。
于是杜伏威便占据庐江，到处攻城夺地，招降纳叛，倒也在淮西弄的声