汉军收复了明州，却发现此战所获，就连消耗的军粮都没法补充，更是一艘海船都不能抢夺回来，经过商议之后，四路大军留下两路镇守，另外两路去寻机跟蒙军决战。
虞文辉所部跟这两路大军交战数次，虽然互有胜负，但虞文辉却每次大战都能补充军队，补充军需，这两支汉人军队虽然勇猛，却得不到支援。
双方酣战数十场，虞文辉趁机调动另外一直兵马直扑临安，宋理宗大惊之下，派人出城谈判，虞文辉当即索要两路宋军的将领，并且许以三座城池为代价。
宋理宗权衡之下，居然答应了，亲自下令把两位两路宋军的统帅召回，送入虞文辉大军之中，虞文辉得了这两名将领，如约退兵，真的还了三座城池。
这一次合议，让虞文辉名声暴涨，南宋民心军心尽失。