汉人毕竟文采风流，故而朝廷的文臣九成都为汉人，他们对虞文辉欲大兴兵伐之事，拼命的劝阻，让虞文辉也颇为无可奈何。
汉族的疆域，最广阔时也不及现在宋金两国加上两大汗国之地，比之大宋最巅峰时期，疆域更是扩增了数倍。
汉人的大臣都认为，疆域已经如此辽阔，正该休养生息，让百姓安居乐业，何苦远征西域北疆，那等苦寒之地？
就算征讨下来，又有何用？
汉人也不牧牛放马，就算游牧之民，现在所拥的操场已经足够大了，每年都能提供无数牛羊，战马无数，就算再多的土地，也没有那么多人口，兵伐征讨得不偿失。
就算蒙人和金人也有抵触之意，金人是因为朝廷上已经是宋人势大，蒙人乃是国主旧部，也颇得势，若是再有大战，不管是谁人领兵，都不会让金人领兵，战争一起，必然宋蒙两族再次坐大，