而大将军召见儒生时，正值上官余党出没，十分警惕，但凡面见的官民，都要剥了衣裳露体检查——就是夏丁卯进霍府的待遇。
结果一贯自诩体面的诸儒都乖乖脱衣服，唯独萧望之不愿受辱，自动出阁，被侍卫拦着起了争执，反倒被霍光召见了，还劝谏霍光，说这么对待来见的天下之士，恐非周公相成王躬吐握之礼。
结果大将军不太高兴，独不授职萧望之，而其他同行等都补为大将军史，三年间，其中一人名叫王仲翁的，官至光禄大夫给事中，萧望之以射策甲科为郎，却被分配看守小苑东门。王仲翁出入，前呼后拥，趾高气扬，对萧望之说：“汝不肯循常作为，怎么做了看门人呢！”萧望之则道：“人各有志。”
他后来就离开了长安，去河南郡做魏相下属，故任弘入长安时，与此人素未谋面。