謝公在東山，朝命屢降而不動。後出為桓宣武司馬，將發新亭，朝士鹹出瞻送。高靈時為中丞，亦往相祖。先時，多少飲酒，因倚如醉，戲曰：“卿屢違朝旨，高臥東山，諸人每相與言：‘安石不肯出，將如蒼生何？’今亦蒼生將如卿何？”謝笑而不答。

　　晉文帝與二陳共車，過喚鐘會同載，即駛車委去。比出，已遠。既至，因嘲之曰：“與人期行，何以遲遲？望卿遙遙不至。”會答曰：“矯然懿實，何必同群？”帝復問會：“臯繇何如人？”答曰：“上不及堯、舜，下不逮周、孔，亦壹時之懿士。”

　　桓玄敗後，殷仲文還為大司馬咨議，意似二三，非復往日。大司馬府聽前，有壹老槐，甚扶疏。殷因月朔，與眾在聽，視槐良久，嘆曰：“槐樹婆娑，無復生意！”