謝公在東山，朝命屢降而不動。後出為桓宣武司馬，將發新亭，朝士鹹出瞻送。高靈時為中丞，亦往相祖。先時，多少飲酒，因倚如醉，戲曰：“卿屢違朝旨，高臥東山，諸人每相與言：‘安石不肯出，將如蒼生何？’今亦蒼生將如卿何？”謝笑而不答。

　　桓玄詣殷荊州，殷在妾房晝眠，左右辭不之通。桓後言及此事，殷雲：“初不眠，縱有此，豈不以‘賢賢易色’也。”

　　初，謝安在東山居，布衣，時兄弟已有富貴者，翕集家門，傾動人物。劉夫人戲謂安曰：“大丈夫不當如此乎？”謝乃捉鼻曰：“但恐不免耳！”