蘇子高事平，王、庾諸公欲用孔廷尉為丹陽。亂離之後，百姓雕弊，孔慨然曰：“昔肅祖臨崩，諸君親升禦床，並蒙眷識，共奉遺詔。孔坦疏賤，不在顧命之列。既有艱難，則以微臣為先，今猶俎上腐肉，任人膾截耳！”於是拂衣而去，諸公亦止。

　　謝太傅盤桓東山時，與孫興公諸人泛海戲。風起浪湧，孫、王諸人色並遽，便唱使還。太傅神情方王，吟嘯不言。舟人以公貌閑意說，猶去不止。既風轉急，浪猛，諸人皆諠動不坐。公徐雲：“如此，將無歸！”眾人即承響而回。於是審其量，足以鎮安朝野。

　　謝太傅寒雪日內集，與兒女講論文義。俄而雪驟，公欣然曰：“白雪紛紛何所似？”兄子胡兒曰：“撒鹽空中差可擬。”兄女曰：“未若柳絮因風起。”公大笑樂。即公大兄無奕女，左將軍王凝之妻也。