謝景重女適王孝伯兒，門公甚相愛美。謝為太傅長，被彈；王即取作長史，帶陵郡。太傅已構嫌孝伯，不使其得謝，還取作咨議。外縶維，而實以乖閑之。及孝敗後，太傅繞東府城行散，屬悉在南門要望候拜，時謂曰：“王寧異謀，雲是卿為計。”謝曾無懼色，斂笏對：“樂彥輔有言：‘豈以五易壹女？’”太傅善其對，舉酒勸之曰：“故自佳！故佳！

　　王爽與司馬太傅酒。太傅醉，呼王為小子。”王曰：“亡長史，與簡文皇帝為衣之交。亡姑、亡姊伉儷二宮。何小子之？

　　顧長康畫謝幼輿在巖石妙人問其所以？顧曰：“謝雲：壹丘壹壑，自謂過之。’此子置丘壑中。