羲之既去官，與東土人士盡山水之遊，弋釣為娛。又與道士許邁共修服食，採藥石不遠千里，遍遊東中諸郡，窮諸名山，泛滄海，嘆曰：“我卒當以樂死。”謝安嘗謂羲之曰：“中年以來，傷於哀樂，與親友別，輒作數日惡。”羲之曰：“年在桑榆，自然至此。頃正賴絲竹陶寫，恆恐兒輩覺，損其歡樂之趣。”朝廷以其誓苦，亦不復徵之。

時劉惔為丹陽尹，許詢嘗就惔宿，床帷新麗，飲食豐甘。詢曰：“若此保全，殊勝東山。”惔曰：“卿若知吉凶由人，吾安得保此。”羲之在坐，曰：“令巢許遇稷契，當無此言。”二人並有愧色。

初，羲之既優遊無事，與吏部郎謝萬書曰：

古之辭世者或被髮陽狂，或汙身穢跡，可謂艱矣。今僕坐而獲逸，遂其宿心，其為慶幸，豈非天賜！違天不祥。

頃東遊還，修植桑果，今盛敷榮，率諸子，抱弱孫，遊觀其間，有一味之甘，割而分之，以娛目前。雖植德無殊邈，猶欲教養子孫以敦厚退讓。或以輕薄，庶令舉策數馬，彷彿萬石之風。君謂此何如？

比當與安石東遊山海，並行田視地利，頤養閒暇。衣食之餘，欲與親知時共歡宴，雖不能興言高詠，銜杯引滿，語田裡所行，故以為撫掌之資，其為得意，可勝言邪！常依陸賈、班嗣、楊王孫之處世，甚欲希風數子，老夫志願盡於此也。

萬後為豫州都督，又遺萬書誡之曰：“以君邁往不屑之韻，而俯同群辟，誠難為意也。然所謂通識，正自當隨事行藏，乃為遠耳。願君每與士之下者同，則盡善矣。食不二味，居不重席，此復何有，而古人以為美談。濟否所由。實在積小以致高大，君其存之。”萬不能用，果敗。

年五十九卒，贈金紫光祿大夫。諸子遵父先旨，固讓不受。

有七子，知名者五人。玄之早卒。次凝之，亦工草隸，仕歷江州刺史、左將軍、會稽內史。王氏世事張氏五斗米道，凝之彌篤。孫恩之攻會稽，僚佐請為之備。凝之不從，方入靖室請禱，出語諸將佐曰：“吾已請大道，許鬼兵相助，賊自破矣。”既不裝置，遂為孫所害。

徽之字子猷。性卓犖不羈，為大司馬桓溫參軍，蓬首散帶，不綜府事。又為車騎桓衝騎兵參軍，衝問：“卿署何曹？”對曰：“似是馬曹。”又問：“管幾馬？”曰：“不知馬，何由知數！”又問：“馬比死多少？”曰：“未知生，焉知死！”嘗從衝行，值暴雨，徽之因下馬排入車中，謂曰：“公豈得獨擅一車！”衝嘗謂徽之曰：“卿在府日久，比當相料理。”徽之初不酬答，直高視，以手版柱頰雲：“西山朝來致有爽氣耳。”

時吳中一士大夫家有好竹，欲觀之，便出坐輿造竹下，諷嘯良久。主人灑掃請坐，徽之不顧。將出，主人乃閉門，徽之便以此賞之，盡嘆而去。嘗寄居空宅中，便令種竹。或問其故，徽之但嘯詠，指竹曰：“何可一日無此君邪！”嘗居山陰，夜雪初霽，月色清朗，四望皓然，獨酌酒詠左思《招隱詩》，忽憶戴逵。逵時在剡，便夜乘小船詣之，經宿方至，造門不前而反。人問其故，徽之曰：“本乘興而行，興盡而反，何必見安道邪！”雅性放誕，好聲色，嘗夜與弟獻之共讀《高士傳贊》，獻之賞井丹高潔，徽之曰：“未若長卿慢世也。”其傲達若此。時人皆欽其才而穢其行。

後為黃門侍郎，棄官東歸，與獻之俱病篤，時有術人云：“人命應終，而有生人樂代者，則死者可生。”徽之謂曰：“吾才位不如弟，請以餘年代之。”術者曰：“代死者，以己年有餘，得以足亡者耳。今君與弟算俱盡，何代也！”未幾，獻之卒，徽之奔喪不哭，直上靈床坐，取獻之琴彈之，久而不調，嘆曰：“嗚呼子敬，人琴俱亡！”因頓絕。先有背疾，遂潰裂，月餘亦卒。子楨之。

楨之字公幹，歷位侍中、大司馬長史。桓玄為太尉，朝臣畢集，問楨之：“我何如君亡叔？”在坐鹹為氣咽。楨之曰：“亡叔一時之標，公是千載之英。”一坐皆悅。

操之字子重，歷侍中、尚書、豫章太守。

獻之字子敬。少有盛名，而高邁不羈，雖閒居終日，容止不怠，風流為一時之冠。年數歲，嘗觀門生樗蒱，曰：“南風不競。”門生曰：“此郎亦管中窺豹，時見一斑。”獻之怒曰：“遠慚荀奉倩，近愧劉真長。”遂拂衣而去。嘗與兄徽之、操之俱詣謝安，二兄多言俗事，獻之寒溫而已。既出，客問安王氏兄弟優劣，安曰：“小者佳。”客問其故，安曰：“吉人之辭寡，以其少言，故知之。”嘗與徽之共在一室，忽然火發，徽之遽走，不遑取履。獻之神色恬然，徐呼左右扶出。