曾祖父
谢铁(谢安六弟),永嘉太守。
祖父
谢翀(351-399),字秀度,黄门侍郎、中书侍郎,赠散骑常侍。
父亲
谢方明(380—426),东晋官员,家在会稽,谢方明病归,除黄门侍郎,不就。为孙恩所杀,追赠散骑常侍。著作佐郎,担任司徒王谧府主簿、从事中郎、左将军刘道怜长史、中军将军长史、晋陵太守、骠骑将军长史、南郡相、宋台尚书吏部郎、侍中、丹阳尹、会稽太守。
弟弟
谢惠宣(412-462),南朝宋竟陵王司徒刘诞府从事中郎、临川内史。
谢惠连(407~433年),南朝宋文学家。祖籍陈郡阳夏(今河南太康),出生于会稽(今浙江绍兴)。他10岁能作文,深得谢灵运的赏识,见其新文,常感慨“张华重生,不能易也。”本州辟主簿,不就。谢惠连行止轻薄不检,原先爱幸会稽郡吏杜德灵,居父丧期间还向杜德灵赠诗,大为时论所非,因此不得仕进。仕宦失意,为谢灵运“四友”之一。