谢应芳生逢乱世,世衰道丧,以斯文为己任,崇正辟邪。从元至正初年起便隐居于武进白鹤溪(今邹区鹤溪河),构筑小室名叫龟巢。遂自号“龟巢老人”,乡里子弟尊称龟巢先生。常州府曾聘为教授。他对学生循循善诱,总结出一套教学法。浙江行省闻名欲聘为三衢清献书院山长,辞不就。后各地义军起,谢应芳便去苏州一带避难,几次遇危险,一年中搬了五次家,经常揭不开锅。后来苏州人对这位年高德助的饱学之人逐渐有所了解,争聘为子女的老师,他靠束修钱以维生。
朱元璋削平群雄,建立明王朝后,江南渐渐安定,谢应芳已是70多岁的老人,返回故乡,在武进芳茂山(横山)隐居,勤读写作,老而不倦。当时,朝中高官与在野缙绅们路过常州,必定要去芳茂山上“龟巢”拜访龟巢老人。不管来的人官阶多高、名声多大,谢应芳都平等相待,决不低下阿谀,而且议论必及民生、言谈必论向善。
谢应芳80岁时,不顾羸弱,应郡守的邀请,以德高望重之身,出来主持了《续毗陵志》的编撰工作,97岁高龄谢世。