后代北京还保存着专门为纪念谢枋得而建的“谢叠山祠”，南昌有叠山路以纪念谢枋得。

陆秀夫与谢枋得见礼，两个人同科士，谢枋得比陆秀夫年长十岁，学问上很有名，陆秀夫虽然在朝中任官更，但见到谢枋得也要恭敬有礼。两个人寒暄之后，陆秀夫就引着谢枋得去见

公元1288年冬天，大雪纷飞，福建行省参政魏天佑奉元帝之命，押着谢枋得北上大都。这时，谢枋得已经六十二岁，形容枯瘦，但神抖擞，他慷慨赋诗赠别亲友。一到大都，就问明太皇太后谢氏坟墓和宋恭宗所在的方向，恸哭再拜。元朝因他不降把他拘留于悯忠寺（今法源寺），他见间有曹娥碑，哭着说：“小女犹尔，吾岂不汝若哉！”就绝了。降元了的宋朝丞相留梦炎派医生拿了杂有米饭的药汤请他去喝，他一面怒骂，一面将药罐拂在地上。1289年的四月初五，谢枋得在大都悯忠寺(今北京法源寺)，绝五天，终于为国尽节死去，至死未降为元臣。

元朝统一中国后，就开始拉拢汉族士大夫，由于谢枋得的文名和威望，元朝曾先後五次派人来诱降他，但都被他用严词拒绝，并写：“人莫不有一死，或重于泰山，或轻于鸿，若我降元，我必慷慨赴死，决不失志。”这句话后世多被引用，人们以为只是为了悼念白求恩才说的。

伯颜兵下南宋，国家存亡在即，谢枋得快五十岁了可又来组织抗战。朝廷先后任他为江东提刑、江西招渝使等职，防守信州。由于南宋最统治集团畏战，左丞相留梦炎弃职逃跑，兵尚书吕师孟降元，其他不少封疆大臣和前线将领也纷纷投敌，大片国土沦丧。1276年元月，元军江东地区，谢枋得亲自率兵与元军展开了一场血战，终因孤军无援而失败。元军降南宋临安，并将宋恭宗等皇族压往元朝上都，谢太后手书命令南宋臣民降元，但谢枋得拒绝降元。五月，陆秀夫张世杰拥立的小皇帝景炎帝即位，谢枋得被任江东制置使。于是，他再次招集义兵，继续行抗元战斗，但终因寡不敌众而失败。由于元军的追捕，他被迫隐姓埋名，弃家逃亡福建。这场战斗中，被元军胁迫，谢枋得的妻李氏，饶州安仁人，宁死不屈，与次女和两婢女自尽，谢枋得的两个兄弟，三个侄也死于元军之手。

谢枋得逃到福建后，曾长期亡在建一带的穷山野岭之间，生活极其贫困。他每天穿着麻衣草鞋，面向东方痛哭，藉以悼念已亡的故国。谢枋得不愿元朝的顺民，以卜卦、织卖草鞋或教书为生。在亡期间，谢枋得创作了大量的诗文。

历史在这里走了岔路，陆秀夫和张世杰依然委与了谢枋得江东制置使的职位，但是却依照赵宇的叮嘱要求众人不要战斗，等待赵宇闽地。此时六月，谢枋得召集了民间义兵，还未与元军战，元军就已经退了。他领着数千人在信州外迎到了赵宇一行人，想请赵宇与他一同复信州城。

直是铁嘴乌鸦，指贾似“窃政柄，害忠良，误国毒民”。说了这些，当然没好了，他被贬官，谪居兴国军（今湖北新县），三年后才被放回家乡。此后的八年，他隐居弋的家中，没有仕，厌恶朝廷昏庸无能腐败透。他闭门讲学，崇信教，衣淡饭，鄙视权贵，足迹不豪门。