咸熙九年,江万里以七十六岁的高龄,奉旨再度出任荆湖南路安抚使兼知潭州。此时,其再传弟子文天祥任湖南提刑。同年夏,天祥去潭州会见万里,师徒两人,感情深厚,天祥敬佩仰慕江万里的学问道德,风度气概,常比之为范仲淹、司马光。万里亦素知天祥气节。语及国事万里慨然说道：“吾老矣，观天时人事当有变。吾阅人多矣，世道之责，其在君乎，君其勉之！”天祥感动不已，流涕再拜而去。咸淳十年正月，江万里以年老多病辞去湖南职，依旧以大学士提举洞霄宫。是年，元军大举侵宋，而权臣贾似道辈不理朝政，江万里观大势巳去，补天无力，以疾退居饶州芝山，凿池芝山后圃，名其亭曰“止水”，借物明志，表示将于此以身许国。德祐元年（1275年）二月，饶州被元军攻破，江万里从容坐守以为民望，及元军将至其第，万里执门人陈书器手与之诀别，流着泪说：“大势不可支，二虽不在位，当与国家共存亡。”言毕，偕子江镐及左右相继从容投水死，一时尸积如叠。后来，张世杰（南宋抗元将领）收复饶州，得悉其事，奏报朝廷，朝野闻知，为之震动。“余朝大夫其所识与不识者，闻之莫不伤心流泪”。文天祥有祭文云：“星折台衡地，斯文去矣休，湖光与天远，屈注沧江流。”恭帝也辍朝志哀，并诏赠太傅、益国公，后加赠太师，谥文忠。