白沙归，至南安，守张弼问出处，对曰：‘康斋以布衣为石亨所荐，所以不受职而求观秘书，冀得间悟主也。惜当时宰相不悟，以为实然，言之上，令受职然后观书，殊戾康斋意，遂决去。某以听选监生荐，又疏陈始终愿仕，故不敢伪辞以钓虚誉，或受或不受，各有攸宜。’弼唯唯。
庄定山被荐召用，巡抚何公鉴躬诣定山劝驾，继遣应天府官候行。先是，冢宰王公恕、司寇张公瑄辈诸荐疏，皆出部檄，非特旨也。故先生曰：‘吾向以谏谪，退处几三十年矣，乃今特旨，敢不行乎？且学士丘琼台尝嫉曰：“引天下士夫背朝廷者曰?永也，吾当国，必杀之。”承特召而不行，非其可逭乎？’遂行。九月入京，陛见，大学士徐溥语郎中邵宝曰：‘定山，我朝出色人，当官翰林，乃协舆情。’丘语人曰：‘我不识所谓定山也。’徐公又与李西涯曰：‘定山，君之故人，君当注意。我已致政，不能为国家荐贤矣。’李唯唯。谒吏部，三揖不跪，冢宰耿公裕起，延之以茶，令四司送出部门。先生曰：‘第令不失己，官职外物耳。’吏部题补行人司副，升南京吏部验封郎中。到任十二日，病作，赴部告归，不为题处。又明年丁巳，遇考察，尚书倪岳以老疾去之，乃先生告去已改岁矣。故白沙诗曰：‘欲归不归何迟迟，不是孤臣托疾时。此是定山最高处，江门渔父却能知。’（湛甘泉撰墓志）
谢文肃丁内外艰，水饮疏食，一如古礼。终制，亲友劝起复，先生曰：‘初心縻禄，为亲尔，今复何为？’乃闭门读书。时侍叔逸老登眺方山雁荡之上，怡神自足，弹冠之念泊如也。孝皇登极，诏起之，李长沙移书劝驾，极言乘运救世之义，始勉力入朝，补国子监祭酒。以师道难尽，请致仕，不许，适丧仲子，力求解任。将十年，特升公礼部右侍郎，掌祭酒事，遣使就其家起之。未踰年，疏凡五上，每优旨勉留，不能夺，乃许养疾。（李东阳撰碑）
刘瑾擅国日，人皆责李文正不去。盖孝宗大渐时，召刘晦庵、李西涯、谢木斋三人至御榻前同受顾命，亲以少主付之。后瑾事起，晦庵、木斋继去，使西涯又去，则国家之事将至于不可言，宁不有负先帝之托耶！文正义不可去，有万万不得已者。西涯晚年，有人及此，则痛哭不能已。此一事，顾东江言之。