如今已经二十多年过去了，这史大人已经八十多岁了，他逐渐感觉到自己已经力不从心，便向天子请辞，告老还乡。天子十分想挽留这位功臣，只可惜他真的已经干不动了，便告诉天子，他还想趁着这把老骨头，回到家乡继续教书，为国家培养出一些有用之人。天子感其情，便封他为太子太傅大学士，并赏赐良田万亩，白银万两，还特意为老人所在的岳州书院写了一块牌匾“经济天下”四个字，以章其贤。
这次他告老还乡，天子还交给他最后一个任务，那就是为国选材，看到有用的好苗子，可以直接推荐给皇帝。既然是为国选材，潇湘省有了这么一尊大神，自然是什么重要的考试，都有这位老人在了。可是这位老人偏偏很看重规矩，对于干涉学政衙门之事，一概不做。一心想要教书，这次赴宴还是因为主考官是他的得意门生才给个面子参加的。