他的表示，于是万安只好上书辞职，得到批准，当时他已经七十多岁了。
在回家的途中，万安还不时地回头张望，希望看见奉皇帝命令来召他回京的人，还幻想着被重新起用，回家一年后，万安病死，赠太师，谥文康。
万安执政二十年中，每当科举考试，必定让他的门生担任考官，所以他的子、孙、甥、婿考中的人很多，他的儿子万翼，官至南京礼部侍郎孙子万弘璧，任翰林编修。万安死后没有多久，万翼、万弘璧竟然也相继死去。