显耀，心怀不安，替子张延寿请求外出补官，皇上任为北地太守。一年多后，皇上可怜张安世年老，又召张延寿为左曹太仆。
当初，张安世兄张贺，得宠于卫太子刘据，戾太子起兵失败，宾客都被杀，张安世为张贺上书求情，张贺免去死罪，处以宫刑。
张安世有病，上疏归还侯爵，乞求骸骨归故里，汉宣帝希望张安世能好好养病，多辅佐自己几年。
于是，张安世又强起办事，到秋季去世，天子赠印绶，送来轻车甲士，谥号为敬，赐冢地在杜县束，挖上起冢，建祠堂，儿子张延寿承嗣爵位。