况且京营大将与各镇将领互不管辖，为什么为了京营，却贬斥各镇守将。如今曲从仇鸾的请求，臣担心九边将帅都奔走依附，这不是国家的福分。”世宗不悦，下诏责备王邦瑞。仇鸾又想节制边将，停止修筑蓟镇的边墙，王邦瑞坚持不同意。仇鸾愈加憎恨王邦瑞，更加进谗诬陷他。适逢王邦瑞又上疏陈述剿抚大计，世宗于是下诏将其免职，让他以普通官吏的身份办理事务。数日后，王邦瑞在大计时自我陈述，最终被除名，由赵锦接任。
王邦瑞离职后，仇鸾更加专横，又与内阁首辅严嵩争宠失和，被陆炳揭其私及不轨之事，在被革职后忧惧而死，赵锦也被贬戍边关，世宗在此后逐渐思念王邦瑞。京营缺人，世宗说：“非王邦瑞不可。”于是起复王邦瑞原职，王邦瑞到职后，上书根据具体情况办理的几件事，都被世宗允许施行。