王阳明能搞定“神龟”，却搞不定自己的身体。在南宁操劳四个月后，1528年农历六月，他一病不起，万不得已要出去办事必须要躺在宽大的轿子里。他向中央政府提出退休的要求，桂萼死活不同意，要王阳明必须在安南的事情上给他交代。

王阳明情绪低落地对弟子们说：“广西要成我葬身之地啊。”

弟子们安慰他：“吉人自有天相，肯定能渡过难关。”

王阳明摇头叹息：“生死关容易过，可心上的关却难过。”

弟子们问原因。王阳明说：“桂萼让我进攻安南，这是异想天开，他只分析了别人的缺点，却没有检讨自己的缺陷。安南的确在内乱，可广西全境有几处是安宁的？如果我不照他的做，这次广西之行的功劳又是竹篮打水一场空。如果我照他的做，可能会引起更多事端。”

有弟子疏阔地说：“那咱们就回余姚，管他什么桂萼和吏部！”

王阳明听到这句话，怦然心动。如果不是发生了下面这件事，他可能真的就提前违抗中央政府的命令回余姚了。