可是张忠、许泰还不情愿，不甘心就这样离开南昌。他们提出，要和王阳明比比武。什么意思呢？他说我既然来了，总不能说你让我走就走，你让我走得有个理由。王阳明说，你看南昌人民经受着苦难，现在又没仗可打，你们的军队军心涣散，这还不是理由吗？张忠、许泰又自恃自己是军队，武艺高将，提出要求要和王阳明到校场去比试武艺、比试射箭。你赢了我了，没说的，我把人带走，你赢不了我，你从此不要对我发号施令。王阳明说，我是一介文人，骑马射箭并非我的强项。武艺肯定我是比不过你的，那是你们的专业何强项，不比也罢，你还是从人心、军心方面考虑，撤军吧。

可是张忠、许泰呢一定不肯，一定勉强王阳明要去比箭，王阳明只好勉强答应。阳明是走上教场拉弓搭箭，连发三箭，三发三中。每射中一箭，旁边的北方军队都是大声叫好，啧啧赞叹。张忠、许泰终于明白，的确军心已经涣散，再不走会就更加没面子了，所以带着北方的军队撤离了南昌。张忠、许泰所率领的这一支北方军队，撤出南昌，我们可以看到是在王阳明一系列的攻心之策之下所促成的。同时没有早年的骑射，所得下的那种精湛的武艺，在这一个事件当中恐怕就会困难的多。张忠、许泰等人率领军队撤离南昌，使南昌人民免于遭受更进一步的荼毒。

张忠、许泰带领具有撤离南昌之后，往南京而去，所以在南京郊外，明武宗又上演了一出凯旋的闹剧。史料是说，到了十二月，张勇押解朱宸濠等人从杭州到了南京，可武宗毕竟是浩浩荡荡、大张旗鼓、御驾亲征，他为了要把朱宸濠抓起来，当做是自己的功劳，就出南京城数十里地，自己的军队堂堂皇皇、军容整肃，排列两旁。张勇等人押解着朱宸濠等人过来献俘，做凯旋状。

到了以后，武宗呢又把他们关进囚车，不管怎么样，张勇既然已经在南京把朱宸濠等人交给明武宗了，武宗也凯旋了，事情总可以结束了吧？可是没想到的是。张忠、许泰对阳明怀恨在心，觉得在南昌的这个事情受了屈辱，所以在武宗面前又大进谗言，诬陷王阳明在江西拥兵自重。

总督军门的军帖他也不听，我们在那里时，他是水泼不进，针插不进，拥兵自重，必将举兵谋反。这不得了，明武宗一听，他问你怎么知道王阳明会谋反呢？张忠说，不信可以实验一下，武宗问怎么实验？张忠说你如果给他下个诏书，让他来见您，如果他不来，就说明他有二心。

于是，在正德十五年正月，明武宗下诏要面见王阳明，王阳明一接到诏书，立即从南昌启程前往南京要面见武宗，张忠等人放出的探子看到王阳明离开南昌马上要到南京了，他们又半路去拦截，把王阳明半路拦截在芜湖，阳明是进不能进，退不能退。张忠派人在拦着他，不让进；退也不行，退不就刚好落入张忠他们这些人的陷阱之中吗？

所以他干脆穿上普通平民的衣服遁入九华山，九华山阳明也熟悉的很，这同样也不是他第一次到九华。但是这一次到九华心情是不同的，心境是不同的。到了九华山，他并没有游览的闲情逸致，也没别的事情好做，他心中是忧心如焚，那么怎么办呢？他干脆入山到道观里头修道去了。

明武宗看王阳明迟迟不来，张永跟他讲，到九华山去了。武宗问为什么到九华山去了？张永对武宗说，王守仁实在说来是一个忠臣，他一听说朱宸濠谋反就立即起兵勤王，活捉朱宸濠。现在受到诬陷，张忠、许泰等人也要跟他争功，所以他现在想官也不做了，入山修道去了。