张璁对黄绾说，欲荐王阳明入阁。杨一清、桂萼听说以后皆不喜。桂萼于是唆使锦衣卫都指挥聂能迁诬奏王阳明以百万金银通过黄绾行贿张璁，张璁于是举荐王阳明出任两广。当初在编纂礼仪全书时，黄绾没有收录聂能迁的奏疏，聂遂怀恨在心。
黄绾上章辩诬，并辞职避嫌。明世宗批复：“黄绾学行才识，衆所共知。王守仁功高望隆，舆论推重。聂能迁乃捏词妄奏，伤害正类。令法司严加审问，并追究帮助之人。黄绾安心供职，不必引嫌辞避。”
杨一清对聂的诬奏，不加核实便转奏皇上，遭明世宗切责，杨一清遂上《乞休致奏疏》，为自己狡辩脱责。
六月，朝廷勘定大礼议之争中有罪的官员，其中大学士蒋冕、毛纪等各携秩闲住。蒋冕回到全州以后，发现全州、灌阳等地匪患严重，且迁延时日已久，八月间，便写信给王阳明请求发兵围剿。
八月间，王阳明根据自己给朝廷上报的广西善后治理方略，密集发布政令，要求各地贯彻落实。
王阳明广西之功万众瞩目，如青天白日。但朝中仍有不少非议，先是明世宗贬以“有失信义，恩威倒置”，后有大臣议论说，王阳明奉命抚剿田州、思恩，既然不征剿田州，那为什么又剿灭八寨？或吹毛求疵说，新建城邑，乃是大事；区处钱粮，那是户部职权，王阳明不先向朝廷奏报申请，就独行其是，难道可以这样吗？
两广人士、礼部尚书方献夫、詹事霍韬对此非常愤慨，于闰十月二十一联名上《地方疏》，梳理两广匪患历史脉络，盛赞王阳明平乱之功，驳斥不实之诬，并追述平朱宸濠叛乱后，王阳明及其功臣遭受的不公正待遇，请明世宗明察，尽快颁敕嘉奖，落实两广善后建设防卫事宜。
《地方疏》叹服王阳明不但能肃将天威，更能诞敷天德。
两广山高土恶，习气凶悍，虽良民到此也会变成盗贼。故当地民谚曰：“广西民三而贼七。”因地势险要，连绵成片，160年来，没有人敢征八寨。流串犯及他处盗贼为逃避衙门追捕，只要逃往八寨，便可高枕无忧，因此八寨成为四方寇贼渊薮，而断藤峡是八寨之羽翼。
王阳明沉机不露，掩贼不备，就像秋风扫落叶一样，百数十年豺虎窟穴顿时荡平，历史上谁能做到？八寨平定以后，其他贼巢就可以依次抚剿，两广良民便可逐渐恢复生产、安顿生计，纾解了皇上的南顾之忧。
王阳明能体陛下之仁，对田州、思恩之向化之民进行怀绥；又能体陛下之义，讨服八寨、断藤峡梗化之贼，可谓仁义之用两得。王阳明懂得田州、思恩可以德怀，遂约其降而安定之；知八寨诸贼百六十年未易服，遂因时仗义而讨平之。对王阳明在广西的所作所为，明君都会认为功绩至伟，只有腐儒才会以为非。
方献夫和霍韬又以周亚夫领兵救梁，不奉汉景帝诏命，以及范仲淹自主抢筑大顺城为例，驳斥朝廷对王阳明自行其是的污毁言论。
正德十四年，宸濠谋反江西，江西两司俯首从贼，只有王阳明同御史伍希儒、谢源誓心效忠。奸臣张忠、许泰等欲掩王阳明之功以爲己有，于是散布谣言说：“王阳明初同贼谋。”等他们发现公论难掩，又无中生有造谣说：“朱宸濠府库里的金帛都被王阳明、伍希儒、谢源满载而去。”当时大学士杨廷和、尚书乔宇忌惮王阳明的大功功，不为王阳明辨白，反而黜罢伍希儒、谢源，竟剥夺了他们的仕籍。王阳明的冤情本来不辨自明，却至今未雪，如同哑巴含冤一般。
方霍于是建言，若王阳明江西之功不白，则无以劝励忠之臣；若广西之功不白，则无以劝策勋之臣。
方霍说，我们都是两广人，目击八寨之贼爲地方大患百数十年，皇上英明，任用阳明得以彻底平定，这是值得开心庆祝的事。但至今未见兵部施行功赏，户部又反复核实开支预算。如此迁延，但恐机会一失，城堡不得修筑，残贼复据巢穴，地方不胜可虑。
方献夫、霍韬最后乞请明世宗早作裁断，使官僚早得激劝，城寨早得修筑，逋贼早得招安，良民早得复业。
