夏高从龙场驿站回来后，又惊又喜，惊的是席书居然亲自来了，而且发现他对王阳明的书院并没有提出异议，还对王阳明甚有好感；喜的是，借据的事情没有败露；但对王阳明的恨意却越来越重，既然书院这头整不到他，只能从其他方面整；于是叫来樊洪文商量。
“本来想着这王守仁私自办学，席书会治他罪，这下倒好，不仅没治罪，反而被他启发，到处都要办学了，他跟席书居然成了好朋友，真是偷鸡不成蚀把米。”夏高对这樊洪文道。
“这个王守仁还真是有一套，据说他跟席书还成了忘年交，处处都在帮他”樊洪文道
“那现在怎么办？总不能让王守仁无法无天的讲下去了，再这样下去，他都变成人人敬仰的圣人了，以后就更难整他了。”夏高道。
“大人，既然提学使都对他办学不制止，反而是给予了肯定，我们自然不能再去制止他办学，但我们可以让当地百姓来制止。”樊洪文道。
“百姓制止？王守仁就是应当地百姓所求才办的学，当地的百姓对他的办学感恩戴德着呢，怎么会去制止？”夏高道。
“王守仁虽然讲学不收费，我们不能向他收税；但他毕竟是朝廷供养的进士，也是朝廷任命的官员，他的讲学也算是朝廷给当地百姓提供的服务，当地百姓既然享受了朝廷给予的好处，那么就得缴税，现在朝廷提倡各地大力推广兴教办学，我们可以借要在当地大面积的兴办书院、普及教学为由，向当地老百姓增收一个教育附加税。”樊洪文道。
“向老百姓收教育附加税？”夏高问道。
“此乃一举多得的呀，州府既可增加税赋，又把老百姓的矛盾引向龙冈书院，没有那书院，本就不会有那税赋。”樊洪文道。
“好、好、好。”夏高连声称好。
这日一早，王阳明与往常一样来到龙冈书院讲学，一进书院，感觉学生了少很多，原来每天都是坐满的，还有很多是站着听的，这日却一半都没有，王阳明甚是奇怪，只从龙冈书院开办以来，从来都没有出现过如此情况。
此时，两个年青人带着一群少数民族的民众拿着棍子、石头等冲进书院，见东西就砸，里面的学子纷纷出来，准备动手，王阳明见他们都是村民，手中又没有刀、剑之类的武器，不想与他们动手，就大喊一声：“住手。”
为首的道：“你们回到中原开你们的书院，我们这里不需要书院；也不需要你们的思想和文化。”
“你们是什么人？为何要砸书院？书院碍着你们什么了？”王阳明道。
“我们是本地布依族的居民，我叫陈文学，他叫汤伯元；我们世世代代在这里居住几千年了，从来也不读书，也不需要文字，你一来开什么书院，我们一开始以为你真是免费给当地孩子讲学、授课，教授一些有用的东西，本来还挺感激你的；没想到这都是你们的阴谋，你们开书院的目的不是为了教授我们文化和知识，而是为了增加朝廷的税赋、盘剥我们，我就说你们中原人没有那么好心的。”为首的道。
原来此两人叫陈文学和汤伯元，是本地布依族的人，原来对王阳明免费讲学也有听闻，虽然自己没有兴趣听，但也不碍自己的事；但前几天，思州府衙突然增加了一项教育附加税，理由就是朝廷在龙冈书院开设了免费讲学，以后要在思州地区大面积兴办书院、推广讲学；当地的少数民族村民感觉就被欺骗了，以为王阳明是跟州府勾结，开书院免费讲学只是引子，真正的目的是为了增加税赋，于是就带人来砸书院。
“增加赋税？增加什么税赋？”王阳明问道。
“教育附加税，一个我们从来都没有听说过的税。”汤伯元道。
“教育附加税？为什么要增加？书院跟增加赋税又有什么关系？”王阳明不解的问道。
“州衙下文，今年开始每户一年要交五十文的教育附加税，我们根本就不需要什么讲学，更不想学你们中原的文化，我们族人几千下来没有文字，也照样活得好好的；你们以开书院讲学为由强制增税，我们自然是不会答应的。”陈文学道。
王阳明一听，知道肯定又是夏高在挑事，想了想道：“乡亲们，不要激动，也不要冲动，书院跟税赋没有关系，至于增加税赋之事，由我来向州府和朝廷禀报，不管成不成，都向大家一个交代。”王阳明心想，老百姓本来税赋就重，再无端增加税赋，无疑是逼老百姓造反，自己虽然与夏高不对付，为了当地百姓，自己也就认一次怂，向夏高低个头，希望能够取消这项税收。
“反正我们是不会缴这项税赋的，你能沟通下来那是最好，如果朝廷要是强制增收，那我们不仅砸了书院，连州衙一起砸了。”陈文学道。
“大家千万不要冲动，我王守仁定当尽力而为，大家请先回去，我这就去州府协商。”王阳明道，心想这些人砸州衙还真做的出来，砸书院自己可以不追究他们的行为，但砸州衙就不一样了，那就等同造反了，无路如何都不能让他们去砸州衙的。
“好，你是先生，我们相信你，我们明天等你结果。”汤伯元道，说完带着村民们离去。
王阳明的为人，当地人都知道，大家都是很敬仰和感激王阳明的；只是涉及到了那么多人，每年都要缴那么多税，大家心里一时就迁怒到了书院和王阳明身上。特别是布依族的，他们世世代代在山中居住，都没有自己的文字的，很少接触中原文化，也不想接受什么其他思想的熏陶，对传统的中原文化和儒家文化本来就有些抵制；现在要征他们的教育附加税，心里自然是不快，于是第一个就站起来反抗了；现听王阳明愿意去协调，他们本也是本本分分的百姓，不是想多事、造反的人，于是也就希望王阳明能调停好；不想再多事。