而何腾蛟虽然是湖广总督，但经营湖南一年有余，不仅毫无成就，不能收复湖北之地，反而把湖南也尽丧于清军之手，丧师失土之责，本当主动辞职，谢罪于天下，还有何脸面自称湖广总督，向商家军索要湖南之地。有本事去找清军交战，打几个胜仗来看看，想拿湖广总督的官职来压人，商家军可不吃这一套，识像的话，就立刻退出湖南，如果不识像自己就出兵把他赶出湖南。
同时杨武丞还讥讽何腾蛟，如果何腾蛟出动万人，那么商家军只用千人，何腾蛟出动千人，商家军就只用百人，就足以战胜何腾蛟了。
其实杨武丞所说的，也不是全无道理，虽然现在广西的永历朝廷和福建的绍武朝廷都以明朝的正统延续而自居，但从理论上来说，这两个朝廷都属于自立的朝廷，除了姓朱之外，其实和明朝基本没有太多的联糸了，这一点颇有一些像刘备的蜀汉和汉朝的关系。
另外商毅虽然保持着对每一个南明朝廷都给予承认的原则，但因为广西离杭州太远了，因此永历朝廷还沒有派使者到杭州去，商毅也还真的就没有承认过永历朝廷，那么现在和永历朝廷动武，也并不是完全说不过去。
而何腾蛟接到杨武丞的回复之后，也是又气又羞又急，正要聚集人马，向宝庆发动进攻，而这时杨武丞己经率领人马，来进攻武冈州，何腾蛟立刻下令各路人马都到武冈州来聚齐，和商家军决一死战。
但何腾蛟是出于羞恼成怒的心理，想和商家军大战一场，但他手下的几员大将可都是明白人，由其是和商家军交过手的刘承胤和郝永忠，这时那里还敢再和商家军交战，一听商家军己经杀来了，也不管何腾蛟的将令，立刻领军南逃，而且他们也不敢在湖南停留，一直逃到广西省境内。
刘承胤和郝永忠的行为，也影响到了永历军的其地将领，因此没有人愿意和商家军交战，而何腾蛟实际对部下的实际控制并不像他想像的那么令行禁止，结果各将都纷纷北逃，还不等商家军杀到，武冈州里就只剩下不足千人，其他人全都跑了。
何腾蛟气得顿足捶胸，但到了这一步，他那还敢在武冈州里停留，只好也带领着人马，逃出武冈州，逃回到桂林驻扎。结果商家军兵不血刃，就占领了武冈州。而在这一役之后，湖南各地见了商家军也都是闻风归降，不少地方还不等商家军杀到，就主动派人来向商家军请降。
而何腾蛟败回到桂林之后，永历朝廷也受到极大的震动，谁也没有想到，商家军居然真的敢对永历朝廷动手，虽然过去南明各政权有过互相征伐的事情，但都是朝廷对朝廷，旗鼓相当，而这一次却是一个地方割据势力，和明朝的后裔朝廷动武。因此永历朝野上下的一些以正统自居的大臣们也十分激愤，纷纷上书指责商家军形同反逆，商毅有不臣之心，有人要求永历朝廷立刻派人去杭州责问商毅，也有人建议再出动人马，去征讨商家军。当然同时也有人落进下石弹亥何腾蛟，认为他败于商家军之手，有辱王师，应该治罪。
好在是永历朝廷的两位内阁大学士丁魁楚和瞿式耜还能保持着清醒的头脑，虽然说永历朝廷是以明室后裔的正统自居，但正统并不是只有永历朝廷一个，如果商毅就是不承认永历朝廷，又能拿他有什么办法，而且现在永历朝廷什么去打商家军，其实商家军的实力是很容易推算得出来，现在永历朝廷的军事力量主要是依靠着何腾蛟部的人马，而何腾蛟是被清军从湖南赶到广西，现在清军又被商家军赶走，因此谁还敢领军去和商家军交战呢？别说商家军硬要强占湖南，就是马上来进攻广西，自己也没办法抵抗。
而皇帝朱由榔更是吓得胆战心惊，生怕商家军在占领湖南之后，接着又来进攻广西，因此对什么问责、出兵根本就没有理会，而是考虑桂林府离湖南太近了，自己留在桂林府的安全能不能保障，要不要再向南边逃得远一点。比如逃到南宁府去。这个建议到也得到了不少大臣们的支持。
好在是商家军的目标只是湖南，还没有进取广西的意图，因此杨武丞把永历军赶走之后，湖南各地也都纷纷归附，也就没有再继续进军，而是分兵把守住湖南广西边境的道路，然后回兵长沙，暂在湖南驻扎下来。
见商家军没有趁势进攻广西，永历朝廷上下也都松了一口气，虽然朱由榔还想南逃，但总箅是被瞿式耜苦苦劝住了。不过商家军沒来打广西，到是让永历朝廷的一些官员们又产生了错误的判断，开始活动心眼，要求出兵夺取湖南的呼声也渐渐有抬头之势。