由城内百姓爲主要兵員組成的四大民團是防禦戰中的中堅力量，這年頭城破之後城内百姓注定會遭到攻城武裝的掠奪，城内百姓們立刻就是家破人亡的局面。所以防禦者們大有衆志成城的心态，并且在鬥争中結下了深厚的友誼。
但是這樣的一股軍事防禦力量卻在1855年向着光複軍屈服了，面對光複軍來自空中和地面的無力彰顯，摸不着頭腦的民團自己率先失去了戰鬥意志。“飛天”意味着掌握了神仙的力量，光複軍飛在天空中的武器強烈的震撼了民團頭子。而光複軍占領了梧州之後，不搶掠，不殺人，這個結果倒也相當不錯。
不過等到《民團管理條例》正式交給民團頭子之後，他們就明白過來，光複軍并沒有因循滿清舊例的打算，一度因爲戰争而與官府勢均力敵的民團，在光複軍看來是必須取締的組織。這種态度無疑讓民團頭子們下了與光複軍徹底翻臉的決心。
當然，想和光複軍徹底翻臉，光憑城内的這點子民團還是不夠。他們自己的家業就在城内，在城内打起來隻會導緻自己家破人亡。最重要的是，即便是家破人亡也沒有戰勝光複軍的把握。對于光複都督府在梧州建立的地方政府，這些民團頭子是恨之入骨，卻又感覺無能爲力。他們除了串聯，表示絕對不會申請正規民團身份之外，反倒是老實起來。
然而事情在1855年9月生了變化，一度被光複軍放逐的地方官員偷偷回來了。他們帶回來的是滿清朝廷的委任狀，以及号召兩廣豪傑起來推翻光複軍的公告。
在公告中，滿清皇帝鹹豐明确指示，能夠殺韋澤一個士兵的，就賞給功名，能夠占據一座韋澤控制的縣城的，就封縣令。能夠占領韋澤控制的府城的，就封知府，能夠占據省城的，立刻封巡撫。
這下民團頭子們的心忍不住活絡起來，在他們看來，光複軍并沒有什麽了不起的地方，這幫家夥有槍有炮，可清軍和民團難道就隻有燒火棍不成？至于光複軍能夠在天上飛的玩意，原本籠罩在一層神秘的色彩中。讓這些民團頭子們甚爲忌憚。
不過這種忌憚卻被光複都督府自己給打破了，他們推行了公立學校，宣傳新式的自然科學。不少家長對與送自己的孩子去上學很有興趣，但是卻不太敢送到光複都督府的學校去。所以光複都督府就搞了一些科普活動，特别是展示了熱氣球。親眼看到熱氣球的簡單原理之後，家長們才明白那就是個大号的孔明燈。操作者是普通人類，制作的材料是普通材料。根本沒有任何神仙授予仙術。
雖然這些科普活動的确讓不少市民把自己的孩子送去了新學校，民團頭子們終于明白了自己的對手隻是一群善于裝神弄鬼的凡人。确定了這些之後，民團頭子們迅開始行動起來。
當他們開始大規模串聯的時候，才現梧州一帶對光複都督府持反對立場的人遠比想象的要多的多。清軍的官員、部隊，都希望能夠打回梧州。隻是這些人數量少，加起來也人數也不足五千。駐守梧州的光複軍有萬餘人馬，更有城防的優勢。若是打起來根本沒有絲毫勝算。
不得以，這些人又開始聯絡更多豪傑。出乎他們意料之外，不少艇軍豪傑得知這個消息之後也加入進來。就在此時，梧州一部分部隊開始向肇慶方向撤退。不少民團人員此時加入了光複軍建立的警察系統，從這裏得到的消息是，光複軍的部隊開始進攻其他地方，由于總兵力不足，所以要抽調梧州部隊。
這些民團頭子将信将疑，他們委托肇慶的親友詢問此事，得到的是同樣的消息。此時光複軍已經控制了幾乎大半個廣東，各個城市都需要進行防守，部隊出現了極度不足的局面。不僅梧州的光複軍出現調動，包括肇慶的光複軍同樣實施了調動。而且根據傳言，光複軍在和福建清軍打起來了，很多部隊都在向福建方向調動。
仿佛是要印證這個消息之後，守梧州的五千多光複軍又調動了一千多人前往肇慶，明顯是有繼續削減兵力的打算。這些民團頭子們終于按捺不住，三四千人固然是很大的力量，卻再也不能向頭幾個月那樣把梧州看守的如同鐵桶般。這些以反對光複軍爲目标的力量終于鼓起勇氣開了次領導人會議。
表面上爲的是幾名偷偷跑回梧州的官員，但是這幾個家夥也算是識相，官職最高的一個是管府庫的文書秦得力，他自從一開始就明确表示，自己隻要功勞，然後回到京城那邊領賞。至于奪取了梧州之後，受封知府的自然是這幫出力的人，他是斷然不會搶奪這個職位的。
李壽昌身爲梧州民團中的老大，自然被民團頭子們推舉爲領。這次會議上李壽昌也見到其他勢力的代表。先自然是清軍的代表，守梧州的清軍是綠營，這幫人吃的就是當兵的飯，更在城市中養成了不少惡習，酒色财氣吃喝嫖賭全都沾染上了，不少人還有大煙瘾。
光複軍奪取梧州之後并沒有接收他們，而是把他們給遣散了。這些清軍也不懂種地，更不想種地。被遣散之後，不少人幹脆就當了土匪。但是這年頭兵荒馬亂的，廣西又是個民風彪悍的所在，這土匪的日子也不好過。得知有人準備幹掉光複軍，奪還梧州，他們紛紛互相聯絡，有一千多人聚集起來。這裏頭爲是個叫做劉文生的把總，有一口抽煙抽的黑黢黢的牙齒，民團老大李壽昌見過他，知道這家夥是個大煙鬼。會議剛開始的時候，這劉文生還能坐住，結果隻開了一會兒，他就忍不住坐立不安起來。又過了一陣，劉文生又有點想涕淚橫流的迹象。不過他也知道此時不能立刻點上煙qiang，所以他的部下給他敬上了一根葉子洋煙，劉文生趕緊抽了起來。從那辛辣的味道中，李壽昌聞出來，這葉子洋煙是用大煙膏泡過的。那刺鼻的味道非常令人不爽。不過此時李壽昌也不想計較了。
當然，劉文生态度很堅定，“隻要大夥能把城門打開，我就帶着兄弟們殺進城去，定然讓那光複軍一個不留！”
另外一支反對光複軍的重要力量卻是艇軍中的豪傑，其中幾個人李壽昌還有點眼熟。爲的兩人名叫胡有祿和吳鳳才。他們在1852年曾經一起攻打過梧州，之後數次參與過打梧州的各路隊伍。
胡有祿号稱手下有兩三千兵馬，他看到李壽昌這個老對手投來的異樣目光，就大大咧咧一笑，“我一直問羅大綱叫大哥，不過這羅大哥當了光複軍的官之後就變了，不僅不照顧兄弟，還把江上所有好處都撈到他一個人手中。大哥不仁，就别怪我們當兄弟的不義。這次能打下梧州，兄弟我好歹也得混個官身。張國梁當過土匪，招安之後照樣當了大官。我這就誠心誠意投奔朝廷啦！”
聽着這話，并不完全相信的李壽昌隻能點點頭。