賴世榮接到口信後，約齊六大家族密議，其中只有大豪林慶發表示願意破財免災，其餘五家皆不肯，賴世榮的胞弟賴世華道：“我聞李熙在江西大敗，無處藏身才竄到始興縣，所部不足千人，我們六家奴兵不下五千，索性做了他，也是一樁功勞。”
另一大豪張楚清道：“大聖國搖搖欲墜，江西之地盡失，裴相坐鎮淮南，左軍中尉督十萬神策軍兵臨潤州，其國覆滅只在旦夕，索性滅殺了此賊，你我也好圖個封妻廕子。”
衆人皆附和，連主張破財免災的林慶發也動了心，賴世榮道：“即如此，你我連夜召集兵馬，明日假借獻奴，突然襲殺，一舉誅殺此賊。”
密議已定，衆人各自歸家。
二日正午，李熙名單所列十七戶大豪各自派管家帶着李熙索要的蠻奴趕到縣城集合，張思的口信是讓各家在縣城東街的生口市場集合，接受大聖國東南王的點閱，但實際上在各家入城前，李熙已經派人將所獻蠻奴接收，讓人意外的是，每一戶獻奴的大豪都得到了一份豐厚的答謝禮，折算成錢的話，與所獻蠻奴價值相當。
大豪們相顧失色，各自打聽究竟是怎麼一回事，不是說李熙是個殺人不眨眼的賊嗎，怎麼突然成了公買公賣的生意人？
答案始終是個謎。
收到答謝禮的大豪們對李熙的印象大爲改觀，對他的稱呼也由“賊”變成了“大都督”或“東南王”。
有了這個基礎，當李熙和“咎由自取”的六大家族打的昏天黑地時，各家都不約而同地保持了中立的態度。任賴世榮爲首的六大家喊破喉嚨說要爲朝廷除賊，中小土豪們也無動於衷，衆人皆曰“賊”做事很公道呀，爲何要拎着腦袋跟他做對？喫飽了撐的嗎？
賴世華等人本以爲只要發動突然襲擊，殺了李熙，始興縣的大豪們一定會站在他們一邊，那時候，縣城裏有五千奴兵，對付他李熙的一千人還不是小菜一碟嗎？
因此他們爲了保密，並沒有做出總動員，手上雖有五千奴兵，卻只帶了一千八百人進城，其餘的仍舊散佈在各自的田莊。
六大家族中近來實力發展最快，態度最強硬的賴世華讓他的三百家兵冒充蠻奴，身藏短刃率先來到城東生口市。正在亂糟糟地列隊，忽聞郎家大掌櫃請其過去用茶，賴世華見其餘五家還沒有到，恐人生疑，遂帶着五個護兵赴約。
郎家在生口市旁建有一座別院，供迎送貴賓使用，賴世華此前不止來過一次，輕車熟路，剛踏入別院大門，忽覺情形有些不對勁，正欲轉身，身後“咣噹”一聲響，大門關閉，緊接着箭發如雨，五個護兵跌倒四個，另一個當場中箭身亡。
賴世華情知有變，奔去門邊呼救，斜地裏竄出一人，手提哨棒，一棒將他掃翻在地，侯他勾起脖子，當頭又是一棒。
賴世華滿臉是血，昏死過去。與此同時，生口市上，在上百弩兵的逼迫下，賴世華所帶的三百家兵一個個乖乖地繳了械。一捆捆麻繩丟在地上，家兵們乖巧地互相捆縛，一時盡數做了俘虜。
李熙走到賴世華面前，將手中端着的熱茶潑在他臉上，賴世華驚醒，抹了一把臉上的血水，看清面前立着的是李熙，臉上的肥肉抽搐了幾下，乖乖地趴伏於地，叩頭認罪。
“斬首”成功後，李熙如法炮製，又擒了林慶發、張楚清等四人。賴世榮推說年紀大，沒有親自來，所遣管家讓李熙一棒打殺。賴世榮旋即奔出城去，聚集莊兵宣佈討賊，奈何勢單力薄，被李熙打的全無反手之力。
始興縣百姓關門閉戶，笑看老虎爭雄。
老虎們白天張牙舞爪，吼聲震天，似有不解之仇，晚上卻在一處笙歌燕舞，和樂融融。
那晚賴世榮與諸家商議應對之策後，轉過身去便喚來心腹管家，將實情密報給了李熙。
賴世華等五家當家人至死也不可能知道，李熙早在一個月前就派人到始興縣找過賴世榮，與其達成協議，找藉口滅掉其餘五大家族，青壯男性蠻奴交李熙帶走，五家所囤積的糧食三七分賬後，大頭交李熙帶走，金銀對半分，土地和其他奴婢皆歸賴世榮所有。
賴世榮已經是始興縣的首富了，可是誰又能拒絕巨大的財富誘惑呢？李熙把話說出來了，他敢不答應合作嗎？他拒絕了狼，狼不會找別的羊合作嗎？
這世道，誰可以信任誰？
事情辦的還算順利，李熙兌現了承諾，抄沒賴世華、張楚清、劉慶發等人的家產，罪名就是不合作。賊也有賊的規矩，賊也有賊的脾氣。你敬我一尺，我敬你一丈。我勢窮而來，請大夥賞條活路，你獻我蠻奴，我回贈你厚禮，面子裏子都好看，多麼和諧。可某些人偏偏不守規矩，明明是個土豪，卻偏學梟雄那一套。
想做梟雄就得把刀磨亮，把脖子洗乾淨，隨時準備着砍別人的頭和等着別人砍自己的頭，你砍不成別人，別人砍你你還委屈嗎？你恃強凌弱想幹掉我，我不殺你那還有天理嗎？
天作孽猶可爲，人作孽不可活，你敢說你淪落到今天這步田地不是你犯賤自找的。
賴世榮給自己的定位就是始興縣一土豪，本來他是想按規矩跟賊合作的，奈何被五家裹挾着身不由己，雖屬無奈，但終究是先壞了規矩的，所以得打。
開弓沒有回頭箭，賴員外只好硬着頭皮與賊對抗。
賊焚燒了他城中的幾處莊宅，據說損失十分巨大。
剛勇不屈的賴員外退守城外田莊，率莊丁跟賊打的天昏地暗。賊萬箭齊發，密如飛蝗，射在賴家土牆上的箭矢密如刺蝟身上的毛，莊院的大門也被燒的黢黑。
被賊射死的莊丁不下百人，屍體橫七豎八，望之驚心。
但賴員外取得了最終的勝利，他保住了自己的家產，保住了自己的名節。
其餘五大家族就沒這麼幸運了，他們的家財被賊席捲一空，還被賊“罰”了一筆鉅款，逼的他們的家人不得不將田莊抵押給賴世榮借錢贖人。
李熙從所得的近萬名蠻奴中精挑細選了五千精壯，其餘人解放爲平民。
被賊俘虜的縣令張思堅貞不屈，誓不投賊，被賊裹挾北上的途中，智勇雙全的張縣令打昏看守逃脫。回到始興縣後，他立即逮捕了“從賊”的五大家族家長，鐵面無私，剛正不阿，不顧鄉紳首領賴世榮的請求，堅持將五人依律判了重刑，五人所餘財產沒收，拍賣，所得款項解往韶州和廣州供給軍用。
新任嶺南節度使孔戣對張思所爲大加讚賞，爲其記一大功。
賴世榮成爲了始興縣無可爭議的首富。因爲英勇抗敵，並最終迫使賊寇退出韶州，被孔戣保奏爲從七品宣議郎。
李熙從五千蠻奴中挑出一千人作爲自己的親軍，其餘分作左右兩廂，任張龍、趙虎爲左右廂都指揮使，其下每千人建一營，任熊欣兒、打鐵鹿、白興陽、黃江等爲指揮使。簡單整訓之後即向東北突入江西境內。時留守虔州的是鄭牧之的副將周野，虔州城內兵不足千人。
李熙把虔州用作磨刀石，耐心練起兵來。
他還在始興縣時，即派人與湖南衡州境內的鬱秀成聯絡，要其向吉州方向運動，牽制洪州兵主力。
鬱秀成和鄭虎襲佔郢州，折騰死刺史周和後，被隋百戰和趙禾木追的無處藏身，東奔西突，輾轉來到湖南境內。張仃發想收編二人，條件談不攏，張仃發欲武力解決。二人遂遁入湖南和江西交界的山中，做了山大王。