曹家當初也是郴州豪強，兄弟倆皆以勇武義氣稱名。不過曹武徵還是缺少經驗，統兵數萬去打始安郡，結果先是去打嚴關，打了半年多沒打下來，然後又調頭往九疑山，以萌渚嶠進攻，但還是被李襲志守住。
曹武徵在前線久攻不下，結果後方在岳陽稱王的蕭銑，派人聯合李襲志，乘虛進攻郴陽，曹武徹寡不敵衆，兵敗被殺。
曹武徵聽聞後方生亂兄長敗亡，軍心不穩，李襲志又乘機率兵來攻，將其大敗。
曹武徵便也乾脆率部降了李襲志。
之後，曹武徵率部守嚴關，拒蕭銑，戰林士弘，也是爲始安郡浴血奮戰，立下大功。
李壟志安民理政於內，曹武徵帶兵禦敵在外，兩人倒也配合默契，守護一方。
當時曹武徵不少部下以及桂州的豪強們，見天下大亂，梟雄紛紛割據，於是也有人想勸說割據一方。
曹武徵雖統兵在外，但資歷威望都不如李，於是他安排人去遊說李襲志，說您是中州的貴族，長期駐守在這邊遠的郡縣，四周之人，無論是華夏還是蠻夷，都對您心悅誠服，如今隋室無主，四海之內動盪不安，您爲什麼不憑藉您的威望德行號令嶺南呢？這樣您就可以不費吹灰之力，成就南越王趙陀的事業啊。
只是他們沒有想到的是，李襲志不是蕭銑。蕭銑本只是一個縣令，被一些軍頭們擁立稱王，建立梁國。而李襲志根本不想自立，他的回答是我李家乃中州貴族，世世代代都忠貞愛國，現在皇帝雖在江都被弒，但大隋宗庫社稷還在，我怎麼能學狂妄的趙佗而自立爲王呢？
說完，他就把那勸說他自立爲王的傢伙給斬了。
自此，曹武徵等一羣人，也就無人再說提自立割據了。
不過經此一事，始安郡內部也是開始有了矛盾，相互猜忌提防。
兩年後，始安郡內無糧草，外無援兵，兼之文武不和，於是最終在曹武徵等人的密謀下，最後祕密降了蕭銑，打開了嚴關，放梁軍南下。
始安郡也就此被蕭銑攻破，李襲志被俘，蕭銑看重李襲志威望，於是封他爲梁國工部尚書，檢校桂州總管。
當時的蕭銑雖說號稱四十多萬衆，不過他以前只是個縣令，被一衆軍頭擁立稱王，所以南梁從一開始就內部不穩，蕭銑始終被軍頭們架空，諸軍頭先後封王，各控州縣掌握兵馬，實際也是割據一方。
蕭銑對這些人也很難調令的動，他對李襲志的不殺，也是打算用李襲志來反牽制下那些軍頭們。
本來曹武徵暗裏投降蕭銑，就是想借梁軍之手除掉李襲志，然後取代他掌控始安郡，誰料到蕭銑最後居然不殺李襲志，反讓他加官進爵，反倒是主動歸附的曹武徵等人，並沒有受到多大封賞。
“現在怎麼辦呢？”一名校尉問曹武徵。
曹武徵目光望着北方，喃喃道，“李公應當已經到了長安城了吧？這一次，估計不會再回來了。”
山蠻就是曹武徵暗裏挑運起來做亂的，他的目的也很明確，李襲志入朝，他本以爲自己終於有機會了，誰知道朝廷並沒有讓他接任刺史，檢校都不讓。依然還是個桂州司馬，甚至有傳聞，還要調他去更南的安南道。
憑什麼？
李襲志沒走，他一直壓在自己頭上就算了，可現在李襲志都走了，憑什麼還不讓他來接任刺史？
隋季之時，他曹武徵也是爲始安郡保境安民立下過汗馬功勞的。
自爲武人的曹武徵有時想事情比較簡直。
你不給，那我就自己取。
可無緣無故朝廷也不讓，於是他就聽信了部下的建議，暗裏挑動山蠻造反，本來還想等李襲志北上時劫殺他的，只是沒來的及。
後來又計劃等秦琅和馮盎、李大亮等南下時，將他們全都劫殺了，到時嶺南大亂，他正好出來‘擊敗山蠻，收復地方’，立一大功，這樣桂陽刺史舍他其誰？
說不定還要授他個更重要的官職呢。
只是計劃雖然挺周詳，奈何山蠻們太無用。
“不能讓秦琅就這樣來桂州。”
曹武徵咬着牙，低沉着聲音吼道。
他已經在這條路上越走越遠了，現在無路可退。秦琅若來了桂州，只怕這傢伙接着就要把那經山蠻們一網打盡，到時候他謀劃的那點事情，估計也就紙包不住火。
早聽說過秦三是個心狠手辣的傢伙，雖然年輕，可狂辣無比。
“咱們做的都是掉腦袋的買賣，甚至是誅九族的，箭已離弦，無法再回頭了。”
開弓沒有回頭箭，騎虎難下。
只能一條道上走到黑。
秦城還有兩萬多山蠻，秦琅只有三千來人，且並不是朝廷的正規府兵，只是他的私人親軍部曲而已，那些北人畏熱，也不熟叢林山地做戰。
所以並不是沒有機會了。
“再去聯絡下那些蠻酋們，給他們多送點金銀女子過去，告訴他們，咱們都是一條繩上的螞蚱，這個時候誰也別想着退縮。你讓他們放心，只要我們這票幹成了，到時朝廷不得不妥協，他們會收回入籍、遷移等命令的，他們可以繼續呆在自己的山裏、村寨，可以繼續享受自由，不入戶籍，不納稅，不服役。”
他望着城外的那些人頭，眼中滿是無情。
這些傢伙居然跑到桂州來了，真是找死。
“告訴那些蠻酋，就說那些膽小懦弱的傢伙，我替他們砍了。”
一名校尉道，“嚴關落到了秦琅手裏，他有三千人馬，只怕想奪回來很難了。不如讓蠻子們據秦城而守，或可一戰。”
曹武徵搖頭。
山蠻們別看數量多，但以爲憑此就能仗着幾座城堡工事硬扛中原來的秦琅，那是癡人說夢，拖的時間越長，越夜長夢多。
這種事情，必須快刀斬亂麻。
思來想去，曹武徵覺得指望山蠻們也多半靠不住。
他對另一名校尉道，“你親自跑一趟南邊，去找談殿。”
必須得做好兩手準備了。
“要不我帶上弟兄們北上，若有機會，就親自動手幹掉秦琅？”
曹武徵手裏還有三千舊部，這些都是他跟手底下的校尉們的私兵部曲，始安郡歸附大唐，改桂州後，原有郡兵裁撤，曹武徵就把這些兵名義上裁撤了，實際上改成了他們的部曲家兵，依然保留了三千人。