这些士族子弟进入桂阳与桂阳豪强的庶族发生激烈冲突，这其实也是衣冠南迁的一个历史缩影，每一步南迁，都伴着血泪和悲歌。随着南北汉人冲突加剧，大量汉人在冲突中死亡，在这个时候，双方不约而同拉拢蛮人打击敌人。蛮人虽然智慧和文明程度低，可是随着介入汉人内斗中，偿到了甜头，从而一发不可收拾。他们放弃了传统的渔猎或刀耕火种，从而当起了前途无亮的强盗生涯，这些蛮人身材虽然普通不高，可是胜在反应灵活，而且熟悉桂阳大量原始丛林环境，这样以来汉人的生存地位受到了严重的威胁。
为了共同生存下去，刘乾玄发挥他最善长的激辩之才，游走在南方汉人与北方南迁士族中间，游说他们握手言和，共同抵抗蛮人入侵。在生存面临着灭顶之灾时，南方汉人与南迁北方士族开始划地结堡自护，白天以狼烟为号，夜晚点燃篝火，一方有难，八方支援。在桂阳郡内的蛮人部落，都没有太大的，因为生产条件限制，超过千人的部落就面临着食物匮乏，不得不迁分出去，这样以来，一盘散沙的蛮人就占不到便宜了。
刘乾玄趁蛮人没有自发结成攻守联盟时，率先发出汉人的善意，分别在桂阳城北面的便县{以境内便江而得名，辖境大体在后世的湖南永兴}，东面的耒阳{既后世湖南资兴市}，南面的义章，在西面南岭中的骑田岭设立互市，让汉蛮进行物资交易，互通有无。
这样以来，蛮人也可以通过交易，获得他们想要的铁锅、食盐和布匹，以及各种工具，汉人也可以得到金银、皮货、山货等等。随着四个开放城市的建立，桂阳郡财税也得到很大的缓解。从而司马秀在桂阳郡站住了脚跟。刘乾玄选择的四个互市，通过与蛮人的联系，又大力请出士族子弟出山，建立学堂，加强培养蛮人汉语能力，这样以来，以真诚交朋友，蛮人也渐渐认同了司马秀为首的桂阳太守府。
通过一系列行动，刘乾玄不仅在司马秀的心目中地位高，就连在桂阳郡内也有很大的话语权，这个话语权可不是因为司马秀，而是因为刘乾玄个人的人格魅力。不过话说回来，尊重刘乾玄是一回事，可是听不听刘乾玄的计策，还需要看刘乾玄如何解释。
司马秀急道：“现在魏国内乱，前太子率领十数万军队攻打邺城，如果前太子得胜？”
“哈哈”刘乾玄道：“无论魏国内战，是今上胜出也好，或者前太子获胜也好，与使君何干？他们魏国还会把到手的桂阳郡往外推吗？”
“魏国到不至于把桂阳郡往外推，无论是谁主江山，这个桂阳也是千里之地。秀只是担忧大晋的反应啊。”司马秀满面担忧的道：“一旦大晋得知我等献降，肯定会派出大军缉拿我等，就凭这三千老弱之卒，如果能抵抗住朝廷大军攻伐？”
“自从咸和元年{公元326}年，荆州刺史、南蛮校尉陶士行{既陶侃}，曾率领一千五百健卒抵抗桂阳宣示国威之外，何时曾有大晋王师抵抗这里？”刘乾玄道：“是为不愿？非矣，而是不能。自从桂阳设郡以来，桂阳郡产出甚少，十年之中，**年需要朝廷免税，既不能贡献钱粮，也不能有甚产出，这里就如鸡肋之地。如今这大晋正处风雨飘摇之地，若是得知我桂阳郡不稳，他们是会出兵攻伐还是会安抚？”
司马秀作为晋朝宗室，虽然不是元帝司马睿一脉，可是必竟还是宗室，多少知道元帝一脉虽然名义上建立了东晋，可是他们仍只是士族门阀的傀儡，也学习过权谋之术。听刘乾玄这么一说，司马秀茅塞顿开，他既可以向魏国可以表达忠诚，一旦立场坚定，就可以被魏国朝廷树立为典型，得到更多想不到的东西。况且晋国也无力攻伐桂阳，因为攻伐桂阳得不偿失。
“现在看来，这晋国社稷，只怕不会太久了！”刘乾玄接着道：“先不说魏国国势如何，就说这治下之民，如今桂阳士绅哪个不是渴望太平？不是渴望落叶归根？现在北方之地，尽落汉家天子之手，只怕桂阳士绅皆有北归之意了，若是使君再行反复，恐怕那些士绅都不会让使君如愿。他们很有可能，拿使君作进阶之资。”
司马秀勃然大怒道：“竖子岂敢！”
刘乾玄道：“这些士族都有家兵，多者上千，少的也有数百，指望这些家兵，列土分疆他们办不到，要对付桂阳郡三千老弱残兵，可是轻而易举的。你看这魏国前来受降的那个袁录事史，这只不过是一个从七品的小官，但是观其言谈举止，皆非凡人。如此人才，只能屈居从七品之职，足可见魏国人才是何其多。再者，魏国皇帝太厉害了，一道永不加赋的恩旨，尽免徭役，这样以来，天下归心，统一天下指日可待啊！”
司马秀这才下定决心，坚持投靠魏国不动摇。
在荆州长江中下游地区还是阴雨绵绵的时候，魏国乐昌郡却是一片绚丽的阳光，乐昌城内外，籍破虏带着亲卫开始巡视军营，自从三天之前的一个夜里，有人向军营nèi shè了箭书，说同室操戈，只会让亲者痛仇者快，更重要的是会让胡人看了笑话。然后信中还罗列晋朝失去中原的原因，就是因为司马氏八王之乱，把晋国最精锐的部队都打光了，这才让胡人钻了空子。想当初晋军四万步骑就可以扩地四千里，打得鲜卑慕容氏举族皆降，可是后来失去晋军精锐之后，汉人只能任人宰割。信中也罗列了安北