荆州南部的长沙、桂阳、零陵、武陵四郡，由刘表旧部割据。刘备早就对南部四郡垂诞三尺，没等孙权从合肥、江陵战役的疲惫中休整过来就派兵讨伐，顺利收复。曹操败归北去之后，刘备先表举刘表的儿子刘琦为荆州牧。这是明智之举。这样做不仅利于收众，更利于收服荆州江南四郡。

刘备乘周瑜、曹仁相持江北之际，南征江南荆州辖地武陵、长沙、桂阳、零陵四郡。武陵(治今湖南常德西)太守金旋、长沙太守韩玄、桂阳(治今湖南郴州)太守赵范、零陵(治今湖南零陵北)太守刘度皆降。刘备南征，除武陵太守金旋微有抗拒，因而“为备所攻劫死”外，基本上没有遇到什么阻力。

这就是他以原荆州牧刘表的儿子刘琦为荆州牧的效果(四郡本是荆州的固有属地),出师名正言顺。

据载，桂阳太守赵东汉石骑马人范投降后，因同赵云没有搞好关系又逃走了。

赵云跟随刘备平定江南四郡，被委以偏将军，领桂阳太守，代赵范。

赵范想借机拍马屁，施以美人之计：“范寡嫂曰樊氏，有国色，范欲以配云。"赵云对赵范存有戒心，不愿受制于人，亏欠人情，便以不成其理由的传统观念相拒绝：“相与同姓，卿兄犹我兄。”其实，女人姓樊，这与“同姓不婚”的传统理念是根本不沾边儿的事。赵范再三请婚，赵云“固辞不许”。有人劝赵云答应，赵云道出了真实心情：“范迫降耳，心未可测；天下女不少。”赵范弄巧成拙，甚是尴尬，献嫂不成，心怀疑虑，便逃走了。

刘备收复江南四郡，除了扩大地盘以外，还有一个重要收获是黄忠“委质”投靠。黄忠，字汉升，南阳人，原为荆州牧刘表的中郎将，与刘表的侄子刘磐一起驻守长沙攸县(今湖南湘潭境),“及曹公克荆州，假行裨将军，仍就故任，统属长沙太守韩玄”。韩玄投降之后，黄忠也随之投降了。