刘瀚解决掉西南诸国之后便南下，与伏波将军路博德和浞野侯赵破奴兵合一处，一共十万大军开始一路南下，攻城略地。
其实遇到的敌人并不多，只是路太难走了，这个时候的南方，好多地方像是原始森林，各种千奇百怪的树木，它们高耸入云，遮天蔽日。
树林中还有各种蚂蚁，昆虫，地面潮湿的落叶层，又厚，还带着腐烂的味道，时不时还有各种缠绕的藤蔓，行军异常困难……
他们走得很慢，有时候甚至半个月才走上百里。
刘瀚这一路大军，因为灭西南诸国，所以走得慢了些，其它几路大军就快了，可他们很快就遇到了南越三关，南越大军防守三关，即横浦关、阳山关、湟溪关，凭险抵抗，大汉几路大军一时间难以推进。
横浦关、阳山关、湟溪关，南越三关，对南越而言，就像是后世的嘉峪关，居庸关，山海关。
当年秦军修筑在五岭山脉险要处的关口，正好卡死了从中原进入岭南的通道。三个关口在地理布局上形成了一个军事大三角，可以互相支援，大三角的支点。
横浦关在南越的东北方向，横浦水在翁源南浦，南浦水从贵东直下翁江。
当年秦军从赣江溯桃江而上，桃江的源头是大吉山，大吉山徒步翻过五岭山脉进入贵东下南浦不到一天时间，山脉并不高，是一条最快进入广东的要道。
江西南安府二十五里，雄杰险固，为南北之噤要，亦谓之横浦关。
阳山关在南越西北方向，连着连江，连着北江，也连着珠江，跟着湟溪关紧密相连，都是湖南进入广东的要道。
湟溪关，据记载秦时期已有，位于湘粤交界处的古湟水驿道上，在今湖南省蓝山县南和广东省广东连县西北，由南向北攀援而上，越过气势雄伟的南天门，再向北就是湟溪关所在。
《史记南越尉佗传》“檄千湟溪关，绝道自守，”盖在今县西北湟水上。为由湖入粤之要道。
东路的楼船将军杨扑和义阳侯卫山看三关难以攻破，便想到绕路而行，他们沿湖汉水（今赣江）、彭水（今桃江）、横浦江、秦水（今北江），未经横浦关，首先进入南越境内。
然后一路猛烈的进攻，攻破寻狭（今广东清远东北）、石门（今广东广州西北10千米处），夺得南越粮船，此时的他们离南越都城番禺已经近在咫尺了。
“什么？”
“粮草也被夺了？”
“杨扑已经打到石门了？”
“横浦关怎么会拦不住他们？”
“汉军速度怎么会这么快？”
本来还在寻欢作乐的南越王赵建德吓得差点不举了，立刻从床上爬起来，衣服随便套上，光着脚就急匆匆的从大殿中跑出来了。
“快，召集丞相。”
吕嘉此时在府中，反复看着地图，“完了，完了，哎，曾经的三关，竟然没有多少用，为之奈何？”
“弟弟，带上金银珠宝，还有心腹，准备好船只，若是事不可为，咱们跑入海上，汉人有一句话，留得青山在，不怕没有柴烧。”
“大哥，已经如此危急了吗？即使汉军围住了番禺，咱们城内还有几万大军，几十万百姓，粮食够我们吃几年的了。”
“汉军来势汹汹，我们挡不住的，还是早做打算。”
这个时候，一个下人进来了。
“丞相，大王召见您。”
“不去，去了又有什么用，说几句安慰他吗？告诉他，我生病了。”
“大哥，也不一定去海上，海中多风浪，要不咱们去东越国，投靠东越王，前不久咱们不是才送了许兰郡主去和东越王和亲吗？”
“去送亲的人，至今没有回来，不知道是被东越王扣留了，还是被汉军劫走了，大汉像是老虎，东越王更像是狼，咱们去了，怕是羊入狼口呀。”