一、背景与需求
很多公司发展到一定规模后,总部和分支机构分散在不同城市,甚至不同国家。日常办公中,财务系统、OA 平台、研发代码仓库这些核心业务,都需要总部和分支之间稳定互通。专线成本太高,普通宽带又不够安全,这时候大家自然会想到 IPSec VPN。用公网建立加密隧道,既省钱又安全,确实是个不错的选择。
但问题也随之而来。单条宽带线路的带宽总有上限,比如分支只拉了一条 100M 的宽带,高峰期办公流量一上来,视频会议卡顿、文件传输缓慢,甚至关键业务直接超时。这个时候,大家会想多拉几条线路做负载均衡,让多条隧道分担流量,提高整体吞吐量。想法很好,可实际做起来没那么简单——多条隧道建立后,怎么分配流量?哪些业务走哪条隧道?如果一条线路突然断了,流量怎么切到另一条上?这些都需要一套清晰的策略来支撑。
这篇文章就从实际场景出发,聊聊 IPSec VPN 分支机构互联中,带宽负载均衡的设计思路和流量调度策略。咱们会配合一套完整的思科 IOS 配置示例,把从隧道建立到路由分发、再到策略路由控制流量走向的整个链路捋清楚。
二、整体设计思路
在做负载均衡之前,先把基础拓扑想明白。假设总部使用一台核心路由器,连接了两条不同运营商的宽带,分别来自电信和联通,各自带宽 100M 和 50M。分支同样配置了两条宽带线路,分别接入电信和联通,带宽相同。总部和分支之间需要建立两条 IPSec VPN 隧道,一条走电信线路,一条走联通线路,然后把这两条隧道同时纳进路由决策中,让流量按策略分发。
这里有个核心概念需要提前说清楚:IPSec VPN 隧道本质上是逻辑接口,比如隧道接口 Tunnel0 和 Tunnel1。每个隧道接口都可以配置独立的 IP 地址,也可以绑定到具体的物理出接口上。路由器路由表里,可以通过多条等价路由或者策略路由,控制流量走哪个隧道接口,进而决定走哪条物理线路。
咱们的设计可以分为三层:第一层是隧道建立层,负责把两条 IPSec VPN 隧道建起来,并确保加密参数一致;第二层是路由控制层,负责把业务流量映射到隧道接口上,实现初步的负载分担;第三层是流量调度层,通过策略路由和 QoS 队列,对关键业务做优先级保障,同时兼顾链路的动态调整。
三、基础隧道配置示例
为了后面方便讲解,咱们统一使用思科 IOS 技术栈,下面所有命令都是在 Cisco IOS 路由器上执行。假设总部路由器名叫 HQ-Router,分支路由器名叫 Branch-Router,两端的预共享密钥都设置为 Sensen@2024。需要说明的是,这个密钥只是示例,实际部署时必须替换为强随机字符串,并且定期更新。
首先配置总部侧的 IPSec 加密策略和 IKE 参数。
! ============ HQ-Router 基础IKE配置 ============
crypto isakmp policy 10
encryption aes 256 ! 使用AES-256加密算法
authentication pre-share ! 使用预共享密钥认证
group 14 ! DH组14,安全性更高
lifetime 86400 ! IKE SA生存时间24小时
exit
! 配置预共享密钥,对端是分支路由器的公网IP地址
crypto isakmp key Sensen@2024 address 203.0.113.10
! ============ HQ-Router IPSec转换集配置 ============
crypto ipsec transform-set TRANSFORM-SET esp-aes 256 esp-sha-hmac
mode tunnel ! 隧道模式,封装整个IP包
exit
! ============ HQ-Router IPSec Profile配置 ============
crypto ipsec profile IPSEC-PROFILE
set transform-set TRANSFORM-SET
set pfs group14 ! 开启完美向前保密,提升安全性
set security-association lifetime seconds 3600
exit
上面这段配置完成了总部侧加密参数的设置。接下来配置隧道接口,让两条隧道分别绑定到电信和联通线路。
! ============ HQ-Router 隧道接口配置 ============
! 电信线路对应的隧道接口,假设电信线路物理接口是GigabitEthernet0/0
interface Tunnel0
description To-Branch-Telecom
ip address 10.10.1.1 255.255.255.252
tunnel source GigabitEthernet0/0
tunnel destination 203.0.113.10
tunnel mode ipsec ipv4
tunnel protection ipsec profile IPSEC-PROFILE
no shutdown
exit
! 联通线路对应的隧道接口,假设联通线路物理接口是GigabitEthernet0/1
interface Tunnel1
description To-Branch-Unicom
ip address 10.10.2.1 255.255.255.252
tunnel source GigabitEthernet0/1
tunnel destination 203.0.113.20
tunnel mode ipsec ipv4
tunnel protection ipsec profile IPSEC-PROFILE
no shutdown
exit
这段配置里,tunnel source 指定了从哪个物理接口发起隧道,tunnel destination 指定对端公网地址。两个隧道接口分别有自己的网段,比如 10.10.1.0/30 和 10.10.2.0/30。这样做的目的是让路由器能够区分不同的隧道,后续路由策略可以针对隧道接口做决策。
分支侧的配置和总部基本对称,只需要把 IP 地址和接口编号做相应调整。
! ============ Branch-Router 基础IKE配置 ============
crypto isakmp policy 10
encryption aes 256
authentication pre-share
group 14
lifetime 86400
exit
! 对端是总部路由器的公网IP地址
crypto isakmp key Sensen@2024 address 198.51.100.1
! ============ Branch-Router IPSec转换集配置 ============
crypto ipsec transform-set TRANSFORM-SET esp-aes 256 esp-sha-hmac
mode tunnel
exit
! ============ Branch-Router IPSec Profile配置 ============
crypto ipsec profile IPSEC-PROFILE
set transform-set TRANSFORM-SET
set pfs group14
set security-association lifetime seconds 3600
exit
! ============ Branch-Router 隧道接口配置 ============
! 电信线路对应的隧道接口
interface Tunnel0
description To-HQ-Telecom
ip address 10.10.1.2 255.255.255.252
tunnel source GigabitEthernet0/0
tunnel destination 198.51.100.1
tunnel mode ipsec ipv4
tunnel protection ipsec profile IPSEC-PROFILE
no shutdown
exit
! 联通线路对应的隧道接口
interface Tunnel1
description To-HQ-Unicom
ip address 10.10.2.2 255.255.255.252
tunnel source GigabitEthernet0/1
tunnel destination 198.51.100.2
tunnel mode ipsec ipv4
tunnel protection ipsec profile IPSEC-PROFILE
no shutdown
exit
隧道建立后,可以检查一下状态。用 show crypto isakmp sa 命令能看到 IKE 安全联盟是否建立,用 show crypto ipsec sa 能看到数据面加密状态。如果隧道一直处于 MM_NO_STATE 状态,说明两端加密参数不匹配,或者预共享密钥不一致,需要逐一排查。
四、负载均衡策略设计
隧道建好后,路由器上出现了两个新的接口,分别是 Tunnel0 和 Tunnel1。现在要考虑的是,怎么让业务流量均匀地分摊到这两条隧道上。这里有两种常见思路:一种是基于等价路由的简单负载均衡,另一种是基于策略路由的精细调度。咱们先看简单方案,再看进阶方案。
4.1 等价路由负载均衡
等价路由(ECMP)的意思是,路由表中出现两条或多条代价相同的路由条目,路由器可以根据哈希算法把流量分散到不同出接口上。在咱们的场景里,总部访问分支内网 192.168.2.0/24,可以同时配置两条静态路由,一条指向 Tunnel0,一条指向 Tunnel1,并且给它们设置相同的管理距离。
! ============ HQ-Router 静态路由配置 ============
! 两条等价路由,管理距离都是10
ip route 192.168.2.0 255.255.255.0 Tunnel0 10
ip route 192.168.2.0 255.255.255.0 Tunnel1 10
配置完成后,路由器会把去往 192.168.2.0/24 的流量,根据源 IP 和目的 IP 做哈希计算,自动分配到两个隧道接口上。对于大流量场景,比如传输大文件,ECMP 能起到不错的均衡效果。但这里有个细节需要注意:哈希算法默认是基于五元组的,也就是源 IP、目的 IP、源端口、目的端口、协议号。如果同一对主机之间存在多条 TCP 连接,这些连接会被分散到不同隧道上;但如果只有一条长连接,比如一个大的 FTP 下载,整条连接只会走其中一条隧道,无法实现单连接内的负载均衡。
另外,ECMP 有个隐患,当两条链路带宽差异较大时,比如一条 100M 一条 50M,简单按等代价路由去分摊,可能会让 50M 的链路先拥塞。这时候需要做加权负载均衡,思科路由器上可以使用 ip cef load-sharing 的 per-packet 或 per-flow 模式,但更推荐通过策略路由来按比例分配。
4.2 策略路由精细调度
策略路由(PBR)允许咱们不按照传统路由表决策,而是根据流量特征,比如源网段、目的端口、协议类型,把流量引导到指定接口上。这种方式灵活性更高,适合需要精细控制的场景。
先定义一个访问控制列表(ACL),用来匹配需要走电信隧道的流量。
! ============ HQ-Router 策略路由配置 ============
! 匹配来自总部财务部门的流量,目标为分支内网
access-list 100 permit ip 192.168.1.0 0.0.0.255 192.168.2.0 0.0.0.255
这个 ACL 的意思是,源地址属于 192.168.1.0/24(财务部门网段),目的地址属于 192.168.2.0/24(分支内网)的流量,会被匹配上。接下来创建一个 route-map,把匹配到的流量指定到 Tunnel0 接口。
route-map PBR-TRAFFIC permit 10
match ip address 100
set ip next-hop 10.10.1.2
exit
set ip next-hop 指定了下一跳地址。这里有个关键点,下一跳必须写对端隧道接口的 IP 地址,也就是分支侧 Tunnel0 的 IP 10.10.1.2。如果写成本地隧道接口 IP,路由器会认为下一跳不可达,流量不会转发。配置好 route-map 后,把它应用到入方向的接口上。
! 把策略路由应用到总部内网接口,假设内网接口是GigabitEthernet0/2
interface GigabitEthernet0/2
description LAN-Interface
ip policy route-map PBR-TRAFFIC
exit
策略路由应用后,从总部内网进入路由器的流量,只要匹配 ACL 100,就会被强制送往 Tunnel0 隧道,不管路由表里怎么选路。这样财务部门的流量就固定走电信线路,剩余流量走默认路由或等价路由,实现不同业务的分离调度。
不过策略路由也有一个需要注意的地方,它只在入方向生效,而且会忽略路由表的决策。如果 Tunnel0 隧道故障,策略路由不会自动切换到 Tunnel1,需要额外配置一个 fallback 机制。思科在较新版本里支持 set ip next-hop verify-availability,可以结合对象追踪实现自动切换,但配置相对复杂,咱们在后面动态调度部分再详细展开。
4.3 加权流量分配示例
假设总部到分支的流量中,70% 来自业务系统,30% 来自办公网。业务系统走电信 100M 线路,办公网走联通 50M 线路。我们可以用两个 route-map 分别匹配不同网段,实现按需分配。
! ============ HQ-Router 加权流量分配配置 ============
! 业务系统网段 192.168.10.0/24,走电信隧道 Tunnel0
access-list 101 permit ip 192.168.10.0 0.0.0.255 192.168.2.0 0.0.0.255
! 办公网段 192.168.20.0/24,走联通隧道 Tunnel1
access-list 102 permit ip 192.168.20.0 0.0.0.255 192.168.2.0 0.0.0.255
route-map PBR-BUSINESS permit 10
match ip address 101
set ip next-hop 10.10.1.2
exit
route-map PBR-OFFICE permit 20
match ip address 102
set ip next-hop 10.10.2.2
exit
interface GigabitEthernet0/2
ip policy route-map PBR-BUSINESS
exit
这里有个细节需要注意,route-map 是按编号从小到大依次匹配的。如果流量同时匹配了 101 和 102,只会走编号较小的 101 规则。所以配置时要仔细规划匹配顺序,确保业务网段优先匹配业务规则,办公网段匹配办公规则。另外,set ip next-hop 指定了对端隧道 IP,这个 IP 必须在隧道接口的直连网段内,否则路由器会报错。
五、流量调度优化策略
负载均衡解决的是“流量走哪条隧道”的问题,而流量调度解决的是“流量在隧道里如何排队”的问题。隧道带宽是固定的,比如电信线路 100M,但如果突发流量超过 100M,隧道接口会出现拥塞。这时候需要 QoS 队列机制来保障关键业务,比如语音和视频,优先通过,同时限制非关键业务占用过多带宽。
5.1 队列调度配置
在思科路由器上,常用的队列机制是 CBWFQ(Class-Based Weighted Fair Queuing)。咱们可以创建一个 QoS 策略,定义三个类:语音、视频、数据,分别分配不同的带宽保证。
! ============ HQ-Router QoS策略配置 ============
! 定义类映射,匹配语音流量(RTP端口范围)
class-map match-any VOICE-CLASS
match protocol rtp
match access-group 110
exit
! 定义类映射,匹配视频会议流量(UDP端口范围)
class-map match-any VIDEO-CLASS
match access-group 111
exit
! 定义类映射,匹配普通数据流量(默认类)
class-map match-any DATA-CLASS
match access-group 112
exit
! 定义策略映射,把各类流量分配到不同带宽
policy-map QOS-POLICY
class VOICE-CLASS
priority percent 10 ! 语音类保证10%带宽
class VIDEO-CLASS
priority percent 20 ! 视频类保证20%带宽
class DATA-CLASS
bandwidth percent 50 ! 数据类保证50%带宽
class class-default
fair-queue ! 剩余流量使用公平队列
exit
这个配置里,priority percent 表示该类别占用带宽的百分比,并且这类流量会先于其他流量被发送。bandwidth percent 表示该类别的保证带宽。注意,priority 和 bandwidth 的总和不能超过 100%,因为还需要留出控制平面的开销。另外,priority 类默认有一个最大突发限制,超出部分会被丢弃,所以语音和视频类不建议设置过大。
5.2 把QoS应用到隧道接口
QoS 策略定义好之后,需要应用到具体的隧道接口上。
! ============ HQ-Router 应用QoS到隧道接口 ============
interface Tunnel0
description To-Branch-Telecom
service-policy output QOS-POLICY
exit
interface Tunnel1
description To-Branch-Unicom
service-policy output QOS-POLICY
exit
这里有个关键点,QoS 必须应用在隧道接口的 output 方向,因为流量离开路由器进入隧道时才会经过队列调度。如果应用在物理接口上,比如 GigabitEthernet0/0,隧道加密后的流量才会经过 QoS,这时候加密封装已经完成,无法识别原始流量类别,语音和视频就无法被优先处理。所以正确做法是把 QoS 策略挂在隧道接口上,让路由器在加密前完成分类和排队。
5.3 基于链路质量的动态调度
除了静态的队列调度,还可以根据链路质量动态调整流量走向。比如电信线路时延突然升高,或者丢包率增大,这时候应该把部分流量切到联通线路。思科路由器支持 IP SLA 和对象追踪,可以实现这种动态切换。
先定义一个 IP SLA 探针,周期性地向分支路由器发送 ICMP 探测包,测量时延和丢包率。
! ============ HQ-Router IP SLA配置 ============
ip sla 1
icmp-echo 10.10.1.2 ! 对端隧道接口IP
frequency 5 ! 每5秒探测一次
timeout 2000 ! 超时时间2秒
threshold 1000 ! 阈值1秒
exit
ip sla schedule 1 life forever start-time now
然后定义一个对象追踪器,跟踪 IP SLA 的响应状态。
! ============ HQ-Router 对象追踪配置 ============
track 1 ip sla 1 reachability
exit
如果探测失败,也就是隧道 0 不可达,track 1 的状态会变为 down。这时候可以通过 route-map 的条件匹配,把流量切换到备用隧道。这里用一个 route-map 的 match track 命令来实现。
! ============ HQ-Router 动态切换配置 ============
! 当track 1状态为up时,流量走Tunnel0
route-map PBR-DYNAMIC permit 10
match ip address 100
match track 1
set ip next-hop 10.10.1.2
exit
! 当track 1状态为down时,流量走Tunnel1
route-map PBR-DYNAMIC permit 20
match ip address 100
set ip next-hop 10.10.2.2
exit
interface GigabitEthernet0/2
ip policy route-map PBR-DYNAMIC
exit
这种配置实现了自动切换。当电信线路正常时,业务流量走 Tunnel0;当电信线路故障时,业务流量自动切到 Tunnel1。但需要注意,route-map 里 match track 只能用于 permit 条目,而且 track 1 的 down 状态会让 route-map 10 不匹配,继续匹配 route-map 20,从而实现回退。如果两条隧道都故障,流量会走到默认路由,可能出不去,所以建议在路由表里保留一条默认路由指向 WAN 接口,作为最后的逃生路径。
六、应用场景详细分析
这套方案最适合两类场景:第一类是分支机构数量不多但流量较大的情况,比如总部和三个分支之间,每个分支都有独立的业务系统,需要稳定互联;第二类是分支机构接入链路不稳定,运营商质量参差不齐,需要自动切换的场景。
比如一家制造企业,总部在深圳,分支在苏州和成都。苏州分支的财务系统需要实时同步数据到总部,对时延敏感;成都分支主要做文件备份,流量大但时延容忍度高。这种情况下,可以给苏州分支配置高优先级队列,给成都分支分配较大带宽,同时用策略路由把不同业务区分开。
再比如,分支机构租用两条宽带线路,一条是移动宽带,一条是电信宽带。移动宽带白天高峰期可能丢包严重,但晚上又恢复正常。如果只用静态策略路由,晚上高峰期流量堵在移动线路上,业务卡顿。这时候配上 IP SLA 动态探测,一旦时延超过阈值,流量自动切到电信线路,等移动恢复后再切回来,这样用户体验会好很多。
七、技术优缺点分析
7.1 优点
负载均衡加流量调度的方案,最直接的收益是带宽利用率提升。原来单条 100M 链路只能跑 100M,现在两条链路加起来能跑 150M,成本增加不到一倍。同时,多条隧道互为备份,单条链路故障不会导致业务中断,提高了网络的可用性。
策略路由的引入,让网络管理员可以按业务需求分配带宽。财务系统、视频会议这类关键业务可以走质量好的链路,大文件传输这类非关键业务可以走备用链路,互不干扰。QoS 队列机制进一步保障了关键业务的带宽和时延,避免视频卡顿和语音中断。
动态切换机制让网络具备了一定的自愈能力。当运营商链路质量下降时,系统自动把流量切到备用线路,不需要人工干预,降低了运维成本。
7.2 缺点
配置复杂度较高是最大的短板。IPSec VPN 本身已经涉及多组配置,再加上策略路由、QoS、IP SLA,整个配置量不小,而且容易出错。比如 ACL 编号冲突、route-map 匹配顺序错误、track 配置与 route-map 不匹配,都会导致流量走向异常。
故障排查也比较困难。多条隧道并存时,需要逐个查看 show crypto ipsec sa、show route-map、show ip sla statistics 的输出,才能定位是隧道层问题还是路由层问题。如果没有充分的日志和监控,出了问题很难快速定位。
此外,IPSec VPN 隧道本身有加密解密开销,CPU 占用比普通转发高。如果路由器型号老旧,加密处理能力不足,多隧道并发时会成为瓶颈,带宽提升的效果会被 CPU 限制抵消。
八、注意事项
配置前一定要规划好网段和接口地址,避免冲突。隧道接口 IP 地址必须互不相同,比如 Tunnel0 用 10.10.1.0/30,Tunnel1 用 10.10.2.0/30。如果两个隧道接口使用了相同网段,路由器会报错,流量也会乱走。
预共享密钥要定期更换,尤其是当有员工离职或者 VPN 配置泄露时。密钥变更后,两端 IKE 安全联盟会重新协商,期间业务会短暂中断,所以建议在业务低谷期执行变更。
策略路由的 ACL 匹配顺序很重要。如果业务网段比较大,比如 192.168.0.0/16,而里面又包含财务网段 192.168.1.0/24,那么一定要先匹配财务网段,再匹配大网段。否则财务流量会被大网段规则先匹配走,导致优先级失效。
QoS 策略中的带宽百分比总和不能超过 100%。如果语音和视频都设置了 priority percent,它们的总和加上数据类带宽,必须小于等于 100%。预留的剩余带宽可以给控制平面和路由协议使用,否则路由协议包可能会被丢弃,导致邻居关系震荡。
IP SLA 探测间隔不宜设置太短。5 秒一次已经算比较频繁,如果设置成 1 秒,会占用大量 CPU 资源,而且误触发概率也增大。建议 10 秒到 30 秒之间。
动态切换时要注意防止路由震荡。当链路质量在阈值附近波动时,流量会在两条隧道之间来回切换,导致业务时断时续。可以在 route-map 里设置延迟切换,比如 set ip next-hop verify-availability 结合 track 的延迟时间,或者使用 IP SLA 的 reaction-config 设置阈值和滞后时间。
九、文章总结
IPSec VPN 分支机构互联的带宽负载均衡,并不是简单地把多条隧道堆在一起就完事。它需要从隧道建立、路由决策、队列调度、动态切换几个层面综合考虑。隧道建立是基础,加密参数和接口配置必须正确;路由决策决定流量走哪条隧道,可以用等价路由实现简单分摊,也可以用策略路由实现精细控制;队列调度解决拥塞问题,保证关键业务带宽;动态切换解决链路故障问题,提升网络可用性。
这套方案虽然配置复杂度较高,但一旦调试完成,网络稳定性会有明显提升。对于有一定规模的网络环境,投资回报率是不错的。希望这篇文章的示例和讲解,能帮到正在做 VPN 互联的朋友们,少走一些弯路。
评论
围绕“IPSec VPN分支机构互联的带宽负载均衡设计与流量调度策略”参与讨论