Linux服务器配置多网卡后流量走错接口,怎样检查路由与策略规则

发布人:A5数据发布时间:2026-10-30 11:18阅读量:73

服务器增加网卡后,常见现象是:访问同一目标时流量从非预期接口发出;请求从网卡 A 进入,响应却从网卡 B 离开;或者只有绑定某个源 IP 的应用访问异常。排查时不要先改默认路由。先确认出问题的是哪类流量,再沿着地址、路由表、策略规则和实际报文逐层核对。

以下命令适用于使用 iproute2 的 Linux 系统。查看类操作通常不会改变网络配置;修改路由或规则可能中断远程连接。若服务器通过 SSH 管理,操作前应准备带外控制台或其他恢复通道,并记录当前配置。

先确认流量方向和预期路径

先把问题描述具体:是服务器主动访问外部时出口错误,还是外部请求进入后响应走错网卡?访问目标的协议和端口是什么?应用是否绑定了源地址?这些信息会影响路由查询结果。

例如,假设服务器有两块网卡:

  • ens3:地址 198.51.100.10/24,连接公网网关 198.51.100.1。
  • ens4:地址 10.20.0.10/24,连接内网网关 10.20.0.1。

这里的地址仅用于说明排查方法。实际环境中,应以网卡配置、上游网络和路由规划为准。先检查地址与链路状态:

ip -br link
ip -br addr
ip -s link

UP 表示接口处于启用状态,但不等于上游网络一定可达。若接口未启用、地址不符或计数器持续出现错误和丢包,应先检查网卡配置、虚拟化平台端口、交换网络及链路状态,不要直接用路由规则掩盖链路问题。

接着记录当前路由和规则:

ip -4 route show
ip -6 route show
ip -4 rule show
ip -6 rule show
ip -4 route show table all

关注以下信息:

  • 主路由表中是否存在多个默认路由,以及它们的 metric。
  • 是否有到目标网段的更具体路由;匹配前缀更长的路由通常优先于默认路由。
  • ip rule 是否包含按源地址、入接口、标记或其他条件选表的规则。
  • 规则所指向的路由表里,是否有能到达目标的路由。

多条默认路由不一定意味着配置错误,但若没有明确的优先级和策略,实际出口可能与预期不一致。路由表编号和规则顺序也很重要,不能只看 ip route show 的主表输出。

从单次路由查询判断选路结果

ip route get 可以模拟内核针对一条流量的路由查询。主动连接首先用目标地址查询:

ip -4 route get 203.0.113.25

再按应用实际使用的源地址查询:

ip -4 route get 203.0.113.25 from 198.51.100.10
ip -4 route get 203.0.113.25 from 10.20.0.10

示例结果可能类似:

203.0.113.25 via 10.20.0.1 dev ens4 src 10.20.0.10

这表示在该查询条件下,内核计划从 ens4 发出,并选择 10.20.0.10 作为源地址。若业务预期走 ens3,说明选路结果与预期不一致,需要继续核对匹配的路由表和策略规则。

查询结果中的 src 是内核建议使用的源地址,不一定等于应用最终绑定的地址;应用显式绑定源 IP 时,应使用对应的 from 地址进行查询。若系统通过防火墙标记影响选路,还要把标记纳入测试,例如:

ip -4 route get 203.0.113.25 from 198.51.100.10 mark 0x10

只有确认实际流量带有该标记时,这个结果才有意义。策略规则中存在 fwmark 条件时,可检查规则和相关防火墙配置:

ip -4 rule show
nft list ruleset

nft list ruleset 只用于查看现有规则;输出可能较长,也可能包含敏感网络信息,排查时避免把未脱敏内容公开粘贴。

结果不符合预期时,核对匹配的路由表

策略规则按优先级依次判断,数字较小的 pref 通常先匹配。检查完整规则及所有表:

ip -4 rule show
ip -4 route show table all

若某条规则指向表 100,单独查看该表:

ip -4 route show table 100

常见问题包括:规则指向了没有默认路由的表;表内只有内网网段路由,却承担公网出口;默认路由的网关或接口配置错误;或者更早的规则已经匹配,导致预期规则没有机会生效。

对比路由时,先看目标前缀,再看路由表和下一跳。若表内没有匹配目标的路由,通常不会自动回到主表继续寻找,具体行为还会受规则中 suppress_prefixlength 等条件影响。应结合 ip rule show 的完整内容判断,而不是只新增一条默认路由。

入站请求响应走错接口时

入站连接的响应流量也要根据源地址和策略规则重新选路。比如请求发到 198.51.100.10,但服务器的主表默认路由经 ens4,且没有按源地址选表的规则,响应就可能从 ens4 发出。上游若要求响应从原入口返回,这种非对称路径可能导致连接失败。

入站请求响应走错接口时配图

在可复现的连接上,先查看连接目标和本机地址,再核对相应的路由查询。若已知请求进入接口和本机目的地址,可以测试:

ip -4 route get 203.0.113.25 from 198.51.100.10

这里的 203.0.113.25 应替换成实际对端地址。对于带有 iif 条件的策略规则,也可按入接口辅助查询:

ip -4 route get 203.0.113.25 from 198.51.100.10 iif ens3

进一步用抓包确认报文实际经过哪个接口:

tcpdump -ni ens3 host 203.0.113.25
tcpdump -ni ens4 host 203.0.113.25

若请求只在 ens3 出现、响应却从 ens4 发出,问题更接近回程选路或策略路由。若请求根本没有到达服务器,应先检查上游路由、安全组、云平台网络和防火墙;不能仅凭服务器上的路由表推断外部报文已经到达。

还应检查反向路径过滤。IPv4 的 rp_filter 会根据源地址进行反向路由校验,在多网卡或非对称路由环境下可能丢弃看似不符合反向路径的报文:

sysctl net.ipv4.conf.all.rp_filter
sysctl net.ipv4.conf.default.rp_filter
sysctl net.ipv4.conf.ens3.rp_filter
sysctl net.ipv4.conf.ens4.rp_filter

常见取值中,0 表示关闭,1 表示严格模式,2 表示宽松模式。具体生效情况与接口及系统配置有关,不能只看 all 一项。不要把关闭过滤作为第一步;先用路由查询、抓包和规则检查确认存在非对称路径,再按安全要求评估是否需要调整。IPv6 不使用这个 IPv4 参数。

面向多网卡、多出口及跨地区访问场景,A5idc数据提供中国香港、美国、日本、韩国、中国台湾、新加坡和马来西亚等地区的物理服务器资源,覆盖多IP、CN2及国际带宽等网络配置,并配备Xeon Gold、AMD EPYC、NVMe存储等不同硬件方案,可用于部署企业网站、业务后台、数据库和接口服务,为按访问区域与网络路径规划服务器资源提供基础。

按问题类型选择修复方向

排查结果不同,修复点也不同。不要同时修改默认路由、策略规则和防火墙参数,否则难以判断哪项变更有效。

排查结果常见原因处理方向
不带源地址的查询走错接口主表默认路由或路由指标与预期不符检查默认路由来源、metric 和目标网段路由
指定源地址后仍走错接口缺少源地址策略规则,或规则指向的表不完整为对应源地址配置规则,并确认目标路由存在于指定表
路由查询正确,抓包接口不符查询条件不完整,或实际流量带有源地址、标记等额外条件使用实际源地址、标记及入接口复查;检查应用绑定和防火墙标记
入站请求到达但响应未返回回程选路错误、反向路径过滤或上游路径限制核对回程规则、rp_filter 和上游网络策略
路由查询正确但连接仍失败路由之外的丢包、过滤、服务监听或上游问题结合两端抓包及防火墙规则定位,避免继续叠加路由

若确认需要按源地址分流,下面是一个运行时示例:让源地址 198.51.100.10 经 ens3 发往外部。先确认 ens3 的网关、子网前缀和地址真实有效,且路由表编号 100 未被其他用途占用。示例中的网段和网关不可直接照搬。

ip -4 route show table 100
ip -4 rule show

若该表没有现有配置,可按实际连接前缀设置路由,再添加默认路由和源地址规则:

ip -4 route add 198.51.100.0/24 dev ens3 src 198.51.100.10 table 100
ip -4 route add default via 198.51.100.1 dev ens3 table 100
ip -4 rule add pref 100 from 198.51.100.10/32 table 100

第一条路由示例假定网关与服务器地址处于 198.51.100.0/24 直连网段。若实际网络使用不同前缀、点对点连接或 /32 地址配置,应按真实网络拓扑调整;部分环境需要额外处理网关可达性,不能机械套用示例。

添加后立即复查:

ip -4 rule show
ip -4 route show table 100
ip -4 route get 203.0.113.25 from 198.51.100.10

只有查询结果明确显示预期的 dev ens3、下一跳和源地址,才说明这组策略对该查询条件生效。随后还要实际发起业务连接并抓包确认。若命令提示路由已存在、网关不可达或规则优先级冲突,先查明现有配置,不要用 replace 覆盖不熟悉的路由。

运行时配置通常不会自动持久化。确认方案有效后,应在系统实际使用的网络管理工具中配置持久规则,例如 NetworkManager 或 Netplan;先检查发行版、版本和连接管理方式,不要同时让多个网络管理工具管理同一接口。持久化配置变更应先备份原配置,并通过控制台或维护窗口应用,避免 SSH 会话中断。

若刚才添加的内容导致异常,且确认对应优先级和表只属于本次变更,可删除新增规则和路由:

ip -4 rule del pref 100 from 198.51.100.10/32 table 100
ip -4 route del default via 198.51.100.1 dev ens3 table 100
ip -4 route del 198.51.100.0/24 dev ens3 src 198.51.100.10 table 100

删除前应再次核对规则和路由的实际内容;如果已有其他业务共用表 100,不要清空整张表。回滚后重新执行 ip route get,确认选路恢复到变更前状态。若持久化配置已经修改,还需同步恢复备份并按对应网络管理工具重新加载。

修复后验证并持续观察

验证不能只看规则是否存在。至少完成以下检查:

  1. 用与业务一致的目标地址、源地址和标记执行 ip route get,确认接口、下一跳和 src 符合预期。
  2. 发起实际连接,并用 tcpdump 检查请求和响应是否从预期接口通过。若只看到单向报文,继续检查服务器防火墙、上游网络和对端返回路径。
  3. 检查业务日志、接口计数器和连接状态。若错误计数持续增加,或流量仍从错误接口离开,应回到实际流量条件重新核对,而不是继续添加路由。
  4. 在维护窗口内确认配置重载或重启后的规则仍存在。重启验证前确保控制台可用,并确认持久化配置与临时修复一致。

多网卡选路的判断核心是:实际流量的条件是否命中预期规则,以及命中的路由表是否具备完整、可达的路径。修复后继续观察出入口流量和连接错误一段时间;如果只有特定源地址、协议或业务进程异常,应把这些条件纳入复测范围。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/6563.html

相关推荐