美国服务器调整MTU后部分网站连接卡住,如何验证是否存在路径MTU问题?

发布人:A5数据发布时间:2026-10-24 10:18阅读量:106

美国服务器调整 MTU 后,只有部分网站连接卡住,确实可能是路径 MTU(PMTU)问题,但不能仅凭“改完 MTU 就出现故障”直接下结论。应先记录接口 MTU、目标路由、IPv4/IPv6 差异和连接卡顿发生阶段,再只改变一个变量,观察较小报文是否能让同一目标恢复。

典型的 PMTU 黑洞表现是:TCP 三次握手已经完成,随后 TLS 握手、HTTP 请求或响应传输长时间等待,最终超时;ping 小包正常,大包失败;降低 MTU 或限制 TCP MSS 后,同一目标恢复。若只是 ping 失败而 HTTPS 始终正常,可能是目标禁用了 ICMP 回显,不能据此判定路径 MTU 异常。

先把“连接卡住”变成可观察现象配图

先把“连接卡住”变成可观察现象

先区分连接方向

需要先确认故障是哪一条路径:

  • 美国服务器主动访问外部网站;
  • 外部用户访问部署在美国服务器上的网站;
  • 服务器通过 Nginx、负载均衡或容器转发请求;
  • 服务器访问同一域名的 IPv4 地址或 IPv6 地址。

路径 MTU 是方向性和目的地相关的。美国服务器访问某个网站的出站路径,不等于用户访问该服务器的入站路径;同一个域名解析到不同 CDN 地址后,PMTU 也可能不同。

如果是服务器主动访问网站,应在服务器上执行测试。如果是外部用户访问服务器,应从受影响的客户端、同一运营商网络或接近的外部探针执行测试,不能只在服务器本机运行 ping。

A5数据提供美国物理服务器,涵盖常规 Xeon 与 AMD EPYC 平台,可为美国站点、跨境接口和容器业务提供计算与存储资源。其美国常规系列设有 CN2 GIA 线路方案,配合不同档位的内存、NVMe 存储和带宽资源,为面向不同地区访问的网站与应用提供部署基础。

观察卡在哪个阶段

使用 curl 记录 DNS、TCP 连接、TLS 和首字节时间。以下命令中的域名替换为实际测试目标:

curl -4 -sS -o /dev/null \
  --connect-timeout 5 \
  --max-time 15 \
  -w 'dns=%{time_namelookup} connect=%{time_connect} tls=%{time_appconnect} first_byte=%{time_starttransfer} total=%{time_total} code=%{http_code}\n' \
  https://your-test-domain.example/

可以分别关注以下现象:

  • connect 很长:可能是路由、TCP 端口、ACL 或丢包问题;
  • connect 很快,但 tls 很长:可能是 TLS 握手阶段的大报文未能通过;
  • TLS 完成,但 first_byte 很长:可能是 HTTP 请求、响应或应用处理阶段受影响;
  • 整个过程很快完成,只是浏览器偶尔卡顿:还需要排查 DNS、HTTP/3、连接复用或应用层问题。

再分别测试 IPv4 和 IPv6:

curl -4 -sS -o /dev/null \
  --connect-timeout 5 \
  --max-time 15 \
  -w 'IPv4 total=%{time_total} code=%{http_code}\n' \
  https://your-test-domain.example/

curl -6 -sS -o /dev/null \
  --connect-timeout 5 \
  --max-time 15 \
  -w 'IPv6 total=%{time_total} code=%{http_code}\n' \
  https://your-test-domain.example/

如果只有 IPv6 卡住,优先检查 IPv6 路由、IPv6 防火墙是否允许必要的 ICMPv6 控制报文,以及 IPv6 接口和容器网络的 MTU。不要因为 IPv4 测试正常,就认为整台服务器的路径 MTU 都正常。

建立基线:先不改任何配置

在修改 MTU 前,先记录当前状态。下面以 Linux 和网卡 eth0 为例,实际接口名可能是 ens3、enp1s0 或其他名称。

DEV=eth0
TARGET_IP=203.0.113.20

ip -br link
ip link show dev "$DEV"
ip route get "$TARGET_IP"
ip -6 route show

203.0.113.20 是文档示例地址,实际执行时替换成目标网站当前使用的地址。ip route get 主要用于确认服务器实际选择的出口、网关和源地址;如果输出中带有 mtu 或 advmss,还应记录下来。

检查目标域名解析出的地址:

getent ahosts your-test-domain.example

同一个域名可能同时返回 IPv4 和 IPv6 地址。若 DNS 结果包含多个地址,应尽量固定一个地址进行对照,避免一次测试使用 CDN 节点 A,另一次测试使用节点 B。

使用 tracepath 查看路径上的 MTU 线索

Linux 上可以使用 tracepath:

tracepath -4 -n -p 443 "$TARGET_IP"

IPv6 使用:

tracepath -6 -n -p 443 2001:db8::20

示例输出可能类似:

 1?: [LOCALHOST]                      pmtu 1500
 1:  192.0.2.1                         0.420ms
 2:  198.51.100.1                      1.180ms
 3:  198.51.100.20                     6.240ms
     Resume: pmtu 1450

这里的 pmtu 1450 表示该次探测认为到目标的路径 MTU 约为 1450 字节。tracepath 使用的探测方式和 HTTPS 的 TCP 流量并不完全相同,因此它只能作为线索,仍需结合 TCP 连接和抓包结果。

如果 tracepath 没有结果,可能是中间设备过滤了探测报文,也可能是目标不响应该类探测,不应直接理解为“路径 MTU 一定是 1500”。

使用 DF 探测 IPv4 的临界值

IPv4 下可以使用禁止分片的 ICMP 探测:

ping -4 -M do -c 4 -W 1 -s 1472 "$TARGET_IP"
ping -4 -M do -c 4 -W 1 -s 1400 "$TARGET_IP"

IPv4 的计算方式是:

  • ping -s 表示 ICMP 数据部分;
  • IPv4 头部通常为 20 字节;
  • ICMP Echo 头部通常为 8 字节;
  • 因此,1472 + 20 + 8 = 1500。

如果 1472 字节失败,而 1400 字节成功,可以继续在中间范围测试:

ping -4 -M do -c 4 -W 1 -s 1464 "$TARGET_IP"
ping -4 -M do -c 4 -W 1 -s 1452 "$TARGET_IP"
ping -4 -M do -c 4 -W 1 -s 1440 "$TARGET_IP"

IPv6 的固定头部更大,通常按 数据 + 40 字节 IPv6 头部 + 8 字节 ICMPv6 头部 估算。例如:

ping -6 -c 4 -W 1 -s 1452 2001:db8::20
ping -6 -c 4 -W 1 -s 1400 2001:db8::20

但很多网站或云主机不允许 ICMP 回显。此时大包 ping 失败只能说明该测试没有得到回包,不能单独证明 HTTPS 的 PMTU 存在问题。

只选择一个变量做对照

基线完成后,不要同时修改 MTU、MSS、防火墙和路由。每次只改变一个条件,并使用新的 TCP 连接测试同一个目标。

建议的单变量顺序

实验变量保持不变的条件只执行的改变结果可以说明什么
地址族同一服务器、同一域名、同一时间段仅在 curl -4 与 curl -6 间切换只有一个地址族失败时,优先检查对应路由和控制报文
目标地址同一地址族、同一命令、同一接口从正常目标换到异常目标只有部分目标失败,说明可能是目的地路径或 CDN 节点差异
临时接口 MTU同一目标、同一地址族、全新 TCP 连接只把运行时 MTU 调低到测得的临界值附近调低后稳定恢复,支持 PMTU 或 MSS 相关判断
防火墙控制报文同一 MTU、同一目标、同一命令只检查或在维护窗口调整必要的 ICMP/ICMPv6 规则放行必要报文后恢复,说明 PMTUD 通知可能被过滤
应用协议同一地址、同一接口、同一 MTU仅比较 HTTP/1.1 与其他已启用协议只有某种应用协议失败时,需要扩大到应用层排查

“目标地址”本身不是配置修复项,而是用于建立对照。如果正常网站和异常网站的 IP、地址族、路径完全不同,不能把两次结果直接当成 MTU 的唯一证据。

临时调整接口 MTU前的注意事项

运行时调整接口 MTU 会影响该接口上的全部流量,可能中断 SSH、数据库连接、监控和容器通信。远程服务器应提前记录原值,并优先使用云控制台、串口或带外管理通道,避免在唯一 SSH 会话中直接修改。

先记录当前值:

DEV=eth0

ip -o link show dev "$DEV"
ip link show dev "$DEV" | sed -n '1p'

确认路径实际疑似为 1450 字节后,可以在维护窗口进行临时测试:

sudo ip link set dev "$DEV" mtu 1450
ip link show dev "$DEV"

curl -4 -sS -o /dev/null \
  --connect-timeout 5 \
  --max-time 15 \
  -w 'total=%{time_total} code=%{http_code}\n' \
  https://your-test-domain.example/

测试结束后,使用基线中记录的原始值回滚。下面的 1500 只是示例,不能直接套用到所有服务器:

sudo ip link set dev "$DEV" mtu 1500
ip link show dev "$DEV"

如果原始值不是 1500,应替换成真实记录值。该命令只改变运行时状态,重启网络服务或系统后可能被持久化配置覆盖,因此不能把临时恢复当成永久修复。

参考实验数据及其含义

下面是一组用于说明判断方法的示例记录,并非特定服务器的实测结果:

项目基线结果临时将接口 MTU 调为 1450 后
网卡 MTU15001450
tracepath 识别的路径 MTU14501450
IPv4 ping -M do -s 14224/4 成功4/4 成功
IPv4 ping -M do -s 14230/4 成功本地不再发送超过接口上限的报文
TCP 443 握手0.04 秒完成0.04 秒完成
TLS 完成时间15 秒超时0.86 秒完成
HTTP 返回无200

IPv4 下,1422 + 28 = 1450,而 1423 + 28 = 1451。如果大于 1450 的报文在路径上被丢弃,同时服务器没有收到“需要分片”通知,TLS 或 HTTP 阶段就可能出现重传和等待。

这组数据可以支持“路径 MTU 或 PMTUD 通知链路存在问题”的判断,但仍不能证明唯一原因就是网卡 MTU。还要确认:

  • 修改后是否使用了全新的 TCP 连接;
  • 测试时目标是否解析到了同一个地址;
  • 是否同时发生了 DNS、CDN 节点或应用配置变化;
  • 服务器访问目标的方向是否与实际故障方向一致。

用抓包确认是大报文丢失,还是应用本身等待

查看 TCP MSS

TCP 在 SYN 和 SYN-ACK 中会协商 MSS。常见计算方式为:

  • IPv4 TCP:MSS 约等于 MTU 减 40 字节;
  • IPv6 TCP:MSS 约等于 MTU 减 60 字节。

因此:

  • MTU 1500 时,IPv4 MSS 常见为 1460;
  • MTU 1450 时,IPv4 MSS 常见为 1410;
  • MTU 1400 时,IPv4 MSS 常见为 1360。

可以抓取目标 443 端口的新连接:

sudo tcpdump -ni "$DEV" -s 0 -vv \
  'tcp port 443 and host 203.0.113.20 and (tcp[tcpflags] & tcp-syn != 0)'

观察 SYN 中的 mss 值。若接口已经调整为 1400,但新连接仍然持续宣告 1460,可能存在以下情况:

  • 实际修改的不是业务使用的接口;
  • 应用运行在容器或其他网络命名空间;
  • 路由、负载均衡或中间设备重新设置了 MSS;
  • 连接并未重新建立,仍在使用旧连接;
  • 观察到的流量并非预期方向。

MSS 是重要线索,但不是路径 MTU 的完整证明。它是端点宣告的 TCP 负载上限,中间路径仍可能有更小的实际限制。

查看 ICMP 报错和重传

在测试期间同时抓取 TCP 和 ICMP:

sudo tcpdump -ni "$DEV" -s 0 -vv \
  'host 203.0.113.20 and (tcp port 443 or icmp or icmp6)'

重点观察两类报文:

  • IPv4 的 ICMP Destination Unreachable,代码为 fragmentation needed,常见显示为需要分片且 DF 置位;
  • IPv6 的 ICMPv6 Packet Too Big,通常会包含建议的 MTU 值。

典型判断如下:

抓包现象更合理的判断
TCP 三次握手成功,后续大段 TCP 数据反复重传,没有 PTB 或需要分片通知PMTU 黑洞的可能性较高
收到明确的 ICMP 错误,且连接随后自动采用较小报文PMTUD 正常工作,需继续检查应用或目标端
只有 SYN,没有 SYN-ACK更像端口、路由、ACL 或服务监听问题,不宜先归因于 PMTU
TLS 数据发送后长时间无确认,降低 MTU 后恢复支持报文超过路径承载能力的判断
服务器发送正常,但客户端方向出现大包重传需要在客户端或入站路径抓包,服务器出站测试不能覆盖该方向

如果只在服务器出口抓包,无法直接看到中间链路丢弃的报文。必要时需要在对端、负载均衡、云网络流日志或外部测试节点同步观察。

配置不生效或冲突时,按层检查

第一层:实际生效的网卡配置

先看内核当前状态,而不是先看配置文件:

ip -br link
ip -d link show dev eth0

如果配置文件写的是 1400,但这里仍显示 1500,说明持久化配置尚未应用,或者修改的接口名称不对。若这里显示 1400,但实际连接仍按 1500 的 MSS 建立,则要继续检查路由、容器和中间设备。

第二层:路由是否存在独立 MTU 或 MSS

检查所有路由表:

ip route show table all
ip -6 route show table all

重点查找类似以下字段:

mtu 1450
advmss 1410

路由级 MTU 可能覆盖接口的通用 MTU。若默认路由是 1500,但某个目的网段配置了 1450,只有部分网站或部分地址失败就比较容易出现。

还应确认 IPv4 和 IPv6 是否使用了不同的出口:

ip route get 203.0.113.20
ip -6 route get 2001:db8::20

第三层:持久化网络配置

不同发行版可能由 Netplan、NetworkManager 或 systemd-networkd 管理网络。不要同时修改多个管理层,否则重启或网络服务重载后可能恢复旧值。

检查常见配置位置:

grep -RniE 'mtu|MTUBytes' \
  /etc/netplan \
  /etc/systemd/network \
  2>/dev/null

使用 NetworkManager 的系统可以先查看连接信息:

nmcli connection show
nmcli connection show "连接名称" | grep -i mtu

常见字段对应关系包括:

  • Netplan:接口下的 mtu: 1450;
  • systemd-networkd:.network 文件中的 MTUBytes=1450;
  • NetworkManager:连接配置中的 802-3-ethernet.mtu;
  • 云平台或虚拟化平台:控制台、虚拟交换网络或实例网卡属性中的 MTU。

修改持久化配置前,应备份原文件并确认使用的网络管理器。远程执行时保留回滚文件和带外访问,避免网络重启后无法连接。

第四层:容器、虚拟网卡和中间设备

如果网站请求由容器发出,宿主机的 MTU 正常并不代表容器路径正常。需要分别检查:

  • 容器内部接口 MTU;
  • Docker 或其他容器网络的 bridge MTU;
  • 宿主机到容器的虚拟网卡;
  • 云负载均衡、NAT 或出口网关;
  • 叠加网络的额外封装开销。

以 Docker 默认网络为例,可以只读取网络参数:

docker network inspect bridge --format '{{json .Options}}'

容器有效 MTU 通常不应高于宿主机和底层出口所能承载的值。若只修改宿主机接口,而容器仍宣告较大的 MSS,测试结果可能与宿主机本地 curl 不同。

修复方向应先处理原因,再考虑降低 MTU

如果抓包确认 PMTU 通知被过滤,优先修复 ICMP 和 ICMPv6 的必要控制报文通路,不建议简单地在防火墙中放开或封禁全部 ICMP。修改防火墙前应:

  1. 备份当前规则;
  2. 确认影响的是出站、入站还是转发方向;
  3. 只允许必要的错误类型和相关连接;
  4. 保留控制台或带外回滚方式;
  5. 先在维护窗口复测,再持久化规则。

如果底层确实存在固定的封装开销,可以将接口 MTU 或特定路径 MTU 设置为已验证的值。降低 MTU 会增加每个 TCP 请求所需的报文数量,过度降低还可能带来吞吐下降,因此不宜从 1500 直接盲目改成很小的数值。

TCP MSS 限制可以作为特定场景下的缓解方案,尤其适用于无法控制中间封装设备、但可以在边界设备上调整 TCP SYN 的环境。它必须限定在实际受影响的接口和方向,并分别验证 IPv4、IPv6、容器流量和入站流量。MSS 限制不能修复 UDP 或所有应用协议,也不能替代对 PMTU 通知链路的检查。

Linux 上还可以查看 TCP 的 MTU 探测设置:

sysctl net.ipv4.tcp_mtu_probing
sysctl net.ipv4.route.min_pmtu

这类内核参数只能作为补充手段。开启探测可能改善部分 PMTU 黑洞,但不应拿它作为“问题已经确认”的依据,更不能在未记录原值的情况下直接修改生产环境。

复测条件与结论边界

完成一次调整后,应使用全新的 TCP 连接,并固定以下条件:

  • 同一台服务器和同一个出口接口;
  • 同一个目标 IP;
  • 同一个地址族;
  • 同一个端口和 URL;
  • 相近的测试时间;
  • 同样的 DNS、HTTP 和 TLS 条件;
  • 同样的客户端或外部访问位置。

建议至少连续执行多次,而不是只看一次成功结果:

for i in 1 2 3 4 5
do
  date '+%F %T'
  curl -4 -sS -o /dev/null \
    --connect-timeout 5 \
    --max-time 15 \
    -w 'connect=%{time_connect} tls=%{time_appconnect} total=%{time_total} code=%{http_code}\n' \
    https://your-test-domain.example/ || true
  sleep 2
done

如果降低 MTU后,同一目标、同一地址和同一方向连续恢复,且抓包显示原先存在大报文重传或缺少 PTB 通知,那么可以把 PMTU 黑洞或 MTU/MSS 不匹配列为主要原因。

如果只有 ping 失败、HTTPS 正常,则证据不足;如果只有某个 CDN 地址失败,应继续比较其他解析地址;如果只有浏览器失败而 curl 正常,还要排查浏览器使用的协议和连接复用;如果修改运行时 MTU有效、重启后失效,则重点是持久化配置冲突。

最终结论应限定在本次测试的方向、地址族、目标地址和时间范围内。路径 MTU 可能随路由、CDN 节点、云网络配置和防火墙策略变化,不能用一次成功或一次失败推断所有网站、所有客户端和整台美国服务器的网络路径。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/5432.html

相关推荐