一次 TCP 重传的排查记录

· network

现象很没规律:大文件传到一半卡住,小请求一切正常。SSH 连上去偶尔卡在 banner 那一行,等十几秒才出来。

先看连接本身

ss -ti dst 203.0.113.10

输出里有两个字段值得盯:retrans 增长的速率,以及 rtt 和 rttvar 的抖动。当时看到重传在稳定增长,rtt 倒是正常,说明不是链路拥塞。

再看 MTU

ip link | grep mtu

本机网卡 9000,对端 1500,中间有一段只认 1500。大包在中间被丢,小包没事,这正好对上「大文件卡、小请求正常」的表现。

MTU 不一致的时候,路径 MTU 发现本该救回来,但它依赖 ICMP 的 fragmentation needed,那个报文一旦被中间设备吞掉,发送端就一直在发过大的包然后重传。

用 tcpdump 确认

tcpdump -ni eth0 -s 0 'tcp and greater 1400 and host 203.0.113.10'

看到反复出现的同序号大包,配上对端的重复 ACK,基本就锁定了。

修法

把这一段接口的 MTU 压低:

ip link set dev eth0 mtu 1400

要持久就写进网络配置,或者用一个 oneshot 的 systemd 单元在启动后设一次。压到 1400 之后重传归零,SSH banner 也不再卡。

记一句

遇到「小请求正常、大请求卡住」,第一反应应该是 MTU,而不是先怀疑丢包率或者带宽。带宽问题会让所有请求一起慢,MTU 问题只挑大包。