你有没有遇到过这种场景:公司带宽是 500M,同办公室的人刷剧毫无压力,可你传个大文件给外地同事,速度愣是卡在几 MB/s 上不去;又或者,服务器明明千兆网卡,跨机房拷贝数据却慢得像蜗牛。
换网线、换网卡、重启路由器,一通操作猛如虎,一看速度原地杵。
问题大概率不在你的硬件,而在一个藏了四十多年的机制——TCP 的流量控制。它本意是保护接收方不被数据淹死,可一旦参数没调对,它就会变成那只”限速的手”。今天这篇就把这只手是怎么动的、哪里会卡壳、怎么解开,一次讲明白。
一、窗口:TCP 给数据量挂上的”闸门”
先说最底层的逻辑。
TCP 是可靠的传输协议,但它没法直接问对方”你吃得下多少”。于是它想了个笨办法却极有效的招:接收方每次回 ACK(确认)的时候,都会在报文头里塞一个窗口大小(Window),意思是”我缓存里还剩这么多空位,你最多往这儿发这么多”。
(图源:小林 coding《30张图解 TCP 重传、滑动窗口、流量控制、拥塞控制》)
这个窗口就是闸门。接收方缓冲充裕,闸门开大,发送方畅快发;接收方忙不过来,闸门关小,发送方就得憋住。窗口归零,发送方彻底闭嘴——这就是著名的零窗口(Zero Window)状态。
这像极了你往一个水缸里倒水,缸壁水位(窗口值)实时告诉你还能倒多少。倒水的人不需要知道缸多大、水多深,只看水位线办事就行。
二、最容易踩的坑:把流量控制和拥塞控制搅成一锅粥
这是面试重灾区,也是排查网速慢时最大的思维陷阱。
TCP 里其实有两道闸:
- 接收窗口(rwnd):接收方通告的,防的是”对方处理不过来”,管的是点对点这一跳;
- 拥塞窗口(cwnd):发送方自己估的,防的是”网络本身塞车”,管的是整条链路。
发送方真正能发多少,取两者的较小值:
实际可发送量 = min(rwnd, cwnd)
(图源:阿里云开发者社区《TCP窗口机制的流量控制与拥塞控制原理》)
打个比方:rwnd 是收货仓的容量,cwnd 是运输路的运力。仓库再大,路堵了也白搭;路再宽,仓库爆仓也是白送。
排查速度问题时第一件事就是分清到底哪道闸出了问题——用 ss -i 或者 Wireshark 抓包,看看到底是接收方通告的窗口小(rwnd 的锅),还是拥塞窗口被压住了(cwnd 的锅)。方向搞错,越调越糟。
三、零窗口:那个让连接”假死”的尴尬瞬间
窗口归零听起来只是”暂停一下”,实际是个高危状态。
Wireshark 抓包时你会看到满屏的 [TCP ZeroWindow] 和 [TCP Window Full],像下面这样:
(图源:博客园《TCP 窗口管理 & 流控——zero windows 和 persist timer》)
正常情况下,接收方应用把缓冲读空后会回一个非零窗口,发送方恢复发送。可万一这个”窗口更新”报文丢了怎么办?发送方等着,接收方以为自己已经通知了——双方大眼瞪小眼,连接假死。
TCP 的解法是给发送方配一个坚持定时器(Persist Timer):窗口归零后,隔一阵就硬着头皮发一个 1 字节的探测包。接收方哪怕缓存还是满的,也必须回 ACK,ACK 里就带着最新的窗口值。就这样,TCP 用每秒几次的”骚扰”,把死锁从根上掐掉了。
但在实际生产里,零窗口往往是应用侧出问题的信号:后端进程卡死、磁盘 IO 打满、或应用读取数据的逻辑写得稀烂。运维朋友如果频繁在日志里看到 ZeroWindow,别只盯着网络,先去查服务器上那个进程在干嘛。
四、64KB 天花板:窗口缩放,跨区域传输提速的关键
前面说窗口是”闸门”,可 TCP 首部里那个窗口字段只有 16 位——最大 65535 字节,约 64KB。
在高速局域网里这够用了。可一旦链路延迟上来了,问题就暴露了。记住这个公式:
吞吐量 ≈ 窗口大小 ÷ RTT
举个例子:从北京到广州,RTT 约 40ms,就算链路带宽 1000Mbps,如果窗口卡在 64KB,实际吞吐上限就只有 64KB ÷ 0.04s ≈ 1.6MB/s。千兆带宽,利用率不到 2%。
这就引出了 RFC 7323 定义的窗口缩放(Window Scaling):三次握手时双方协商一个 2 的幂次缩放因子,窗口最大能扩到 1GB。问题往往出在中间设备——某些老旧的防火墙、VPN 设备会把握手里的缩放选项悄悄剥掉,两端看似连上了,实际被按回 64KB。表现就是:跨省、跨国传输莫名变慢,同机房却飞快。
排查思路很简单:抓包看三次握手的 SYN 包里有没有 Window Scale 选项;再算一笔账——你的带宽 × 路径 RTT(带宽时延积 BDP),如果远超 64KB,窗口缩放必须打通。Linux 上 tcp_rmem / tcp_wmem 这组 socket 缓冲参数也得跟上,缓冲区太小,缩放开了也白搭。
五、BBR:Google 给拥塞控制开的”第二春”
如果说前面几节是老基础,那这几年真正搅动行业的趋势是 BBR。
传统的拥塞控制(Reno、CUBIC)是”丢包驱动”:把包往网络里灌,灌到丢包了才认定拥塞,然后窗口砍半。这套逻辑在早年铜线网络里没毛病,可到了无线和高速长链路环境就尴尬了——WiFi 干扰丢个包、跨洋链路抖动一下,CUBIC 就如临大敌地把窗口砍半,速度跳水。
Google 2016 年推出的 BBR 换了个思路:不再猜”丢包没”,而是直接建模瓶颈带宽和最小 RTT,把管道刚好填满、又不撑爆中间设备的缓存,在”快”和”稳”之间找平衡点。
(图源:Cassini《TCP 拥塞控制机制详解》)
如今 Linux 内核(5.4+) widely 支持 BBR,开启就两行:
# 临时生效
sysctl -w net.ipv4.tcp_congestion_control=bbr
# 查看当前算法
sysctl net.ipv4.tcp_available_congestion_control
但 BBR 不是万灵药。有运维经验总结指出,三类场景要慎重:数据中心里跑 NVMe-oF 这类低延迟存储流量的(BBR 周期性探测 RTT 会造成吞吐抖动)、海量短连接的出口代理(逐流探测开销不小)、以及跑在 5.4 以下老内核还要和 CUBIC 流混跑的(存在公平性问题)。选算法之前,先想清楚你的流量画像长什么样。
写在最后
回头再看开头那个”网速上不去”的困境:带宽是路的宽度,窗口是闸门的开口,RTT 是路的往返时长——三个变量少算一个,调优就只能在黑暗里摸。
TCP 流量控制教给我们最朴素的一件事,恰恰是网络工程里最常被忘记的:快,不是一门心思发得多;快,是发得恰到好处。
下次再遇到传输龟速,别急着砸硬件。打开抓包软件,找到那道被关小的闸门——它才是真相。
你遇到过 ZeroWindow 或者 BBR 的坑吗?评论区聊聊你的排查经历。
