01.1.3.1 Linux 内核参数与网络调优
所属:全栈开发面试题库 / 01 计算机基础与通用工程 / 01.1 操作系统 / 01.1.3 内核调优与实战
覆盖范围
- somaxconn、tcp backlog 半连接队列
- TIME_WAIT 复用与回收
- 文件句柄与内核网络参数
- sysctl 调优与排查
高频题速览
| 编号 | 题目 | 难度 | 频率 |
|---|---|---|---|
| 01.1.3.1-001 | somaxconn 和 backlog 关系 | 进阶 | ★★★★★ |
| 01.1.3.1-002 | 半连接队列是什么 | 高级 | ★★★★☆ |
| 01.1.3.1-003 | TIME_WAIT 复用怎么配 | 进阶 | ★★★★★ |
| 01.1.3.1-004 | tcp_tw_reuse 和 recycle 区别 | 高级 | ★★★★☆ |
| 01.1.3.1-005 | 连接被拒绝怎么排查 | 进阶 | ★★★★☆ |
| 01.1.3.1-006 | sysctl 参数怎么看和改 | 基础 | ★★★★☆ |
| 01.1.3.1-007 | nf_conntrack 表满了怎么办 | 高级 | ★★★☆☆ |
| 01.1.3.1-008 | 高并发调优参数清单 | 进阶 | ★★★★★ |
01.1.3.1-001 somaxconn 和 listen backlog 是什么关系?
一句话结论
应用 listen(fd, backlog) 传入的 backlog 是内核期望的全连接队列长度,但实际队列长度取 min(backlog, net.core.somaxconn);somaxconn 是系统上限,backlog 超过它被截断。
概念解释
- 全连接队列(accept queue):完成三次握手、等待应用 accept 的连接。
- somaxconn:内核默认上限(旧版 128,现代发行版常 1024/4096,待确认)。
- backlog 截断:应用传 1024 但 somaxconn=128,实际队列 128。
原理流程
- 应用调用
listen(fd, backlog)。 - 内核分配队列长度 = min(backlog, somaxconn)。
- 全连接队列满时,新连接按 tcp_abort_on_overflow 配置处理。
代码或图示
sysctl net.core.somaxconn
# 应用层 backlog 与 somaxconn 取小
# Nginx backlog 配置、Java ServerSocket backlog
常见误区
- 以为应用 backlog 设多大就是多大:被 somaxconn 截断。
- 以为 backlog 大就没事:队列满仍会丢连接。
追问
- 怎么看队列溢出?答:
netstat -s看ListenOverflows、ListenDrops,或nstat -az。 - backlog 设多少合适?答:高并发设 1024~65535,同时调大 somaxconn。
01.1.3.1-002 半连接队列是什么?
一句话结论
半连接队列(syn queue)保存收到 SYN 但未完成三次握手的连接;当客户端发 SYN、服务端回 SYN+ACK 后,连接处于 SYN_RCVD,放在半连接队列,直到收到客户端 ACK 移入全连接队列。
概念解释
- 半连接队列:SYN_RCVD 状态连接。
- 全连接队列:ESTABLISHED 等待 accept。
- 半连接队列大小由
tcp_max_syn_backlog控制。
原理流程
- 客户端 SYN 到达。
- 服务端回 SYN+ACK,连接进半连接队列。
- 客户端 ACK 到达,连接移到全连接队列等待 accept。
代码或图示
半连接队列(syn backlog):SYN_RCVD
全连接队列(accept queue):ESTABLISHED,等待应用 accept
常见误区
- 混淆半连接和全连接:两者都可能溢出,表现不同。
- 以为 SYN 洪水只影响半连接:syn flood 打满半连接队列,正常连接被拒。
追问
- SYN 攻击怎么防护?答:
tcp_syncookies=1,队列满时用 cookie 代替半连接记录,具体实现随内核版本待确认。 - 怎么看半连接队列?答:
ss -lnt看 Recv-Q(全连接队列当前),Send-Q(队列上限);半连接用ss -ant state syn-recv。
01.1.3.1-003 TIME_WAIT 复用怎么配?
一句话结论
TIME_WAIT 是主动关闭方的状态(2MSL),高并发短连接会堆积;通过 tcp_tw_reuse=1 允许新连接复用 TIME_WAIT 端口(用于出站连接),tcp_max_tw_buckets 控制总数。
概念解释
- TIME_WAIT:主动关闭方保持 2MSL,确保最后 ACK 到达、旧连接报文消失。
- tcp_tw_reuse:出站新连接可复用 TIME_WAIT 端口(安全前提是时间戳)。
- tcp_max_tw_buckets:系统 TIME_WAIT 总数上限。
原理流程
- 短连接频繁建立关闭,TIME_WAIT 堆积。
- 开启 reuse,新出站连接可复用旧端口。
- 到达 buckets 上限时内核强制清理。
代码或图示
sysctl net.ipv4.tcp_tw_reuse
sysctl net.ipv4.tcp_max_tw_buckets
常见误区
- 以为
tcp_tw_recycle还能用:它在 NAT 环境下有问题,现代内核已移除(具体版本待确认),不要依赖。 - 以为 TIME_WAIT 多就是故障:服务器作为客户端短连外部服务时,TIME_WAIT 正常。
追问
- 服务端 TIME_WAIT 多说明什么?答:服务端主动关闭连接(如 Nginx 主动 close),应检查是否长连接或 keepalive 配置。
- 怎么减少 TIME_WAIT?答:用长连接(keepalive)、连接池,而不是一味调内核参数。
01.1.3.1-004 tcp_tw_reuse 和 recycle 有什么区别?
一句话结论
reuse 是出站新连接复用 TIME_WAIT 端口(安全、需要时间戳);recycle 是快速回收 TIME_WAIT 连接(要求所有主机时间戳一致,NAT 后多主机时间戳不同会导致丢包,已被内核弃用)。
概念解释
- reuse:用于客户端出站,安全。
- recycle:用于服务端,NAT 环境不可靠。
- 现代建议:只开 reuse,不要开 recycle。
原理流程
- 出站连接可复用 TIME_WAIT 端口(reuse)。
- 服务端 recycle 假设同 IP 时间戳单调,NAT 后多客户端时间戳不同,误判丢包。
代码或图示
# 推荐
net.ipv4.tcp_tw_reuse = 1
# 不要开(已弃用)
# net.ipv4.tcp_tw_recycle = 1
常见误区
- 网上老教程让开 recycle:NAT 后会导致客户端偶发连不上,是经典坑。
- 以为 reuse 影响服务端:它只作用于出站连接。
追问
- 时间戳是什么?答:tcp_timestamps 选项,PAWS 防回绕,reuse 依赖它。
- 内核哪个版本移除 recycle?答:Linux 4.12 移除 tcp_tw_recycle,具体待确认。
01.1.3.1-005 连接被拒绝怎么排查?
一句话结论
连接被拒分两类:队列满(全连接/半连接溢出,看 netstat -s 的 ListenOverflows)和 backlog 截断(somaxconn 太小);先看 ss -lnt 的 Send-Q,再看 netstat -s 溢出计数。
概念解释
- 全连接队列满:应用 accept 慢,队列堆积。
- 半连接队列满:SYN 攻击或 backlog 小。
- backlog 截断:somaxconn 小于应用 backlog。
原理流程
ss -lnt看监听端口 Recv-Q/Send-Q。netstat -s | grep -i listen看溢出。- 定位是应用 accept 慢还是内核队列小。
代码或图示
ss -lnt
netstat -s | grep -iE 'listen|overflow|drop'
nstat -az | grep -i listen
常见误区
- 连接被拒就以为端口没开:先区分是 RST(端口未监听)还是队列满。
- 只看应用日志:内核队列溢出不一定在应用日志体现。
追问
- 怎么看应用 accept 是否及时?答:Recv-Q 持续增长说明应用消费慢,要查线程池。
- tcp_abort_on_overflow 是什么?答:队列满时直接 RST,而不是丢 SYN,默认 0(丢 SYN)。
01.1.3.1-006 sysctl 参数怎么看和改?
一句话结论
sysctl <param> 看当前值,sysctl -w <param>=<value> 临时改,持久化写 /etc/sysctl.conf 或 /etc/sysctl.d/*.conf,改完 sysctl -p 生效。
概念解释
- 临时:
sysctl -w,重启失效。 - 持久:配置文件,
sysctl -p加载。 - 参数分类:
net.core.*、net.ipv4.*、vm.*。
原理流程
- 看:
sysctl net.core.somaxconn。 - 临时改:
sysctl -w net.core.somaxconn=65535。 - 持久:写配置文件,
sysctl -p。
代码或图示
sysctl net.core.somaxconn
sysctl -w net.core.somaxconn=65535
# /etc/sysctl.d/99-network.conf:
net.core.somaxconn = 65535
sysctl -p /etc/sysctl.d/99-network.conf
常见误区
- 改配置不
sysctl -p:不重载不生效。 - 重启后失效:只
sysctl -w没写配置文件。
追问
- 哪些参数需要重启?答:多数 sysctl 即时生效,个别参数(如桥接)需相关模块,以文档为准。
- 容器里能改 sysctl 吗?答:多数网络参数需宿主机或特权容器,容器内受限制。
01.1.3.1-007 nf_conntrack 表满了怎么办?
一句话结论
nf_conntrack 跟踪连接状态,表满会导致新连接被丢;表现是偶发连接超时,dmesg 看到 nf_conntrack: table full, dropping packet;调大 nf_conntrack_max 并排查连接数。
概念解释
- conntrack:防火墙/NAT 跟踪每个连接状态。
- 表满:连接数超过上限,新包被丢。
- 调大:
nf_conntrack_max和nf_conntrack_buckets。
原理流程
- 每个新建连接在 conntrack 表占项。
- 表满,新连接被丢。
- 调大表或定位异常连接。
代码或图示
dmesg | grep conntrack
sysctl net.netfilter.nf_conntrack_max
conntrack -L | wc -l
常见误区
- 连接超时就以为是网络问题:先查 conntrack 是否满。
- 盲目调大表:内存占用随表大小增长,先找异常连接。
追问
- conntrack 表项存多久?答:TCP 已建立默认 5 天,TIME_WAIT 5 天(具体随版本待确认),短连接多会堆积。
- 不用防火墙能关 conntrack 吗?答:若没用 NAT/防火墙,可移除模块减少开销。
01.1.3.1-008 高并发网络调优有哪些常用参数?
一句话结论
常用:somaxconn、tcp_max_syn_backlog、tcp_tw_reuse、tcp_max_tw_buckets、ip_local_port_range(出站端口范围)、文件描述符上限;核心是让队列够大、端口够用、fd 够开。
概念解释
- 队列:somaxconn、tcp_max_syn_backlog。
- TIME_WAIT:tcp_tw_reuse、tcp_max_tw_buckets。
- 端口:ip_local_port_range(出站临时端口范围)。
- fd:nofile 上限。
原理流程
- 队列够大:accept 不丢。
- 端口够:出站连接不耗尽可能端口。
- fd 够:socket 不耗尽。
代码或图示
net.core.somaxconn = 65535
net.ipv4.tcp_max_syn_backlog = 65535
net.ipv4.tcp_tw_reuse = 1
net.ipv4.ip_local_port_range = 10240 65535
fs.file-max / ulimit nofile
常见误区
- 参数调一堆不验证:用
ss -s、nstat看实际溢出。 - 以为调参能解决一切:应用层 accept 慢、连接泄漏要先修。
追问
- ip_local_port_range 为什么重要?答:作为客户端短连外部,临时端口范围 1024~65535,TIME_WAIT 占满会报 cannot assign requested address。
- 调优前要做什么?答:压测看瓶颈,不要盲目按网上清单调。
01.1.3.1-009 怎么看连接队列是否溢出?
一句话结论
netstat -s(或 nstat -az)里看 ListenOverflows(全连接队列溢出)和 ListenDrops(丢弃),ss -lnt 看监听端口的 Recv-Q(当前堆积)和 Send-Q(队列上限);计数持续增长说明 backlog 不够或应用 accept 慢。
概念解释
- ListenOverflows:全连接队列满次数。
- ListenDrops:因队列满丢弃的连接。
- Recv-Q:当前已建立但未 accept 的连接数。
原理流程
ss -lnt看队列当前值和上限。netstat -s | grep -i listen看累计溢出。- 溢出持续增长则调大 somaxconn 或优化 accept。
代码或图示
ss -lnt # Recv-Q / Send-Q
netstat -s | grep -i listen
nstat -az | grep -i listen
常见误区
- 只看 ss 不看累计计数:ss 是瞬时值,溢出是历史累计。
- 以为调大 backlog 就好:应用 accept 慢要先修线程池。
追问
- Recv-Q 一直高说明什么?答:应用消费慢,检查工作线程是否阻塞。
- tcp_abort_on_overflow=1 有什么效果?答:队列满直接 RST 而非丢 SYN,客户端快速失败。
待整理清单
- [ ] 各内核版本网络参数差异(recycle 移除等)
- [ ] 网卡多队列(RPS/RFS/XPS)调优
- [ ] BBR 与拥塞控制算法切换
- [ ]
ss/nstat输出字段权威对照