罗罗编程学习记录
本页内容 展开查看

01.1.3.1 Linux 内核参数与网络调优

所属:全栈开发面试题库 / 01 计算机基础与通用工程 / 01.1 操作系统 / 01.1.3 内核调优与实战

覆盖范围

  • somaxconn、tcp backlog 半连接队列
  • TIME_WAIT 复用与回收
  • 文件句柄与内核网络参数
  • sysctl 调优与排查

高频题速览

编号 题目 难度 频率
01.1.3.1-001 somaxconn 和 backlog 关系 进阶 ★★★★★
01.1.3.1-002 半连接队列是什么 高级 ★★★★☆
01.1.3.1-003 TIME_WAIT 复用怎么配 进阶 ★★★★★
01.1.3.1-004 tcp_tw_reuse 和 recycle 区别 高级 ★★★★☆
01.1.3.1-005 连接被拒绝怎么排查 进阶 ★★★★☆
01.1.3.1-006 sysctl 参数怎么看和改 基础 ★★★★☆
01.1.3.1-007 nf_conntrack 表满了怎么办 高级 ★★★☆☆
01.1.3.1-008 高并发调优参数清单 进阶 ★★★★★

01.1.3.1-001 somaxconn 和 listen backlog 是什么关系?

一句话结论

应用 listen(fd, backlog) 传入的 backlog 是内核期望的全连接队列长度,但实际队列长度取 min(backlog, net.core.somaxconn);somaxconn 是系统上限,backlog 超过它被截断。

概念解释

  • 全连接队列(accept queue):完成三次握手、等待应用 accept 的连接。
  • somaxconn:内核默认上限(旧版 128,现代发行版常 1024/4096,待确认)。
  • backlog 截断:应用传 1024 但 somaxconn=128,实际队列 128。

原理流程

  1. 应用调用 listen(fd, backlog)。
  2. 内核分配队列长度 = min(backlog, somaxconn)。
  3. 全连接队列满时,新连接按 tcp_abort_on_overflow 配置处理。

代码或图示

sysctl net.core.somaxconn
# 应用层 backlog 与 somaxconn 取小
# Nginx backlog 配置、Java ServerSocket backlog

常见误区

  • 以为应用 backlog 设多大就是多大:被 somaxconn 截断。
  • 以为 backlog 大就没事:队列满仍会丢连接。

追问

  • 怎么看队列溢出?答:netstat -s 看 ListenOverflows、ListenDrops,或 nstat -az。
  • backlog 设多少合适?答:高并发设 1024~65535,同时调大 somaxconn。

01.1.3.1-002 半连接队列是什么?

一句话结论

半连接队列(syn queue)保存收到 SYN 但未完成三次握手的连接;当客户端发 SYN、服务端回 SYN+ACK 后,连接处于 SYN_RCVD,放在半连接队列,直到收到客户端 ACK 移入全连接队列。

概念解释

  • 半连接队列:SYN_RCVD 状态连接。
  • 全连接队列:ESTABLISHED 等待 accept。
  • 半连接队列大小由 tcp_max_syn_backlog 控制。

原理流程

  1. 客户端 SYN 到达。
  2. 服务端回 SYN+ACK,连接进半连接队列。
  3. 客户端 ACK 到达,连接移到全连接队列等待 accept。

代码或图示

半连接队列(syn backlog):SYN_RCVD
全连接队列(accept queue):ESTABLISHED,等待应用 accept

常见误区

  • 混淆半连接和全连接:两者都可能溢出,表现不同。
  • 以为 SYN 洪水只影响半连接:syn flood 打满半连接队列,正常连接被拒。

追问

  • SYN 攻击怎么防护?答:tcp_syncookies=1,队列满时用 cookie 代替半连接记录,具体实现随内核版本待确认。
  • 怎么看半连接队列?答:ss -lnt 看 Recv-Q(全连接队列当前),Send-Q(队列上限);半连接用 ss -ant state syn-recv。

01.1.3.1-003 TIME_WAIT 复用怎么配?

一句话结论

TIME_WAIT 是主动关闭方的状态(2MSL),高并发短连接会堆积;通过 tcp_tw_reuse=1 允许新连接复用 TIME_WAIT 端口(用于出站连接),tcp_max_tw_buckets 控制总数。

概念解释

  • TIME_WAIT:主动关闭方保持 2MSL,确保最后 ACK 到达、旧连接报文消失。
  • tcp_tw_reuse:出站新连接可复用 TIME_WAIT 端口(安全前提是时间戳)。
  • tcp_max_tw_buckets:系统 TIME_WAIT 总数上限。

原理流程

  1. 短连接频繁建立关闭,TIME_WAIT 堆积。
  2. 开启 reuse,新出站连接可复用旧端口。
  3. 到达 buckets 上限时内核强制清理。

代码或图示

sysctl net.ipv4.tcp_tw_reuse
sysctl net.ipv4.tcp_max_tw_buckets

常见误区

  • 以为 tcp_tw_recycle 还能用:它在 NAT 环境下有问题,现代内核已移除(具体版本待确认),不要依赖。
  • 以为 TIME_WAIT 多就是故障:服务器作为客户端短连外部服务时,TIME_WAIT 正常。

追问

  • 服务端 TIME_WAIT 多说明什么?答:服务端主动关闭连接(如 Nginx 主动 close),应检查是否长连接或 keepalive 配置。
  • 怎么减少 TIME_WAIT?答:用长连接(keepalive)、连接池,而不是一味调内核参数。

01.1.3.1-004 tcp_tw_reuse 和 recycle 有什么区别?

一句话结论

reuse 是出站新连接复用 TIME_WAIT 端口(安全、需要时间戳);recycle 是快速回收 TIME_WAIT 连接(要求所有主机时间戳一致,NAT 后多主机时间戳不同会导致丢包,已被内核弃用)。

概念解释

  • reuse:用于客户端出站,安全。
  • recycle:用于服务端,NAT 环境不可靠。
  • 现代建议:只开 reuse,不要开 recycle。

原理流程

  1. 出站连接可复用 TIME_WAIT 端口(reuse)。
  2. 服务端 recycle 假设同 IP 时间戳单调,NAT 后多客户端时间戳不同,误判丢包。

代码或图示

# 推荐
net.ipv4.tcp_tw_reuse = 1
# 不要开(已弃用)
# net.ipv4.tcp_tw_recycle = 1

常见误区

  • 网上老教程让开 recycle:NAT 后会导致客户端偶发连不上,是经典坑。
  • 以为 reuse 影响服务端:它只作用于出站连接。

追问

  • 时间戳是什么?答:tcp_timestamps 选项,PAWS 防回绕,reuse 依赖它。
  • 内核哪个版本移除 recycle?答:Linux 4.12 移除 tcp_tw_recycle,具体待确认。

01.1.3.1-005 连接被拒绝怎么排查?

一句话结论

连接被拒分两类:队列满(全连接/半连接溢出,看 netstat -s 的 ListenOverflows)和 backlog 截断(somaxconn 太小);先看 ss -lnt 的 Send-Q,再看 netstat -s 溢出计数。

概念解释

  • 全连接队列满:应用 accept 慢,队列堆积。
  • 半连接队列满:SYN 攻击或 backlog 小。
  • backlog 截断:somaxconn 小于应用 backlog。

原理流程

  1. ss -lnt 看监听端口 Recv-Q/Send-Q。
  2. netstat -s | grep -i listen 看溢出。
  3. 定位是应用 accept 慢还是内核队列小。

代码或图示

ss -lnt
netstat -s | grep -iE 'listen|overflow|drop'
nstat -az | grep -i listen

常见误区

  • 连接被拒就以为端口没开:先区分是 RST(端口未监听)还是队列满。
  • 只看应用日志:内核队列溢出不一定在应用日志体现。

追问

  • 怎么看应用 accept 是否及时?答:Recv-Q 持续增长说明应用消费慢,要查线程池。
  • tcp_abort_on_overflow 是什么?答:队列满时直接 RST,而不是丢 SYN,默认 0(丢 SYN)。

01.1.3.1-006 sysctl 参数怎么看和改?

一句话结论

sysctl <param> 看当前值,sysctl -w <param>=<value> 临时改,持久化写 /etc/sysctl.conf 或 /etc/sysctl.d/*.conf,改完 sysctl -p 生效。

概念解释

  • 临时:sysctl -w,重启失效。
  • 持久:配置文件,sysctl -p 加载。
  • 参数分类:net.core.*、net.ipv4.*、vm.*。

原理流程

  1. 看:sysctl net.core.somaxconn。
  2. 临时改:sysctl -w net.core.somaxconn=65535。
  3. 持久:写配置文件,sysctl -p。

代码或图示

sysctl net.core.somaxconn
sysctl -w net.core.somaxconn=65535
# /etc/sysctl.d/99-network.conf:
net.core.somaxconn = 65535
sysctl -p /etc/sysctl.d/99-network.conf

常见误区

  • 改配置不 sysctl -p:不重载不生效。
  • 重启后失效:只 sysctl -w 没写配置文件。

追问

  • 哪些参数需要重启?答:多数 sysctl 即时生效,个别参数(如桥接)需相关模块,以文档为准。
  • 容器里能改 sysctl 吗?答:多数网络参数需宿主机或特权容器,容器内受限制。

01.1.3.1-007 nf_conntrack 表满了怎么办?

一句话结论

nf_conntrack 跟踪连接状态,表满会导致新连接被丢;表现是偶发连接超时,dmesg 看到 nf_conntrack: table full, dropping packet;调大 nf_conntrack_max 并排查连接数。

概念解释

  • conntrack:防火墙/NAT 跟踪每个连接状态。
  • 表满:连接数超过上限,新包被丢。
  • 调大:nf_conntrack_max 和 nf_conntrack_buckets。

原理流程

  1. 每个新建连接在 conntrack 表占项。
  2. 表满,新连接被丢。
  3. 调大表或定位异常连接。

代码或图示

dmesg | grep conntrack
sysctl net.netfilter.nf_conntrack_max
conntrack -L | wc -l

常见误区

  • 连接超时就以为是网络问题:先查 conntrack 是否满。
  • 盲目调大表:内存占用随表大小增长,先找异常连接。

追问

  • conntrack 表项存多久?答:TCP 已建立默认 5 天,TIME_WAIT 5 天(具体随版本待确认),短连接多会堆积。
  • 不用防火墙能关 conntrack 吗?答:若没用 NAT/防火墙,可移除模块减少开销。

01.1.3.1-008 高并发网络调优有哪些常用参数?

一句话结论

常用:somaxconn、tcp_max_syn_backlog、tcp_tw_reuse、tcp_max_tw_buckets、ip_local_port_range(出站端口范围)、文件描述符上限;核心是让队列够大、端口够用、fd 够开。

概念解释

  • 队列:somaxconn、tcp_max_syn_backlog。
  • TIME_WAIT:tcp_tw_reuse、tcp_max_tw_buckets。
  • 端口:ip_local_port_range(出站临时端口范围)。
  • fd:nofile 上限。

原理流程

  1. 队列够大:accept 不丢。
  2. 端口够:出站连接不耗尽可能端口。
  3. fd 够:socket 不耗尽。

代码或图示

net.core.somaxconn = 65535
net.ipv4.tcp_max_syn_backlog = 65535
net.ipv4.tcp_tw_reuse = 1
net.ipv4.ip_local_port_range = 10240 65535
fs.file-max / ulimit nofile

常见误区

  • 参数调一堆不验证:用 ss -s、nstat 看实际溢出。
  • 以为调参能解决一切:应用层 accept 慢、连接泄漏要先修。

追问

  • ip_local_port_range 为什么重要?答:作为客户端短连外部,临时端口范围 1024~65535,TIME_WAIT 占满会报 cannot assign requested address。
  • 调优前要做什么?答:压测看瓶颈,不要盲目按网上清单调。

01.1.3.1-009 怎么看连接队列是否溢出?

一句话结论

netstat -s(或 nstat -az)里看 ListenOverflows(全连接队列溢出)和 ListenDrops(丢弃),ss -lnt 看监听端口的 Recv-Q(当前堆积)和 Send-Q(队列上限);计数持续增长说明 backlog 不够或应用 accept 慢。

概念解释

  • ListenOverflows:全连接队列满次数。
  • ListenDrops:因队列满丢弃的连接。
  • Recv-Q:当前已建立但未 accept 的连接数。

原理流程

  1. ss -lnt 看队列当前值和上限。
  2. netstat -s | grep -i listen 看累计溢出。
  3. 溢出持续增长则调大 somaxconn 或优化 accept。

代码或图示

ss -lnt                    # Recv-Q / Send-Q
netstat -s | grep -i listen
nstat -az | grep -i listen

常见误区

  • 只看 ss 不看累计计数:ss 是瞬时值,溢出是历史累计。
  • 以为调大 backlog 就好:应用 accept 慢要先修线程池。

追问

  • Recv-Q 一直高说明什么?答:应用消费慢,检查工作线程是否阻塞。
  • tcp_abort_on_overflow=1 有什么效果?答:队列满直接 RST 而非丢 SYN,客户端快速失败。

待整理清单

  • [ ] 各内核版本网络参数差异(recycle 移除等)
  • [ ] 网卡多队列(RPS/RFS/XPS)调优
  • [ ] BBR 与拥塞控制算法切换
  • [ ] ss/nstat 输出字段权威对照