如何利用 stream 模块 实现 TCP 转发时的 worker_connections 调优实战

大墨同学_7212

大墨同学_7212

2026-05-21

400人浏览

原创

Nginx stream模块TCP转发需协同调优worker_connections、文件描述符、内核队列及事件模型:必须设置worker_rlimit_nofile与ulimit -n匹配,调高net.core.somaxconn和tcp_max_syn_backlog,events块中启用epoll、multi_accept,并在stream中合理配置proxy_timeout等参数。

如何利用 stream 模块 实现 tcp 转发时的 worker_connections 调优实战

用 Nginx 的 stream 模块做 TCP 转发时,worker_connections 不是孤立调大的数字,它必须和内核队列、文件描述符、事件模型三者咬合才能真正撑住高并发连接。单纯改一个值,很容易在压测中突然出现连接拒绝、超时或 too many open files 报错。

先对齐系统级资源上限

stream 模块处理的是纯 TCP 连接(如数据库代理、Redis 透传、游戏服务器转发),每个连接至少占用 1 个文件描述符。若 worker_connections 设为 16384,但系统对 nginx 用户的 ulimit -n 仍是默认 1024,那实际生效的就是 1024 —— 其余连接会被静默丢弃。

  • 永久设置:在 /etc/security/limits.conf 中添加(替换 nginx 为实际运行用户,如 www-data):
    nginx soft nofile 65536
    nginx hard nofile 65536
  • 同时在 nginx.conf 的主配置块中写明:
    worker_rlimit_nofile 65536;
  • 验证方式:cat /proc/$(pgrep nginx)/limits | grep "Max open files",确认 Max open files 行的 soft 和 hard 值都 ≥ 你期望的 worker_connections × worker_processes

匹配内核 accept 队列长度(关键!)

stream 模块监听端口时,内核为每个 listen() socket 维护一个“已完成三次握手、等待 accept()”的队列,长度由 net.core.somaxconn 控制。如果这个值太小(如默认 128),瞬时建连高峰会直接丢包——客户端表现为连接超时,Nginx 日志里却看不到任何记录。

  • 计算依据:somaxconn ≥ worker_connections / worker_processes,并留余量。例如 4 核机器配 worker_processes 4、worker_connections 16384,则单 listen socket 需承载约 4096 个待取连接,somaxconn 至少设为 8192 或 16384
  • 同步调整 net.ipv4.tcp_max_syn_backlog(未完成连接队列),建议设为 somaxconn 的 2 倍,防止 SYN 包被内核丢弃
  • 生效命令:sysctl -w net.core.somaxconn=16384,并写入 /etc/sysctl.conf 永久保存

stream 块内必须启用高效事件机制

stream 模块不走 HTTP 流程,对事件模型更敏感。若未显式指定,Nginx 可能回退到低效的 select,触发 1024 连接硬限制。

Livestream Script Generator
Livestream Script Generator

直播带货脚本:话术、节奏、互动、促单。适用于主播、电商运营、MCN机构。

下载
  • 确保全局 events 块中配置:
    use epoll;
    multi_accept on;
    accept_mutex on;(默认开启,保持即可)
  • multi_accept on 让单次事件循环尽可能多地从内核队列中取出连接,大幅降低队列积压概率,尤其适合短连接密集转发场景(如 MySQL 连接池穿透)
  • 避免在 stream 上滥用 keepalive_timeout:TCP 层无请求复用概念,长连接保持靠业务自身,Nginx 侧只需保证连接不被误杀即可

验证与典型配置示例

一个面向 Redis 集群代理的 stream 配置片段:

worker_processes auto;
worker_rlimit_nofile 65536;
<p>events {
use epoll;
worker_connections 16384;
multi_accept on;
}</p><p>stream {
upstream redis_cluster {
server 10.0.1.10:6379 max_fails=3 fail_timeout=30s;
server 10.0.1.11:6379 max_fails=3 fail_timeout=30s;
keepalive 1000;  # stream 级 keepalive,复用后端连接
}</p><pre class="brush:php;toolbar:false;">server {
    listen 6380 so_keepalive=on;
    proxy_pass redis_cluster;
    proxy_timeout 1s;
    proxy_responses 1;
}

}

该配置配合 somaxconn=16384、ulimit -n 65536,可稳定支撑数万并发 TCP 连接转发。压测时重点观察 ss -s 输出中的 tcp 部分,确认 synrecv 和 estab 数量是否平稳增长,而非卡在某个阈值附近波动。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

stream

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
C语言变量命名
C语言变量命名

c语言变量名规则是:1、变量名以英文字母开头;2、变量名中的字母是区分大小写的;3、变量名不能是关键字;4、变量名中不能包含空格、标点符号和类型说明符。php中文网还提供c语言变量的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

3789

3

c语言入门自学零基础
c语言入门自学零基础

C语言是当代人学习及生活中的必备基础知识,应用十分广泛,本专题为大家c语言入门自学零基础的相关文章,以及相关课程,感兴趣的朋友千万不要错过了。

2023.07.25

2488

9

c语言运算符的优先级顺序
c语言运算符的优先级顺序

c语言运算符的优先级顺序是括号运算符 > 一元运算符 > 算术运算符 > 移位运算符 > 关系运算符 > 位运算符 > 逻辑运算符 > 赋值运算符 > 逗号运算符。本专题为大家提供c语言运算符相关的各种文章、以及下载和课程。

2023.08.02

1440

5

c语言数据结构
c语言数据结构

数据结构是指将数据按照一定的方式组织和存储的方法。它是计算机科学中的重要概念,用来描述和解决实际问题中的数据组织和处理问题。数据结构可以分为线性结构和非线性结构。线性结构包括数组、链表、堆栈和队列等,而非线性结构包括树和图等。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.09

1378

4

c语言random函数用法
c语言random函数用法

c语言random函数用法:1、random.random,随机生成(0,1)之间的浮点数;2、random.randint,随机生成在范围之内的整数,两个参数分别表示上限和下限;3、random.randrange,在指定范围内,按指定基数递增的集合中获得一个随机数;4、random.choice,从序列中随机抽选一个数;5、random.shuffle,随机排序。

2023.09.05

1456

5

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2023.09.20

2438

7

c语言get函数的用法
c语言get函数的用法

get函数是一个用于从输入流中获取字符的函数。可以从键盘、文件或其他输入设备中读取字符,并将其存储在指定的变量中。本文介绍了get函数的用法以及一些相关的注意事项。希望这篇文章能够帮助你更好地理解和使用get函数 。

2023.09.20

4060

8

c数组初始化的方法
c数组初始化的方法

c语言数组初始化的方法有直接赋值法、不完全初始化法、省略数组长度法和二维数组初始化法。详细介绍:1、直接赋值法,这种方法可以直接将数组的值进行初始化;2、不完全初始化法,。这种方法可以在一定程度上节省内存空间;3、省略数组长度法,这种方法可以让编译器自动计算数组的长度;4、二维数组初始化法等等。

2023.09.22

19375

6

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

2023.09.22

569

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CentOS 官方文档
CentOS 官方文档

共0课时 | 0人学习

极客学院Java8新特性视频教程
极客学院Java8新特性视频教程

共17课时 | 4.3万人学习