如何调优单台服务器上 Nginx 的内部进程总数以完美适配 NUMA 架构的内存本地化物理特性

千萱同学_2133

千萱同学_2133

2026-06-24

283人浏览

原创

nginx在numa架构上的性能瓶颈在于跨节点内存访问延迟,调优核心是让每个worker进程严格绑定本地cpu与本地内存:先用lscpu、numactl --hardware和cat /sys/devices/system/node/node*/cpulist确认真实拓扑;worker_processes设为单节点物理核数(如双路16核/节点则设16),禁用auto;worker_cpu_affinity按节点分段配置掩码;必须用numactl --cpunodebind --membind启动;最终通过numastat验证local_node>95%、numa_foreign≈0。

如何调优单台服务器上 nginx 的内部进程总数以完美适配 numa 架构的内存本地化物理特性

Nginx 在 NUMA 架构服务器上的性能瓶颈,往往不在 CPU 算力,而在跨节点内存访问带来的延迟激增。调优进程总数不是“越多越好”,而是要让每个 worker 进程严格运行在本地 CPU + 本地内存的组合上。关键不是总数,而是如何按 NUMA 节点合理切分、绑定并验证。

先看清硬件真实拓扑,再动配置
别依赖逻辑核数或 auto 推断。必须执行三步确认:

  • lscpu | grep -E "(Socket|Core|NUMA)" → 查清插槽数(Socket)、每槽物理核数、NUMA 节点总数
  • numactl --hardware → 明确每个 node 的 CPU 编号范围(如 node 0: CPUs 0–15)和本地内存容量
  • cat /sys/devices/system/node/node*/cpulist → 精确到每个核心归属,避免掩码错位

特别注意:若 BIOS 中启用了 Node Interleaving,numactl 会显示单个大节点,实际已丧失 NUMA 局部性——必须进 BIOS 关闭该选项。

Nginx Config Linter
Nginx Config Linter

对 Nginx 配置文件进行语法检查、验证和安全、性能审计。

下载

worker_processes 必须设为单节点物理核心数
例如双路 32 核服务器(每路 16 物理核),应设:

  • worker_processes 16(而非 auto、32 或 64)
  • 更稳妥可设为 8~12,留出资源余量给系统进程与中断处理

设为 auto 是常见错误:它只读 /proc/cpuinfo 总数,不感知 NUMA 边界,实测易导致一半 worker 被调度到远端 node,numa_foreign 指标翻倍。

CPU 与内存必须同步绑定,缺一不可
仅靠 worker_cpu_affinity 绑定 CPU 不够,Nginx 无法控制 malloc 分配的内存落在哪个 node:

  • worker_cpu_affinity 要按节点分段写。例如 node 0 有 CPU 0–15,则用 16 位掩码:
    worker_cpu_affinity 0000000000000001 0000000000000010 0000000000000100 ...(共 16 组,对应 16 核)
  • 必须用 numactl 启动主进程,强制内存亲和:
    /usr/bin/numactl --cpunodebind=0 --membind=0 /usr/sbin/nginx -g 'daemon on; master_process on;'
    若需双节点部署,改用 --cpunodebind=0,1 --membind=0,1,但更推荐单节点部署 + 外部负载分发,避免共享内存区跨节点访问。

验证是否真正落地,看内存路径而非 CPU ID
不能只看 taskset 或 ps 输出的 CPU 绑定结果。核心指标是内存访问路径:

  • 运行 numastat -p $(pgrep nginx)
  • 关键列:local_node 应 >95%,numa_foreign 应接近 0
  • 若 foreign 偏高,说明仍有跨节点内存分配,需检查 BIOS 设置、numactl 参数或掩码位数是否匹配总 CPU 数。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

437

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

880

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2692

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

896

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

809

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

414

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2436

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

4512

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

727

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习