必须用perf等系统级工具间接评估nginx worker缓存命中率,因其无内置计数器;核心方法是采样cache-misses/cache-references比值、验证worker_cpu_affinity绑定稳定性,并结合proxy_cache_status等高层指标交叉印证。

直接分析 Nginx Worker 的 CPU 缓存命中率不能靠 Nginx 自身日志或配置指令,它没有内置缓存命中率计数器。真实评估依赖操作系统级性能监控工具,结合 Nginx 进程行为与 CPU 缓存层级特性进行间接推断和验证。
用 perf 工具采集 L2/L3 缓存未命中事件
Linux 的 perf 是最常用且权威的底层采样工具,可精确统计每个 Worker 线程在运行时的缓存访问行为:
- 先获取所有 Nginx worker 进程 PID:
pgrep nginx | grep -v master - 对单个 worker(如 PID 12345)采样 10 秒 L2 缓存未命中:
perf stat -e cycles,instructions,cache-references,cache-misses -p 12345 sleep 10 - 重点关注 cache-misses 占 cache-references 的百分比;若该比值 >15%,说明 L2 缓存局部性较差,绑定优化空间大
- 对比开启
worker_cpu_affinity前后该比值变化,下降 15%–30% 属典型优化收益
观察进程 CPU 绑定稳定性与跨核调度频率
缓存命中率高低直接受进程是否稳定驻留于同一核心影响。频繁迁移 = 频繁清空 L1/L2 缓存:
- 运行
pidstat -t -p $(pgrep nginx) 1,观察各 worker 线程的 %CPU 和 CPU 列;若 CPU 列数值持续跳变(如在 0/2/5 间来回),说明未有效绑定或内核调度干扰 - 配合
taskset -cp PID检查实际绑定掩码,确认是否与worker_cpu_affinity配置一致 - 在 NUMA 系统中,还需用
numastat -p PID查看内存页是否落在本地节点;跨 NUMA 访问会放大缓存失效效应
结合 Nginx 缓存指标做间接印证
CPU 缓存效率提升最终会反映在更高层的缓存服务表现上,尤其当启用 proxy_cache 或 fastcgi_cache 时:
- 启用
$upstream_cache_status日志变量,统计 HIT / MISS / EXPIRED 比例;若 CPU 绑定后 HIT 率明显上升(尤其小包高并发场景),说明共享内存中的缓存索引结构更稳定驻留于 L2 - 检查
proxy_cache_path中 keys_zone 的共享内存使用率(通过nginx -T | grep keys_zone+slab_stat工具),若碎片率低、LRU 淘汰减少,也佐证缓存元数据访问局部性改善 - 注意排除干扰:需确保
use_temp_path=off、open_file_cache启用,否则磁盘 I/O 抖动会掩盖 CPU 缓存优化效果
避免常见误判点
很多所谓“命中率下降”其实源于测量方式或环境配置偏差:
- 不要依赖 top 或 htop 的 %CPU 平均值:它无法区分指令缓存(I-Cache)和数据缓存(D-Cache)行为,也无法体现 cache line bouncing
- 超线程(HT)环境下慎绑逻辑核:两个逻辑核共享一套 L1/L2,若同时绑定会导致互相冲刷;应优先绑定物理核对(如 0+8、1+9)
-
容器或云主机必须以 vCPU 实际数量为准:Kubernetes 或 AWS EC2 若只分配 4 个 vCPU,即使宿主机有 64 核,
worker_processes和掩码也必须按 4 配置,否则启动失败或绑定无效











