Redis发布订阅功能占用过多CPU怎么办_合理配置Redis IO线程数与减少频道数

秋磊吖_4822

秋磊吖_4822

2026-04-11

852人浏览

原创

redis pub/sub高cpu主因是缓冲区积压、频道爆炸和消费延迟,需调优client-output-buffer-limit、合并频道并监控pubsub指标。

redis发布订阅功能占用过多cpu怎么办_合理配置redis io线程数与减少频道数

Redis 发布订阅(Pub/Sub)本身不参与持久化、不走命令队列、不经过慢查询日志,但一旦消费者积压或频道数量失控,client-output-buffer-limit pubsub 缓冲区就会持续膨胀,导致主线程反复刷写、CPU 暴涨——这不是“功能太强”,而是配置和使用方式没对齐。

为什么 Pub/Sub 会吃光 CPU?看这三类典型现象

不是所有高 CPU 都是命令慢,Pub/Sub 的问题藏在缓冲区和事件循环里:

  • redis-cli info clients 显示 client_longest_output_list 持续 > 1000,说明某个订阅客户端的输出缓冲区堆积严重
  • redis-cli info memory 中 mem_clients_normal 不高,但 mem_clients_pubsub 占比突增(比如超 30%),直指发布端快、消费端慢
  • redis-cli monitor 能看到大量 PUBLISH 命令瞬间涌入,但没有对应 SUBSCRIBE 或 UNSUBSCRIBE 日志,说明频道被滥建(如用时间戳/UUID 当频道名)

调整 client-output-buffer-limit pubsub 是第一道防线

默认值 client-output-buffer-limit pubsub 32mb 8mb 60 表示:缓冲区超 32MB 强制断连;60 秒内累计超 8MB 也断连。生产环境往往不够用,也不够严格:

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 若消费者稳定但偶尔延迟,可收紧时间窗口:改 60 为 10,避免缓冲区“温水煮青蛙”式增长
  • 若消息体大(如 JSON > 1KB),需同步调高硬限制:比如 128mb,但必须搭配监控告警,否则只是延缓崩溃
  • 绝对不要设为 0(禁用限制)——这是把缓冲区失控的风险全交给操作系统处理,极易触发 OOM Killer 杀 Redis 进程

启用 IO 线程对 Pub/Sub 几乎无效,别白配

io-threads 和 io-threads-do-reads 只加速网络读取和响应组装,而 Pub/Sub 的瓶颈从来不在网络层,而在:主线程要把每条消息复制到每个订阅者的输出缓冲区。这个动作是纯内存拷贝 + 链表遍历,无法并行化。

  • 开启 io-threads 后,redis-cli info cpu 里的 used_cpu_sys 可能略降,但 used_cpu_user 不变甚至上升(线程调度开销)
  • 真正有效的做法是减少“需要复制的次数”:合并频道(如用 news:tech 替代 news:tech:20260404)、强制消费者心跳保活、用 PUBSUB NUMSUB 定期清理零订阅频道
  • 如果业务允许,直接换方案:用 Kafka / Pulsar 承担广播流量,Redis 只做状态缓存

频道数爆炸时,PUBSUB CHANNELS 和 PUBSUB NUMPAT 必须进巡检脚本

Redis 内部用跳表维护频道名,频道越多,每次 PUBLISH 前的匹配开销越大。当 PUBSUB CHANNELS * 返回结果超过 500 个,就要警惕:

  • 用 PUBSUB NUMPAT 查模式订阅数,> 10 就算高风险——正则匹配比字符串精确匹配慢一个数量级
  • 禁止前端直接传任意字符串作频道名;后端统一做归一化(如哈希后截取 8 位)再订阅
  • 定期执行 PUBSUB CHANNELS pattern* + UNSUBSCRIBE 清理陈旧频道,别依赖客户端主动退订(移动端掉线很常见)

Pub/Sub 的 CPU 问题本质是“流控失位”:发布者不控速、消费者不保活、运维不巡检。IO 线程解决不了根本矛盾,真正要盯死的是缓冲区水位、频道基数和消费延迟这三个数字。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

redis

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2023.08.07

2015

5

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.23

2902

1

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

2023.10.13

996

3

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

2025.09.10

3279

7

kafka消费者组有什么作用
kafka消费者组有什么作用

kafka消费者组的作用:1、负载均衡;2、容错性;3、广播模式;4、灵活性;5、自动故障转移和领导者选举;6、动态扩展性;7、顺序保证;8、数据压缩;9、事务性支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.01.12

2426

5

kafka消费组的作用是什么
kafka消费组的作用是什么

kafka消费组的作用:1、负载均衡;2、容错性;3、灵活性;4、高可用性;5、扩展性;6、顺序保证;7、数据压缩;8、事务性支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

590

5

rabbitmq和kafka有什么区别
rabbitmq和kafka有什么区别

rabbitmq和kafka的区别:1、语言与平台;2、消息传递模型;3、可靠性;4、性能与吞吐量;5、集群与负载均衡;6、消费模型;7、用途与场景;8、社区与生态系统;9、监控与管理;10、其他特性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

564

5

Java 流式处理与 Apache Kafka 实战
Java 流式处理与 Apache Kafka 实战

本专题专注讲解 Java 在流式数据处理与消息队列系统中的应用,系统讲解 Apache Kafka 的基础概念、生产者与消费者模型、Kafka Streams 与 KSQL 流式处理框架、实时数据分析与监控,结合实际业务场景,帮助开发者构建 高吞吐量、低延迟的实时数据流管道,实现高效的数据流转与处理。

2026.02.04

590

32

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1618

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习