如何在Redis 7中排查发布订阅造成的网络带宽突增问题

大晨酱_8924

大晨酱_8924

2026-10-04

448人浏览

原创

redis 7 pub/sub带宽突增主因是消息体积×频率×订阅数叠加导致网卡出口打满,需用iftop -p 6379和redis-cli --stat查net_input/output_bytes验证,而非依赖instantaneous_ops_per_sec。

如何在redis 7中排查发布订阅造成的网络带宽突增问题

Redis 7 中发布订阅引发的带宽突增,基本不是 Redis 自身卡顿或配置错误,而是消息体积 × 频率 × 订阅数在网卡出口上直接堆出来的流量。先算再查,别一上来就调参。

怎么快速确认是不是 Pub/Sub 在吃带宽

别依赖 redis-cli info stats 里的 instantaneous_ops_per_sec——它只统计命令数,不反映字节量。真实压力在网卡上:

  • 在 Redis 服务器上跑 iftop -P 6379,盯住 TX(上行)和 RX(下行)实时速率,看是否贴近网卡上限(比如云主机标称 5 Mbps 上行,实测持续 4.8 Mbps 就得警觉)
  • 用 redis-cli --stat 观察 net_input_bytes 和 net_output_bytes 每秒增量,单位是字节;乘以 8 换算成 bit,就是实际带宽占用
  • 执行 PUBSUB NUMSUB your_channel 确认当前活跃订阅数,再结合你已知的 PUBLISH QPS 和消息平均大小,手动验算:「消息字节数 × QPS × 订阅数 × 1.12」是否匹配观测值

SPUBLISH 场景下带宽异常飙升的隐蔽原因

用了 Redis 7 的 SPUBLISH,不代表带宽就自动降下来。分片只解决“发给谁”,不解决“发多少”:

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 如果所有消息都用同一个 shardkey(比如硬编码为 "global"),那全部流量仍压在一个节点上,该节点的出口带宽照样打满
  • SSUBSCRIBE 客户端若跨地域部署(如华东节点订阅、华北节点发布),消息虽只路由到目标分片,但跨机房链路仍要承载完整副本,延迟+丢包+带宽成本三重叠加
  • SPUBLISH 不改变单条消息的协议开销,>4KB 的消息仍会触发 TCP 分段重传;实测中 10KB 消息在公网环境下 P99 延迟翻 20 倍,重传导致有效吞吐暴跌

为什么监控看到带宽高,却找不到对应频道

常见错觉:PUBSUB NUMSUB 返回空或数字很小,但 net_output_bytes 却狂涨。这通常指向两个被忽略的路径:

  • 模式订阅(PSUBSCRIBE alert.*)没被 PUBSUB 命令统计,得用 PUBSUB NUMPAT 查数量;而每个匹配到的实际频道,都会独立广播一份消息,10 个匹配频道 = 10 倍带宽
  • 客户端崩溃后未调用 UNSUBSCRIBE,Redis 仍维持连接并尝试投递,直到 TCP 超时(默认 2 小时)。用 CLIENT LIST 过滤 cmd=subscribe 状态的连接,看 idle 时间是否远超业务预期
  • Sharded Pub/Sub 下,PUBSUB 命令对 SSUBSCRIBE 完全不可见,必须用 SPUBSUB NUMSUB channel shardkey 才能查到真实订阅数

压缩与限流:最直接有效的带宽控制手段

协议层和应用层双管齐下,比调 tcp-keepalive 或连接池参数更治本:

  • 消息体强制走序列化压缩:JSON 改用 msgpack,文本内容启用 zstd(比 gzip 快 3 倍,压缩率相当),实测可将 8KB 消息压到 1.2KB,带宽直降 85%
  • 服务端不做无差别广播:在网关层(而非 Redis 层)聚合同类事件,例如把 5 秒内 20 条订单状态变更合并为 1 条 delta 更新,QPS 降为 1/5,消息体反而更小
  • 客户端侧加发送节流:Lettuce 用户可在 StatefulRedisPubSubConnection 上设 writeTimeout + 重试退避,避免突发消息洪峰打穿网卡

真正难处理的是分片键设计与业务语义耦合太紧——比如用 user_id 分片保序,但某超级用户日均消息占集群总 Pub/Sub 流量 40%,此时压缩和限流都只是缓兵之计,得动数据模型。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

redis

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4269

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3775

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

6792

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

623

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

736

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6382

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1140

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1016

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

5698

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习