Redis如何处理多频道订阅时的数据解析

梦芳大大_4361

梦芳大大_4361

2026-03-27

463人浏览

原创

多频道订阅时,redis.PubSub消息为字典结构,type字段含"message""pmessage""subscribe"等;须先判断type,仅对"message"和"pmessage"解析;channel和data为bytes需decode;psubscribe时用pattern路由而非channel;生产环境优先用get_message(timeout)而非listen();JSON数据需统一编码与格式校验。

redis如何处理多频道订阅时的数据解析

订阅多个频道时,redis.PubSub 的消息结构怎么变?

多频道订阅本身不会改变 Redis 消息的原始格式,但 redis.PubSub 对象返回的每条消息变成一个字典,且 type 字段不再只是 "message" —— 还可能出现 "pmessage"(模式匹配)、"subscribe"、"unsubscribe" 等控制消息。你如果只检查 msg["type"] == "message",会漏掉实际数据,也会误把订阅确认当业务消息处理。

实操建议:

  • 必须先判断 msg["type"],只对 "message" 和 "pmessage" 做业务解析
  • "message" 类型下,msg["channel"] 是 bytes 类型(如 b"chat:room1"),需 decode;msg["data"] 同理
  • 用 ignore_subscribe_messages=True 初始化 PubSub 可自动过滤 "subscribe"/"unsubscribe",省去手动判断

用 psubscribe 订阅模式时,如何区分不同频道的实际来源?

当你用 psubscribe("chat:*", "log:err*"),所有匹配消息都走 "pmessage" 类型,但 msg["channel"] 是原始发布频道名(如 b"chat:room123"),而 msg["pattern"] 才是匹配所用的模式(如 b"chat:*")。很多人误把 msg["channel"] 当成模式,结果路由错逻辑。

实操建议:

  • 解析时优先看 msg["pattern"] 判断归属哪类业务流,再用 msg["channel"] 做二级分发
  • 避免在回调里硬编码频道前缀,比如不要写 if b"chat:" in msg["channel"] —— 模式匹配已由 Redis 完成,重复判断冗余且易错
  • 若需同时支持精确频道 + 模式订阅,务必在 listen() 循环中统一 dispatch,别拆成两个独立 PubSub 实例(连接和缓冲不共享,会丢消息)

并发多频道订阅下,get_message() 和 listen() 哪个更稳?

get_message() 是非阻塞轮询,适合嵌入已有事件循环(如 asyncio 或 Flask worker);listen() 是阻塞迭代器,底层调 socket.recv(),一旦连接抖动或服务器断连,容易卡死或抛出 ConnectionError,且无法设超时。多频道场景下,后者更难做优雅降级。

实操建议:

  • 生产环境一律用 get_message(timeout=0.1),配合 while 循环 + 异常捕获
  • 每次调用后检查返回值是否为 None(无新消息),不要直接解包
  • 遇到 ConnectionError 或 TimeoutError,应重建 PubSub 实例并重订阅(Redis 不保证断线期间的消息可达)
  • 别在 listen() 里加 try/except 包裹整个 for 循环 —— 错误发生时迭代器已失效,继续 next() 会报 StopIteration 或静默失败

JSON 数据混在不同频道里,解析失败怎么定位?

常见错误现象:json.loads(msg["data"]) 报 UnicodeDecodeError 或 JSONDecodeError,但打印 msg["data"] 看着像正常字符串。根本原因是:有些发布方用 publish("chan", {"a":1}) 直接发 dict(redis-py 自动序列化为字符串),有些用 publish("chan", json.dumps({...})),还有些用 msgpack —— 频道之间协议不统一。

实操建议:

  • 在订阅端不做“尽力解析”,而是严格约定:所有频道数据必须是 UTF-8 编码的 JSON 字符串,其他格式拒收
  • 统一加一层解析 wrapper:
def safe_json_loads(data):
    if isinstance(data, bytes):
        data = data.decode("utf-8")
    try:
        return json.loads(data)
    except (UnicodeDecodeError, json.JSONDecodeError) as e:
        logger.warning("bad payload on %s: %r, err=%s", msg["channel"], data[:100], e)
        return None

真正麻烦的是——不同团队维护不同频道,协议演进不同步。上线前必须核对每个频道的发布方序列化方式,光看文档没用,得抓包或打日志验证。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
flask框架如何搭建
flask框架如何搭建

搭建步骤:1、安装Python和Pip;2、创建虚拟环境;3、安装Flask;4、创建Flask应用;5、运行应用;6、访问应用。想了解更多flask框架的相关内容,可以阅读本专题下面的文章。

2024.06.27

4075

8

Python Flask框架
Python Flask框架

本专题专注于 Python 轻量级 Web 框架 Flask 的学习与实战,内容涵盖路由与视图、模板渲染、表单处理、数据库集成、用户认证以及RESTful API 开发。通过博客系统、任务管理工具与微服务接口等项目实战,帮助学员掌握 Flask 在快速构建小型到中型 Web 应用中的核心技能。

2025.08.25

6264

10

Python Flask Web框架与API开发
Python Flask Web框架与API开发

本专题系统介绍 Python Flask Web框架的基础与进阶应用,包括Flask路由、请求与响应、模板渲染、表单处理、安全性加固、数据库集成(SQLAlchemy)、以及使用Flask构建 RESTful API 服务。通过多个实战项目,帮助学习者掌握使用 Flask 开发高效、可扩展的 Web 应用与 API。

2025.12.15

316

16

json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2023.08.07

2235

5

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.23

3582

1

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

2023.10.13

1196

3

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

2025.09.10

4139

7

while的用法
while的用法

while的用法是“while 条件: 代码块”,条件是一个表达式,当条件为真时,执行代码块,然后再次判断条件是否为真,如果为真则继续执行代码块,直到条件为假为止。本专题为大家提供while相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.25

354

5

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1838

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习