如何利用Redis发布订阅实现系统热点数据的实时更新_同步二级缓存策略

冬磊姑娘_6625

冬磊姑娘_6625

2026-06-08

607人浏览

原创

redis pub/sub 无法自动同步本地缓存,需手动解析消息并调用 invalidate()/put();推荐消息结构含 type、key、ts、v 字段,使用 lettuce 异步订阅,优先 invalidate 而非主动刷新,并依赖 ttl 和定时扫描兜底。

如何利用redis发布订阅实现系统热点数据的实时更新_同步二级缓存策略

Redis Pub/Sub 不能自动更新任何本地缓存,它只负责发字符串消息;要同步 Caffeine 或其他本地缓存,必须手动解析消息并调用 invalidate() 或 put()。

Pub/Sub 消息体设计必须带 type 和 key 字段

只发一个 ID(如 "123")或一整段 JSON 对象,是线上最常踩的坑。前者无法区分业务域("123" 是用户 ID 还是订单 ID?),后者徒增序列化开销且本地缓存往往不需要全量数据。

推荐结构固定为:

{"type":"DELETE","key":"order:456789","ts":1718234567,"v":"1"}
  • type 必须明确:只支持 "DELETE"、"UPDATE",避免收到消息后猜操作意图
  • key 必须带业务前缀,和 Caffeine 中实际使用的 cache key 完全一致(比如 Caffeine 里存的是 "order:456789",这里就不能只写 "456789")
  • ts 时间戳 + v 版本号,是做幂等去重的基础;没这两个字段,网络抖动重发就会导致缓存被反复清空

Lettuce 是比 Jedis 更适合做订阅客户端的选择

Jedis 的 JedisPubSub 是阻塞式回调,一旦丢连接或网络卡顿,整个线程就挂住——你不能把它扔进 Web 请求线程池里跑。而 Lettuce 基于 Netty,StatefulRedisPubSubConnection 支持异步监听、自动重连、连接复用。

关键配置点:

抖音实时热点榜
抖音实时热点榜

每小时追踪抖音热榜,抖音实时热点榜从创作者视角拆爆款、挖选题、预判趋势。

下载
  • 订阅必须在独立线程启动,不要和业务线程共用连接池
  • 别用 PSUBSCRIBE 监听通配符(如 "cache:*"),channel 名要收敛,例如统一用 "cache:order"、"cache:user"
  • 务必设置 setAutoReconnect(true) 和合理的 timeout,否则断网 30 秒,这期间所有变更通知就彻底丢失

收到消息后优先调用 invalidate(),而不是立刻查 DB 再 put()

看似“主动刷新”更及时,实则埋下雪崩和脏写隐患:

  • 一条 PUBLISH 可能被 10 个服务实例同时收到,如果都去查 DB,瞬间并发翻 10 倍
  • DB 查询超时或返回 null,put(null) 就污染了本地缓存,后续请求全挂掉
  • Caffeine 本身有 refreshAfterWrite,下一次请求自然触发加载,延迟可控且安全

所以标准动作链就是:SUBSCRIBE → parse JSON → if type == "DELETE" → caffeine.invalidate(key),仅此而已。

断线期间的消息完全不可恢复,得靠兜底机制补漏

Redis Pub/Sub 没 offset、不存历史、不保证送达——这是它的定位决定的,不是 bug。这意味着只要订阅连接中断超过 1 秒,那段时间的所有变更就永远丢失。

生产环境必须加两层兜底:

  • 对核心热点数据(如商品价格、库存),保留短 TTL(比如 60 秒)+ 主动刷新逻辑,哪怕 Pub/Sub 断了,最多 stale 60 秒
  • 定期(如每 5 分钟)用 SCAN 扫描 Redis 中的热点 key,比对本地 Caffeine 的 lastAccessTime,偏差过大就强制 invalidate

真正的难点不在怎么发消息,而在怎么让“消息丢了也不翻车”。Pub/Sub 只是快车道,但你得自己修应急便道。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4329

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3835

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

6972

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

623

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

736

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6642

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1160

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1036

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

5898

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习