为什么Redis集群扩容期间容易发生穿透_迁移过程中的数据查找逻辑

冬瑶姑娘_9479

冬瑶姑娘_9479

2026-06-03

940人浏览

原创

redis集群扩容时查不到数据是因为槽迁移未完成,客户端仍按旧映射发送请求,目标节点尚未同步数据或未执行asking命令,导致返回moved/ask错误或nil;本质是客户端与服务端在迁移状态协同上的时序问题。

为什么redis集群扩容期间容易发生穿透_迁移过程中的数据查找逻辑

Redis集群扩容时为什么查不到数据

因为槽(slot)迁移过程中,目标节点尚未完成数据同步,而客户端仍按旧的哈希路由发请求,导致请求落到空节点或返回 MOVED 重定向失败。

典型现象是:部分 key 突然返回 (error) MOVED 12345 10.0.1.8:6379,但客户端没正确处理重定向,或者重定向后目标节点确实没数据——不是 bug,是迁移未完成的正常状态。

  • CLUSTER GETKEYSINSLOT 在源节点能列出 key,但 GET 这些 key 时目标节点返回 nil,说明数据还在传输中,未 apply 到目标节点的 db
  • 客户端若缓存了 slot → node 映射(比如 Jedis、Lettuce 的默认模式),不会自动刷新,需收到 ASK 响应后临时改用 ASKING 命令发请求
  • 迁移进度可通过 CLUSTER NODES 查看某节点的 importing/migrating 标志,以及 CLUSTER COUNTKEYSINSLOT <slot></slot> 对比源/目标节点数量

ASK 和 MOVED 响应的区别直接影响查找逻辑

MOVED 表示槽已永久归属新节点,客户端必须更新本地 slot 映射并重试;ASK 表示槽正在迁移中,当前请求可临时转向目标节点,但**不更新本地映射**,下一次同 slot 请求仍发给原节点。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 没加 ASKING 前缀就向目标节点发命令,目标节点会拒绝并返回 (error) ASKING required
  • Jedis 3.0+ 默认支持 ASK 自动处理,但需确认配置了 setReadFrom(ReadFrom.ASK) 或启用 clusterRedirectHandler
  • Lettuce 的 StatefulRedisClusterConnection 会自动处理 ASK,但前提是未禁用 autoReconnect 且未手动覆盖 ClusterClientOptions 中的重定向策略

为什么有些 key 在迁移中“消失”超过预期时间

不是网络或丢包问题,而是 Redis 的迁移粒度和阻塞行为导致的查找延迟:每次 MIGRATE 命令迁移一个 key,且是同步阻塞操作;大 key(如百万级 zset)会让单次迁移耗时数秒,期间该 slot 对应的所有 key 都无法被目标节点服务。

  • 迁移速度受 cluster-node-timeout、网络 RTT、目标节点内存碎片率影响,但更关键的是 migrate 命令的 COPY 和 REPLACE 参数——不加 REPLACE 时遇到同名 key 会失败,中断迁移流
  • 使用 redis-cli --cluster reshard 扩容时,默认不启用 --copy 和 --replace,容易卡在某个 key 上,建议显式加上:redis-cli --cluster reshard --copy --replace ...
  • 若业务对一致性敏感,应避免在迁移窗口期写入正在迁移的 slot,否则可能触发 LOADING 错误(目标节点正在加载 RDB 片段)

如何验证迁移中的 key 是否真丢失还是只是暂时不可见

直接连源节点和目标节点分别查,比依赖客户端日志更可靠。

  • 在源节点执行:redis-cli -h src_ip -p 6379 CLUSTER GETKEYSINSLOT <slot> 10</slot>,再逐个 GET 确认存在
  • 在目标节点执行同样命令,若返回空或 key 值为 nil,说明迁移未完成或失败;若返回 (error) LOADING Redis is loading the dataset in memory,说明 RDB 正在加载,需等待
  • 检查 INFO cluster 输出中的 cluster_stats_messages_pong_sent 和 cluster_stats_messages_ask_received 计数是否持续增长,可判断重定向链路是否通畅
迁移本身不丢数据,但查找逻辑暴露了客户端与服务端协同的脆弱点。最容易被忽略的是:**客户端是否真正理解 ASK 是一次性的临时委派,而不是 slot 归属变更信号**——混淆这点,就会在扩容中途反复查不到 key。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4109

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3575

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

6352

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

603

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

716

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

5802

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1140

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

936

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

5238

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习