Redis集群扩容时数据倾斜必然发生,关键在于定位原集群已存在的Hash Tag滥用、bigkey集中或slot分配不均问题;必须先执行cluster check、逐节点对比slots与dbsize、扫描bigkeys/hotkeys,再谨慎配置reshard参数,迁移后需同步验证内存与QPS分布。

扩容时数据倾斜不是“会不会出现”,而是“在哪出、怎么出”
Redis集群从3节点扩到4节点,必然触发槽位重分配,但迁移过程本身不会自动规避倾斜——如果原集群已存在Hash Tag滥用、bigkey集中或slot分配不均,扩容反而会把问题放大。真实场景中,80%的扩容后倾斜,根源在迁移前就埋下了。
用redis-cli --cluster reshard前必须做的三件事
别直接敲命令。先确认当前槽分布是否健康,否则迁移只是把歪的槽位复制一份再搬过去:
- 执行
redis-cli --cluster check 192.168.1.101:6379,看输出里有没有*** ERROR ***或WARN(比如某个节点slots: 5462而其他只有5461,差1个槽都可能因bigkey导致内存差2GB) - 对每个节点单独跑
redis-cli -h {ip} -p {port} cluster slots | wc -l,对比各节点管理的槽段数量;再结合redis-cli -c -h {ip} -p {port} dbsize看实际键数是否匹配——槽多但键少?说明有大量空槽;槽少但键多?大概率Hash Tag把一堆键钉死在一个槽里 - 用
redis-cli --bigkeys和redis-cli --hotkeys分别扫一遍所有节点,标记出user:{1000}:profile这类高频bigkey,它们会在迁移中被整块搬走,成为新节点的“定时炸弹”
redis-cli --cluster reshard迁移时最容易踩的三个参数坑
默认参数在生产环境几乎必出问题,尤其业务高峰期:
-
--cluster-pipeline:默认值是10,但实际应设为50-100。设太小(如10)会导致迁移耗时翻倍;设太大(如500)会让目标节点网络缓冲区打满,触发READONLY You can't write against a read only replica错误(即使目标是主节点,内部迁移通道也会临时降级) -
--cluster-timeout:默认15000毫秒,但大bigkey迁移一次可能超20秒。必须调高到60000,否则迁移中断后状态卡在migrating,新写入会失败并报MOVED重定向异常 -
--cluster-threshold:默认1,意思是“只要节点间槽差超过1%就触发平衡”。扩容时别信它——它可能把本该均匀分给4个节点的5461个槽,强行拆成1365/1365/1365/1366,结果最后一个槽段里塞了全部log:{error}类热key,新节点CPU立刻飙到95%
迁移后验证倾斜是否真的解决,只看used_memory_human是错的
内存用量均衡 ≠ 数据分布均衡。一个节点内存低,可能只是它没分到bigkey,但QPS却扛着全集群70%的读请求:
- 必须对比各节点的
redis-cli -h {ip} -p {port} info memory | grep used_memory_human和info stats | grep instantaneous_ops_per_sec两个指标,如果A节点内存是B节点的1.2倍但OPS是B的3倍,那就是典型的HotKey访问倾斜 - 用
redis-cli -c -h {any_node} cluster countkeysinslot {slot_id}抽查迁移后新节点上随机10个槽的键数,若标准差 > 平均值的3倍,说明Hash Tag没改,只是把原来倾斜的槽换了个地方继续倾斜 - 重点检查那些被迁移走的槽:用
cluster getkeysinslot {slot_id} 100拉出key样本,看是否还存在order:{202404}:list这种月粒度硬编码tag——这种key在扩容后只会更热,因为所有新订单都往新节点写
真正难的不是执行reshard,而是判断哪些槽该迁、哪些key该提前改名。迁移命令只是手术刀,切哪一刀,得靠countkeysinslot和getkeysinslot这两把镊子先把病灶夹出来。











