如何解决Redis集群中某些节点CPU使用率达到100%_排查Hot Key热点数据分布情况

P粉602998670

P粉602998670

2026-07-03

827人浏览

原创

确认热key导致cpu倾斜需三步:先用info replication确认高cpu节点为主节点,再比对instantaneous_ops_per_sec和keyspace_hits率,最后通过slowlog get、--hotkeys或tcpdump抓包定位高频key。

如何解决redis集群中某些节点cpu使用率达到100%_排查hot key热点数据分布情况

Redis集群中个别节点CPU 100%,八成是热Key打在了那个分片上——不是配置问题,也不是硬件瓶颈,而是请求分布严重失衡。

怎么确认是不是热Key导致的CPU倾斜

先别急着改配置或扩容。Redis集群的CPU不均,和单机CPU高有本质区别:它往往表现为「某个主节点CPU长期95%+,其他节点才20%」,此时top -Hp [pid]看到的主线程占比必然接近100%,且redis-cli info statsinstantaneous_ops_per_sec在该节点远高于其他节点(比如 8w vs 3k)。

关键判断依据:

  • redis-cli -c -h [hot_node_ip] -p [port]连上高CPU节点,执行info replication确认它是主节点(role:master),排除从节点同步拖累的干扰
  • 对比各节点的keyspace_hits / keyspace_misses比值,热Key节点通常命中率极高(>99.5%),但used_cpu_user持续飙升
  • 检查redis-cli --cluster check [any_node]输出,看slot分配是否均匀;若热点Key集中在某几个slot,而这些slot又全落在同一主节点上,就坐实了热Key分布问题

如何快速定位具体是哪个Key在扛流量

monitor在CPU已100%时基本失效——它本身要走主线程事件循环,输出会卡顿、滞后甚至丢命令。真正有效的办法是结合slowlog和客户端采样:

Redis 8.2.3
Redis 8.2.3

Redis 8.2.3 是一款安全优先的高性能键值存储系统。该版本紧急修复了可能引发远程代码执行(RCE)的高危漏洞(CVE-2025-62507),并解决了 HyperLogLog 及 Cuckoo Filter 等数据结构在特定场景下的崩溃问题。建议所有用户立即升级,以保障生产环境的系统稳定与数据安全。

下载
  • 在高CPU节点上执行slowlog get 10,重点看耗时长(>10ms)且调用频次高的命令,如GET hot_user:123456HGETALL product_rank——这些就是嫌疑Key
  • redis-cli --hotkeys(Redis 4.0+)直接获取统计出的热Key列表,但注意它依赖LFU计数器,需提前开启maxmemory-policy allkeys-lfuvolatile-lfu
  • 更准的方式是抓包:在客户端侧用tcpdump -i any port 6379 -w redis.pcap捕获一段时间的流量,再用redis-faina或自写脚本解析,按Key聚合请求次数

热Key确认后,为什么不能直接删或设过期

热Key不是“坏数据”,而是业务刚需。强行DEL或加短过期(如EXPIRE hot_user:123456 10)会引发两个后果:

  • 缓存穿透:大量请求瞬间打到后端DB,可能压垮下游
  • 雪崩式重载:Key过期后,所有并发请求同时重建缓存,造成Redis CPU二次尖峰
  • 集群内仍不均:即使删了,如果业务逻辑没改,新生成的Key还是落到同一个slot(比如hot_user:{id}哈希后始终进slot 5432)

所以必须从访问路径入手:要么拆Key(如hot_user:123456:profilehot_user:123456:stats),要么加前缀扰动哈希(如hot_user:123456:shard_{rand%4}),让请求分散到不同节点。

SCAN代替KEYS只是基础,热Key治理要跨层协同

很多人以为把KEYS *换成SCAN就万事大吉,但热Key问题根本不在遍历方式,而在「单个Key被高频读写」。真正要做的不是规避命令,而是重构访问模型:

  • 读多写少场景:对热Key启用本地缓存(如Caffeine),降低Redis访问频次;但要注意一致性,可用PUBLISH/SUBSCRIBE广播失效消息
  • 写密集场景(如计数器):用INCRBY hot_counter:{shard_id}分片,最后聚合;避免所有写都挤在hot_counter:total一个Key上
  • 业务强依赖全局热Key(如首页banner):前端加随机延迟(100~500ms抖动)错峰请求,或服务端加队列削峰(如用Redis List + Worker消费)

最容易被忽略的一点:热Key识别必须结合时间窗口。一个Key在秒杀开始后1分钟内QPS冲到5万是热Key,但活动结束后的QPS跌到50,它就不再是问题——监控工具若只看历史峰值,会误导优化方向。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

1907

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

1579

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

2524

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

518

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

525

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

2511

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

943

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

689

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

2419

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习

Redis+MySQL数据库面试教程
Redis+MySQL数据库面试教程

共72课时 | 9万人学习