如何实现Redis集群的自动化巡检与预警_结合Shell脚本与钉钉机器人API实现报警

落强君_6196

落强君_6196

2026-06-25

787人浏览

原创

最轻量健康检查命令是redis-cli -c -h {host} -p {port} cluster nodes,需检查connected状态、fail?标记及ping-sent/pong-recv时间差是否超5000ms。

如何实现redis集群的自动化巡检与预警_结合shell脚本与钉钉机器人api实现报警

Redis集群健康检查该用哪些命令

直接连任意节点执行 redis-cli -c -h {host} -p {port} cluster nodes 是最轻量的方式,它能一次性拿到所有节点角色、连接状态、槽位分配和从节点偏移量。别用 INFO replication 单独查每个节点——集群模式下主从关系是动态的,靠单点信息容易误判。

关键要看三类字段:connected(必须全为 connected)、fail?(不能出现)、ping-sent/pong-recv 时间差(超过 5000ms 就要告警)。如果返回里有 fail 或 noaddr,说明节点已失联或配置错误。

  • 避免在脚本里硬编码节点列表,用 cluster nodes 动态解析更可靠
  • 加 --raw 参数输出纯文本,方便 awk 处理,不带它会混入 ANSI 颜色字符
  • 超时必须设,比如 redis-cli -c -h x.x.x.x -p 6379 --scan-timeout 2000 cluster nodes,否则网络抖动时脚本卡死

Shell脚本怎么判断集群是否“脑裂”

脑裂不是靠一个命令能直接标定的,得交叉验证:先查 cluster nodes 输出中是否有多个节点自称 master 且拥有重叠槽位;再比对各主节点的 cluster info 中 cluster_state 是否都为 ok,以及 cluster_slots_assigned 总和是否等于 16384。

常见误判点:某节点短暂断连后重连,但槽位未同步完成,此时 cluster_state: ok 但 cluster_slots_pfail > 0。这类情况要单独抓出来,不能只看 ok 就放行。

  • 用 awk '/^[0-9a-f]+ [^ ]+ [^ ]+ [^ ]+ [^ ]+ master|slave/ {print $1,$3,$9}' 提取节点 ID、IP:PORT、状态
  • 用 grep -c 'master.*[0-9]\+-[0-9]\+' 统计实际负责槽位的主节点数,少于预期数就触发预警
  • 从 cluster info 解析 cluster_known_nodes 和 cluster_size,两者不等说明元数据不同步

钉钉机器人发告警要注意哪些字段

钉钉 Webhook 必须带签名(timestamp + sign),否则 403。签名算法是 base64(hmac-sha256(timestamp + "\n" + secret, secret)),Shell 里得用 openssl dgst -sha256 -hmac 配合 date +%s%3N 生成毫秒级时间戳。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载

消息体推荐用 markdown 类型,标题加 ## [CRITICAL] 能让手机端一眼识别严重等级。别发纯 text——钉钉对 text 消息限长 2000 字,而 cluster nodes 全量输出可能超长,容易截断。

  • 告警内容里必须包含出问题的节点 IP:PORT 和故障类型(如 node disconnected / slot overlap)
  • 用 curl -X POST -H 'Content-Type: application/json' -d '{...}' https://oapi.dingtalk.com/robot/send?access_token=xxx 发送,不要漏 -H 头
  • 测试阶段把 access_token 放环境变量里,别写死在脚本中,防止误提交到代码库

定时巡检脚本怎么避免重复告警

每分钟跑一次脚本,但同一问题连续告警毫无意义。最简方案是加本地状态文件:每次检查完把当前异常节点列表写入 /tmp/redis_alert_state,下次运行前用 diff 对比,只有新增异常才发钉钉。

注意状态文件权限,别让其他用户可读,里面可能含 Redis 连接地址。另外,脚本退出码要规范:0 表示一切正常,1 表示发现异常但已处理(如仅记录未告警),2 表示已发出告警——这样配合 crontab 的日志或监控系统能更好追踪。

  • 用 date -d '10 minutes ago' +%s 判断上一次告警是否过期,避免因机器重启导致状态丢失后疯狂补发
  • 状态文件建议用 printf '%s\n' $nodes | sort > /tmp/redis_alert_state,排序后 diff 更稳定
  • 脚本开头加 set -e,任何命令失败立即退出,防止后续逻辑在错误状态下继续执行

真正难的是区分瞬时抖动和真实故障——比如网络闪断导致 ping-sent 延迟飙升,但 3 秒后自动恢复。这类情况需要至少两次间隔检查确认,而不是单次命中就发告警。

大量免费API接口:立即使用
涵盖生活服务API、金融科技API、企业工商API、等相关的API接口服务。免费API接口可安全、合规地连接上下游,为数据API应用能力赋能!

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4289

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3775

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

6852

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

623

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

736

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6462

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1140

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1016

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

5758

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
尚观shell视频教程
尚观shell视频教程

共8课时 | 1.9万人学习

Linux开发视频教程
Linux开发视频教程

共18课时 | 4.6万人学习