如何通过Redis AOF日志进行故障回溯分析_使用第三方解析器转换AOF为JSON格式

P粉602998670

P粉602998670

2026-06-05

531人浏览

原创

不能直接用 cat 或 grep 查看 aof 文件,因其采用 resp 协议编码的二进制友好格式(如 *n、$m、\r\n),导致 cat 输出不可读,grep 易误匹配长度字段而非真实命令。

如何通过redis aof日志进行故障回溯分析_使用第三方解析器转换aof为json格式

为什么不能直接用 cat 或 grep 查看 AOF 文件

AOF 文件不是纯文本日志,而是按 RESP 协议编码的二进制友好格式:每条命令前有 *N 表示参数个数,$M 表示后续字段长度,结尾必须是 \r\n。直接 cat appendonly.aof 会看到大量不可读的 $3\r\nSET\r\n$4\r\nname\r\n 混合内容;grep SET 更可能匹配到长度字段(比如 $3 中的 SET 字符串)而非真实命令,结果完全不可信。

waoffle 是目前最实用的 AOF 解析工具

它能把原始 AOF 流准确还原成人类可读的 Redis 命令行,且支持管道过滤和重定向。安装后执行:
waoffle appendonly.aof > commands.txt
输出类似:
SELECT 0
SET user:1001 "original"
EXPIRE user:1001 3600
DEL user:1001

关键点:

  • 不依赖 Redis 进程运行,离线解析,安全
  • 自动处理多参数命令(如 HSET, LPUSH),不会把 $5\r\nfield1\r\n$3\r\nval\r\n 拆错行
  • 对模块命令(如 JSON.SET)也支持,只要 Redis 版本与 waoffle 兼容(v2.0+ 支持 Redis 7.0)
  • 若需进一步转 JSON,可用 awkjq 处理输出的命令行,例如:
    waoffle appendonly.aof | awk '/^SET/ {print "{\"cmd\":\"SET\",\"key\":\"" $2 "\",\"val\":" $3 "}}"' | jq -s '.' > events.json

想定位某次误操作?别删 AOF,用时间戳+命令组合过滤

AOF 本身不含时间戳,但如果你开启了 appendfsync everysec 并配合系统日志(如 dmesg 或应用层打点),就能大致对齐时间窗口。更可靠的做法是:

php版微信js-sdk支付接口类
php版微信js-sdk支付接口类

php版微信js-sdk支付接口类

下载
  • 先用 waoffle 导出全部命令到文件
  • 结合业务线索缩小范围,比如误操作 key 前后常伴随 GETINCRHGETALL,用 grep -A3 -B3 "user:1001" 查上下文
  • 注意 EXPIRE/PEXPIREAT 类命令会重置过期逻辑,重放时不是“回到当时时间”,而是“按当前时间重新设过期”——所以回溯重点应是值变更链,而非时间戳
  • 如果怀疑是某次 FLUSHDBFLUSHALL 导致数据清空,直接搜这两条命令即可,它们在 AOF 中是单行明文(*1\r\n$8\r\nFLUSHDB\r\n

修复前务必确认 AOF 是否已损坏,否则解析器会静默失败

waoffle 遇到协议错误(如缺 \r\n、长度声明与实际不符)会直接退出并报错,但它不修复。真正要动手前,必须先跑:
redis-check-aof --check appendonly.aof

输出类似:
AOF analyzed: size=2456789 bytes, ok_up_to=2456000 bytes, diff=789 bytes
说明最后 789 字节损坏。此时应:

  • 立即备份:cp appendonly.aof appendonly.aof.bak
  • --fix 截断损坏尾部:redis-check-aof --fix appendonly.aof(注意:该命令会直接改原文件)
  • 再运行 waoffle —— 否则解析器可能卡死或输出乱码
  • 特别注意:如果 AOF 中含 RedisJSON.SET 等模块命令,而当前 redis-check-aof 版本未启用对应模块,它会报 Unknown command 并终止,此时需先卸载模块或换用兼容版本

真正麻烦的从来不是解析,而是你手头那份 AOF 文件是否还完整——协议层面的损坏,会让所有上层分析归零。

相关专题

更多
js正则表达式
js正则表达式

php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

2023.06.20

1857

8

js获取当前时间
js获取当前时间

JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.28

910

5

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1154

5

js是什么意思
js是什么意思

JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

2023.08.17

7910

11

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

2023.09.01

638

4

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

1234

5

Js中concat和push的区别
Js中concat和push的区别

Js中concat和push的区别:1、concat用于将两个或多个数组合并成一个新数组,并返回这个新数组,而push用于向数组的末尾添加一个或多个元素,并返回修改后的数组的新长度;2、concat不会修改原始数组,是创建新的数组,而push会修改原数组,将新元素添加到原数组的末尾等等。本专题为大家提供concat和push相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.14

1058

5

js截取字符串的方法介绍
js截取字符串的方法介绍

JavaScript字符串截取方法,包括substring、slice、substr、charAt和split方法。这些方法可以根据具体需求,灵活地截取字符串的不同部分。在实际开发中,根据具体情况选择合适的方法进行字符串截取,能够提高代码的效率和可读性 。

2023.09.21

1976

3

js生成随机数方法
js生成随机数方法

JavaScript生成随机数的方法,包括使用Math.random()方法生成指定范围内的随机整数、生成随机字符串和生成随机颜色。根据具体需求,可以选择适合的方法来生成随机数,以实现各种功能 。

2023.09.25

983

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习

Redis+MySQL数据库面试教程
Redis+MySQL数据库面试教程

共72课时 | 9万人学习