为什么Redis集群在进行AOF重写时会引起磁盘IO剧增_通过no-appendfsync-on-rewrite优化

秋辰君_7097

秋辰君_7097

2026-09-01

648人浏览

原创

开启no-appendfsync-on-rewrite yes可缓解aof重写期间的磁盘i/o争抢,仅在appendfsync everysec下生效,但无法解决写时复制导致的内存与系统调用开销。

为什么redis集群在进行aof重写时会引起磁盘io剧增_通过no-appendfsync-on-rewrite优化

开启 no-appendfsync-on-rewrite yes 能显著缓解 AOF 重写期间的磁盘 I/O 剧增,但仅在 appendfsync everysec 模式下生效,且不能解决写时复制(COW)导致的内存与系统调用开销。

为什么 AOF 重写会触发磁盘 I/O 剧增

根本原因不是子进程在“写新文件”本身慢,而是父子进程同时刷盘:父进程按 everysec 策略每秒调用 fsync(),子进程重写时也在持续 write() 临时 AOF 文件。两者共用同一块磁盘(尤其是机械盘或混用分区),I/O 队列迅速堆积,Asynchronous AOF fsync is taking too long 日志频繁出现,进而拖慢主线程响应。

典型表现包括:redis-cli --latency 出现毫秒级毛刺、监控中 used_memory_rss 在重写开始后快速上涨、INFO persistence 显示 aof_buffer_length 长期 >1MB。

  • 子进程写临时文件 + 父进程每秒 fsync() → 双重 I/O 压力
  • 若 AOF 文件和系统日志、RDB 或其他服务共用一块 HDD,争抢更剧烈
  • auto-aof-rewrite-percentage 设得过低(如 30)会导致重写太频繁,I/O 毛刺常态化

no-appendfsync-on-rewrite 的真实作用与限制

这个配置不是“关掉父进程的 AOF 写入”,而是让父进程在重写进行中跳过 fsync() 调用,只做 write() 到内核 page cache,等重写结束后再恢复每秒刷盘。它缓解的是 I/O 调度冲突,不是内存拷贝或 fork 开销。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 仅对 appendfsync everysec 生效;always 下强制同步,no 下本就不刷盘
  • 启用后,极端宕机场景最多丢失 2 秒数据(上一个 everysec 周期 + 当前重写期间未刷盘部分)
  • 不会降低 used_memory_rss 上涨速度,也不能阻止 COW 导致的延迟升高
  • 必须配合 vm.overcommit_memory=1,否则 fork() 可能失败,重写直接卡住

比 no-appendfsync-on-rewrite 更关键的实操动作

很多人开了这个参数就以为问题解决,但实际线上卡顿往往来自更底层的协同问题:

  • 启用 aof-rewrite-incremental-fsync yes:默认子进程攒够 32MB 才 fdatasync() 一次,改成增量刷盘(每 32KB 就同步),避免单次 I/O 峰值打爆队列
  • 把 appendfilename 指向独立 SSD 分区,和 RDB、系统日志物理隔离
  • 禁止重写期间执行 BGREWRITEAOF 或 BGSAVE —— 多个 fork 叠加会让 COW 和内存压力翻倍
  • 调大 aof-rewrite-min-size(如从 64mb 改为 256mb),减少小文件重写频次,尤其适用于日增 AOF 超 1GB 的业务

怎么确认优化真正起效

不能只看配置是否写进 redis.conf,得盯住三个指标:

  • 用 redis-cli INFO persistence 观察 aof_rewrite_in_progress 为 1 时,aof_buffer_length 是否不再持续 >512KB
  • 用 cat /proc/$(pidof redis-server)/status | grep VmRSS 对比重写前后 RSS 增速是否变平缓
  • 临时跑 strace -p $(pidof redis-server) -e trace=fsync -T 2>&1 | grep fsync(仅调试),确认重写期间 fsync() 调用频率是否归零(注意:勿长期运行)

重写慢从来不是单一环节的问题,是内存分配、页表拷贝、磁盘调度、内核参数和 Redis 配置共同耦合的结果。调一个参数容易,但漏掉 vm.overcommit_memory 或混用磁盘,再好的配置也白搭。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
append用法
append用法

append是一个常用的命令行工具,用于将一个文件的内容追加到另一个文件的末尾。想了解更多append用法相关内容,可以阅读本专题下面的文章。

2023.10.25

598

4

python中append的用法
python中append的用法

在Python中,append()是列表对象的一个方法,用于向列表末尾添加一个元素。想了解更多append的更多内容,可以阅读本专题下面的文章。

2023.11.14

1476

8

python中append的含义
python中append的含义

本专题整合了python中append的相关内容,阅读专题下面的文章了解更多详细内容。

2025.09.12

2144

8

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4229

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3735

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

6692

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

623

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

736

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6242

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习