Linux如何查看具体的文件系统同步写入导致的性能瓶颈分析

小强同学_4294

小强同学_4294

2026-09-03

861人浏览

原创

同步写入卡顿无法通过iostat的%util或await定位,因其阻塞发生在内核vfs层或日志提交阶段,进程处于d状态,而iostat仅统计设备实际处理的i/o,不反映内核路径等待。

linux如何查看具体的文件系统同步写入导致的性能瓶颈分析

同步写入(sync write)导致的性能瓶颈,不能靠 iostat 的 %util 或 await 直接定位——它反映的是设备层负载,而 sync 写入卡在内核 vfs 层或日志提交阶段时,磁盘指标可能正常,但应用线程却卡在 UNINTERRUPTIBLE(D 状态)。

为什么 iostat -x 1 看不到 sync 写入卡顿

同步写入要求数据真正落盘(或至少 journal 提交完成),内核会阻塞调用线程直到完成。此时进程状态是 D(不可中断睡眠),iostat 只统计设备实际处理的 I/O,不体现内核路径上的等待。常见现象包括:

  • 应用日志里频繁出现 write() returned -EAGAIN 或超时,但 iostat 显示 %util
  • ps aux 中大量进程状态为 D,且 WCHAN 列显示 __io_wait、ext4_sync_file 或 jbd2_log_wait_commit
  • 写入吞吐量远低于磁盘理论带宽,iotop 却看不到高 I/O 进程

用 pidstat -d 1 和 ps 定位 sync 写入阻塞点

重点不是看“谁在读写”,而是看“谁在等写完成”。pidstat -d 默认只统计实际发出的 I/O,需配合状态过滤:

CMIC Skill Scanner (Linux ARM64)
CMIC Skill Scanner (Linux ARM64)

使用 auto、native 或 external 引擎审计待安装的 skill 包或归档,并可选启用 LLM 语义分析。

下载
  • 运行 pidstat -p ALL -d 1,观察 Blk_writ/s 低但 %CPU 高的进程 —— 这类进程很可能在反复重试 sync 写入
  • 立即执行 ps -eo pid,comm,wchan:20,state,ppid,%cpu,%mem,etimes --sort=-etimes | head -20,重点关注 state=D 且 wchan 含 ext4、jbd2、__sb_start_write 的进程
  • 对可疑 PID 执行 cat /proc/<pid>/stack</pid>,确认栈顶是否为 ext4_sync_file、log_wait_commit 或 generic_file_write_iter

检查 ext4/xfs 日志与挂载选项是否放大 sync 开销

sync 行为受文件系统类型和挂载参数直接影响,同一 workload 在不同配置下延迟可差 10 倍:

  • ext4 下,data=journal 模式强制所有写入先写 journal,再写 data block,sync 路径最长;data=ordered(默认)只 journal 元数据,但 sync 仍需等元数据落盘;data=writeback 最快,但崩溃后一致性最弱
  • xfs 无 data= 选项,但 logbsize(日志块大小)过小(如 16k)会导致频繁日志刷盘,logbufs 过少(如 2)会加剧 commit 竞争
  • 检查当前挂载:运行 findmnt -t ext4,xfs -o SOURCE,TARGET,FSTYPE,OPTIONS,确认是否含 barrier=1(默认开启)、commit=30(影响 sync 时机)等
  • 临时验证:对测试目录 remount 加 noatime,nobarrier(仅测试!),观察 sync 延迟是否显著下降

用 perf record -e 'syscalls:sys_enter_fsync' -a sleep 10 抓 sync 热点

直接追踪 fsync/fdatasync 系统调用开销,比看平均延迟更准:

  • 运行 perf record -e 'syscalls:sys_enter_fsync' -a -g sleep 10,然后 perf report --no-children
  • 若 top 函数是 ext4_sync_file 或 xfs_file_fsync,说明瓶颈在文件系统层;若是 __x64_sys_fsync → do_fsync → filp_close,则可能是应用层频繁 close + open 导致隐式 sync
  • 注意:fsync() 调用本身不耗时,耗时在它触发的 journal 提交或 barrier 刷盘;所以 perf 只能定位“谁在调”,不能替代 /proc/<pid>/stack</pid> 看“卡在哪一行”

真正难的不是发现 sync 写入慢,而是区分它是被慢盘拖累,还是被日志锁、inode 锁或 page cache 回写风暴卡住——这些都得靠 /proc/<pid>/stack</pid> 和 perf 栈回溯交叉验证,而不是盯着 iostat 的数字猜。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3730

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3233

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2313

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

5550

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

5222

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3093

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2605

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

2819

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

277

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习