Linux 系统中怎么排查文件系统日志写入过重导致的 I/O 阻塞

胖墨姑娘_8488

胖墨姑娘_8488

2026-10-19

994人浏览

原创

文件系统日志写入过重是linux中引发i/o阻塞的常见原因,需通过%wa、iostat、iotop、pidstat、lsof和strace四步定位异常日志进程、路径及同步行为。

linux 系统中怎么排查文件系统日志写入过重导致的 i/o 阻塞

文件系统日志写入过重是 Linux 中引发 I/O 阻塞的常见原因,尤其在应用频繁打日志、未做轮转或日志级别设为 DEBUG/INFO 时极易触发。排查关键不是“找哪个文件在写”,而是“确认日志行为是否异常 + 定位到具体进程和路径 + 判断是否由日志机制本身导致”。下面分四步说清楚。

看系统指标:确认是不是日志类 I/O 问题

先排除 CPU、内存等干扰,聚焦 I/O 特征:

  • %wa > 30%(top 中)且 CPU idle 很高 → 进程大量等待磁盘写入
  • iostat -x 1 显示:wkB/s 持续高位(如 >20MB/s)、await >50ms、avgqu-sz >10 → 写请求严重排队
  • load average 显著高于 CPU 核数,但 us+sy 总和很低 → 典型 D 状态进程堆积,多由同步日志刷盘引起

盯住写进程:用 iotop 和 pidstat 锁定源头

日志写入通常是持续、稳定、中低吞吐但高频率的小块写,容易被忽略:

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载
  • 运行 iotop -o -P,重点关注 DISK WRITE 列持续 >1MB/s 且 IO% 占比高的进程(如 java、python、nginx)
  • 补查 pidstat -d 1,观察 write/s 和 wkB/s 最高的 PID;若某进程 write/s 达数千次/秒,基本可断定是日志狂写
  • 注意:有些日志框架(如 Log4j 的 AsyncAppender)会隐藏在后台线程,iotop 可能只显示父进程名,需结合 ps -T -p $PID 查线程

挖日志路径:lsof + strace 验证写入目标

找到进程后,确认它到底在往哪写、怎么写:

  • lsof -p $PID | grep -E "(log|tmp|var)" → 快速筛出打开的日志文件(如 /var/log/app.log、/tmp/debug.out)
  • 重点看文件描述符状态列:w 表示写打开,u 表示读写,W 表示追加写(常见于日志)
  • 用 strace -p $PID -e trace=write,openat,fsync -s 128 2>&1 | grep -E "(write|openat|fsync)" 观察是否高频调用 fsync() 或小块 write()(如每次写 128 字节)→ 这是同步日志的典型特征

验证与收口:检查日志配置和文件系统行为

避免误判,需交叉验证是否真由日志引起:

  • 查该进程的日志配置文件(如 logback.xml、logging.conf),确认 level 是否为 INFO 或更低,appender 是否启用了 immediateFlush=true 或 sync=true
  • 用 df -h /var/log 和 df -i /var/log 排除磁盘满或 inode 耗尽(这两者也会导致 write 阻塞)
  • 临时测试:停掉该进程日志输出(如改 level=ERROR 或重定向到 /dev/null),观察 iostat 的 wkB/s 和 await 是否快速回落

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

457

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

940

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

3012

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

996

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

889

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

454

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2736

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

5112

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

807

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习