真IO瓶颈需用iostat -x 1看%util≥95%且await>100ms,结合iotop -oP定位高写进程,再用lsof -p查具体文件,dmesg验内核干预,smartctl查硬盘健康,并注意云环境共享存储干扰。

确认是不是真IO瓶颈,别被面板曲线骗了
宝塔面板【监控】→【磁盘IO】里那条红色曲线跳得高,不等于硬盘真扛不住——它只画趋势,不告诉你“谁在狂写”。iostat -x 1才是照妖镜:盯住%util(持续≥95%才算饱和)和await(稳定>100ms说明请求排队严重)。如果%util才60%但await飙到2000ms,大概率是小文件随机写(比如日志刷屏),不是吞吐量问题。
- 误判常见点:SSD上
%util常偏低但await高,因队列深度大;HDD则两者容易同步拉满 - 别只看
/dev/vda1,用lsblk确认主分区挂载点,有些IO压在/tmp或/www/wwwlogs所在独立磁盘上 -
iostat -d -x -k 2比iostat -x 1更稳,避免单次采样抖动干扰判断
用iotop -oP揪出真凶进程
iotop不是装完就灵——必须加-oP:-o过滤静默进程,-P只显示实际在读写的进程(否则php-fpm空闲子进程也刷屏)。重点关注DISK WRITE列,单位是KB/s,>5MB/s就值得查;同时看IO>列(I/O等待占比),>90%说明这进程基本卡在等磁盘。
- 常见背锅侠:
mysqld(慢查询刷redo log)、php-fpm(错误日志狂打)、bt_backup(未限速的自动备份)、nginx(access.log未轮转+高并发写) - 陷阱:看到
rsync或cp别急着杀,先ps -fp [PID]看命令全路径,可能是你手动触发的合法同步 - 按
R键可实时按IO降序,按P暂停,截图时别漏掉COMMAND列里的完整路径(比如/bin/bash /www/server/panel/script/backup.sh)
顺藤摸瓜:查lsof -p [PID]定位具体文件
锁定高IO进程后,lsof -p [PID]能暴露它到底在折腾哪个文件。重点筛三类路径:/www/wwwlogs/(站点日志)、/www/server/panel/logs/(面板日志)、/tmp/(临时文件)。如果看到同一日志文件被上百个进程同时write,基本就是日志配置没开缓冲或轮转失效。
- 典型坏模式:
error.log单文件超2GB,且lsof输出里出现大量REG类型+W标志(表示正在写入) - 安全红线:别直接
rm -f正在被写的日志,用echo "" > /www/wwwlogs/xxx.log清空更稳妥 - 隐藏风险:
lsof结果里若出现/dev/shm/或/proc/[PID]/fd/下的数字文件,说明进程在用内存映射IO,需结合strace -p [PID]进一步抓系统调用
检查内核是否已出手干预
当IO堵死到一定程度,Linux内核会强制kill阻塞进程保命,这事不会在宝塔日志里记——得翻dmesg。执行dmesg | grep -i "blocked for",如果返回task mysqld blocked for more than 120 seconds,说明IO已恶化到内核级,此时光优化配置可能不够,得考虑磁盘健康或架构调整。
- 交叉验证:
journalctl -b | grep -i "io\|block"看时间戳是否和面板卡顿时段吻合 - 硬件警报:
smartctl -a /dev/vda查Reallocated_Sector_Ct,非零值且持续增长,硬盘快挂了 - 最易忽略点:云服务器上
/dev/vda可能是共享存储,同物理机其他用户IO打满也会拖垮你——这时iostat看到的%util虚高,需联系厂商确认资源隔离情况










