怎么在多服务器中查找占用空间最大的表_跨实例空间容量分析

落芳大大_8102

落芳大大_8102

2026-07-10

788人浏览

原创

查MySQL表大小不能只依赖information_schema.tables,因其data_length和index_length是估算值;真实磁盘占用需结合innodb_file_per_table配置,通过扫描.ibd文件(或ibdata1)并排除日志、临时文件等干扰项来准确获取。

查 MySQL 表大小不能只看 information_schema.tables

因为 information_schema.tables 里 data_length 和 index_length 是估算值,尤其在 innodb 表启用 innodb_file_per_table=off 时,所有表共用 ibdata1,这些字段会显示为 0 或严重失真。真实磁盘占用得看物理文件大小。

  • 优先用 SELECT table_schema, table_name, round((data_length + index_length) / 1024 / 1024, 2) AS mb FROM information_schema.tables WHERE table_schema NOT IN ('mysql','information_schema','performance_schema','sys') ORDER BY mb DESC LIMIT 10; 快速筛查——但仅当 innodb_file_per_table=ON 且未用压缩/页压缩时结果才可信
  • 跨实例比对前,先确认各实例的 innodb_file_per_table 值:SHOW VARIABLES LIKE 'innodb_file_per_table';,值为 OFF 的实例必须跳过该 SQL,改用文件系统层分析
  • 如果表启用了 ROW_FORMAT=COMPRESSED 或 KEY_BLOCK_SIZE,data_length 会反映压缩后大小,但磁盘上实际占用可能更小(取决于文件系统块对齐),此时 SQL 结果反而比物理大小还小

Linux 下批量获取 MySQL 数据目录中表文件大小

直接扫 /var/lib/mysql/*/ 下的 .ibd 文件最可靠,尤其适合 innodb_file_per_table=ON 场景。注意区分表名和数据库名嵌套路径,别漏掉分区表产生的子目录。

  • 进主数据目录执行:find /var/lib/mysql -name "*.ibd" -type f -printf "%s %p\n" | sort -nr | head -20 | awk '{print $1/1024/1024 " MB\t" $2}'
  • 分区表的 .ibd 文件可能在 /var/lib/mysql/dbname/tablename#P#p0.ibd 这类路径下,上面命令能覆盖;但若用 mysqld --datadir 指定了非默认路径,得先用 mysql -e "SELECT @@datadir;" 确认真实路径
  • 遇到权限拒绝,别直接加 sudo find——MySQL 进程用户(如 mysql)可能限制了文件可见性,应切换到该用户执行:sudo -u mysql find ...

跨服务器汇总时别忽略 ibdata1 和 ib_logfile* 的干扰

当某台 MySQL 实例 innodb_file_per_table=OFF,所有表数据都挤在 ibdata1 里,这时单看 .ibd 文件会完全漏掉真实主力占用。而 ib_logfile* 虽然属于日志,但常被误当成“可删”大文件参与容量统计,导致误判。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 检查 ibdata1 大小:ls -lh /var/lib/mysql/ibdata1;若远大于所有 .ibd 总和,说明该实例必须单独处理:无法按表粒度定位,只能整体优化或迁移
  • ib_logfile0 和 ib_logfile1 大小由 innodb_log_file_size 决定,是固定循环写入的日志,不随表增长——跨实例比容量时应排除它们,否则高并发实例会因日志大而“虚假上榜”
  • 临时表空间 ibtmp1 可能暴涨(尤其大量排序/JOIN),但它会在 MySQL 重启后清空,不属于持久表容量,也建议过滤

Python 脚本一键拉取多实例表大小并排序

手动 ssh 登每台机器太慢,用 Python + paramiko 批量执行 find 命令再合并排序最省事。关键是把不同实例的路径、用户、过滤逻辑封装进配置,避免硬编码。

  • 核心命令保持简洁:find {datadir} -name "*.ibd" -type f -printf "%s %p\n" 2>/dev/null | head -5000(加 head 防止超大实例卡死)
  • 脚本里对每行输出做 os.path.basename() 提取表名,用 os.path.dirname() 截出库名,再正则清洗掉分区后缀(如 #P#p0),才能按逻辑表归并
  • 注意时区与 SSH 连接超时:某些旧版 MySQL 服务器时间不准,paramiko 默认 timeout 是 10 秒,遇到慢盘 I/O 容易中断,建议设成 timeout=60

真正麻烦的不是查大小,而是查完发现:同一张表在 A 实例占 50GB,在 B 实例只有 2GB——这时候得立刻去看 pt-table-checksum 或 binlog 位点,大概率是主从延迟、删表没同步、或者某边开了 innodb_stats_persistent=OFF 导致统计信息失效。这些细节不核对,光排大小顺序没意义。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

437

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

880

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2672

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

896

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

789

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

414

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2416

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

4452

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

727

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 178人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 283人学习