SQL中如何根据文件扩展名分组统计存储空间占用情况?

陌雪君_5512

陌雪君_5512

2026-07-05

576人浏览

原创

mysql中提取文件扩展名最稳妥方法是先用reverse和locate定位最后一个点,再substring_index截取,避免substring_index(filename,'.',-1)在多点路径(如.tar.gz)下出错;需配合if判断无点情况返回'no_ext'。

sql中如何根据文件扩展名分组统计存储空间占用情况?

如何从文件路径字段提取扩展名并分组

核心在于用字符串函数剥离扩展名,不能直接 SUBSTRING_INDEXRIGHT 硬截——路径可能不含点(如 README),也可能有多个点(如 archive.tar.gz)。MySQL 8.0+ 推荐用 REGEXP_SUBSTR,5.7 及以下得靠嵌套 REVERSE + LOCATE

常见错误是写成 SUBSTRING_INDEX(filename, '.', -1),这会把 photo.jpeg 当成 jpeg,但把 my.config.json 错当成 json(实际应为 json 没错,但 .tar.gz 就挂了);更稳妥的做法是只取最后一个点之后的部分,并排除空结果:

  • SELECT IF(LOCATE('.', filename) = 0, 'no_ext', SUBSTRING_INDEX(REVERSE(filename), '.', 1)) AS ext —— 先翻转,找第一个点位置,再翻转回来
  • PostgreSQL 用 SPLIT_PART(filename, '.', -1) 更简洁,但注意它不校验点是否存在,需配合 CASE WHEN filename ~ '\.' THEN ... ELSE 'no_ext' END
  • SQLite 没原生反向函数,得用 substr(filename, instr(filename, '.') + 1),但同样会误判 name.without.dot → 空字符串,必须加 IIF(instr(filename, '.') > 0, ..., 'no_ext')

按扩展名汇总磁盘占用时的单位陷阱

表里存的大小字段通常是字节(size_bytes),直接 SUM(size_bytes) 出来数字太大,人眼难读。别在 SQL 里硬除 1024 多次换算 KiB/MiB/GiB——浮点误差和整数截断容易出错,而且不同数据库对除法处理不一致(MySQL 默认整除,PostgreSQL 会转 numeric)。

实操建议分两步:先聚合原始字节数,应用层再格式化;如果非要在 SQL 里看,用 ROUND(SUM(size_bytes) / POWER(1024.0, 2), 2) 得到 MiB,但注意 POWER 在 SQLite 不可用,得手写 / 1024.0 / 1024.0

ZenMux
ZenMux

ZenMux是一款AI大模型工具,全球首个带保险赔付机制的企业级大模型聚合平台。

下载
  • 避免写 SUM(size_bytes) / 1024 / 1024 —— MySQL 5.7 默认整除,1500000 / 1024 / 1024 = 1(不是 1.43)
  • 扩展名为空或全是空格时,GROUP BY 会把它们全归进同一组,建议提前 TRIM(ext) != '' 过滤或单独标记为 'empty'
  • 某些系统生成的临时文件扩展名含特殊字符(如 ~#tmp),别用 LIKE '%.tmp' 模糊匹配,容易误伤 mytmp.txt

性能优化:扩展名字段要不要建索引

如果只是偶尔跑统计报表,不用索引;但若每天定时执行且表超千万行,ext 字段值得单独存、单独建索引。别在查询里实时计算扩展名然后 GROUP BY —— MySQL 无法用函数索引加速(除非 8.0+ 的函数索引),会导致全表扫描。

  • 建一个生成列:ALTER TABLE files ADD COLUMN ext VARCHAR(16) STORED AS (IF(LOCATE('.', filename) = 0, 'no_ext', SUBSTRING_INDEX(REVERSE(filename), '.', 1))),再 CREATE INDEX idx_ext ON files(ext)
  • PostgreSQL 支持表达式索引:CREATE INDEX idx_ext ON files ((SPLIT_PART(filename, '.', -1))),但要注意 NULL 处理
  • 别对 filename 字段本身建前缀索引(如 INDEX(filename(10)))来加速扩展名提取——没用,因为扩展名在末尾

跨数据库兼容写法怎么取扩展名

没有银弹,但可以靠条件分支收敛逻辑。比如用 CASE WHEN 判断数据库类型再调不同函数,但多数 ORM 或调度脚本不支持;更现实的是,在应用层统一处理,SQL 只负责聚合。

  • 最简兼容方案:在 INSERT/UPDATE 时就写入 ext 字段(应用层解析一次,存下来),查询时直接 GROUP BY ext
  • 如果必须纯 SQL,MySQL 用 REVERSE 方案,PostgreSQL 用 SPLIT_PART,SQLite 用 substr + instr 组合,三者语法差异大,硬写通用 SQL 会非常丑且难维护
  • 注意大小写:Linux 下 .JPG.jpg 是不同扩展名,统计前建议统一转小写:LOWER(ext),否则 jpgJPEG 会被拆成两组

扩展名统计看着简单,真正上线时最容易卡在数据质量上——路径字段混着相对路径、绝对路径、URL、空值、乱码,先 COUNT(*) WHERE filename REGEXP '^[a-zA-Z0-9._/-]+$' 扫一遍异常值,比调优 SQL 更重要。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3723

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

791

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

969

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5501

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2503

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5500

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7161

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

970

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

852

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.1万人学习