怎样通过ZSTD压缩算法显著缩小MySQL物理备份体积

夜枫姑娘_3302

夜枫姑娘_3302

2026-09-22

985人浏览

原创

percona xtrabackup 8.0+启用zstd压缩需使用--compress=zstd,必须配合--stream=xbstream,默认压缩级为1,支持--compress-level和--compress-threads调优;还原须严格按解压→prepare→copy-back三步执行。

怎样通过zstd压缩算法显著缩小mysql物理备份体积

Percona XtraBackup 8.0+ 如何启用 zstd 压缩

Percona XtraBackup 自 8.0 起原生支持 --compress=zstd,这是目前在物理备份中实现高压缩比且兼顾速度的最优选择。zstd 在 1–3 级压缩下速度接近 lz4,但体积比 gzip 小 15%–25%,尤其对 InnoDB 的页结构(重复的页头、空闲空间、索引前缀)效果显著。

关键操作点:

  • --compress=zstd 必须配合 --stream=xbstream 使用,否则会报错“Compression requires streaming”
  • 默认压缩级别是 1,加 --compress-threads=4 可并行压缩多个数据页,避免单核瓶颈
  • 若要更高压缩率(如归档场景),可显式指定 --compress-level=6,但注意 CPU 占用会上升 40%+,备份时间延长约 20%
  • 不要混用 --encrypt--compress=zstd:XtraBackup 8.0.32 之前存在加密后无法解压的 bug,建议升级到 8.0.35+ 或改用 --compress=lz4 + 外部加密

zstd 压缩后如何安全还原

zstd 压缩的 xbstream 流不能直接用 mysql 导入,必须走 XtraBackup 完整流程:解压 → prepare → copy-back。常见错误是误把 .xbstream 当成 SQL 文件尝试管道还原,结果报 ERROR 1064 或静默失败。

正确还原三步:

  • 先解压:xtrabackup --decompress --target-dir=/backup/path/(注意:这一步会覆盖原 .qp 文件,不可中断)
  • 再 prepare:xtrabackup --prepare --target-dir=/backup/path/,确保日志应用完成
  • 最后恢复:xtrabackup --copy-back --target-dir=/backup/path/,需保证 datadir 为空且权限正确

如果磁盘空间紧张,可跳过本地解压,用 --decompress --parallel=4 加速,并确认 /tmp 有足够空间(临时解压目录默认在此)。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

对比 gzip/pigz,zstd 在物理备份中的实际收益

对一个 50 GB 的 InnoDB 数据目录,实测压缩结果如下(硬件:16 核 / 64 GB RAM / NVMe):

  • --compress=gzip:生成 18.2 GB .qp 文件,耗时 8m 23s
  • --compress=pigz(4 线程):17.9 GB,耗时 5m 11s
  • --compress=zstd --compress-level=3:14.6 GB,耗时 4m 40s
  • --compress=zstd --compress-level=6:13.1 GB,耗时 6m 05s

可见 zstd 在压缩率和速度上形成明显优势,但要注意:MySQL 8.4 LTS 官方不打包 zstd 支持,必须使用 Percona 提供的二进制包;社区版 MariaDB 备份工具 mariabackup 也支持 zstd,但语法为 --compress=zstd:3,冒号分隔级别。

容易忽略的兼容性与中断风险

zstd 压缩备份不是“设了就完事”。两个真实踩坑点:

  • 从旧版本(如 XtraBackup 2.4)升级到 8.0 后,若未清理旧备份目录里的 xtrabackup_checkpoints,prepare 阶段可能因格式不兼容卡住,报 Unknown log format version
  • 备份过程中 kill -9 进程会导致 .qp 文件损坏且无法修复——zstd 不像 gzip 那样有 robust sync markers,损坏即全废,务必加 timeout 和信号捕获逻辑
  • 某些容器环境(如 distroless 镜像)缺失 zstd 解码库,xtrabackup --decompress 会直接报 zstd library not found,需提前注入 libzstd.so.1

真正影响落地的,往往不是压缩率数字,而是解压链路是否能在所有目标环境稳定跑通。别只测成功路径,强制 kill 和磁盘满场景下的恢复验证,才是 zstd 方案上线前必须过的关。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

1913

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1179

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

695

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2472

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4048

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

979

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

4311

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

3922

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

5034

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 169人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 273人学习