Linux 中怎么使用 gzip 批量处理历史归档数据

星晨同学_2068

星晨同学_2068

2026-09-22

353人浏览

原创

gzip本身不支持批量归档,需先用tar打包再用gzip压缩,标准做法是tar -czf archive.tar.gz dir/或分步执行tar -cf与gzip,兼顾结构保留与体积优化。

linux 中怎么使用 gzip 批量处理历史归档数据

gzip 本身不直接支持“批量归档”(即打包多个文件),但它能高效压缩单个文件或配合 tar 实现对目录/多文件的历史数据批量处理。关键在于区分两个动作:先用 tar 归档,再用 gzip 压缩——这才是处理历史数据的标准做法。

1. 批量压缩多个文件或整个目录

不要对每个文件单独运行 gzip file1 file2 file3(这会分别生成 file1.gz、file2.gz…,不便于管理)。正确方式是:

  • tar -cf data.tar dir1/ file*.log 先把所有目标打包成一个 .tar 文件;
  • 再用 gzip data.tar 得到 data.tar.gz
  • 或者一步到位:tar -czf archive-2024.tar.gz /var/log/nginx/ /home/backups/*.sql

其中 -c 创建、-z 调用 gzip、-f 指定输出名,-v(可选)可加来查看过程。

onewo-rtlinux
onewo-rtlinux

Linux 实时编程助手。生成、审查并修改用于周期性控制任务和中断驱动程序的 C 代码。强制实施实时调度策略。

下载

2. 安全保留原始数据,避免误删

默认 gzip 会删除原文件。处理重要历史数据时,务必用 -k(keep)选项:

  • gzip -k access.log.2023-01* → 生成 access.log.2023-01*.gz,同时保留所有原始日志文件;
  • 若配合 tar,tar -czf logs-2023.tar.gz -k /var/log/app/ 不生效(-k 是 gzip 选项,tar 不识别),所以应先 tar(不删源),再 gzip -k;
  • 更稳妥写法:tar -cf logs-2023.tar /var/log/app/ && gzip -k logs-2023.tar

3. 高效处理大量小文件(如日志切片)

面对成百上千个 app-2023-01-01.logapp-2023-12-31.log 这类文件:

  • 用 shell 通配一次性处理:gzip -9 -k app-2023-*.log-9 提高压缩率,适合长期归档);
  • 若需按月分组压缩,可用循环:for m in {01..12}; do tar -czf app-2023-$m.tar.gz app-2023-$m-*.log; done
  • 注意:gzip 对单个文件压缩最快,但小文件太多时,tar+gzip 整体体积更小、管理更清晰。

4. 验证与解压已有归档包

历史数据归档后,定期验证完整性很重要:

  • 检查 .tar.gz 是否损坏:gzip -t archive.tar.gz(返回无提示 = 正常);
  • 查看包内文件列表:tar -tzf archive.tar.gz | head -20
  • 解压到指定目录(不覆盖当前路径):tar -xzf archive.tar.gz -C /restore/2023/
  • 只解压某个子路径(如只恢复 nginx 日志):tar -xzf archive.tar.gz --wildcards '*/nginx/*.log'

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

417

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

820

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2372

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

796

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

689

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

354

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2116

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

3892

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

627

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

CLion 远程开发实战
CLion 远程开发实战

共0课时 | 0人学习