如何利用 tar 结合管道实现高效的网络存储迁移备份

陌伟姑娘_8670

陌伟姑娘_8670

2026-07-04

790人浏览

原创

tar配合管道可跳过本地磁盘中转,实现边打包边远程传输;通过tar -cf -与ssh组合,结合--exclude排除虚拟目录、pv显示进度、sha256sum校验及cron定时,构建高效可靠备份方案。

如何利用 tar 结合管道实现高效的网络存储迁移备份

直接用 tar 配合管道,能跳过本地磁盘中转,把数据边打包边传到远程或另一台机器,既省空间又提速。关键在于让 tar 不写入文件,而是把归档流通过管道交给 ssh 或其他工具处理。

基础远程备份:tar + ssh 直传

这是最常用也最实用的方式。源端 tar 打包,通过管道交给 ssh,目标端 ssh 接收后直接解压,全程不落地。

  • 命令结构:tar -cf - [目录] | ssh user@host "tar -xf - -C /path"
  • -f - 表示 tar 读写标准输入/输出,而不是文件;两个 - 分别代表“从 stdin 打包”和“向 stdout 解包”
  • 例如备份本地 /var/www 到远程服务器的 /backup/www:
    tar -czf - /var/www | ssh user@192.168.1.100 "mkdir -p /backup && tar -xzf - -C /backup"
  • 加 -z 表示启用 gzip 压缩,减少网络传输量;若网络带宽高、CPU 弱,可换为 -J(xz)获得更高压缩率

排除干扰目录,提升传输效率

系统里有些目录(如 /proc、/sys、/dev、/run)是虚拟文件系统,不能也不该备份;日志、缓存等临时内容也会拖慢速度、浪费带宽。

EasySub – AI字幕生成翻译工具
EasySub – AI字幕生成翻译工具

EasySub是一款在线视频字幕生成、字幕编辑和多语言翻译工具。

下载
  • 用 --exclude 显式跳过:
    tar -czf - --exclude=/proc --exclude=/sys --exclude=/dev --exclude=/run --exclude=/var/log / | ssh ...
  • 多个排除项可合并写成一行,也可用 --exclude-from=excludes.txt 把路径列表单独存文件,便于复用和维护
  • 注意:排除路径必须与 tar 实际遍历路径一致,建议在根目录下执行并用绝对路径排除

带进度与校验的可靠迁移

大容量迁移时,看不到进度容易误判卡死;缺乏校验则无法确认远端数据是否完整。

  • 加 -v 可看文件名滚动,但不显示百分比;更推荐用 pv(pipe viewer)工具:
    tar -cf - /data | pv -s $(du -sb /data | awk '{print $1}') | ssh ... "tar -xf - -C /dst"
  • 传输完成后,可在两端分别运行:
    ssh user@host "sha256sum /backup/archive.tar.gz" && sha256sum archive.tar.gz
    对比哈希值,确认一致性
  • 如果只关心结构和内容(不依赖 tar 包本身),可在远端解压后用 rsync -n -a --delete 做一次空运行比对,检查遗漏或差异

配合定时任务实现自动化归档

把管道备份封装进脚本,再交给 cron 定期执行,就能形成轻量级自动化备份链。

  • 写一个 backup.sh:
  • #!/bin/bash
    DATE=$(date +%Y%m%d_%H%M)
    tar -czf - --exclude=/proc --exclude=/sys /etc /home | ssh backup@nas "cat > /backup/full_$DATE.tar.gz"
  • 赋予执行权限:chmod +x backup.sh,再加入 crontab:
    0 2 * * * /path/to/backup.sh(每天凌晨2点执行)
  • 建议在远程端用 logrotate 或简单 shell 清理旧备份,比如保留最近7天:
    find /backup -name 'full_*.tar.gz' -mtime +7 -delete

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

437

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

920

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2912

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

976

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

869

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

454

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2656

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

4932

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

787

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.7万人学习