Shell脚本自动化任务管理:备份数据库并自动清理历史文件的完整脚本

雨芳君_4871

雨芳君_4871

2026-09-02

675人浏览

原创

该脚本实现mysql数据库每日自动备份与过期清理:支持多库导出、日期命名压缩、磁盘空间检查、详细日志记录及幂等性保障,保留指定天数备份并自动删除旧文件。

shell脚本自动化任务管理:备份数据库并自动清理历史文件的完整脚本

下面是一个实用、健壮的 Shell 脚本,用于每日自动备份 MySQL 数据库,并按保留天数清理过期备份文件。它支持多数据库、自定义路径、错误检测与日志记录,适合部署在 Linux 服务器(如 CentOS / Ubuntu)的 cron 中运行。

onewo-rtlinux
onewo-rtlinux

Linux 实时编程助手。生成、审查并修改用于周期性控制任务和中断驱动程序的 C 代码。强制实施实时调度策略。

下载

核心功能说明

✅ 自动导出指定数据库(支持单个或多个)
✅ 按日期生成压缩备份(.sql.gz 格式)
✅ 保留指定天数的历史备份(如 7 天),自动删除更早文件
✅ 备份前检查磁盘空间(避免写满根分区)
✅ 记录详细日志(成功/失败/跳过/清理动作)
✅ 避免重复备份同一天文件(幂等性)

完整可执行脚本(保存为 db_backup.sh)

#!/bin/bash
# MySQL 数据库自动备份 + 历史清理脚本
# 使用前请修改下方 CONFIG 区域

########## CONFIG START ##########
DB_USER="backup_user" # MySQL 用户名(建议专用只读账号)
DB_PASS="your_secure_password" # 密码(生产环境建议用 ~/.my.cnf 避免明文)
DB_HOST="localhost" # MySQL 地址
DB_NAMES=("app_db" "blog_db") # 要备份的数据库名数组(支持多个)
BACKUP_DIR="/data/backups/mysql" # 备份存储目录(需提前创建并授权)
RETAIN_DAYS=7 # 保留最近 N 天的备份
LOG_FILE="/var/log/db_backup.log" # 日志路径
MYSQL_CMD="/usr/bin/mysqldump" # mysqldump 路径(可用 which mysqldump 确认)
GZIP_CMD="/bin/gzip" # gzip 路径
########## CONFIG END ##########

# 日志函数
log() {
echo "$(date '+%Y-%m-%d %H:%M:%S') - $1" | tee -a "$LOG_FILE"
}

# 检查必要命令是否存在
for cmd in $MYSQL_CMD $GZIP_CMD; do
if ! command -v "$cmd" &> /dev/null; then
log "ERROR: $cmd not found. Aborting."
exit 1
fi
done

# 创建备份目录(若不存在)
mkdir -p "$BACKUP_DIR"
if [[ $? -ne 0 ]]; then
log "ERROR: Failed to create backup directory $BACKUP_DIR"
exit 1
fi

# 检查磁盘空间(剩余空间
FREE_SPACE=$(df "$BACKUP_DIR" | tail -1 | awk '{print $4}')
if [[ $FREE_SPACE -lt 2097152 ]]; then # 单位 KB,2GB ≈ 2097152 KB
log "WARNING: Less than 2GB free space on $(df -h "$BACKUP_DIR" | tail -1 | awk '{print $1}'). Skipping backup."
exit 0
fi

# 生成今日时间戳(格式:YYYYMMDD)
TODAY=$(date +%Y%m%d)

# 遍历每个数据库执行备份
for DB in "${DB_NAMES[@]}"; do
BACKUP_FILE="$BACKUP_DIR/${DB}_$TODAY.sql.gz"

# 跳过已存在的当日备份(防止重复执行)
if [[ -f "$BACKUP_FILE" ]]; then
log "SKIP: Backup for $DB already exists today ($BACKUP_FILE)"
continue
fi

log "START: Backing up database '$DB'..."

# 执行 mysqldump + gzip 流式压缩(不生成中间 .sql 文件)
if $MYSQL_CMD -h"$DB_HOST" -u"$DB_USER" -p"$DB_PASS" --single-transaction --routines --triggers "$DB" 2>/tmp/dump_err | $GZIP_CMD > "$BACKUP_FILE"; then
if [[ -s "$BACKUP_FILE" ]]; then
log "SUCCESS: $DB backed up → $BACKUP_FILE ($(du -h "$BACKUP_FILE" | cut -f1))"
else
log "ERROR: $BACKUP_FILE is empty. Check MySQL user permissions or disk quota."
rm -f "$BACKUP_FILE"
fi
else
ERR_MSG=$(cat /tmp/dump_err 2>/dev/null | head -n 3 | tr '\n' ' ')
log "ERROR: Failed to dump $DB: $ERR_MSG"
rm -f "$BACKUP_FILE"
fi
rm -f /tmp/dump_err
done

# 清理过期备份(保留 RETAIN_DAYS 天)
log "CLEANUP: Removing backups older than $RETAIN_DAYS days..."
find "$BACKUP_DIR" -name "*.sql.gz" -type f -mtime +$RETAIN_DAYS -delete -print | while read f; do
log "REMOVED: $f"
done

log "FINISHED: Daily backup task completed."

部署与使用步骤

  • 权限设置:运行 chmod +x db_backup.sh
  • MySQL 权限准备:创建专用用户(最小权限),例如:
    CREATE USER 'backup_user'@'localhost' IDENTIFIED BY 'strong_pwd';<br>
      GRANT LOCK TABLES, SELECT ON *.* TO 'backup_user'@'localhost';<br>
      FLUSH PRIVILEGES;
  • 安全优化(推荐):将密码移至 ~/.my.cnf,并设权限 chmod 600 ~/.my.cnf,内容如下:
    [client]<br>
      user=backup_user<br>
      password=your_secure_password<br>
      host=localhost

    然后脚本中删掉 -p"$DB_PASS" 和 -u"$DB_USER" 参数,仅留 -h"$DB_HOST"
  • 添加定时任务:每天凌晨 2:30 执行,编辑 crontab:
    30 2 * * * /path/to/db_backup.sh >> /dev/null 2>&1
  • 验证日志:定期检查 $LOG_FILE,确认 SUCCESS 行和 REMOVED 记录是否正常

常见问题与增强建议

  • 备份失败无报警? 可在脚本末尾添加邮件通知(如 echo "Backup OK" | mail -s "DB Backup Success" admin@example.com),或接入企业微信/钉钉机器人
  • 大库导出慢/超时? 在 mysqldump 命令后加 --max-allowed-packet=512M --net-buffer-length=1M 并调高 MySQL 的 wait_timeout
  • 想加密备份文件? 可用 gpg 替代 gzip,例如:... | gpg --symmetric --cipher-algo AES256 -o "$BACKUP_FILE.gpg"
  • 跨服务器备份? 备份完成后用 rsync 或 scp 同步到异地 NAS 或对象存储(如 AWS S3、MinIO)

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux shell脚本

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

2023.06.29

2285

3

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

2023.08.14

3621

10

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

2023.08.31

2431

3

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.05

827

5

vb中怎么连接access数据库
vb中怎么连接access数据库

vb中连接access数据库的步骤包括引用必要的命名空间、创建连接字符串、创建连接对象、打开连接、执行SQL语句和关闭连接。本专题为大家提供连接access数据库相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

2207

5

数据库对象名无效怎么解决
数据库对象名无效怎么解决

数据库对象名无效解决办法:1、检查使用的对象名是否正确,确保没有拼写错误;2、检查数据库中是否已存在具有相同名称的对象,如果是,请更改对象名为一个不同的名称,然后重新创建;3、确保在连接数据库时使用了正确的用户名、密码和数据库名称;4、尝试重启数据库服务,然后再次尝试创建或使用对象;5、尝试更新驱动程序,然后再次尝试创建或使用对象。

2023.10.16

2227

4

vb连接access数据库的方法
vb连接access数据库的方法

vb连接access数据库方法:1、使用ADO连接,首先导入System.Data.OleDb模块,然后定义一个连接字符串,接着创建一个OleDbConnection对象并使用Open() 方法打开连接;2、使用DAO连接,首先导入 Microsoft.Jet.OLEDB模块,然后定义一个连接字符串,接着创建一个JetConnection对象并使用Open()方法打开连接即可。

2023.10.16

2773

3

vb连接数据库的方法
vb连接数据库的方法

vb连接数据库的方法有使用ADO对象库、使用OLEDB数据提供程序、使用ODBC数据源等。详细介绍:1、使用ADO对象库方法,ADO是一种用于访问数据库的COM组件,可以通过ADO连接数据库并执行SQL语句。可以使用ADODB.Connection对象来建立与数据库的连接,然后使用ADODB.Recordset对象来执行查询和操作数据;2、使用OLEDB数据提供程序方法等等。

2023.10.19

2061

3

mdf文件导入数据库的方法
mdf文件导入数据库的方法

mdf文件导入数据库的方法有使用SQL Server Management Studio、使用SQL Server命令行工具、使用SQL Server Integration Services等方法。想了解更多mdf文件导入数据库的方法的相关内容,可以阅读本专题下面的文章。

2023.10.23

2093

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习