如何在Docker Swarm中部署支持数据迁移的MySQL集群?

千萱姑娘_1796

千萱姑娘_1796

2026-07-13

512人浏览

原创

mysql容器在swarm中必须通过placement.constraints锁定节点,因绑定本地路径的数据卷无法跨节点访问;主从需严格启用gtid与row格式binlog,并通过手动校验和备份同步保障数据一致性。

如何在docker swarm中部署支持数据迁移的mysql集群?

MySQL 容器必须固定调度到同一节点

Swarm 默认会跨节点调度服务,但 MySQL 数据卷绑定本地路径后,一旦容器被调度到其他节点,就会读不到原数据,直接启动失败或初始化空实例。这不是配置问题,是数据物理位置硬约束。

必须用 placement.constraints 锁定节点:

  • 给目标节点打标签:docker node update --label-add mysql-node=true <node-id></node-id>
  • 在 stack 文件中声明约束:placement: { constraints: [node.labels.mysql-node == true] }
  • 避免使用 replicas: > 1 —— 单节点多副本仍会触发跨节点调度,除非显式指定 max_replicas_per_node: 1 并配合约束

主从切换时 binlog 与 GTID 必须一致

Swarm 本身不感知 MySQL 复制状态,故障转移靠外部脚本或 Consul 健康检查触发。若主节点宕机,新主未正确拉取全部 binlog 或 GTID set 不全,从库同步就会卡住,报错如 Got fatal error 1236 from master 或 Could not execute Write_rows event on table。

关键动作:

Dolphindb Docker
Dolphindb Docker

自动化 DolphinDB Docker 部署,支持自动架构检测(ARM64/x86_64),智能内存分配(50% 规则)以及完整数据持久化。

下载
  • 主库启用 log-bin、binlog-format=ROW、gtid-mode=ON、enforce-gtid-consistency=ON
  • 从库启动时必须用 CHANGE MASTER TO ... GET_MASTER_PUBLIC_KEY=1(MySQL 8.0.4+ 才支持)
  • 定期校验 SELECT @@GLOBAL.GTID_EXECUTED 在所有节点是否一致,不一致需手动跳过或重置复制

数据迁移不能依赖 Swarm 的 rolling update

docker stack deploy --with-registry-auth 触发滚动更新时,Swarm 会先删旧容器再启新容器,中间存在几秒无主状态,且新容器挂载的是全新卷(除非显式复用旧 volume 名)。这会导致数据丢失或复制链断裂。

安全迁移流程应为:

  • 停写:将应用流量切到只读模式(或通过 proxy 拦截写请求)
  • 确认从库已追平:SHOW SLAVE STATUS\G 中 Seconds_Behind_Master: 0 且 Slave_IO_Running 和 Slave_SQL_Running 均为 Yes
  • 导出主库:mysqldump --all-databases --single-transaction --triggers --routines --set-gtid-purged=ON > backup.sql
  • 导入目标集群:在新主上执行 mysql ,注意跳过 <code>SET @@SESSION.SQL_LOG_BIN=0 导致的 GTID 冲突
  • 最后才更新 stack 配置并重新部署

备份卷必须跨节点同步,不能只靠本地 volume

Swarm 节点本地 volume 天然不可迁移,docker volume ls 查到的卷只存在于创建它的节点。如果该节点宕机且无备份,数据即永久丢失。

生产必须做两件事:

  • 每日自动备份到共享位置:mysqldump + gzip 后 rsync 到另一台节点的 /backup/mysql/ 目录,或上传至 S3/OSS
  • 备份脚本里加入校验:mysqlcheck --all-databases --check 确保 dump 文件可还原,避免压缩损坏或权限问题导致恢复失败
  • 禁止把 /var/lib/mysql 直接 bind mount 到宿主机路径 —— 这会让 Swarm 调度失效,且无法通过 docker volume inspect 管理生命周期
数据迁移真正的难点不在命令怎么写,而在于你能否在主库停写窗口内完成校验、dump、传输、导入、GTID 对齐、复制重启这一整套操作,并确保每个环节可回退。Swarm 只负责容器编排,它不会帮你判断 Executed_Gtid_Set 是否包含 Retrieved_Gtid_Set。

相关专题

更多
大数据分析工具有哪四个
大数据分析工具有哪四个

大数据分析的四个工具分别是rapidminer、Hpcc、Hadoop和Pentaho bi。大数据分析用于从各种来源生成的原始数据中提取有价值的数据。这些数据帮助我们获得有意义的见解、隐藏的模式、未知的相关性、市场趋势等等,具体取决于行业。大数据分析的主要动机是提供有价值的见解,以便为未来做出更好的决策。php中文网为大家带来了大数据分析的相关教程、以及相关文章等内容,供大家免费下载使用。

2023.06.21

4596

5

Java 大数据处理基础(Hadoop 方向)
Java 大数据处理基础(Hadoop 方向)

本专题聚焦 Java 在大数据离线处理场景中的核心应用,系统讲解 Hadoop 生态的基本原理、HDFS 文件系统操作、MapReduce 编程模型、作业优化策略以及常见数据处理流程。通过实际示例(如日志分析、批处理任务),帮助学习者掌握使用 Java 构建高效大数据处理程序的完整方法。

2025.12.08

1229

12

大数据专业学习教程
大数据专业学习教程

本专题整合了大数据专业学习相关教程,阅读专题下面的文章了解更多详细内容。

2026.01.05

223

5

python处理大数据合集
python处理大数据合集

本专题整合了python处理大数据相关教程,阅读专题下面的文章了解更多详细内容。

2026.01.05

466

22

mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2093

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1279

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

755

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2812

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4688

4

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 180人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 287人学习