如何解决因批量部署脚本未配置锁机制导致多条CI/CD流水线同时向同一节点推流引发的死锁

老磊君_6255

老磊君_6255

2026-06-08

305人浏览

原创

本质是并发写冲突,需通过resource_group串行化部署作业,或在ssh脚本中加文件锁,长期应采用容器化、cdn、蓝绿部署等架构优化方案。

如何解决因批量部署脚本未配置锁机制导致多条ci/cd流水线同时向同一节点推流引发的死锁

这个问题本质是并发写冲突,不是数据库事务意义上的“死锁”,而是多个流水线作业同时操作同一台目标服务器的相同路径(比如覆盖文件、重启服务、执行部署脚本),导致状态不一致、文件损坏或服务异常。解决的关键在于**串行化关键部署动作**,而非依赖系统级锁机制。

明确部署临界区范围

先识别哪些操作绝对不能并行执行:

  • 向同一目录拷贝/覆盖静态资源(如 cp -r dist/* /var/www/app/)
  • 重启同一进程(如 systemctl restart myapp.service)
  • 执行数据库迁移脚本(flyway migrate 或 liquibase update)
  • 修改共享配置文件(如 /etc/nginx/conf.d/app.conf)

这些操作必须被约束为“同一时间仅一个作业能进入”。

用 GitLab CI 的 resource_group 实现轻量级串行

GitLab 原生支持基于资源组的互斥调度,无需额外工具或脚本。在 .gitlab-ci.yml 中为部署作业添加 resource_group:

deploy_to_prod:
  stage: deploy
  script:
    - ./scripts/deploy.sh
  resource_group: "prod-deployment"  # 同名组内作业自动排队
  only:
    - main

只要所有指向同一生产节点的部署作业都使用相同的 resource_group 名称(如 "prod-server-01"),GitLab Runner 就会确保它们顺序执行,后触发的作业自动等待前一个完成。

一览运营宝
一览运营宝

一款面向视频内容运营的AI创作工具,可辅助进行视频内容策划、创作和运营工作,帮助内容团队提高视频生产效率。

下载

服务端加文件锁(适用于自托管 Runner 或 SSH 部署)

如果使用 SSH 直连服务器部署,可在部署脚本中加入简单文件锁逻辑:

  • 部署开始前:尝试创建带进程ID的锁文件(如 /tmp/deploy.lock),失败则循环等待
  • 部署结束后:主动删除锁文件
  • 超时强制清理:加个 10 分钟超时,避免锁残留阻塞后续流程

示例片段(Bash):

LOCK_FILE="/tmp/deploy.lock"
PID_FILE="/tmp/deploy.pid"
<h1>等待获取锁</h1><p>while [ -f "$LOCK_FILE" ]; do
if [ -f "$PID_FILE" ] && kill -0 $(cat "$PID_FILE") 2>/dev/null; then
sleep 5
else
rm -f "$LOCK_FILE" "$PID_FILE"
fi
done</p><p>echo $$ > "$PID_FILE"
touch "$LOCK_FILE"</p><h1>执行实际部署命令</h1><p>cp -r dist/* /var/www/app/
systemctl restart myapp</p><h1>清理</h1><p>rm -f "$LOCK_FILE" "$PID_FILE"
</p>

避免锁问题的架构优化

长期来看,比加锁更根本的解法是减少对共享节点的强依赖:

  • 改用容器化部署:每次部署生成新镜像,通过 Kubernetes 或 Docker Compose 滚动更新,天然隔离
  • 静态资源走 CDN 或对象存储:前端资源上传至 OSS/S3,Nginx 只做反向代理,不参与文件写入
  • 蓝绿部署或金丝雀发布:新版本部署到独立实例组,流量切换由负载均衡器控制,旧组保持只读

这类设计让“多流水线同时生效”不再构成风险,反而成为加速发布的手段。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Java 单元测试
Java 单元测试

本专题聚焦 Java 在软件测试与持续集成流程中的实战应用,系统讲解 JUnit 单元测试框架、Mock 数据、集成测试、代码覆盖率分析、Maven 测试配置、CI/CD 流水线搭建(Jenkins、GitHub Actions)等关键内容。通过实战案例(如企业级项目自动化测试、持续交付流程搭建),帮助学习者掌握 Java 项目质量保障与自动化交付的完整体系。

2025.10.24

1046

26

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

2026.02.11

239

16

PHP 命令行脚本与自动化任务开发
PHP 命令行脚本与自动化任务开发

本专题系统讲解 PHP 在命令行环境(CLI)下的开发与应用,内容涵盖 PHP CLI 基础、参数解析、文件与目录操作、日志输出、异常处理,以及与 Linux 定时任务(Cron)的结合使用。通过实战示例,帮助开发者掌握使用 PHP 构建 自动化脚本、批处理工具与后台任务程序 的能力。

2025.12.13

466

14

Figma AI自动化智能数据填充与交互生成实战
Figma AI自动化智能数据填充与交互生成实战

告别机械重复,详细演示如何用 AI 填充业务真实数据,并自动为页面添加交互连线,将静态设计稿快速转变为动态原型。

2026.05.13

305

17

Kratos框架Protobuf接口定义与代码生成合集
Kratos框架Protobuf接口定义与代码生成合集

本专题讲解Kratos框架接口定义体系,涵盖proto编写规范、proto add/client/server生成命令、http注解路由、validate校验、OpenAPI文档生成、跨服务proto复用与兼容性设计。

2026.10.10

0

15

C++虚函数怎么定义和调用
C++虚函数怎么定义和调用

C++虚函数是实现运行时多态的重要机制。本专题从virtual关键字的基本用法入手,介绍基类与派生类之间的函数重写、基类指针调用派生类方法,以及动态绑定的执行过程,帮助初学者掌握虚函数的核心语法。

2026.10.10

0

26

C++类与对象的封装方法教程
C++类与对象的封装方法教程

C++封装是面向对象编程的核心特性之一,通过类将数据与操作数据的函数组织在一起,并利用访问权限控制外部访问。本专题介绍类的定义、成员变量、成员函数以及public、private和protected的使用方法,帮助初学者掌握封装的基本原理。

2026.10.10

0

32

C++构造函数定义与调用方法
C++构造函数定义与调用方法

C++构造函数用于初始化类对象,是面向对象编程的重要基础。本专题从构造函数的定义、声明和调用入手,介绍默认构造函数、带参数构造函数、拷贝构造函数及成员初始化列表,帮助初学者掌握对象创建与初始化的基本方法。

2026.10.10

0

16

Kratos框架零基础入门教程
Kratos框架零基础入门教程

本专题整理Kratos框架入门内容,涵盖Go环境准备、kratos CLI安装升级、new命令创建项目、目录结构分层说明、服务启动与双协议端口、依赖下载报错排查,帮助开发者快速跑通第一个Kratos框架微服务应用。

2026.10.10

0

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习