怎么在Linux利用Gitlab-Runner的Tags功能实现针对特定架构(如GPU)的构建分流

星丽酱_9290

星丽酱_9290

2026-04-30

489人浏览

原创

gitlab ci通过标签机制实现gpu构建分流:注册时为gpu服务器runner指定gpu等标签,作业中用tags: [gpu]声明需求,系统自动调度至匹配的在线runner。

怎么在linux利用gitlab-runner的tags功能实现针对特定架构(如gpu)的构建分流

直接用 tags 实现 GPU 构建分流,核心是“注册带标签的 Runner + 作业指定匹配标签”。这不是靠脚本判断架构,而是 GitLab CI 的原生调度机制。

注册专用 GPU Runner 并打上 gpu 标签

在装有 NVIDIA 驱动和 CUDA 的 Linux 服务器上,执行注册命令时明确指定 --tag-list:

  • 运行 gitlab-runner register
  • 按提示输入 GitLab 实例 URL、项目或实例 token
  • 当问到 Tags 时,输入 gpu(也可加其他语义标签,如 cuda-12.4,ubuntu-22.04)
  • 选择执行器:推荐 docker 或 docker+machine,确保容器能访问宿主机 GPU(需挂载 /dev/nvidia* 和安装 nvidia-container-toolkit)
  • 完成注册后,该 Runner 在 GitLab 后台会显示为带有 gpu 标签的可用节点

在 .gitlab-ci.yml 中精准匹配 GPU 任务

只需在需要 GPU 资源的 job 中声明 tags,CI 系统自动路由:

Pilot Digital Twin Setup
Pilot Digital Twin Setup

部署一个包含 4 个智能体(agent)的数字孪生平台。在以下情况下使用该技能: 1. 用户希望为物理资产监控与预测性维护等场景搭建数字孪生系统……

下载
  • 例如训练任务写成:
train:
  image: nvidia/cuda:12.4.1-devel-ubuntu22.04
  tags:
    - gpu
  script:
    - python train.py
  • 这个 job 不会发给只标了 cpu 或无标签的 Runner;也不会被多个 gpu Runner 争抢——GitLab 自动选一个空闲的
  • 可搭配 only 或 rules 进一步限定触发条件(如仅 main 分支 + train/ 目录变更)

多类型硬件共存时的标签设计建议

一台物理机可注册多个 Runner,每个专注一类资源,靠标签隔离:

  • gpu-runner-01 → tags: gpu, cuda12, high-mem
  • arm64-builder → tags: arm64, cross-compile
  • fast-cpu-test → tags: cpu, ssd-cache
  • CI 作业里写 tags: [gpu, cuda12],就只会命中第一个 Runner
  • 避免使用模糊标签(如 fast),优先用可验证的硬件/软件特征

验证与排错要点

分流是否生效,关键看三点:

  • Runner 页面中,对应 Runner 的 Tags 列是否显示你设定的值(如 gpu)
  • Job 详情页的 Runner 字段是否显示该 GPU Runner 的名称
  • Job 日志开头是否有类似 Using docker image sha256:... for gpu with gitlab-runner...
  • 若 job 一直 pending,检查 Runner 状态是否为 online 且 active,并确认其 tag 拼写与 .gitlab-ci.yml 完全一致(区分大小写)

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux git gitlab

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
k8s和docker区别
k8s和docker区别

k8s和docker区别有抽象层次不同、管理范围不同、功能不同、应用程序生命周期管理不同、缩放能力不同、高可用性等等区别。本专题为大家提供k8s和docker区别相关的各种文章、以及下载和课程。

2023.07.24

745

4

docker进入容器的方法有哪些
docker进入容器的方法有哪些

docker进入容器的方法:1. Docker exec;2. Docker attach;3. Docker run --interactive --tty;4. Docker ps -a;5. 使用 Docker Compose。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

5699

6

docker容器无法访问外部网络怎么办
docker容器无法访问外部网络怎么办

docker 容器无法访问外部网络的原因和解决方法:配置 nat 端口映射以将容器端口映射到主机端口。根据主机兼容性选择正确的网络驱动(如 host 或 overlay)。允许容器端口通过主机的防火墙。配置容器的正确 dns 服务器。选择正确的容器网络模式。排除主机网络问题,如防火墙或连接问题。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

6737

6

docker镜像有什么用
docker镜像有什么用

docker 镜像是预构建的软件组件,用途广泛,包括:应用程序部署:简化部署,提高移植性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

2613

7

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

2026.02.11

279

16

Docker 容器部署
Docker 容器部署

本专题整合了Docker容器部署相关内容,阅读专题下面的文章了解更多详细操作教程。

2026.03.31

451

14

Java容器化部署与Docker实践教程合集
Java容器化部署与Docker实践教程合集

聚焦 Java 应用的容器化与云原生部署,讲解 Dockerfile 编写规范与 Java 应用镜像构建、多阶段构建(Multi-stage Build)减小镜像体积、Jib / Buildpacks 免 Dockerfile 镜像构建方案、JVM 容器感知参数(-XX:MaxRAMPercentage)配置、Docker Compose 编排多服务(应用 + MySQL + Redis)、容器健康检查与资源限制、Kubernetes

2026.05.11

420

26

Go Docker与容器化部署教程合集
Go Docker与容器化部署教程合集

聚焦 Go 应用的容器化部署优势与实践,讲解 Go 静态编译特性(CGO_ENABLED=0)与 scratch / distroless 极小基础镜像构建、多阶段 Dockerfile 编写规范、交叉编译生成目标平台二进制、镜像安全扫描(Trivy)与漏洞修复、Docker Compose 本地编排开发环境、Kubernetes Deployment / Service / ConfigMap 部署 Go 服务、健康检查(Livene

2026.05.15

305

24

Hyperf 项目部署运维与性能调优手册
Hyperf 项目部署运维与性能调优手册

聚焦 Hyperf 在生产环境的落地,包含 Docker 高效打包、Swoole 配置优化、常见的内存溢出(OOM)问题排查方法以及热更新方案。

2026.05.19

465

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习