如何使用DockerRun的shm-size参数调整共享内存

夜萱大大_9429

夜萱大大_9429

2026-04-04

909人浏览

原创

Docker 的 shm-size 参数用于设置容器内 /dev/shm 共享内存大小,默认仅 64MB,易导致 TensorFlow、PyTorch 等多进程应用因共享内存不足报错;需通过 docker run --shm-size=2g 等方式显式指定,不支持 Dockerfile 声明,且独立于内存限制。

如何使用dockerrun的shm-size参数调整共享内存

Docker 的 shm-size 参数用于设置容器内 /dev/shm 文件系统的大小,默认只有 64MB。当运行依赖大量共享内存的应用(如 TensorFlow、PyTorch 多进程数据加载、OpenCV 的某些操作或数据库临时共享结构)时,容易触发 no space left on device 错误——其实不是磁盘满,而是共享内存耗尽。

为什么需要调整 shm-size

/dev/shm 是基于内存的 tmpfs 文件系统,供进程间高效共享数据。Docker 默认限制为 64MB,远低于许多深度学习框架单次数据批处理所需(例如多 worker 的 DataLoader 可能需数 GB)。不调整会导致:

  • Python 多进程报 OSError: unable to mmap 131072 bytes
  • TensorFlow 报 Failed to create shared memory region
  • 容器内 df -h /dev/shm 显示已用 100%

如何在 docker run 中设置 shm-size

使用 --shm-size 选项,支持字节(b)、千字节(k/K)、兆字节(m/M)、吉字节(g/G)单位:

  • docker run --shm-size=2g my-image → 分配 2GB 共享内存
  • docker run --shm-size=512m my-image → 分配 512MB
  • docker run --shm-size=1073741824 my-image → 等价于 1g(字节数)

注意:该参数必须写在 docker run 命令中,不能在 Dockerfile 中声明;也不受 --memory 限制影响,它是独立的 tmpfs 配置。

验证和调试方法

进入容器后,可通过以下方式确认生效:

  • df -h /dev/shm —— 查看挂载大小是否匹配设定值
  • mount | grep shm —— 输出类似 shm on /dev/shm type tmpfs (rw,nosuid,nodev,noexec,relatime,size=2097152k),其中 size= 后数值单位为 KB
  • ls -lh /dev/shm —— 检查是否有异常残留文件(长期运行容器可能积累,可手动清理)

配合其他参数使用的注意事项

若同时使用 --ipc=host,则容器会复用宿主机的 /dev/shm,此时 --shm-size 将被忽略。如需自定义大小,应避免 --ipc=host,改用默认的 --ipc=private(Docker 默认行为)。另外,在 Docker Compose 中对应字段为:

services:
  app:
    image: my-image
    shm_size: 2gb
PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
k8s和docker区别
k8s和docker区别

k8s和docker区别有抽象层次不同、管理范围不同、功能不同、应用程序生命周期管理不同、缩放能力不同、高可用性等等区别。本专题为大家提供k8s和docker区别相关的各种文章、以及下载和课程。

2023.07.24

805

4

docker进入容器的方法有哪些
docker进入容器的方法有哪些

docker进入容器的方法:1. Docker exec;2. Docker attach;3. Docker run --interactive --tty;4. Docker ps -a;5. 使用 Docker Compose。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

6599

6

docker容器无法访问外部网络怎么办
docker容器无法访问外部网络怎么办

docker 容器无法访问外部网络的原因和解决方法:配置 nat 端口映射以将容器端口映射到主机端口。根据主机兼容性选择正确的网络驱动(如 host 或 overlay)。允许容器端口通过主机的防火墙。配置容器的正确 dns 服务器。选择正确的容器网络模式。排除主机网络问题,如防火墙或连接问题。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

7737

6

docker镜像有什么用
docker镜像有什么用

docker 镜像是预构建的软件组件,用途广泛,包括:应用程序部署:简化部署,提高移植性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

3073

7

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

2026.02.11

339

16

Docker 容器部署
Docker 容器部署

本专题整合了Docker容器部署相关内容,阅读专题下面的文章了解更多详细操作教程。

2026.03.31

491

14

Java容器化部署与Docker实践教程合集
Java容器化部署与Docker实践教程合集

聚焦 Java 应用的容器化与云原生部署,讲解 Dockerfile 编写规范与 Java 应用镜像构建、多阶段构建(Multi-stage Build)减小镜像体积、Jib / Buildpacks 免 Dockerfile 镜像构建方案、JVM 容器感知参数(-XX:MaxRAMPercentage)配置、Docker Compose 编排多服务(应用 + MySQL + Redis)、容器健康检查与资源限制、Kubernetes

2026.05.11

460

26

Go Docker与容器化部署教程合集
Go Docker与容器化部署教程合集

聚焦 Go 应用的容器化部署优势与实践,讲解 Go 静态编译特性(CGO_ENABLED=0)与 scratch / distroless 极小基础镜像构建、多阶段 Dockerfile 编写规范、交叉编译生成目标平台二进制、镜像安全扫描(Trivy)与漏洞修复、Docker Compose 本地编排开发环境、Kubernetes Deployment / Service / ConfigMap 部署 Go 服务、健康检查(Livene

2026.05.15

345

24

Hyperf 项目部署运维与性能调优手册
Hyperf 项目部署运维与性能调优手册

聚焦 Hyperf 在生产环境的落地,包含 Docker 高效打包、Swoole 配置优化、常见的内存溢出(OOM)问题排查方法以及热更新方案。

2026.05.19

545

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习