pip安装提示Out of memory怎么办

千明酱_3981

千明酱_3981

2026-09-28

853人浏览

原创

--no-cache-dir单独使用会失效,因为它仅跳过pip本地缓存写入,不减少编译过程本身的内存占用;scipy、torch等库的fortran/c++编译阶段仍会因链接器mmap、多进程争抢等导致内存溢出。

pip安装提示out of memory怎么办

直接加 --no-cache-dir 通常不够,得配合禁依赖、换源、切 wheel、调环境变量一起上,否则编译阶段照样爆内存。

为什么 --no-cache-dir 单独用会失效

它只跳过把下载的包写进 ~/.cache/pip 或 %LOCALAPPDATA%\pip\Cache 这一步,不碰编译本身。像 scipy、torch、pyarrow 这类库,真正吃内存的是 Fortran/C++ 编译过程——临时对象堆叠、链接器 mmap 大量 .o 文件,--no-cache-dir 对这部分零影响。

  • 现象:pip install scipy 卡在 building 'scipy._lib._ccallback_c' extension,top 看 python 进程 RSS 不涨但 VIRT 暴涨到 20GB+
  • Windows 上更明显:cmd 默认栈小,link.exe 一启动就崩;建议改用 PowerShell 或显式调用 python -m pip
  • 旧版 pip 不支持并行构建限流,多进程编译争抢内存,升级是刚需:<code>python -m pip install -U pip setuptools wheel

强制走预编译 wheel 是最快路径

绕过所有编译环节,直接解压安装二进制包,内存压力几乎为零。但得注意匹配平台和 Python 版本,否则会 fallback 回源码编译。

CI Tools Pipeline
CI Tools Pipeline

使用位于 ci-tools.xrow.de 的 CI Tools 组件目录构建和维护 GitLab CI/CD 流水线,适用于创建或修复 .gitlab-ci.yml 文件,选择合适的组件。

下载
  • 明确指定只装二进制:pip install --only-binary=all --no-deps numpy scipy pandas
  • 若报 No matching distribution,说明 PyPI 上没对应你平台的 wheel,先查 pip debug --verbose 看 platform_tag 和 abi_tag,再手动去 PyPI 文件页 下载适配的 .whl
  • 本地已有 wheel?用 --find-links ./wheels --no-index 直接装:pip install --no-cache-dir --find-links ./wheels --no-index scipy

Linux 下链接器吃 swap 的隐蔽陷阱

不是真缺物理内存,而是 ld 在符号解析时 mmap 了几十个 .o 文件,OS 用 swap 撑住,free -h 看 swap 已满,df -h 却显示磁盘空闲——这是典型假性 OOM。

  • 临时缓解:导出 LDFLAGS="-Wl,--no-keep-memory" 再跑 pip install
  • 长期方案:限制构建并发数,比如 export MAX_JOBS=2(对支持 setuptools.build_meta 的库有效)
  • 别信 --memory=2000M:这个参数是实验性功能,2026 年主流 pip 版本仍不默认启用,且仅控制 pip 主进程,不管子进程编译

缓存目录配额耗尽比内存不足更常见

尤其在 PyCharm 终端、容器、学校服务器上,OSError: [Errno 122] Disk quota exceeded 或 IOError: [Errno 28] No space left on device 其实是用户配额(inode 或 block)被打满,跟物理内存无关。

  • 立刻清理:pip cache purge
  • 换地方缓存,避免 C 盘或受限目录:pip config set global.cache-dir "/tmp/pip_cache" 或设环境变量 PIP_CACHE_DIR="/tmp/pip_cache"
  • CI/CD 构建中,每次运行前加 rm -rf ~/.cache/pip,比靠 --no-cache-dir 更彻底

真正卡住你的,往往不是内存大小,而是 pip 如何调度子进程、链接器怎么 mmap、缓存目录有没有 inode 配额、wheel 是否匹配 ABI——这些细节不显眼,但一个没对,--no-cache-dir 就只是个安慰剂。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

pip安装 pip pip命令

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

2023.10.09

2510

5

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

2024.12.20

5783

6

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

2024.12.23

7342

11

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

2025.07.23

3547

16

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

2026.09.23

140

15

Buffalo框架路由与请求处理实操指南
Buffalo框架路由与请求处理实操指南

本专题讲解Buffalo框架路由与请求处理机制,涵盖路由注册与分组、资源路由、Handler编写规范、Context上下文方法、参数绑定、中间件编写挂载、Session与Cookie读写、Flash消息及错误页面定制方法。

2026.09.23

80

15

Buffalo框架零基础入门教程
Buffalo框架零基础入门教程

本专题整理Buffalo框架入门内容,涵盖Go环境准备、buffalo CLI安装、新项目生成、目录结构说明、dev热加载启动、数据库连接配置与常见报错排查,帮助新手按约定优于配置的思路跑通第一个Buffalo框架应用。

2026.09.23

60

15

Conan创建软件包配方指南
Conan创建软件包配方指南

本专题介绍通过conanfile.py创建软件包的方法,讲解包名、版本、依赖和构建设置等基础信息,以及source、build、package、package_info等常用方法的作用及编写思路。

2026.09.22

40

12

Conan二进制包配置指南
Conan二进制包配置指南

本专题介绍Conan根据操作系统、编译器、架构和构建类型生成二进制包的方法,讲解Profile、Settings、Options及Package ID的作用,帮助管理不同平台和编译环境下的包版本。

2026.09.22

60

13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.9万人学习

麻省理工大佬Python课程
麻省理工大佬Python课程

共34课时 | 7.4万人学习

python基础快速入门
python基础快速入门

共18课时 | 3.3万人学习