Python 对象无法释放的排查思路

冬枫酱_3669

冬枫酱_3669

2026-01-29

796人浏览

原创

del 只解除引用不立即释放内存,因引用计数未归零或存在循环引用、C扩展资源未释放;需用sys.getrefcount、gc.get_referrers、tracemalloc等工具定位并主动清理。

python 对象无法释放的排查思路

为什么 del 之后对象还在内存里

执行 del obj 并不等于立即释放内存,它只是解除了当前作用域对对象的引用。只要还有其他变量、容器、闭包、循环引用或 C 扩展持有该对象,引用计数就不会归零,gc 也不会立刻回收。

常见干扰源包括:logging 模块缓存了异常 traceback(含局部变量)、threading.local() 存储了对象、装饰器或类方法中意外保留了 self 引用、全局字典或缓存(如 functools.lru_cache)未清理。

实操建议:

  • 用 sys.getrefcount(obj) 查当前引用数(注意:传参本身会+1,结果要减1才准)
  • 用 gc.get_referrers(obj) 找出谁在引用它——重点检查返回列表里的字典、模块、函数闭包和线程对象
  • 避免在日志中记录包含大对象的异常,改用 traceback.format_exc(limit=1) 截断

循环引用导致 gc.collect() 不生效

纯 Python 对象间的循环引用(比如 A 持有 B,B 又持有 A)无法靠引用计数释放,依赖 gc 的周期性扫描。但默认情况下,gc 可能被禁用,或对象被标记为“不可收集”(如定义了 __del__ 方法)。

典型现象是:手动调用 gc.collect() 返回 0,且 gc.garbage 非空。

实操建议:

  • 运行 gc.set_debug(gc.DEBUG_STATS | gc.DEBUG_UNCOLLECTABLE) 开启调试,观察日志里哪些对象卡在 unreachable 状态
  • 检查对象是否定义了 __del__——有它就会被 gc 排除在自动回收外;改用 weakref.finalize 替代
  • 对已知易成环的结构(如树节点、观察者模式),主动用 weakref.ref 替代强引用

排查 C 扩展或底层资源未释放

Python 对象只是“壳”,真正占内存的可能是底层 C 分配的 buffer、文件描述符、CUDA 显存或数据库连接。这些资源不会随 Python 对象销毁自动释放,必须显式调用 close()、free() 或上下文管理器退出。

Python Dependency Candidate Fetcher 2
Python Dependency Candidate Fetcher 2

根据包的能力以及 Jupyter 环境中的导入语句,从候选列表中挑选最适合用户表格工作流的 Python 包。

下载

常见例子:numpy.ndarray 背后是 malloc 分配的内存;cv2.VideoCapture 占着摄像头句柄;torch.Tensor 在 GPU 上时,del 不释放显存。

实操建议:

  • 查文档确认对象是否有 close()、release()、detach() 等清理方法,并确保被调用
  • 用 tracemalloc 定位内存分配源头:tracemalloc.start(); ... ; tracemalloc.get_top_locations(10)
  • 对 GPU 张量,检查 tensor.is_cuda 和 torch.cuda.memory_allocated(),必要时调用 torch.cuda.empty_cache()

__slots__ 和弱引用的实际影响

加 __slots__ 能减少单个实例的内存占用,但它不解决释放问题;反而可能掩盖引用泄漏——因为少了 __dict__,gc.get_referrers() 找不到某些引用路径。

而 weakref 是主动破环的利器,但要注意:弱引用本身不阻止回收,可被随时失效;且不能用于内置类型(如 int、str)或没有 __weakref__ 的类(__slots__ 未显式声明 __weakref__ 就不支持)。

实操建议:

  • 若用 __slots__,记得在定义中加入 '__weakref__' 才能支持弱引用
  • 用 weakref.WeakKeyDictionary 或 WeakValueDictionary 替代普通 dict 缓存,避免键/值成为回收障碍
  • 别依赖 weakref.ref(obj)() 的返回值做逻辑判断——它可能已经是 None

最麻烦的情况往往是多种机制叠加:一个带 __del__ 的类,被日志 traceback 持有,又放进全局 weakref 字典,同时底层还 malloc 了一块内存。这时候得一层层剥开,先确认是 Python 对象没释放,还是底层资源卡住,再决定从 gc、weakref 还是 C API 入手。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

python 作用域

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

6979

3

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.08.29

3345

6

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

2025.08.29

4368

10

C++中int的含义
C++中int的含义

本专题整合了C++中int相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.29

2965

10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

2023.08.10

4558

6

go语言闭包相关教程大全
go语言闭包相关教程大全

本专题整合了go语言闭包相关数据,阅读专题下面的文章了解更多相关内容。

2025.07.29

4793

19

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

2023.06.29

2965

3

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

2023.08.14

4101

10

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

2023.08.31

3331

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程