首页 >后端开发 >Python教程 >为什么 Python 多重处理会失败并出现'PicklingError: Can't pickle”以及如何修复它?

为什么 Python 多重处理会失败并出现'PicklingError: Can't pickle”以及如何修复它?

Barbara Streisand
Barbara Streisand原创
2024-12-08 20:33:12336浏览

Why Does Python Multiprocessing Fail with

“PicklingError:无法 pickle ”故障排除在Python Multiprocessing

当尝试使用Python的多处理模块时,你可能会遇到“PicklingError: Can't pickle ”错误。当尝试 pickle 未在模块顶层定义的函数时,通常会出现这种情况。

理解 Pickling

Pickling 是将对象转换为对象的过程二进制流,允许存储并稍后重新创建。在多处理中,任务通过队列在网络上传输,因此它们必须是可挑选的。

函数和顶级定义

在顶级定义的常规函数模块本质上是可腌制的。但是,在类或其他嵌套函数中定义的函数则不然。这是因为在 pickling 过程中遇到的“全局变量”可能与创建它们的过程中的不同。

不可 Picklable 函数的示例

考虑以下代码定义了嵌套在类方法中的函数:

class Foo:
    def g(self):
        def h():
            pass
        h()

调用pool.apply_async(Foo().g) 将导致“PicklingError”,因为嵌套函数 h 未在顶层定义。

解决方案

至解决这个问题,只需在模块的顶层定义函数并从嵌套函数中调用它即可。例如:

def g(foo):
    def h():
        pass
    h()
    foo.work()

现在,pool.apply_async(g, args=(Foo(),)) 将正常运行。

以上是为什么 Python 多重处理会失败并出现'PicklingError: Can't pickle”以及如何修复它?的详细内容。更多信息请关注PHP中文网其他相关文章!

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn