如何在Python中排查asyncio协程导致的死锁问题

陌墨同学_5418

陌墨同学_5418

2026-10-15

454人浏览

原创

asyncio.run() 嵌套调用会死锁,因python禁止在运行事件循环中启动新循环;正确做法是顶层用asyncio.run(),内部用await;lock必须用async with确保自动释放;跨线程调用需用run_coroutine_threadsafe并校验loop状态。

如何在python中排查asyncio协程导致的死锁问题

asyncio.run() 里嵌套另一个 asyncio.run() 会直接死锁

这是最典型的死锁诱因:Python 不允许在已运行的事件循环中再次调用 asyncio.run()。它内部会尝试启动新事件循环,但当前线程已有运行中的循环,导致阻塞等待自己结束——永远等不到。

常见于单元测试或脚本中误写:

import asyncio
<p>async def inner():
await asyncio.sleep(0.1)
return "done"</p><p>def bad_wrapper():</p><h1>❌ 错误:在同步函数里又调用 asyncio.run()</h1><pre class="brush:python;toolbar:false;">return asyncio.run(inner())  # 这里卡住

async def good_wrapper():

✅ 正确:await 协程对象

return await inner()

调用方式也需匹配

asyncio.run(good_wrapper()) # OK

asyncio.run(bad_wrapper()) # ❌ 死锁

  • 只要看到 RuntimeError: asyncio.run() cannot be called from a running event loop,基本就是这个原因
  • 所有被 async 修饰的函数必须用 await 调用,不能用 asyncio.run()
  • asyncio.run() 只应作为程序入口(顶层同步代码)使用一次

await asyncio.Lock() 后忘记 release() 或未用 async with

asyncio.Lock 是协程安全的,但它的使用规则和线程锁不同:它不支持手动 release() 后再 acquire(),更不能跨 await 点释放——一旦 await 导致协程让出控制权,而锁没释放,其他协程就会永久等待。

正确写法只有一种推荐路径:

python-parallelization
python-parallelization

将顺序 Python 代码转换为并行/并发实现,用于在需要并行化 Python 代码、提升性能时使用。

下载
lock = asyncio.Lock()
<p>async def critical_section():
async with lock:  # ✅ 自动 acquire + release,即使异常也安全
await asyncio.sleep(1)
return "processed"</p>
  • 不要写 await lock.acquire() + 手动 lock.release(),容易遗漏或提前释放
  • 尤其注意:lock.release() 在未持有锁时调用会抛 RuntimeError: release unlocked lock,但死锁往往发生在“一直不 release”
  • 如果需要超时控制,用 async with asyncio.timeout(2): 包裹 async with lock:

sync function 中调用 asyncio.get_event_loop().run_until_complete()

在非主线程、或已关闭的事件循环上下文中调用 run_until_complete(),常表现为卡死无报错。典型场景是多线程 Web 框架(如 Flask)里试图从请求处理函数中驱动协程。

例如:

from flask import Flask
import asyncio
<p>app = Flask(<strong>name</strong>)
loop = asyncio.new_event_loop()  # ❌ 错误:在非主线程/非标准上下文新建 loop</p><p>@app.route("/api")
def handler():</p><h1>这里可能运行在任意线程,loop 可能未启动或已关闭</h1><pre class="brush:python;toolbar:false;">return loop.run_until_complete(some_async_func())  # ⚠️ 极易死锁
  • 永远优先用 async def handler() 配合支持异步的框架(如 FastAPI、Starlette)
  • 若必须桥接同步环境,用 asyncio.run_coroutine_threadsafe(coro, loop) 并确保 loop 是运行中的(且在同一线程创建/启动)
  • 检查 loop.is_running() 和 loop.is_closed() 再操作,否则静默卡住

await 一个永远不会 resolve 的 Future 或 Task

协程挂起在某个 await 表达式上,而该表达式背后没有实际完成机制,就等于主动给自己加了无限等待。常见于:

  • 手动创建 asyncio.Future() 但忘了 set_result() 或 set_exception()
  • 等待一个已 cancel 但未 await 的 Task(cancel 不等于完成)
  • 使用 asyncio.wait_for() 但超时时间设为 None,且目标协程本身有逻辑缺陷无法退出

排查建议:

# 查看当前所有 pending task(调试时插入)
for task in asyncio.all_tasks():
    print(task.get_coro(), task.done(), task.cancelled())

重点关注状态为 pending 且长时间不变的任务,顺藤摸瓜看它 await 了什么。

死锁真正麻烦的地方不在现象,而在它不报错、不中断、只沉默——你得主动去问事件循环“现在谁卡着”,而不是等它开口告诉你。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

python

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1731

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

4404

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1709

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

25837

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3147

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3167

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1183

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

596

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2443

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习