asyncio.timeout() 如何与 asyncio.wait() 组合使用不泄漏任务

轻枫同学_5886

轻枫同学_5886

2026-01-26

279人浏览

原创

asyncio.timeout() 不能直接包裹 asyncio.wait(),因其只限制 wait() 调用等待时间,不中断已提交的 pending task;正确做法是用 wait() 的 timeout 参数获取 done/pending,再显式 cancel 并 await gather(pending, return_exceptions=true) 清理。

asyncio.timeout() 如何与 asyncio.wait() 组合使用不泄漏任务

asyncio.timeout() 不能直接包裹 asyncio.wait() 调用

因为 asyncio.wait() 本身返回的是 (done, pending) 集合,并不 await 任何协程,所以把 asyncio.timeout() 放在它外面(比如 async with asyncio.timeout(1): await asyncio.wait(...))根本不会中断内部仍在运行的 task —— 它只限制了 wait() 这个函数调用本身的等待时间,而那些已提交但未完成的 task 会继续后台执行,造成任务泄漏。

必须显式取消 pending 任务并 await 其 cleanup

正确做法是:先用 asyncio.wait()timeout 参数获取结果,再检查哪些 task 还在 pending 中,手动调用 .cancel(),然后 await asyncio.gather(*pending, return_exceptions=True) 确保它们真正结束。

  • asyncio.wait()timeout 参数是“最多等多久”,不是“强制中断”,它只影响等待行为,不触达 task 内部
  • task.cancel() 只是设 flag,需后续 await taskgather 才真正让协程退出(比如响应 CancelledError
  • return_exceptions=True 是必须的,否则任意一个 task 因 cancel 抛出 CancelledError 会让整个 gather 中断

推荐封装成可复用的 timeout_wait 函数

避免每次重复写 cancel + gather 逻辑。例如:

async def timeout_wait(fs, *, timeout):
    done, pending = await asyncio.wait(fs, timeout=timeout)
    if pending:
        for t in pending:
            t.cancel()
        await asyncio.gather(*pending, return_exceptions=True)
    return done, pending

注意:fs 应该是 asyncio.Task 实例列表(不是协程对象),否则 task.cancel() 无效;如果传入的是协程,先用 asyncio.create_task() 包一层。

asyncio.timeout() 更适合包裹单个协程,而非 wait 场景

如果你实际只需要等「任意一个完成」或「全部完成」且有超时控制,优先考虑 asyncio.wait_for()asyncio.shield() + 显式 cancel 模式。例如:

  • 等第一个完成:await asyncio.wait_for(asyncio.shield(your_coro), timeout=1)
  • 等全部完成但整体限时:await asyncio.wait_for(asyncio.gather(*coros), timeout=1)
  • asyncio.timeout() 最自然的用法是 async with asyncio.timeout(1): await some_coro()

混合使用时最容易忽略的是:cancel 后没 await cleanup,导致 task 状态停留在 CANCELLED 但协程栈未退出,event loop 里残留引用,下次 run_until_complete 可能报 Task was destroyed but it is pending!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

4407

5

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.10

2048

6

Aionclaw智能助手介绍
Aionclaw智能助手介绍

本专题汇总了AionClaw(AI龙虾助手)的功能介绍与在线使用入口。AionClaw是杭州趣猿人工智能有限公司推出的桌面级AI智能体,能直接在电脑上读写文件、运行脚本、操作浏览器,自动交付Word、PPT、Excel等成品。

2026.09.20

0

13

AionClaw AI智能体与电脑自动化任务执行功能使用教程
AionClaw AI智能体与电脑自动化任务执行功能使用教程

AionClaw专题整理AI智能体与电脑自动化相关功能使用教程,涵盖安装部署、AI任务执行、Skills技能、文件处理、浏览器控制、电脑操作、持久记忆、聊天工具连接以及办公、编程和内容创作等功能,帮助用户快速掌握AionClaw的实际使用方法。

2026.09.20

0

15

AI视频生成软件推荐
AI视频生成软件推荐

本专题汇总了当前主流的AI视频生成软件推荐与排行榜单,涵盖seko、AniShort、剧云、Lovart、LiblibAI及立刻mv等热门工具。同时整理了各软件在文生视频、图生视频、时长限制、画质表现及免费额度等方面的差异对比,助您快速选对适合创作需求的AI视频生成工具。

2026.09.16

180

9

ai生成视频的工具免费版合集
ai生成视频的工具免费版合集

本专题汇总了当前免费AI生成视频工具的排行榜与推荐清单,涵盖seko、讯飞智作、AniShort及剧云、Lovart等多模型集成平台。同时整理了各工具的免费额度、输出时长、水印政策及适用场景差异,助您快速选择合适工具开启AI视频创作。

2026.09.16

60

10

Pandas时间序列分析与可视化报表
Pandas时间序列分析与可视化报表

本专题整理Pandas日期转换、时间索引、重采样、滚动窗口、时区处理、plot绘图、Styler表格样式和报表输出方法。

2026.09.16

80

23

Pandas数据筛选索引与清洗处理
Pandas数据筛选索引与清洗处理

本专题整理Pandas中的loc、iloc、条件筛选、query查询、缺失值处理、重复值删除、类型转换和字符串列清洗方法。

2026.09.16

60

25

Pandas数据读取导入与文件导出处理
Pandas数据读取导入与文件导出处理

本专题整理Pandas读取CSV、Excel、JSON、SQL、Parquet等文件的方法,以及to_csv、to_excel、to_sql和to_parquet等常用数据导出流程。

2026.09.16

40

27

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
GDB Reference Card
GDB Reference Card

共0课时 | 0人学习

《Debugging with GDB》用户手册
《Debugging with GDB》用户手册

共0课时 | 0人学习

Valgrind FAQ
Valgrind FAQ

共0课时 | 0人学习