Python 并发程序中的常见坑点

冬枫酱_3669

冬枫酱_3669

2026-01-29

878人浏览

原创

asyncio.run() 只能在顶层脚本入口调用,不可在已运行事件循环(如Jupyter、FastAPI)中重复使用;需用create_task()或await替代;协程必须显式await,否则不执行;共享状态须用asyncio.Lock()保护;CPU密集任务须用run_in_executor()或to_thread()卸载。

python 并发程序中的常见坑点

asyncio.run() 不能在已运行的事件循环中调用

这是新手最常遇到的 RuntimeError: asyncio.run() cannot be called from a running event loop。根本原因不是代码写错了,而是你在 Jupyter、IPython 或已启动 asyncio 的上下文(比如 FastAPI 启动后)里又调用了 asyncio.run()。

解决方法很简单:只在顶层脚本入口用一次 asyncio.run();在交互环境或已有事件循环中,改用 asyncio.create_task() 或 await 直接执行协程。

  • ✅ 正确:脚本最外层 asyncio.run(main())
  • ❌ 错误:在 async def handler() 里再写 asyncio.run(another_coro())
  • ⚠️ 注意:asyncio.get_event_loop().run_until_complete() 在 Python 3.10+ 已不推荐,且在嵌套场景下行为更难预测

await 一个普通函数或未 await 的协程对象

常见现象是程序“看似跑完了”,但异步任务根本没执行——比如忘了在 asyncio.sleep(1) 前加 await,或者把 fetch_data()(返回协程对象)直接传给 print() 而不是 await fetch_data()。

Python 不会报错,只会打印类似 ,而后续逻辑可能因变量类型错误崩溃。

  • ✅ 检查所有调用:确认函数是否带 async 声明,如果是,必须 await
  • ✅ 用 inspect.iscoroutine() 或 inspect.iscoroutinefunction() 在调试时验证返回值类型
  • ⚠️ 特别注意第三方库:有些函数名像异步(如 aiohttp.ClientSession.get),但返回的是 ClientResponse 对象,真正要 await 的是它的 .text() 或 .json() 方法

共享状态未加锁导致竞态条件

很多人以为 “async 就是线程安全的”,结果在多个协程里同时修改一个全局列表或字典,出现数据丢失或索引错乱。asyncio 是单线程并发,但协程切换点(await)就是竞态窗口。

arcgis-js
arcgis-js

提供 ArcGIS Maps SDK for JavaScript 开发辅助,涵盖 2D/3D 地图视图、图层管理、数据可视化、空间分析等功能模块的参考和示例指导。

下载

典型错误:多个协程都执行 results.append(data),但 append 不是原子操作(先读长度、再写入、再更新长度)。

  • ✅ 用 asyncio.Lock() 包裹临界区,不是 threading.Lock
  • ✅ 更推荐无状态设计:每个协程生成独立结果,最后用 asyncio.gather() 收集,避免共享可变状态
  • ⚠️ asyncio.Queue 是线程/协程安全的,适合生产者-消费者模式;但直接读写普通 dict/list 一律视为不安全

长时间 CPU 密集型操作阻塞整个事件循环

asyncio 不是万能加速器。如果你在协程里写了个 for i in range(10**7): total += i,整个事件循环就卡死了——因为没 await,就没有让出控制权的机会。

这种问题在本地测试时不易察觉(小数据量快),一上生产就暴露:HTTP 超时、心跳断连、其他协程饿死。

  • ✅ CPU 密集任务必须移出事件循环:用 loop.run_in_executor() 丢给线程池或进程池
  • ✅ 用 asyncio.to_thread()(Python 3.9+)替代手写 executor 调用,更简洁
  • ⚠️ 不要用 time.sleep(),它会彻底阻塞;必须用 await asyncio.sleep()

真正难处理的从来不是“怎么写 async”,而是判断哪些操作必须 await、哪些必须 offload、哪些压根不该放进协程里。边界模糊的地方,往往藏在第三方库文档的角落,或你自己的 for 循环里。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2023.08.07

2235

5

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.23

3602

1

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

2023.10.13

1196

3

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

2025.09.10

4139

7

Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

2025.12.22

119

5

Python 微服务架构与 FastAPI 框架
Python 微服务架构与 FastAPI 框架

本专题系统讲解 Python 微服务架构设计与 FastAPI 框架应用,涵盖 FastAPI 的快速开发、路由与依赖注入、数据模型验证、API 文档自动生成、OAuth2 与 JWT 身份验证、异步支持、部署与扩展等。通过实际案例,帮助学习者掌握 使用 FastAPI 构建高效、可扩展的微服务应用,提高服务响应速度与系统可维护性。

2026.02.06

574

18

Python Web框架FastAPI 全栈开发教程合集
Python Web框架FastAPI 全栈开发教程合集

以 FastAPI 为核心,讲解现代 Python Web API 的高效开发方式,涵盖路由定义与路径参数/查询参数/请求体绑定、Pydantic 模型的数据校验与序列化、依赖注入(Depends)系统的分层设计、中间件与 CORS 配置、OAuth2 + JWT 认证流程、后台任务(BackgroundTasks)、WebSocket 实时通信、SQLAlchemy 异步 ORM 集成、自动生成 OpenAPI/Swagger 交互文

2026.05.09

696

23

Python FastAPI异步微服务与高性能接口设计
Python FastAPI异步微服务与高性能接口设计

本专题聚焦 Python FastAPI 框架在高性能接口与微服务开发中的应用,讲解异步请求处理、依赖注入机制、路由设计、数据库异步操作以及接口性能优化策略。结合实际项目案例,帮助开发者构建高并发、低延迟的现代化后端服务架构。

2026.06.16

579

12

python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end='\n', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.27

3220

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程