生产环境Uvicorn怎么配置Worker数量

小敏酱_4101

小敏酱_4101

2026-11-12

432人浏览

原创

--workers非默认启用,仅在CPU利用率长期低于60%、存在同步阻塞或GPU显存闲置时才有效;须依物理核心数、内存/GPU容量及请求模式综合设定,并验证进程数、连接分布与CPU负载。

生产环境uvicorn怎么配置worker数量

别直接套“2×CPU+1”,生产环境设错 --workers 常导致吞吐不升反降、OOM 或连接池爆满。

看 CPU 利用率再决定要不要加 worker

Uvicorn 单进程靠 async/await 已能扛住数千 I/O 请求。加 --workers 不是默认动作,而是对症下药:

  • 压测时 htop 显示 CPU 利用率持续低于 60%,但延迟飙升、QPS 卡住 —— 说明单核吃不满
  • 代码里有 time.sleep(1)、requests.get()、pandas.read_csv() 等同步阻塞调用
  • 跑的是 GPU 推理服务(如 LLM 前处理),单 worker 只能串行发 batch,显存大量闲置

worker 数不能只看 nproc,得看三件事

真实取值由物理核心数、内存/GPU 显存容量、请求模式共同制约:

  • 查物理核心数:nproc 输出为 4,--workers 4 是安全起点;超过 8 后吞吐增长通常趋缓
  • 看内存压力:每个 worker 是独立 Python 进程,加载一次大模型就占一份显存/CPU 内存;RTX 3060(12GB)实测最多稳住 4 个 worker
  • 观察流量特征:如果请求极不均匀(例如每分钟集中来 100 个大 batch),worker 数宁少勿多,避免冷启动和空转开销

配完必须验证是否真生效

很多团队配了 --workers 8 却只看到 1 个 uvicorn 进程,常见失效原因:

Uvicorn 0.52.1
Uvicorn 0.52.1

Uvicorn 0.52.1 是 Python ASGI Web 服务器,提供异步应用服务及 WebSocket 支持,常用于 FastAPI、Starlette 等应用的开发和部署。本下载为官方 PyPI 通用 wheel 包,可使用 pip 安装,并由包管理器处理所需依赖。

下载
  • 同时启用了 --reload:二者互斥,--reload 强制降级为单进程,且 fork 失败时静默回退
  • 用 Gunicorn 做前置但漏写 -k uvicorn.workers.UvicornWorker:Gunicorn 默认起同步 worker,async def 路由直接报 TypeError: 'coroutine' object is not callable
  • Docker 容器未配 CPU quota:docker run --cpus=2 却设 --workers 4,内核调度失灵,部分 worker 启动即被 kill
  • Windows 下 spawn 启动方式导致模块顶层代码重复执行,触发初始化冲突

验证三步走:ps aux | grep uvicorn | wc -l 必须等于你设的数值;lsof -i :8000 看连接是否分散到多个 PID;压测中盯住 top -p $(pgrep -f "uvicorn.*app"),主进程 CPU 应始终低于 5%。

多 worker 下数据库和缓存必须重设计

每个 worker 进程完全隔离,以下资源不是共享的:

  • 模块级全局变量(比如 cache = {})—— 每个 worker 各有一份,数据不同步
  • 数据库连接池(DB_SOURCES 中每个 worker 都持有一套独立池)—— 总连接数 = db_pool_size + db_max_overflow × APP_WORKERS,别超 MySQL 的 max_connections
  • lifespan 的 startup/shutdown 会在每个 worker 里各执行一次 —— 别在这里发通知或初始化全局 cache

真正容易被忽略的点是:RuoYi-FastAPI 这类项目里,.env.prod 中的 APP_WORKERS 控制的是 uvicorn 启动参数,但它透传给 uvicorn 的前提是没被 Gunicorn 或 reload 覆盖 —— 很多人改了配置却没生效,卡在启动链路最前端。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API
Python FastAPI异步API开发_Python怎么用FastAPI构建异步API

Python FastAPI 异步开发利用 async/await 关键字,通过定义异步视图函数、使用异步数据库库 (如 databases)、异步 HTTP 客户端 (如 httpx),并结合后台任务队列(如 Celery)和异步依赖项,实现高效的 I/O 密集型 API,显著提升吞吐量和响应速度,尤其适用于处理数据库查询、网络请求等耗时操作,无需阻塞主线程。

2025.12.22

119

5

Python 微服务架构与 FastAPI 框架
Python 微服务架构与 FastAPI 框架

本专题系统讲解 Python 微服务架构设计与 FastAPI 框架应用,涵盖 FastAPI 的快速开发、路由与依赖注入、数据模型验证、API 文档自动生成、OAuth2 与 JWT 身份验证、异步支持、部署与扩展等。通过实际案例,帮助学习者掌握 使用 FastAPI 构建高效、可扩展的微服务应用,提高服务响应速度与系统可维护性。

2026.02.06

594

18

Python Web框架FastAPI 全栈开发教程合集
Python Web框架FastAPI 全栈开发教程合集

以 FastAPI 为核心,讲解现代 Python Web API 的高效开发方式,涵盖路由定义与路径参数/查询参数/请求体绑定、Pydantic 模型的数据校验与序列化、依赖注入(Depends)系统的分层设计、中间件与 CORS 配置、OAuth2 + JWT 认证流程、后台任务(BackgroundTasks)、WebSocket 实时通信、SQLAlchemy 异步 ORM 集成、自动生成 OpenAPI/Swagger 交互文

2026.05.09

756

23

Python FastAPI异步微服务与高性能接口设计
Python FastAPI异步微服务与高性能接口设计

本专题聚焦 Python FastAPI 框架在高性能接口与微服务开发中的应用,讲解异步请求处理、依赖注入机制、路由设计、数据库异步操作以及接口性能优化策略。结合实际项目案例,帮助开发者构建高并发、低延迟的现代化后端服务架构。

2026.06.16

639

12

Postman身份认证怎么配置
Postman身份认证怎么配置

本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。

2026.11.06

80

12

Postman请求头Headers怎么设置
Postman请求头Headers怎么设置

围绕Postman HTTP请求头配置展开,讲解Headers选项的具体使用方式,包括Key和Value参数填写、请求头信息添加、常见Header字段设置及请求头修改方法,帮助用户解决接口调试过程中遇到的请求头配置问题。

2026.11.06

40

13

Postman接口请求发送教程
Postman接口请求发送教程

详细介绍Postman接口请求的创建与发送方法,涵盖GET和POST请求、URL配置、请求参数、Headers请求头、Body请求体设置以及响应结果查看,帮助用户掌握Postman接口请求的完整操作流程。

2026.11.06

80

10

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

2026.11.05

60

12

DBeaver安全防护教程大全
DBeaver安全防护教程大全

DBeaver安全防护专题,围绕数据库连接安全、账号密码保护和访问权限管理展开,整理SSL/TLS加密连接、SSH隧道、数据库凭据保存及证书验证等配置方法,同时介绍敏感信息保护、远程连接风险和高权限账号使用等注意事项,帮助用户提高数据库日常管理的安全性。

2026.11.05

60

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方部署指南
Uvicorn官方部署指南

共0课时 | 0人学习

Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习