核心是解耦任务定义、执行逻辑与配置参数,使执行器灵活适配不同任务;通过结构化配置(调用目标、动态参数、重试、超时等)、通用执行器类(支持上下文注入、异步调度、错误处理)、热加载与链式调用、安全接口(白名单校验、权限控制)实现高内聚低耦合的异步任务系统。

核心是把任务定义、执行逻辑和配置参数解耦,让同一个执行器能灵活适配不同任务。
定义任务配置结构
每个异步任务需要明确:调用目标(函数或方法)、参数(静态值或运行时解析)、重试策略、超时、并发限制、回调钩子。建议用字典或数据类封装:
- 函数引用用 callable 类型,支持普通函数、绑定方法、lambda(注意序列化限制)
- 参数分两类:static_args(直接传入)和 dynamic_kwargs(含表达式或延迟求值,如
"{user.id}"或lambda ctx: get_token(ctx.user)) - 重试配置包含最大次数、退避方式(固定/指数)、可忽略的异常类型列表
- 超时单位统一为秒,支持 float;并发控制可用信号量或队列容量限制
构建通用执行器类
执行器不硬编码具体业务逻辑,只负责调度、上下文注入、错误处理和结果归集:
- 初始化时接收配置对象(如
TaskConfig实例),并预设默认值(如默认重试 3 次、超时 30 秒) - 提供 execute 方法,接受运行时上下文(如用户、请求 ID、数据库 session),用于动态参数解析和日志追踪
- 内部用
asyncio.create_task启动任务,并用asyncio.wait_for包裹超时,用try/except做重试循环 - 失败时记录错误详情(包括原始异常、重试次数、上下文快照),支持写入日志或发告警
支持配置热加载与组合
避免重启服务即可更新任务行为:
- 从 JSON/YAML 文件或数据库读取配置,监听文件变更或定时拉取,触发执行器内部配置刷新
- 允许任务链式调用:一个任务成功后自动触发下一个,配置中用 next_task 字段指向另一组配置 ID
- 支持条件跳过:在配置里加 condition 字段,值为字符串表达式(如
"ctx.user.is_premium")或 callable,执行前求值决定是否跳过 - 关键配置项(如超时、重试)支持环境变量覆盖,便于不同部署环境差异化设置
暴露安全可控的调用接口
对外提供简洁 API,隐藏底层复杂性:
- 统一入口函数如
run_task(task_id: str, **runtime_ctx),根据 ID 查找配置并执行 - 返回结构化结果:包含状态(success/partial/fail)、输出值、耗时、重试次数、错误堆栈(可选脱敏)
- 禁止直接传入任意代码或函数名字符串,所有任务 ID 必须白名单注册,防止 RCE 风险
- 对敏感任务(如支付、删库)增加额外校验层,例如要求显式传入
confirm=True或匹配特定角色权限











