Laravel怎么实现队列任务执行进度估算算法_Laravel基于历史执行时间预测【教程】

夏明吖_5963

夏明吖_5963

2026-05-07

536人浏览

原创

靠谱估算是用加权中位数:仅统计同一job_class+关键参数组合的最近15次成功耗时,排除失败/重试干扰;通过jobprocessed/jobfailed事件埋点,redis存储并自动截取;无历史数据时返回配置化兜底值;前端返回预估剩余时间而非百分比。

laravel怎么实现队列任务执行进度估算算法_laravel基于历史执行时间预测【教程】

队列任务执行时间怎么估算才靠谱

直接用平均耗时预测进度会严重失真——新任务可能比历史快 3 倍,也可能卡在某个慢 SQL 上拖成 10 分钟。Laravel 自身不提供进度估算,得自己补一层轻量逻辑。

核心思路是:只记录「完成态」的执行时间,排除失败、重试、超时任务的干扰;对同一 job_class + 关键参数组合(比如 $batchId 或 $chunkSize)维护最近 N 次成功耗时,用加权中位数(非平均值)抗异常点。

  • 失败/重试的任务不计入统计,否则会把 5s 的正常任务拉高到 40s(因重试了 7 次)
  • 按 job_class + 可识别业务维度分桶,比如 App\Jobs\ExportUserReportJob 和 $format === 'xlsx' 单独建桶
  • 推荐保留最近 15 条成功记录,用 array_values(array_slice($times, -15)) 动态截取,避免数据膨胀

Laravel 队列监听器里怎么安全采集耗时

别在 handle() 开头记开始时间、结尾算差值——如果 job 被 kill 或超时退出,时间戳就永远悬着。正确做法是利用 Laravel 的 JobProcessed 和 JobFailed 事件,在外部统一埋点。

在 App\Providers\EventServiceProvider 中注册:

Laravel
Laravel

避免常见的Laravel错误:N+1查询、批量赋值、缓存陷阱及队列序列化陷阱。

下载
protected $listen = [
    'Illuminate\Queue\Events\JobProcessed' => [
        'App\Listeners\LogJobDuration',
    ],
    'Illuminate\Queue\Events\JobFailed' => [
        'App\Listeners\DiscardFailedJobDuration',
    ],
];
  • JobProcessed 事件里能拿到 $event->job->resolveName()、$event->job->payload()['data']['command'](含反序列化后的参数),可提取关键标识字段
  • 用 Redis 的 LPUSH job_duration:{class}:{key} {ms} 存耗时,配合 LTRIM job_duration:{class}:{key} 0 14 控制长度
  • 别用数据库存——高并发下写入延迟和锁竞争会让统计本身变瓶颈

预测时怎么避免「刚上线就瞎猜」

新 job 类型或参数组合第一次运行时,Redis 里没历史数据,直接返回 null 或抛异常都不行。必须有兜底策略。

  • 查不到历史数据时,返回预设的保守基准值,比如 3000(3 秒),而不是 0 或 inf
  • 允许通过配置项 config('queue.job_duration_fallback_ms') 统一管理默认值,方便灰度调整
  • 对低频 job(比如每月跑一次的报表),可 fallback 到同类 job 的平均值,用 str_replace('Monthly', 'Weekly', $class) 粗粒度匹配,比纯拍脑袋强

前端轮询进度时后端该返回什么

别传「已执行 62%」这种幻觉数字。用户真正需要的是「大概还要等多久」,以及「现在卡在哪」。

API 返回结构建议长这样:

{
  "estimated_remaining_ms": 8400,
  "current_stage": "exporting",
  "history_count": 12,
  "is_stuck": false
}
  • estimated_remaining_ms = total_items × median_duration_per_item − elapsed_ms,比百分比更防误导
  • current_stage 必须由 job 主动上报(比如在循环里每处理 100 条发一次 Cache::set("job_{$id}_stage", "exporting")),不能靠猜
  • is_stuck 判断逻辑:当前耗时 > 3 × median_duration 且 current_stage 超过 90 秒未更新 → 触发告警,不是前端能解决的

真正的难点不在算法,而在于 stage 上报时机和失败清理——job 进程崩了,缓存里的 stage 就永远滞留。所以每次上报前先用 Cache::add("job_{$id}_lock", true, 30) 做轻量互斥,崩了也会自动过期。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

laravel

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

817

10

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

2024.04.09

815

9

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

2408

10

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.10

3421

7

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

2025.08.05

4770

22

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

2025.08.05

3196

13

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.05

6109

7

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

2026.03.04

1356

29

Laravel 框架安装指南
Laravel 框架安装指南

本指南详解 Laravel 框架安装全流程,涵盖 PHP 8.1+ 环境配置、Composer 依赖管理工具安装及国内镜像源优化。重点演示使用 composer create-project 命令创建 Laravel 10/11 项目,解决常见安装错误与依赖冲突。从环境搭建到项目初始化,助您快速完成 Laravel 开发环境部署,为后续 Web 应用开发奠定基础。适合 PHP 初学者与框架迁移开发者参考。

2026.04.09

195

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 182人学习

Composer手册
Composer手册

共0课时 | 0人学习