Laravel如何防止低优先级任务永久饥饿_Laravel防止低优先级任务永久饥饿方法【公平】

浅伟大大_5016

浅伟大大_5016

2026-04-14

235人浏览

原创

应采用轮询式多队列监听并配置权重、动态队列权重调度中间件、数据库时间戳补偿查询及最大等待时长告警四类方法防止低优先级任务饥饿。

laravel如何防止低优先级任务永久饥饿_laravel防止低优先级任务永久饥饿方法【公平】

如果您在 Laravel 中为报表、邮件等任务设置了低优先级队列,但发现这些任务长期无法被执行,甚至被高优先级任务完全压制,则可能是由于队列消费策略缺乏公平性保障。以下是防止低优先级任务永久饥饿的具体方法:

一、采用轮询式多队列监听并配置权重

通过强制 worker 按固定比例轮询多个队列,确保低优先级队列始终获得执行机会,避免因单一高优队列持续有任务而造成低优队列无限等待。

1、启动 queue:work 时显式指定多个队列名,并用英文逗号分隔:php artisan queue:work --queue=high,medium,low

2、为每个队列设置独立的 --sleep 值:使用自定义命令包装器或 Supervisor 配置,在 high 队列空闲时缩短 sleep(如 --sleep=1),在 low 队列轮到时适当延长(如 --sleep=3),但不设为 0 或过长

3、在 config/queue.php 的 redis 连接中启用 block_for 选项(Laravel 10+ 支持):'block_for' => 1,使 pop 操作在无任务时最多阻塞 1 秒,提升轮询响应性

4、验证轮询行为:在各队列任务 handle() 方法中记录日志,检查 low 队列是否在每 N 次 high 队列消费后至少触发一次

二、引入动态队列权重调度中间件

通过中间件在任务入队前计算其“饥饿度”,对长时间未被执行的低优先级任务自动提升其队列权重,使其更易被 worker 拉取。

1、创建中间件类:php artisan make:queue:middleware AdjustQueueWeight

2、在 handle() 方法中读取任务的 attempts() 和入队时间($job->payload['pushedAt']),若 low 队列任务等待超 300 秒且重试次数 ≥ 2,则调用 $job->onQueue('low_urgent')

3、在 config/queue.php 中新增连接 low_urgent,指向同一 Redis 数据库但使用不同 queue 名称(如 queues:low_urgent)

4、为 low_urgent 队列单独启动一个高响应 worker:php artisan queue:work --queue=low_urgent --sleep=0.5 --max-jobs=5

三、基于数据库 jobs 表的时间戳补偿查询

当使用 database 驱动时,可修改队列拉取逻辑,优先选择 queue 字段匹配且 reserved_at 为空、且 created_at 超过阈值的任务,从而打破 FIFO 绝对顺序,缓解饥饿。

1、运行迁移添加字段:php artisan make:migration add_hunger_score_to_jobs_table

Laravel Creem Agent
Laravel Creem Agent

Creem 支付商店助理 — 查询订阅、客户、交易、产品,执行心跳检查,管理本地 Laravel支付商店。

下载

2、在 migration 中为 jobs 表添加 hunger_score 列:$table->unsignedTinyInteger('hunger_score')->default(0)->index()

3、创建自定义 DatabaseQueue 类,继承 Illuminate\Queue\DatabaseQueue,重写 getJobForQueue() 方法,在 SQL 查询中加入 ORDER BY hunger_score DESC, created_at ASC

4、在任务分发前更新 hunger_score:使用 DB::table('jobs')->where('queue', 'low')->whereNull('reserved_at')->increment('hunger_score', 1)

四、设置低优先级任务最大等待时长并触发降级告警

为防止低优先级任务在队列中滞留过久,通过定时扫描机制识别超时任务,并主动干预其调度路径或通知运维人员。

1、新建 Artisan 命令:php artisan make:command CheckLowPriorityHunger

2、在 handle() 方法中执行查询:DB::table('jobs')->where('queue', 'low')->where('created_at', 'subMinutes(10))->count()

3、若数量 > 0,则触发告警:Log::warning('发现 low 队列中存在 ' . $count . ' 个超时 10 分钟的任务')

4、同时执行补偿操作:DB::table('jobs')->where('queue', 'low')->where('created_at', 'subMinutes(5))->update(['queue' => 'low_emergency'])

五、使用 Horizon 的平衡策略与队列分组隔离

Horizon 提供了可视化队列监控和高级调度策略,可通过配置 balance 策略与 process 分配,确保低优先级队列不被高优进程吞没。

1、在 config/horizon.php 的 environments 数组中,为 local/production 定义 supervisor:'supervisor-1' => ['connection' => 'redis', 'queue' => ['high'], 'balance' => 'simple', 'processes' => 10]

2、为低优先级单独定义 supervisor:'supervisor-low' => ['connection' => 'redis', 'queue' => ['low'], 'balance' => 'auto', 'processes' => 2, 'minProcesses' => 1, 'maxProcesses' => 4]

3、启用 memory-limit 和 timeout 限制:'timeout' => 60, 'memory' => 128,防止单个 high 任务长期占用 worker 进程

4、在 Horizon UI 中确认 low 队列的 Recent Jobs 列表中存在非空记录,且 Last Job 时间距当前不超过配置的 --sleep 值

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

laravel

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

837

10

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

2024.04.09

815

9

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

2468

10

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.10

3721

7

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

2025.08.05

5250

22

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

2025.08.05

3516

13

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.05

6649

7

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

2026.03.04

1376

29

Laravel 框架安装指南
Laravel 框架安装指南

本指南详解 Laravel 框架安装全流程,涵盖 PHP 8.1+ 环境配置、Composer 依赖管理工具安装及国内镜像源优化。重点演示使用 composer create-project 命令创建 Laravel 10/11 项目,解决常见安装错误与依赖冲突。从环境搭建到项目初始化,助您快速完成 Laravel 开发环境部署,为后续 Web 应用开发奠定基础。适合 PHP 初学者与框架迁移开发者参考。

2026.04.09

195

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 198人学习

Composer手册
Composer手册

共0课时 | 0人学习