Workerman怎么实现异步Redis队列消费?

阿晨吖_6137

阿晨吖_6137

2026-05-25

312人浏览

原创

Workerman实现Redis队列消费的核心是用BRPOP替代RPOP+sleep轮询,避免CPU空转和Redis无效负载;每个Worker独占Redis连接,超时设1秒,配合多进程并发与手动失败重试,确保高可用与稳定性。

workerman怎么实现异步redis队列消费?

Workerman 实现异步 Redis 队列消费,核心不是“让 Workerman 自带队列功能”,而是用它常驻内存、多进程、事件驱动的特性,去高效、稳定地 BRPOP 消费 Redis List。关键在于避免轮询、控制并发、隔离失败任务——否则容易卡死、漏单、压垮 Redis。

为什么不能用 RPOP + sleep 轮询?

这是新手最常踩的坑:在定时器里反复 RPOP,没数据就 sleep(1)。问题很直接:

  • RPOP 是非阻塞的,空队列时立刻返回 null,导致 CPU 空转、Redis 连接频繁建立销毁
  • 每秒几十次无意义请求,对 Redis 是无效负载,监控里 instantaneous_ops_per_second 会虚高
  • 无法精准控制消费节奏,比如想“有任务才处理,没任务就歇着”,BRPOP 才是正解

正确做法是改用 BRPOP,它会在队列为空时阻塞连接,直到新任务到达或超时。超时时间建议设为 1 秒,既防长阻塞,又避免高频轮询。

BRPOP 怎么在 Workerman 里安全使用?

Workerman 的 Worker 进程是单线程的,BRPOP 会阻塞当前进程——这没问题,正是我们想要的“空闲即休眠”。但要注意三点:

  • 每个 Worker 进程必须创建自己的 Redis 实例,不能共用一个连接(否则多个进程 BRPOP 会互相干扰)
  • BRPOP 超时后必须检查返回值是否为 false 或空数组,再决定是否继续下一轮,不能无条件重试
  • 业务逻辑出错时,别直接 exit 或抛未捕获异常,否则整个 Worker 进程退出,少一个消费者

示例片段(关键逻辑):

Sentinal Redis
Sentinal Redis

监控Redis服务器健康状况、内存、性能及BullMQ队列。检查队列深度、失败任务,分析慢查询并诊断问题。

下载
$redis = new Redis();
$redis->connect('127.0.0.1', 6379);
$queueName = 'queue:order';

Timer::add(0.1, function() use ($redis, $queueName) {
    // 阻塞最多 1 秒,返回形如 [queue_name, task_json] 或 false
    $result = $redis->brPop([$queueName], 1);
    if (is_array($result) && count($result) === 2) {
        $taskData = json_decode($result[1], true);
        processTask($taskData);
    }
});

并发控制和失败重试怎么落地?

Workerman 本身不提供重试机制,得自己封装。重点不是“重试几次”,而是“重试是否合理”:

  • 网络超时、HTTP 请求失败这类临时错误,适合短间隔重试(如 [1, 5, 30] 秒)
  • 数据库唯一键冲突、参数校验失败这类业务错误,重试毫无意义,应直接记录日志并丢弃,或转入死信队列(LPUSH queue:dlq ...)
  • 并发靠 $worker->count 控制进程数,但注意:每个进程对应一个 Redis 连接,max_connections 需同步调大(Redis 默认 10000,一般够用)

别把 concurrent => false 当成“顺序执行”保障——Redis List 本身是 FIFO,但多个 Worker 并发 BRPOP 仍可能因处理速度不同导致乱序。真要严格顺序,只能单进程 + BRPOP,或改用 Redis Stream + XREADGROUP。

配置和部署最容易忽略的三个点

很多项目跑着跑着就停了,往往不是代码问题,而是环境细节没对齐:

  • Linux 下用 php start.php start -d 启动,但忘记加 nohup 或 systemd 管理,终端关闭进程就死了
  • Windows 开发用 start_for_win.bat,但生产环境没切到 Linux,pcntl_fork 不可用,多进程实际退化为单进程
  • Redis 密码或 auth 配置写错,Worker 启动时不报错(因为连接延迟到第一次 BRPOP 才触发),但始终消费不到数据,排查时容易误判为队列没推入

真正难的从来不是写几行 BRPOP,而是让这几十行代码,在凌晨三点服务器负载飙升时,依然稳稳地从 Redis 里捞出那条该处理的订单。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

redis workerman

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

5009

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

4595

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

8972

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

683

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

776

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

9382

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1200

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1516

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

7978

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go-Zero官方文档
Go-Zero官方文档

共0课时 | 0人学习