Swoole5 协程 Redis pipeline,批量命令减少网络 IO 实操

大明吖_7982

大明吖_7982

2026-10-06

259人浏览

原创

swoole 5协程redis批量操作需协程化全链路:用co\redis开启pipeline,链式调用后exec一次性发送;单次命令数宜控在100–1000条,设超时防卡死,集群需按slot分组pipeline。

swoole5 协程 redis pipeline,批量命令减少网络 io 实操

直接用 Swoole 5 协程配合 Redis Pipeline 做批量操作,核心就三点:协程不阻塞、连接复用、命令打包发一次。不是光写 pipeline 就行,得让整个链路都“协程化”——包括连接获取、命令组装、结果解析。

协程 Redis 客户端必须支持 pipeline

Swoole 5 自带 Co\Redis,但它默认不开启 pipeline 模式,需要手动启用并确保使用的是协程安全的连接实例:

  • 不能用传统同步 Redis 扩展(如 phpredis),必须用 Co\Redis 或兼容协程的第三方客户端(如 hyperf/redis)
  • 每次调用 $redis->set() / get() 都是协程挂起点,但 pipeline 要先缓存命令,最后统一执行
  • 正确姿势是:调用 $redis->pipeline() 获取 pipeline 实例,再链式调用命令,最后 exec() 一次性发出

批量 get 的典型协程 pipeline 写法

比如要查 5000 个 key 的 value,不用 pipeline 会发 5000 次网络包;用 pipeline 只发 1 次:

use Swoole\Coroutine\Redis;

Co\run(function () {
    $redis = new Redis();
    $redis->connect('127.0.0.1', 6379);

    // 开启 pipeline
    $pipe = $redis->pipeline();

    $keys = array_map(fn($i) => "user:{$i}", range(1, 5000));
    foreach ($keys as $key) {
        $pipe->get($key); // 仅入队,不发网络请求
    }

    // 一次性发送全部命令,协程挂起等待响应
    $results = $pipe->exec(); // 返回数组,顺序与命令一致

    // $results[0] 对应第一个 get($keys[0]) 的结果,nil 表示 key 不存在
    var_dump(count(array_filter($results, fn($v) => $v !== false)));
});

注意:$pipe->exec() 是协程让出点,底层走的是非阻塞 socket write + read,不会卡住整个进程。

video-production-pipeline
video-production-pipeline

视频制作管线专家,适用于前期制作、资源生成和视频组装三个阶段。

下载

避免常见坑:分片与超时控制

Pipeline 不是越大越好,尤其在高延迟或弱网环境下:

  • 单次 pipeline 命令数建议控制在 100–1000 条之间;超过 2000 条易触发 Redis 输入缓冲区限制(默认 1GB,但实际受 client-output-buffer-limit 影响)
  • 可在 redis.conf 中调整:client-output-buffer-limit normal 256mb 128mb 60(防止大 pipeline 响应压爆内存)
  • Swoole 5 默认 socket 超时是 0(永不超时),生产环境务必设 $redis->set(['timeout' => 3]),否则 pipeline 卡住会导致整个协程无法调度
  • 集群环境(如 Redis Cluster)不原生支持跨 slot pipeline,需按 key hash 分组,每组单独 pipeline

和 Hyperf 结合更省心

如果你用 Hyperf 框架,hyperf/redis 已封装好协程 pipeline,且自动管理连接池:

use Hyperf\Redis\Redis;

$redis = make(Redis::class);
$pipe = $redis->pipeline();
foreach ($keys as $key) {
    $pipe->get($key);
}
$results = $pipe->exec(); // 自动从连接池取连接,执行完归还

它还支持 pipeline + Lua 脚本混合使用,适合需要原子性又想批量的场景(例如:批量读 + 条件更新),但要注意 Lua 脚本本身不能跨 slot。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

swoole redis pip

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
swoole为什么能常驻内存
swoole为什么能常驻内存

swoole常驻内存的特性:1. 事件驱动模型减少内存消耗;2. 协程并行执行任务占用更少内存;3. 协程池预分配协程消除创建开销;4. 静态变量保留状态减少内存分配;5. 共享内存跨协程共享数据降低内存开销。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.10

921

6

Swoole 安装与快速入门指南
Swoole 安装与快速入门指南

面向 PHP 开发者的 Swoole 入门指南,详细讲解 Swoole 扩展的安装方式(PECL 一键安装 / 源码编译安装 / Docker 镜像)、不同操作系统(Ubuntu/CentOS/macOS)的依赖准备与编译参数选择、php.ini 中扩展加载配置与 phpinfo() 验证、Swoole 与传统 PHP-FPM 运行模式的核心区别、第一个 TCP Server 与 HTTP Server 的创建与启动,帮助开发者快速理解

2026.05.18

222

26

Swoole 协程与异步编程实战
Swoole 协程与异步编程实战

深入讲解 Swoole 协程(Coroutine)体系的核心机制与实战应用,涵盖协程的创建方式(go / Co::create)与调度原理、协程与传统多进程/多线程的性能优势对比、Channel 通道的生产者-消费者通信模型、WaitGroup 协程同步等待、defer 延迟执行与资源释放、协程化 MySQL / Redis / HTTP 客户端的一键 Hook(Runtime::enableCoroutine)、连接池(Connect

2026.05.18

314

24

Swoole HTTP/WebSocket 服务器开发
Swoole HTTP/WebSocket 服务器开发

以 Web 应用开发为核心场景,讲解 Swoole HTTP Server 与 WebSocket Server 的完整开发流程,涵盖 HTTP Server 的请求解析(GET/POST/文件上传)与响应输出、路由分发设计与中间件实现、Cookie / Session 会话管理(结合 Redis 存储)、静态文件服务配置、WebSocket Server 的握手连接/消息收发/广播推送/心跳检测实现、在线聊天室与实时通知的项目实战、与

2026.05.18

396

20

Swoole与主流PHP框架集成教程合集
Swoole与主流PHP框架集成教程合集

本专题讲解 Swoole 与主流 PHP 框架的集成方案与性能提升实践,涵盖 Laravel Octane 的安装配置与 Swoole Worker 驱动接入、常驻内存下全局变量污染与单例陷阱的排查处理、请求上下文隔离策略、Hyperf 原生协程框架的项目搭建与注解式路由/依赖注入/AOP 切面使用、Swoft 框架的微服务组件集成、ThinkPHP 接入 Swoole 的改造要点、框架迁移中的兼容性问题(文件操作/Session/静态

2026.05.18

286

22

Swoole进程管理与高性能调优教程合集
Swoole进程管理与高性能调优教程合集

从架构原理到参数配置,全面讲解 Swoole 的进程管理体系与性能优化方法,涵盖 Master / Manager / Worker / Task 四层进程模型解析、Worker 进程数与 Task 进程数的合理配置、进程间通信(sendMessage / Pipeline / UnixSocket)机制、定时器(Timer / Tick)的使用与注意事项、Table 共享内存表的高性能数据共享、max_request 进程回收防止内存

2026.05.18

222

32

Swoole 微服务与分布式架构实践
Swoole 微服务与分布式架构实践

聚焦 Swoole 在微服务与分布式系统中的工程实践,讲解基于 Swoole TCP Server 的 RPC 服务开发(自定义协议/Protobuf 序列化/连接复用)、服务注册与发现(Consul / Nacos 对接)、负载均衡策略与健康检查、分布式任务队列(Task Worker / 结合 Redis 队列)实现异步处理、TCP 长连接网关的设计与万级连接管理、Swoole Process / ProcessPool 自定义守护

2026.05.18

379

29

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4289

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

3795

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Swoole手册
Swoole手册

共0课时 | 0人学习

ThinkPHP5.1完全开发手册
ThinkPHP5.1完全开发手册

共0课时 | 0人学习

swoole进程树解析
swoole进程树解析

共4课时 | 0.3万人学习