Workerman如何实现实时数据采集系统

蓮花仙者

蓮花仙者

2026-06-29

808人浏览

原创

用workerman搭建实时数据采集系统需分层解耦:串口设备须用独立进程监听防阻塞,tcp设备需自定义协议防粘包,http设备要限流防刷;数据经redis缓冲分流后,再异步落库并websocket广播。

workerman如何实现实时数据采集系统

用Workerman搭建实时数据采集系统,核心是让硬件设备上报的数据不堆积、不丢包、不阻塞主事件循环,同时能按业务规则分流处理。这不是写个监听端口就完事,而是要分层解耦:采集层只管收,解析层做清洗,业务层做判断,存储层保落地。

第一步:选对通信协议并隔离阻塞操作

确认你的硬件走哪种通路——串口设备(如老式RFID读卡器)必须用独立进程监听,不能在Workerman主进程里 fopen('/dev/ttyUSB0');TCP设备(如现代网关、POS机)可直接用Worker监听,但必须自定义协议防粘包;HTTP设备(如部分IoT传感器)走Workerman\Http\Server,但需加限流防刷。

串口监听推荐用Python子进程:启动一个单独的serial_reader.py,持续读取/dev/ttyUSB0,校验波特率9600-8-N-1后,把原始帧通过TCP发给Workerman的127.0.0.1:23456;【切勿在onWorkerStart里阻塞式打开串口,否则整个Worker进程永久卡死】

TCP设备若用定长头+变长体协议,必须继承\Workerman\Protocols\ProtocolInterface重写input()方法:先读前4字节获取body长度,再等待凑够指定字节数才触发onMessage,否则两条刷卡记录可能被拼成一条乱码。

第二步:数据接收与轻量预处理

方法一:TCP直收(适用于网关、考勤机)

新建Worker('tcp://0.0.0.0:23456'),在onMessage中只做三件事:JSON_decode校验、提取card_id/epc/ts字段、推入Redis List(如rfid:raw);【严禁在此处查MySQL或调外部API,耗时超过5ms就会拖垮整个连接池】

方法二:HTTP回调收(适用于Webhook型传感器)

用Workerman\Http\Server监听8080端口,在onRequest里用file_get_contents('php://input')获取原始body,立即用json_decode($raw, true)解析,过滤掉无epc或无ts字段的脏包,再lPush到同一Redis队列。

Workerman
Workerman

最新主版本,继续强化高性能异步网络能力,适合 WebSocket、HTTP 服务、长连接、IM、IoT 等场景。 本次版本主要围绕稳定性、协议兼容以及连接处理能力优化,依旧保持超轻量和纯 PHP 特性。 适用于 PHP 8.x 环境,可配合 webman、GatewayWorker 等生态使用。

下载

方法三:MQTT桥接收(适用于物联网平台)

启用Workerman\Mqtt\Client连接emqx或mosquitto,订阅主题sensor/#,收到消息后提取payload,同样清洗后进Redis;注意MQTT QoS设为1,避免网络抖动导致消息丢失。

第三步:用Redis做缓冲与分流

第一步:用eval原子脚本每200ms从rfid:raw取5条,ltrim截断,返回数组;这比单纯lpop+for循环更抗并发。

第二步:对每条数据做白名单比对——查Redis Hash staff:by_card,键为epc值;查不到就lPush到rfid:unknown,供人工复核;查到但status为inactive,直接丢弃不入库。

第三步:命中白名单后,用SETNX写入attendance:20260625:{epc},EX 300防止当日重复打卡;同时publish到channel task_20260625_a,触发WebSocket广播。

第四步:多终端实时广播与落库

前端手持机连WebSocket时,调用GatewayClient::bindUid($uid)绑定用户,再bindGroup('task_20260625_a')加入任务组;后端收到新标签后,立刻sendToGroup('task_20260625_a', json_encode([...])),前端onmessage更新界面计数。

落库操作必须异步:用pcntl_fork起子进程,或投递到Gearman队列;INSERT语句带UNIQUE KEY (pos_id, trace_no),用INSERT IGNORE忽略重复;每次$db->query()后必须判if ($insert_id === false),否则MySQL连接异常时数据静默消失。

离线缓存策略:手持机断网时本地SQLite暂存,恢复后POST到/api/batch_sync,Workerman用curl_multi并发提交,每批≤50条,超时设为3秒。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

workerman

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

2023.09.01

5455

6

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.11

3588

5

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.11

1786

5

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

2023.10.23

2272

4

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

2023.10.23

2784

6

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.03

1999

9

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.09

3030

8

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.13

2312

8

sprintf函数用法详解
sprintf函数用法详解

sprintf函数的用法:1、格式化字符串;2、指定输出宽度和精度;3、返回值。更多关于sprintf函数用法详解的内容,大家可以阅读下面的文章。

2023.11.27

10930

4

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Webman中文手册
Webman中文手册

共0课时 | 0人学习

Workerman官方手册
Workerman官方手册

共0课时 | 0人学习

ThinkPHP5.1完全开发手册
ThinkPHP5.1完全开发手册

共0课时 | 0人学习