搜尋
首頁後端開發php教程php使用gearman进行任务分发

php使用gearman进行任务分发

Apr 26, 2018 am 09:40 AM
gearmanphp散佈


这篇文章介绍的内容是关于php使用gearman进行任务分发 ,有着一定的参考价值,现在分享给大家,有需要的朋友可以参考一下



一、安装gearman

下载gearman源码包



1


https://launchpad.net/gearmand/+download



如: gearmand-1.1.12.tar.gz

下载php的gearman扩展包



1

http://pecl.php.net/package/gearman



如: gearman-1.1.2.tgz

安装gearman



1

2

3

4

5


> yum install boost-devel gperf libevent-devel libuuid-devel
> tar xf gearmand-1.1.12.tar.gz
> cd gearmand-1.1.12
> ./configure
> make && make install



安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来)



1

2

3

4

5

6


> yum install autoconf
> tar xf gearman-1.1.2.tgz
> cd gearman-1.1.2
> /data/php56/bin/phpize
> ./configure --with-php-config=/data/php56/bin/php-config
> make && make install



修改php.ini



1


> vi /data/php56/lib/php.ini



添加如下两项



1

2


extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/
extension=gearman.so



查看扩展



1


> /data/php56/bin/php -m



  

二、简单的使用gearman

gearman中请求的处理过程一般涉及三种角色:client->job->worker
其中client是请求的发起者
job是请求的调度者,用于把客户的请求分发到不同的worker上进行工作
worker是请求的处理者

比如这里我们要处理client向job发送一个请求,来计算两个数之和,job负责调度worker来具体实现计算两数之和。

首先我们编写client.php



1

2

3

4

5

6

7

8

9

10

11

12


<?php
//创建一个客户端
$client = new GearmanClient();
//添加一个job服务
$client->addServer(&#39;127.0.0.1&#39;, 4730);
//doNormal是同步的,等待worker处理完成返回结果
//建议不要使用do()了
$ret = $client->doNormal(&#39;sum&#39;, serialize(array(10, 10)));
 
if($ret) {
    echo &#39;计算结果:&#39;, $ret, "\n";
}



再编写worker.php



1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21


<?php
//创建一个worker
$worker = new GearmanWorker();
//添加一个job服务
$worker->addServer(&#39;127.0.0.1&#39;, 4730);
//注册一个回调函数,用于业务处理
$worker->addFunction(&#39;sum&#39;, function($job) {
    //workload()获取客户端发送来的序列化数据
    $data = unserialize($job->workload());
 
    return $data[0] + $data[1];
});
 
//死循环
while(true) {
    //等待job提交的任务
    $ret = $worker->work();
    if ($worker->returnCode() != GEARMAN_SUCCESS) {
        break;
    }
}



我们先启动gearmand服务



1

2

> mkdir -p /usr/local/var/log
> gearmand -d



运行worker文件



1


> /data/php56/bin/php /data/worker.php



再运行client文件



1


> /data/php56/bin/php /data/client.php



结果如下:

 

三、gearman异步的处理任务

这里我们client向job发送一个发送邮件的请求,不等待请求完成,继续向下执行。

client.php代码如下:



1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31


<?php
//创建一个客户端
$client = new GearmanClient();
//添加一个job服务
$client->addServer(&#39;127.0.0.1&#39;, 4730);
//doBackground异步,返回提交任务的句柄
$ret = $client->doBackground(&#39;sendEmail&#39;, json_encode(array(
    &#39;email&#39; => &#39;test@qq.com&#39;,
    &#39;title&#39; => &#39;测试异步&#39;,
    &#39;body&#39; => &#39;异步执行好牛B的样子&#39;,
)));
 
//继续执行下面的代码
echo "我的内心毫无波动,甚至还想笑\n";
 
do {
    sleep(1);
 
    //获取任务句柄的状态
    //jobStatus返回的是一个数组
    //第一个,表示工作是否已经知道
    //第二个,工作是否在运行
    //第三和第四,分别对应完成百分比的分子与分母
    $status = $client->jobStatus($ret);
     
    echo "完成情况:{$status[2]}/{$status[3]}\n";
 
    if(!$status[1]) {
        break;
    }
} while(true);



worker.php代码如下:



1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17


<?php
//创建一个worker
$worker = new GearmanWorker();
//添加一个job服务
$worker->addServer(&#39;127.0.0.1&#39;, 4730);
//注册一个回调函数,用于业务处理
$worker->addFunction(&#39;sendEmail&#39;, function($job) {
    //workload()获取客户端发送来的序列化数据
    $data = json_decode($job->workload(), true);
    //模拟发送邮件所用时间
    sleep(6);
    echo "发送{$data[&#39;email&#39;]}邮件成功\n";
});
 
//死循环
//等待job提交的任务
while($worker->work());  



结果如下:

 

四、gearman并行的执行多个任务

我们如何并行的计算两个数的累加和? 通过addTask添加多个任务到队列,然后进行并行计算。

client.php代码如下:



1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21


<?php
//创建一个客户端
$client = new GearmanClient();
//添加一个job服务
$client->addServer(&#39;127.0.0.1&#39;, 4730);
//设置任务完成时的回调函数
$client->setCompleteCallback(function($task) {
    //获取由worker返回的数据
    echo $task->data(), "\n";
});
 
//计算1到500的累加和
//添加五个任务到队列
$client->addTask(&#39;sum&#39;, json_encode(array(1, 100)));
$client->addTask(&#39;sum&#39;, json_encode(array(100, 200)));
$client->addTask(&#39;sum&#39;, json_encode(array(200, 300)));
$client->addTask(&#39;sum&#39;, json_encode(array(300, 400)));
$client->addTask(&#39;sum&#39;, json_encode(array(400, 500)));
 
//运行队列中的任务,do系列不需要runTask()
$client->runTasks();



worker.php代码如下:



1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20


<?php
//创建一个worker
$worker = new GearmanWorker();
//添加一个job服务
$worker->addServer(&#39;127.0.0.1&#39;, 4730);
//注册一个回调函数,用于业务处理
$worker->addFunction(&#39;sum&#39;, function($job) {
    //workload()获取客户端发送来的序列化数据
    $data = json_decode($job->workload(), true);
    sleep(1);
    $sum = 0;
    for($ix = $data[0]; $ix < $data[1]; ++$ix) {
        $sum += $ix;
    }
    return $sum;
});
 
//死循环
//等待job提交的任务
while($worker->work());



我们开启5个worker工作进程,当运行客户端请求时,5个计算任务几乎是同时返回结果。

结果如下:


相关推荐:

PHP使用zlib扩展实现GZIP压缩输出的方法

PHP使用Nginx实现反向代理

以上是php使用gearman进行任务分发的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
超越炒作:評估當今PHP的角色超越炒作:評估當今PHP的角色Apr 12, 2025 am 12:17 AM

PHP在現代編程中仍然是一個強大且廣泛使用的工具,尤其在web開發領域。 1)PHP易用且與數據庫集成無縫,是許多開發者的首選。 2)它支持動態內容生成和麵向對象編程,適合快速創建和維護網站。 3)PHP的性能可以通過緩存和優化數據庫查詢來提升,其廣泛的社區和豐富生態系統使其在當今技術棧中仍具重要地位。

PHP中的弱參考是什麼?什麼時候有用?PHP中的弱參考是什麼?什麼時候有用?Apr 12, 2025 am 12:13 AM

在PHP中,弱引用是通過WeakReference類實現的,不會阻止垃圾回收器回收對象。弱引用適用於緩存系統和事件監聽器等場景,需注意其不能保證對象存活,且垃圾回收可能延遲。

解釋PHP中的__ Invoke Magic方法。解釋PHP中的__ Invoke Magic方法。Apr 12, 2025 am 12:07 AM

\_\_invoke方法允許對象像函數一樣被調用。 1.定義\_\_invoke方法使對象可被調用。 2.使用$obj(...)語法時,PHP會執行\_\_invoke方法。 3.適用於日誌記錄和計算器等場景,提高代碼靈活性和可讀性。

解釋PHP 8.1中的纖維以進行並發。解釋PHP 8.1中的纖維以進行並發。Apr 12, 2025 am 12:05 AM

Fibers在PHP8.1中引入,提升了並發處理能力。 1)Fibers是一種輕量級的並發模型,類似於協程。 2)它們允許開發者手動控制任務的執行流,適合處理I/O密集型任務。 3)使用Fibers可以編寫更高效、響應性更強的代碼。

PHP社區:資源,支持和發展PHP社區:資源,支持和發展Apr 12, 2025 am 12:04 AM

PHP社區提供了豐富的資源和支持,幫助開發者成長。 1)資源包括官方文檔、教程、博客和開源項目如Laravel和Symfony。 2)支持可以通過StackOverflow、Reddit和Slack頻道獲得。 3)開發動態可以通過關注RFC了解。 4)融入社區可以通過積極參與、貢獻代碼和學習分享來實現。

PHP與Python:了解差異PHP與Python:了解差異Apr 11, 2025 am 12:15 AM

PHP和Python各有優勢,選擇應基於項目需求。 1.PHP適合web開發,語法簡單,執行效率高。 2.Python適用於數據科學和機器學習,語法簡潔,庫豐富。

php:死亡還是簡單地適應?php:死亡還是簡單地適應?Apr 11, 2025 am 12:13 AM

PHP不是在消亡,而是在不斷適應和進化。 1)PHP從1994年起經歷多次版本迭代,適應新技術趨勢。 2)目前廣泛應用於電子商務、內容管理系統等領域。 3)PHP8引入JIT編譯器等功能,提升性能和現代化。 4)使用OPcache和遵循PSR-12標準可優化性能和代碼質量。

PHP的未來:改編和創新PHP的未來:改編和創新Apr 11, 2025 am 12:01 AM

PHP的未來將通過適應新技術趨勢和引入創新特性來實現:1)適應云計算、容器化和微服務架構,支持Docker和Kubernetes;2)引入JIT編譯器和枚舉類型,提升性能和數據處理效率;3)持續優化性能和推廣最佳實踐。

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解鎖Myrise中的所有內容
3 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

Atom編輯器mac版下載

Atom編輯器mac版下載

最受歡迎的的開源編輯器

MantisBT

MantisBT

Mantis是一個易於部署的基於Web的缺陷追蹤工具,用於幫助產品缺陷追蹤。它需要PHP、MySQL和一個Web伺服器。請查看我們的演示和託管服務。

ZendStudio 13.5.1 Mac

ZendStudio 13.5.1 Mac

強大的PHP整合開發環境

EditPlus 中文破解版

EditPlus 中文破解版

體積小,語法高亮,不支援程式碼提示功能

SecLists

SecLists

SecLists是最終安全測試人員的伙伴。它是一個包含各種類型清單的集合,這些清單在安全評估過程中經常使用,而且都在一個地方。 SecLists透過方便地提供安全測試人員可能需要的所有列表,幫助提高安全測試的效率和生產力。清單類型包括使用者名稱、密碼、URL、模糊測試有效載荷、敏感資料模式、Web shell等等。測試人員只需將此儲存庫拉到新的測試機上,他就可以存取所需的每種類型的清單。