php使用gearman进行任务分发操作实例详解
本文实例讲述了php使用gearman进行任务分发操作。分享给大家供大家参考,具体如下:
一、安装gearman
下载gearman源码包
https://launchpad.net/gearmand/+download
如:gearmand-1.1.12.tar.gz
下载php的gearman扩展包
http://pecl.php.net/package/gearman
如:gearman-1.1.2.tgz
安装gearman
>yuminstallboost-develgperflibevent-devellibuuid-devel >tarxfgearmand-1.1.12.tar.gz >cdgearmand-1.1.12 >./configure >make&&makeinstall
安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来)
>yuminstallautoconf >tarxfgearman-1.1.2.tgz >cdgearman-1.1.2 >/data/php56/bin/phpize >./configure--with-php-config=/data/php56/bin/php-config >make&&makeinstall
修改php.ini
>vi/data/php56/lib/php.ini
添加如下两项
extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/ extension=gearman.so
查看扩展
>/data/php56/bin/php-m
二、简单的使用gearman
gearman中请求的处理过程一般涉及三种角色:client->job->worker
其中client是请求的发起者
job是请求的调度者,用于把客户的请求分发到不同的worker上进行工作
worker是请求的处理者
比如这里我们要处理client向job发送一个请求,来计算两个数之和,job负责调度worker来具体实现计算两数之和。
首先我们编写client.php
addServer('127.0.0.1',4730); //doNormal是同步的,等待worker处理完成返回结果 //建议不要使用do()了 $ret=$client->doNormal('sum',serialize(array(10,10))); if($ret){ echo'计算结果:',$ret,"\n"; }
再编写worker.php
addServer('127.0.0.1',4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sum',function($job){ //workload()获取客户端发送来的序列化数据 $data=unserialize($job->workload()); return$data[0]+$data[1]; }); //死循环 while(true){ //等待job提交的任务 $ret=$worker->work(); if($worker->returnCode()!=GEARMAN_SUCCESS){ break; } }
我们先启动gearmand服务
>mkdir-p/usr/local/var/log >gearmand-d
运行worker文件
>/data/php56/bin/php/data/worker.php
再运行client文件
>/data/php56/bin/php/data/client.php
结果如下:
三、gearman异步的处理任务
这里我们client向job发送一个发送邮件的请求,不等待请求完成,继续向下执行。
client.php代码如下:
addServer('127.0.0.1',4730); //doBackground异步,返回提交任务的句柄 $ret=$client->doBackground('sendEmail',json_encode(array( 'email'=>'test@qq.com', 'title'=>'测试异步', 'body'=>'异步执行好牛B的样子', ))); //继续执行下面的代码 echo"我的内心毫无波动,甚至还想笑\n"; do{ sleep(1); //获取任务句柄的状态 //jobStatus返回的是一个数组 //第一个,表示工作是否已经知道 //第二个,工作是否在运行 //第三和第四,分别对应完成百分比的分子与分母 $status=$client->jobStatus($ret); echo"完成情况:{$status[2]}/{$status[3]}\n"; if(!$status[1]){ break; } }while(true);
worker.php代码如下:
addServer('127.0.0.1',4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sendEmail',function($job){ //workload()获取客户端发送来的序列化数据 $data=json_decode($job->workload(),true); //模拟发送邮件所用时间 sleep(6); echo"发送{$data['email']}邮件成功\n"; }); //死循环 //等待job提交的任务 while($worker->work());
结果如下:
四、gearman并行的执行多个任务
我们如何并行的计算两个数的累加和?通过addTask添加多个任务到队列,然后进行并行计算。
client.php代码如下:
addServer('127.0.0.1',4730); //设置任务完成时的回调函数 $client->setCompleteCallback(function($task){ //获取由worker返回的数据 echo$task->data(),"\n"; }); //计算1到500的累加和 //添加五个任务到队列 $client->addTask('sum',json_encode(array(1,100))); $client->addTask('sum',json_encode(array(100,200))); $client->addTask('sum',json_encode(array(200,300))); $client->addTask('sum',json_encode(array(300,400))); $client->addTask('sum',json_encode(array(400,500))); //运行队列中的任务,do系列不需要runTask() $client->runTasks();
worker.php代码如下:
addServer('127.0.0.1',4730); //注册一个回调函数,用于业务处理 $worker->addFunction('sum',function($job){ //workload()获取客户端发送来的序列化数据 $data=json_decode($job->workload(),true); sleep(1); $sum=0; for($ix=$data[0];$ix<$data[1];++$ix){ $sum+=$ix; } return$sum; }); //死循环 //等待job提交的任务 while($worker->work());
我们开启5个worker工作进程,当运行客户端请求时,5个计算任务几乎是同时返回结果。
结果如下:
更多关于PHP相关内容感兴趣的读者可查看本站专题:《PHP进程与线程操作技巧总结》、《PHP网络编程技巧总结》、《PHP基本语法入门教程》、《PHP数组(Array)操作技巧大全》、《php字符串(string)用法总结》、《php+mysql数据库操作入门教程》及《php常见数据库操作技巧汇总》
希望本文所述对大家PHP程序设计有所帮助。
声明:本文内容来源于网络,版权归原作者所有,内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:czq8825#qq.com(发邮件时,请将#更换为@)进行举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。