首页后端开发PHPgearman怎样进行任务分发操作?一文看懂gearman的使用

gearman怎样进行任务分发操作?一文看懂gearman的使用

时间2024-03-25 20:42:03发布访客分类PHP浏览1062
导读:这篇文章给大家分享的是gearman使用的相关内容,下文介绍了gearman的安装使用以及gearman怎样进行任务分发的操作,文中示例代码介绍的很详细,对大家学习和工作都有一定参考价值,感兴趣的朋友接下来一起跟随小编看看吧。 一、安装ge...

这篇文章给大家分享的是gearman使用的相关内容,下文介绍了gearman的安装使用以及gearman怎样进行任务分发的操作,文中示例代码介绍的很详细,对大家学习和工作都有一定参考价值,感兴趣的朋友接下来一起跟随小编看看吧。

一、安装gearman

下载gearman源码包

https://launchpad.net/gearmand/+download

如: gearmand-1.1.12.tar.gz

下载php的gearman扩展包

http://pecl.php.net/package/gearman

如: gearman-1.1.2.tgz

安装gearman

>
     yum install boost-devel gperf libevent-devel libuuid-devel
>
     tar xf gearmand-1.1.12.tar.gz
>
     cd gearmand-1.1.12
>
     ./configure
>
     make &
    &
     make install

安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来)

>
     yum install autoconf
>
     tar xf gearman-1.1.2.tgz
>
     cd gearman-1.1.2
>
     /data/php56/bin/phpize
>
     ./configure --with-php-config=/data/php56/bin/php-config
>
     make &
    &
     make install

修改php.ini

>
     vi /data/php56/lib/php.ini

添加如下两项

extension_dir=/data/php56/lib/php/extensions/no-debug-zts-20131226/
extension=gearman.so

查看扩展

>
     /data/php56/bin/php -m

二、简单的使用gearman

gearman中请求的处理过程一般涉及三种角色:client-> job-> worker
其中client是请求的发起者
job是请求的调度者,用于把客户的请求分发到不同的worker上进行工作
worker是请求的处理者

比如这里我们要处理client向job发送一个请求,来计算两个数之和,job负责调度worker来具体实现计算两数之和。

首先我们编写client.php

?php
//创建一个客户端
$client = new GearmanClient();
    
//添加一个job服务
$client->
    addServer('127.0.0.1', 4730);
    
//doNormal是同步的,等待worker处理完成返回结果
//建议不要使用do()了
$ret = $client->
    doNormal('sum', serialize(array(10, 10)));


if($ret) {
    
  echo '计算结果:', $ret, "\n";

}
    

再编写worker.php

?php
//创建一个worker
$worker = new GearmanWorker();
    
//添加一个job服务
$worker->
    addServer('127.0.0.1', 4730);
    
//注册一个回调函数,用于业务处理
$worker->
addFunction('sum', function($job) {
    
  //workload()获取客户端发送来的序列化数据
  $data = unserialize($job->
    workload());
    

  return $data[0] + $data[1];

}
    );


//死循环
while(true) {
    
  //等待job提交的任务
  $ret = $worker->
    work();
    
  if ($worker->
returnCode() != GEARMAN_SUCCESS) {
    
    break;

  }

}
    

我们先启动gearmand服务

>
     mkdir -p /usr/local/var/log
>
     gearmand -d

运行worker文件

>
     /data/php56/bin/php /data/worker.php

再运行client文件

>
     /data/php56/bin/php /data/client.php

结果如下:

三、gearman异步的处理任务

这里我们client向job发送一个发送邮件的请求,不等待请求完成,继续向下执行。

client.php代码如下:

?php
//创建一个客户端
$client = new GearmanClient();
    
//添加一个job服务
$client->
    addServer('127.0.0.1', 4730);
    
//doBackground异步,返回提交任务的句柄
$ret = $client->
    doBackground('sendEmail', json_encode(array(
  'email' =>
     'test@qq.com',
  'title' =>
     '测试异步',
  'body' =>
     '异步执行好牛B的样子',
)));
    

//继续执行下面的代码
echo "我的内心毫无波动,甚至还想笑\n";


do {
    
  sleep(1);
    

  //获取任务句柄的状态
  //jobStatus返回的是一个数组
  //第一个,表示工作是否已经知道
  //第二个,工作是否在运行
  //第三和第四,分别对应完成百分比的分子与分母
  $status = $client->
    jobStatus($ret);

  
  echo "完成情况:{
$status[2]}
/{
$status[3]}
    \n";


  if(!$status[1]) {
    
    break;

  }

}
     while(true);
    

worker.php代码如下:

?php
//创建一个worker
$worker = new GearmanWorker();
    
//添加一个job服务
$worker->
    addServer('127.0.0.1', 4730);
    
//注册一个回调函数,用于业务处理
$worker->
addFunction('sendEmail', function($job) {
    
  //workload()获取客户端发送来的序列化数据
  $data = json_decode($job->
    workload(), true);
    
  //模拟发送邮件所用时间
  sleep(6);

  echo "发送{
$data['email']}
    邮件成功\n";

}
    );
    

//死循环
//等待job提交的任务
while($worker->
    work());
      

结果如下:

四、gearman并行的执行多个任务

我们如何并行的计算两个数的累加和? 通过addTask添加多个任务到队列,然后进行并行计算。

client.php代码如下:

?php
//创建一个客户端
$client = new GearmanClient();
    
//添加一个job服务
$client->
    addServer('127.0.0.1', 4730);
    
//设置任务完成时的回调函数
$client->
setCompleteCallback(function($task) {
    
  //获取由worker返回的数据
  echo $task->
    data(), "\n";

}
    );
    

//计算1到500的累加和
//添加五个任务到队列
$client->
    addTask('sum', json_encode(array(1, 100)));
    
$client->
    addTask('sum', json_encode(array(100, 200)));
    
$client->
    addTask('sum', json_encode(array(200, 300)));
    
$client->
    addTask('sum', json_encode(array(300, 400)));
    
$client->
    addTask('sum', json_encode(array(400, 500)));
    

//运行队列中的任务,do系列不需要runTask()
$client->
    runTasks();
    

worker.php代码如下:

?php
//创建一个worker
$worker = new GearmanWorker();
    
//添加一个job服务
$worker->
    addServer('127.0.0.1', 4730);
    
//注册一个回调函数,用于业务处理
$worker->
addFunction('sum', function($job) {
    
  //workload()获取客户端发送来的序列化数据
  $data = json_decode($job->
    workload(), true);
    
  sleep(1);
    
  $sum = 0;
    
  for($ix = $data[0];
     $ix  $data[1];
 ++$ix) {
    
    $sum += $ix;

  }
    
  return $sum;

}
    );
    

//死循环
//等待job提交的任务
while($worker->
    work());
    

我们开启5个worker工作进程,当运行客户端请求时,5个计算任务几乎是同时返回结果。

结果如下:

关于gearman怎样进行任务分发操作就介绍到这,上述示例有一定的参考价值,对大家学习gearman的使用也有一定的帮助,需要的朋友可以参考。最后,想要了解更多gearman的内容,大家可以关注其它的相关文章。

文本转载自脚本之家

声明:本文内容由网友自发贡献,本站不承担相应法律责任。对本内容有异议或投诉,请联系2913721942#qq.com核实处理,我们将尽快回复您,谢谢合作!


若转载请注明出处: gearman怎样进行任务分发操作?一文看懂gearman的使用
本文地址: https://pptw.com/jishu/653026.html
Java Servlet程序有何不同,主要用处是什么 新手如何理解JS事件冒泡,用代码怎样说明

游客 回复需填写必要信息