详解PHP swoole process的使用方法


Posted in PHP onAugust 26, 2017

引入背景:假如我们每天有10000个订单生成,需要同步到仓储系统中去,以前做法是开启一个crontab去跑这些任务,但是发现总有感觉同步效率低,间隔时间都是分钟级别的。

解决方案测试:我们将同步订单的任务表添加一个hash作为key,作为分发条件,因为mysql中select如果做mod函数是用不到索引的,所以我们自己做随机hash,但是务必不需要范围太大,以免服务器资源不够,方法是根据hashkey投放到不同的进程中进行同步,测试代码如下

<?php
/**
 * Created by PhpStorm.
 * User: xujun
 * Date: 2017/8/26
 * Time: 9:37
 */
//假定需要处理的数据如下
class Process{
  public $mpid=0;
  public $max_precess=5;
  //代替从数据库中读取的内容
  public $task = [
    ['uid'=>1,'uname'=>'bot','hash'=>1,'handle'=>'test'],
    ['uid'=>2,'uname'=>'bot1','hash'=>2,'handle'=>'test'],
    ['uid'=>3,'uname'=>'bot2','hash'=>3,'handle'=>'test'],
    ['uid'=>4,'uname'=>'bot3','hash'=>4,'handle'=>'test'],
    ['uid'=>2,'uname'=>'bot4','hash'=>2,'handle'=>'test'],
    ['uid'=>3,'uname'=>'bot5','hash'=>3,'handle'=>'test'],
    ['uid'=>4,'uname'=>'bot6','hash'=>1,'handle'=>'test'],
  ];
  public $works = [];
  public $swoole_table = NULL;
  //public $new_index=0;
  function test($index,$task){
    print_r("[".date('Y-m-d H:i:s')."]".'work-index:'.$index.'处理'.$task['uname'].'完成'.PHP_EOL);
  }

  public function __construct(){
    try {
      $this->swoole_table = new swoole_table(1024);
      $this->swoole_table->column('index', swoole_table::TYPE_INT);//用于父子进程间数据交换
      $this->swoole_table->create();

      swoole_set_process_name(sprintf('php-ps:%s', 'master'));
      $this->mpid = posix_getpid();
      $this->run();
      $this->processWait();
    }catch (\Exception $e){
      die('ALL ERROR: '.$e->getMessage());
    }
  }

  public function run(){
    for ($i=0; $i < $this->max_precess; $i++) {
      $this->CreateProcess();
    }
  }

  private function getTask($index){
    $_return = [];
    foreach ($this->task as $v){
      if($v['hash']==$index){
        $_return[] = $v;
      }
    }
    return $_return;
  }

  public function CreateProcess($index=null){
    if(is_null($index)){//如果没有指定了索引,新建的子进程,开启计数
      $index=$this->swoole_table->get('index');
      if($index === false){
        $index = 0;
      }else{
        $index = $index['index']+1;
      }
      print_r($index);
    }
    $this->swoole_table->set('index',array('index'=>$index));
    $process = new swoole_process(function(swoole_process $worker)use($index){

      swoole_set_process_name(sprintf('php-ps:%s',$index));
      $task = $this->getTask($index);
      foreach ($task as $v){
        call_user_func_array(array($this,$v['handle']),array($index,$v));
      }
      sleep(20);
    }, false, false);
    $pid=$process->start();

    $this->works[$index]=$pid;
    return $pid;
  }

  public function rebootProcess($ret){
    $pid=$ret['pid'];
    $index=array_search($pid, $this->works);
    if($index!==false){
      $index=intval($index);
      $new_pid=$this->CreateProcess($index);
      echo "rebootProcess: {$index}={$new_pid} Done\n";
      return;
    }
    throw new \Exception('rebootProcess Error: no pid');
  }

  public function processWait(){
    while(1) {
      if(count($this->works)){
        $ret = swoole_process::wait();
        if ($ret) {
          $this->rebootProcess($ret);
        }
      }else{
        break;
      }
    }
  }

}
$process = new Process();

这里代码中,使用了swoole_table作为进程间共享的内存,为了分配index。以及当进程退出后,父进程通过wait重新拉起该进程任务。

测试截图

进程ps

详解PHP swoole process的使用方法

结果 休眠20s后退出后会被自动拉起

详解PHP swoole process的使用方法

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

PHP 相关文章推荐
用windows下编译过的eAccelerator for PHP 5.1.6实现php加速的使用方法
Sep 30 PHP
php出现Cannot modify header information问题的解决方法大全
Apr 09 PHP
php include,include_once,require,require_once
Sep 05 PHP
php写的简易聊天室代码
Jun 04 PHP
PHP 登录记住密码实现思路
May 07 PHP
php分页函数示例代码分享
Feb 24 PHP
thinkphp微信开发(消息加密解密)
Dec 02 PHP
详解js异步文件加载器
Jan 24 PHP
php使用curl并发减少后端访问时间的方法分析
May 12 PHP
如何正确配置Nginx + PHP
Jul 15 PHP
微信公众号开发客服接口实例代码
Oct 21 PHP
Yii框架getter与setter方法功能与用法分析
Oct 22 PHP
Yii2框架可逆加密简单实现方法
Aug 25 #PHP
PHP5.6新增加的可变函数参数用法分析
Aug 25 #PHP
php变量与JS变量实现不通过跳转直接交互的方法
Aug 25 #PHP
CodeIgniter整合Smarty的方法详解
Aug 25 #PHP
PHP观察者模式原理与简单实现方法示例
Aug 25 #PHP
PHP实现的策略模式简单示例
Aug 25 #PHP
php实现简单的权限管理的示例代码
Aug 25 #PHP
You might like
编写漂亮的代码 - 将后台程序与前端程序分开
2008/04/23 PHP
PHP提取数据库内容中的图片地址并循环输出
2010/03/21 PHP
php简单复制文件的方法
2016/05/09 PHP
Javascript &amp; DHTML 实例编程(教程)(三)初级实例篇1—上传文件控件实例
2007/06/02 Javascript
一些主流JS框架中DOMReady事件的实现小结
2011/02/12 Javascript
Javascript实现的类似Google的Div拖动效果代码
2011/08/09 Javascript
用console.table()调试javascript
2014/09/04 Javascript
js设置document.domain实现跨域的注意点分析
2015/05/21 Javascript
JQuery datepicker 用法详解
2015/12/25 Javascript
浅谈js中对象的使用
2016/08/11 Javascript
CSS3 3D 技术手把手教你玩转
2016/09/02 Javascript
jQuery实现的表格展开伸缩效果实例
2016/09/07 Javascript
浅谈JQ中mouseover和mouseenter的区别
2016/09/13 Javascript
ES5学习教程之Array对象
2017/04/01 Javascript
axios进阶实践之利用最优雅的方式写ajax请求
2017/12/20 Javascript
详解webpack-dev-server使用http-proxy解决跨域问题
2018/01/13 Javascript
解决vue2 在mounted函数无法获取prop中的变量问题
2018/11/15 Javascript
JS数组扁平化、去重、排序操作实例详解
2020/02/24 Javascript
JavaScript交换变量常用4种方法解析
2020/09/02 Javascript
Vue实现手机号、验证码登录(60s禁用倒计时)
2020/12/19 Vue.js
详解Python的collections模块中的deque双端队列结构
2016/07/07 Python
python开发简易版在线音乐播放器
2017/03/03 Python
Docker部署Python爬虫项目的方法步骤
2020/01/19 Python
python能自学吗
2020/06/18 Python
Python如何发送与接收大型数组
2020/08/07 Python
python+appium+yaml移动端自动化测试框架实现详解
2020/11/24 Python
python 读取yaml文件的两种方法(在unittest中使用)
2020/12/01 Python
数据库的约束含义
2012/09/09 面试题
经理管理专业自荐信范文
2013/12/31 职场文书
教师党员公开承诺书
2014/03/25 职场文书
大气污染防治方案
2014/05/19 职场文书
视光学专业自荐信
2014/06/24 职场文书
诚信承诺书
2015/01/19 职场文书
导游词开场白
2015/01/31 职场文书
摩登时代观后感
2015/06/03 职场文书
团结友爱主题班会
2015/08/13 职场文书