关于PHP实现异步操作的研究


Posted in PHP onFebruary 03, 2013

1.为啥PHP需要异步操作?

一般来说PHP适用的场合是web页面展示等耗时比较短的任务,如果对于比较花时间的操作如resize图片、大数据导入、批量发送EDM、SMS等,就很容易出现操作超时情况。你可以说我可以设置无限超时时间,等等你也要知道PHP有一个工作模式是fastcgi,PHP无限不超时,不代表fastcgi相应不超时……如果你还想说要fastcgi相应永不超时,我建议你应该跟你们的运维人员讨论去……

这个时候异步的操作就发挥他的作用了,由于是非阻塞操作,操作会即时返回,然后在后台再慢慢干活。管你超时不超时的,我就没有在当前的进程/线程下干活。看吧是不是很美好,不过其实这也是个坑……

2.PHP可以实现异步操作吗?

答案是肯定的,不过网上各种的纯PHP实现得就有点别扭了。socket模式、挂起进程模式、有的还直接fork进程。很好,各路神仙各显神通。如果运维人员看到的话,一定会×××××你们的,不把web server跑死才怪……

那还有其他更好的方法去实现这个异步操作的可能么?有,现在我们只有想怎么开外挂了。查一下PECL主流的外挂方案有一堆的××MQ(消息队列),其中有个用于任务分配的外挂进入了我们的视线Gearman(其实这家伙才是角,我就不详细介绍了,点连接看介绍)。

3.为啥选择Gearman?

别的不说,就说他的client多,支持很多语言的client,你可以使用大部分你喜欢的语言去写worker。我个人是很烦语言之争,你喜欢用神码语言写worker都随你喜欢。有数据持久化支持(就是把队列保存到数据库介质中,那故障恢复也好做),有群集支持(其实很多××MQ都有这些功能)。PECL上有扩展,也有纯PHP实现扩展。反正这个Gearman也活了很久了,杂七杂八的问题都基本上解决了。

4.基本思路

有了Gearman这外挂就简单多了。就是向gearman发送一个任务,把执行的任务发出去,然后等待worker去调用PHP cli去运行我们的php代码。

我就写了一下一个python的worker(别问我为啥用python,1.我会python,2.linux下不用装runtime),你可以自己根据思路写一个PHP的worker,不过嘛,本人是不太信得过PHP跑的worker。其他语言饭可以用java、node.js 或者其他语言实现一个worker试试。对用Golang写worker有兴趣的朋友可以找我。

phpasync_worker_py

不好意思,里面是没有注释的。一个配置文件,一个py脚本。基本的功能也就是分析一下调用的参数,然后调用PHP Cli,就是那样子而已。要让py脚本跑起来请自行安装python的gearman模块。

然后到PHP的部分先上测试代码:

<?php
require_once 'PHPAsyncClient.php';
date_default_timezone_set('Asia/Shanghai');
class AsyncTest {
    const
        LOG_FILE = '/debug.log';
    static public function run() {
        if (PHPAsyncClient::in_callback(__FILE__)) {
            self::log('php Async callback');
            PHPAsyncClient::parse();
            return;
        }
        if (PHPAsyncClient::is_main(__FILE__)) {
            self::log('main run');
            $async_call = PHPAsyncClient::getInstance();
            $async_call->AsyncCall('AsyncTest', 'callback', array(
                'content' => 'Hello World!!!',
            ), array(
                'class' => 'AsyncTest',
                'method' => 'callback',
                'params' => array(
                    'content' => 'Hello Callback!',
                ),
            ), __FILE__);
            return;
        }
    }
    static public function callback($args) {
        self::log('AsyncTest callback run');
        self::log('AsyncTest callback args:'.print_r($args, true));
    }
    static public function log($content) {
        $fullname = dirname(__FILE__).self::LOG_FILE;
        $content = date('[Y-m-d H:i:s]').$content."\n";
        file_put_contents($fullname, $content, FILE_APPEND);
    }
}
AsyncTest::run();

就3个静态方法,一个是用于调试的log方法,其他都是字面意思。这个例子是对这种调用方式有个初步印象。然后直接上PHP的所有源码:

php_async.zip

然后应该会有很多人会说,win下安装不了gearman……所以我把java版的gearman server也放上去吧。

java-gearman-service-0.6.6.zip

5.结论

经过以上配置犀牛一样大的家伙后(要装一个Gearman,还要跑个Py脚本),我们基本上就使PHP拥有了异步调用功能,当然其中还有一个状态维护神马的要自己去实现。所以发现,其实这个方案不咋样,太复杂了。还是使用一些web service的方式去做web callback会好点(问题是web callback一样会超时……),这个请留意后续。  

为防止上面的代码无法下载,三水点靠木特打包下载

原文链接:http://my.oschina.net/wakanoc/blog/101789

PHP 相关文章推荐
php开启安全模式后禁用的函数集合
Jun 26 PHP
PHP 冒泡排序 二分查找 顺序查找 二维数组排序算法函数的详解
Jun 25 PHP
php 不使用js实现页面跳转
Feb 11 PHP
php实现快速排序的三种方法分享
Mar 12 PHP
php获取文章上一页与下一页的方法
Dec 01 PHP
PHP自动生成表单代码分享
Jun 19 PHP
最准确的php截取字符串长度函数
Oct 29 PHP
PHP的Yii框架中移除组件所绑定的行为的方法
Mar 18 PHP
CI框架文件上传类及图像处理类用法分析
May 18 PHP
PHP简单实现冒泡排序的方法
Dec 26 PHP
PHP使用文件锁解决高并发问题示例
Mar 29 PHP
PDO::getAttribute讲解
Jan 28 PHP
PHP数组循环操作详细介绍 附实例代码
Feb 03 #PHP
php中将字符串转为HTML的实体引用的一个类
Feb 03 #PHP
php处理文件的小例子(解压缩,删除目录)
Feb 03 #PHP
php函数array_merge用法一例(合并同类数组)
Feb 03 #PHP
php存储过程调用实例代码
Feb 03 #PHP
php中导出数据到excel时数字变为科学计数的解决方法
Feb 03 #PHP
php中删除字符串中最先出现某个字符的实现代码
Feb 03 #PHP
You might like
php调用google接口生成二维码示例
2014/04/28 PHP
PHP通过文件路径获取文件名的实例代码
2018/10/14 PHP
JavaScript中void(0)的具体含义解释
2007/02/27 Javascript
DOM 中的事件处理介绍
2012/01/18 Javascript
设置checkbox为只读(readOnly)的两种方式
2013/10/11 Javascript
js统计页面的来访次数实现代码
2014/05/09 Javascript
超炫的jquery仿flash导航栏特效
2014/11/11 Javascript
javascript原始值和对象引用实例分析
2015/04/25 Javascript
JQuery中基础过滤选择器用法实例分析
2015/05/18 Javascript
JS原型对象的创建方法详解
2016/06/16 Javascript
node.js中cluster的使用教程
2017/06/09 Javascript
详解Node.js读写中文内容文件操作
2018/10/10 Javascript
微信小程序页面间值传递的两种方法
2018/11/26 Javascript
Vue开发之封装上传文件组件与用法示例
2019/04/25 Javascript
如何使用50行javaScript代码实现简单版的call,apply,bind
2019/08/14 Javascript
使用 Github Actions 自动部署 Angular 应用到 Github Pages的方法
2020/07/20 Javascript
js实现碰撞检测
2021/01/29 Javascript
Python实现SMTP发送邮件详细教程
2021/03/02 Python
Python读写Json涉及到中文的处理方法
2016/09/12 Python
python的几种矩阵相乘的公式详解
2019/07/10 Python
pycharm 批量修改变量名称的方法
2019/08/01 Python
Python笔记之观察者模式
2019/11/20 Python
Python 序列化和反序列化库 MarshMallow 的用法实例代码
2020/02/25 Python
python3.7.3版本和django2.2.3版本是否可以兼容
2020/09/01 Python
pytorch加载语音类自定义数据集的方法教程
2020/11/10 Python
优秀教师主要事迹
2014/02/01 职场文书
促销活动总结模板
2014/07/01 职场文书
民主生活会对照检查材料思想汇报
2014/09/27 职场文书
单位接收函格式
2015/01/30 职场文书
青岛导游词
2015/02/12 职场文书
校园环境卫生倡议书
2015/04/29 职场文书
起诉书格式范文
2015/05/20 职场文书
圆明园观后感
2015/06/03 职场文书
公司车辆维修管理制度
2015/08/05 职场文书
无故旷工检讨书
2015/08/15 职场文书
导游词之杭州西湖
2019/09/19 职场文书