关于PHP实现异步操作的研究


Posted in PHP onFebruary 03, 2013

1.为啥PHP需要异步操作?

一般来说PHP适用的场合是web页面展示等耗时比较短的任务,如果对于比较花时间的操作如resize图片、大数据导入、批量发送EDM、SMS等,就很容易出现操作超时情况。你可以说我可以设置无限超时时间,等等你也要知道PHP有一个工作模式是fastcgi,PHP无限不超时,不代表fastcgi相应不超时……如果你还想说要fastcgi相应永不超时,我建议你应该跟你们的运维人员讨论去……

这个时候异步的操作就发挥他的作用了,由于是非阻塞操作,操作会即时返回,然后在后台再慢慢干活。管你超时不超时的,我就没有在当前的进程/线程下干活。看吧是不是很美好,不过其实这也是个坑……

2.PHP可以实现异步操作吗?

答案是肯定的,不过网上各种的纯PHP实现得就有点别扭了。socket模式、挂起进程模式、有的还直接fork进程。很好,各路神仙各显神通。如果运维人员看到的话,一定会×××××你们的,不把web server跑死才怪……

那还有其他更好的方法去实现这个异步操作的可能么?有,现在我们只有想怎么开外挂了。查一下PECL主流的外挂方案有一堆的××MQ(消息队列),其中有个用于任务分配的外挂进入了我们的视线Gearman(其实这家伙才是角,我就不详细介绍了,点连接看介绍)。

3.为啥选择Gearman?

别的不说,就说他的client多,支持很多语言的client,你可以使用大部分你喜欢的语言去写worker。我个人是很烦语言之争,你喜欢用神码语言写worker都随你喜欢。有数据持久化支持(就是把队列保存到数据库介质中,那故障恢复也好做),有群集支持(其实很多××MQ都有这些功能)。PECL上有扩展,也有纯PHP实现扩展。反正这个Gearman也活了很久了,杂七杂八的问题都基本上解决了。

4.基本思路

有了Gearman这外挂就简单多了。就是向gearman发送一个任务,把执行的任务发出去,然后等待worker去调用PHP cli去运行我们的php代码。

我就写了一下一个python的worker(别问我为啥用python,1.我会python,2.linux下不用装runtime),你可以自己根据思路写一个PHP的worker,不过嘛,本人是不太信得过PHP跑的worker。其他语言饭可以用java、node.js 或者其他语言实现一个worker试试。对用Golang写worker有兴趣的朋友可以找我。

phpasync_worker_py

不好意思,里面是没有注释的。一个配置文件,一个py脚本。基本的功能也就是分析一下调用的参数,然后调用PHP Cli,就是那样子而已。要让py脚本跑起来请自行安装python的gearman模块。

然后到PHP的部分先上测试代码:

<?php
require_once 'PHPAsyncClient.php';
date_default_timezone_set('Asia/Shanghai');
class AsyncTest {
    const
        LOG_FILE = '/debug.log';
    static public function run() {
        if (PHPAsyncClient::in_callback(__FILE__)) {
            self::log('php Async callback');
            PHPAsyncClient::parse();
            return;
        }
        if (PHPAsyncClient::is_main(__FILE__)) {
            self::log('main run');
            $async_call = PHPAsyncClient::getInstance();
            $async_call->AsyncCall('AsyncTest', 'callback', array(
                'content' => 'Hello World!!!',
            ), array(
                'class' => 'AsyncTest',
                'method' => 'callback',
                'params' => array(
                    'content' => 'Hello Callback!',
                ),
            ), __FILE__);
            return;
        }
    }
    static public function callback($args) {
        self::log('AsyncTest callback run');
        self::log('AsyncTest callback args:'.print_r($args, true));
    }
    static public function log($content) {
        $fullname = dirname(__FILE__).self::LOG_FILE;
        $content = date('[Y-m-d H:i:s]').$content."\n";
        file_put_contents($fullname, $content, FILE_APPEND);
    }
}
AsyncTest::run();

就3个静态方法,一个是用于调试的log方法,其他都是字面意思。这个例子是对这种调用方式有个初步印象。然后直接上PHP的所有源码:

php_async.zip

然后应该会有很多人会说,win下安装不了gearman……所以我把java版的gearman server也放上去吧。

java-gearman-service-0.6.6.zip

5.结论

经过以上配置犀牛一样大的家伙后(要装一个Gearman,还要跑个Py脚本),我们基本上就使PHP拥有了异步调用功能,当然其中还有一个状态维护神马的要自己去实现。所以发现,其实这个方案不咋样,太复杂了。还是使用一些web service的方式去做web callback会好点(问题是web callback一样会超时……),这个请留意后续。  

为防止上面的代码无法下载,三水点靠木特打包下载

原文链接:http://my.oschina.net/wakanoc/blog/101789

PHP 相关文章推荐
十天学会php之第十天
Oct 09 PHP
PHP 修复未正常关闭的HTML标签实现代码(支持嵌套和就近闭合)
Jun 07 PHP
php xml常用函数的集合(比较详细)
Jun 06 PHP
php实现数组筛选奇数和偶数示例
Apr 11 PHP
PHP独立Session数据库存储操作类分享
Jun 11 PHP
php在apache环境下实现gzip配置方法
Apr 02 PHP
Yii2学习笔记之汉化yii设置表单的描述(属性标签attributeLabels)
Feb 07 PHP
PHP 信号管理知识整理汇总
Feb 19 PHP
CI框架(CodeIgniter)实现的导入、导出数据操作示例
May 24 PHP
PHPStudy下如何为Apache安装SSL证书的方法步骤
Jan 23 PHP
PHP进阶学习之类的自动加载机制原理分析
Jun 18 PHP
php post换行的方法
Feb 03 PHP
PHP数组循环操作详细介绍 附实例代码
Feb 03 #PHP
php中将字符串转为HTML的实体引用的一个类
Feb 03 #PHP
php处理文件的小例子(解压缩,删除目录)
Feb 03 #PHP
php函数array_merge用法一例(合并同类数组)
Feb 03 #PHP
php存储过程调用实例代码
Feb 03 #PHP
php中导出数据到excel时数字变为科学计数的解决方法
Feb 03 #PHP
php中删除字符串中最先出现某个字符的实现代码
Feb 03 #PHP
You might like
echo, print, printf 和 sprintf 区别
2006/12/06 PHP
php 图片上传类代码
2009/07/17 PHP
PHP之生成GIF动画的实现方法
2013/06/07 PHP
PHP通过串口实现发送短信
2015/07/08 PHP
基于php双引号中访问数组元素报错的解决方法
2018/02/01 PHP
js身份证验证超强脚本
2008/10/26 Javascript
javascript 放大镜效果js组件 qsoft.PopBigImage.v0.35 加入了chrome支持
2009/04/07 Javascript
jQuery创建平滑的页面滚动(顶部或底部)
2013/02/26 Javascript
JavaScript获取图片的原始尺寸以宽度为例
2014/05/04 Javascript
Javascript无参数和有参数类继承问题解决方法
2015/03/02 Javascript
简介JavaScript中Math.LOG10E属性的使用
2015/06/14 Javascript
angularjs学习笔记之完整的项目结构
2015/09/26 Javascript
Javascript中浏览器窗口的基本操作总结
2016/08/18 Javascript
js从数组中删除指定值(不是指定位置)的元素实现代码
2016/09/13 Javascript
jquery在vue脚手架中的使用方式示例
2017/08/29 jQuery
Vuex提升学习篇
2018/01/11 Javascript
vue路由事件beforeRouteLeave及组件内定时器的清除方法
2018/09/29 Javascript
如何通过shell脚本自动生成vue文件详解
2019/09/10 Javascript
Echarts实现多条折线可拖拽效果
2019/12/19 Javascript
vue子组件改变父组件传递的prop值通过sync实现数据双向绑定(DEMO)
2020/02/01 Javascript
使用grappelli为django admin后台添加模板
2014/11/18 Python
Flask框架Jinjia模板常用语法总结
2018/07/19 Python
Django开发的简易留言板案例详解
2018/12/04 Python
Python基于聚类算法实现密度聚类(DBSCAN)计算【测试可用】
2018/12/26 Python
python 多个参数不为空校验方法
2019/02/14 Python
Python GUI编程 文本弹窗的实例
2019/06/11 Python
django xadmin 管理器常用显示设置方式
2020/03/11 Python
python对批量WAV音频进行等长分割的方法实现
2020/09/25 Python
python3定位并识别图片验证码实现自动登录功能
2021/01/29 Python
生物技术专业研究生自荐信
2013/09/22 职场文书
大学生思想汇报范文
2013/12/31 职场文书
排查整治工作方案
2014/06/09 职场文书
2015年司法局工作总结
2015/05/22 职场文书
医务人员岗前培训心得体会
2016/01/08 职场文书
Java虚拟机内存结构及编码实战分享
2022/04/07 Java/Android
MySQL sql模式设置引起的问题
2022/05/15 MySQL