关于PHP实现异步操作的研究


Posted in PHP onFebruary 03, 2013

1.为啥PHP需要异步操作?

一般来说PHP适用的场合是web页面展示等耗时比较短的任务,如果对于比较花时间的操作如resize图片、大数据导入、批量发送EDM、SMS等,就很容易出现操作超时情况。你可以说我可以设置无限超时时间,等等你也要知道PHP有一个工作模式是fastcgi,PHP无限不超时,不代表fastcgi相应不超时……如果你还想说要fastcgi相应永不超时,我建议你应该跟你们的运维人员讨论去……

这个时候异步的操作就发挥他的作用了,由于是非阻塞操作,操作会即时返回,然后在后台再慢慢干活。管你超时不超时的,我就没有在当前的进程/线程下干活。看吧是不是很美好,不过其实这也是个坑……

2.PHP可以实现异步操作吗?

答案是肯定的,不过网上各种的纯PHP实现得就有点别扭了。socket模式、挂起进程模式、有的还直接fork进程。很好,各路神仙各显神通。如果运维人员看到的话,一定会×××××你们的,不把web server跑死才怪……

那还有其他更好的方法去实现这个异步操作的可能么?有,现在我们只有想怎么开外挂了。查一下PECL主流的外挂方案有一堆的××MQ(消息队列),其中有个用于任务分配的外挂进入了我们的视线Gearman(其实这家伙才是角,我就不详细介绍了,点连接看介绍)。

3.为啥选择Gearman?

别的不说,就说他的client多,支持很多语言的client,你可以使用大部分你喜欢的语言去写worker。我个人是很烦语言之争,你喜欢用神码语言写worker都随你喜欢。有数据持久化支持(就是把队列保存到数据库介质中,那故障恢复也好做),有群集支持(其实很多××MQ都有这些功能)。PECL上有扩展,也有纯PHP实现扩展。反正这个Gearman也活了很久了,杂七杂八的问题都基本上解决了。

4.基本思路

有了Gearman这外挂就简单多了。就是向gearman发送一个任务,把执行的任务发出去,然后等待worker去调用PHP cli去运行我们的php代码。

我就写了一下一个python的worker(别问我为啥用python,1.我会python,2.linux下不用装runtime),你可以自己根据思路写一个PHP的worker,不过嘛,本人是不太信得过PHP跑的worker。其他语言饭可以用java、node.js 或者其他语言实现一个worker试试。对用Golang写worker有兴趣的朋友可以找我。

phpasync_worker_py

不好意思,里面是没有注释的。一个配置文件,一个py脚本。基本的功能也就是分析一下调用的参数,然后调用PHP Cli,就是那样子而已。要让py脚本跑起来请自行安装python的gearman模块。

然后到PHP的部分先上测试代码:

<?php
require_once 'PHPAsyncClient.php';
date_default_timezone_set('Asia/Shanghai');
class AsyncTest {
    const
        LOG_FILE = '/debug.log';
    static public function run() {
        if (PHPAsyncClient::in_callback(__FILE__)) {
            self::log('php Async callback');
            PHPAsyncClient::parse();
            return;
        }
        if (PHPAsyncClient::is_main(__FILE__)) {
            self::log('main run');
            $async_call = PHPAsyncClient::getInstance();
            $async_call->AsyncCall('AsyncTest', 'callback', array(
                'content' => 'Hello World!!!',
            ), array(
                'class' => 'AsyncTest',
                'method' => 'callback',
                'params' => array(
                    'content' => 'Hello Callback!',
                ),
            ), __FILE__);
            return;
        }
    }
    static public function callback($args) {
        self::log('AsyncTest callback run');
        self::log('AsyncTest callback args:'.print_r($args, true));
    }
    static public function log($content) {
        $fullname = dirname(__FILE__).self::LOG_FILE;
        $content = date('[Y-m-d H:i:s]').$content."\n";
        file_put_contents($fullname, $content, FILE_APPEND);
    }
}
AsyncTest::run();

就3个静态方法,一个是用于调试的log方法,其他都是字面意思。这个例子是对这种调用方式有个初步印象。然后直接上PHP的所有源码:

php_async.zip

然后应该会有很多人会说,win下安装不了gearman……所以我把java版的gearman server也放上去吧。

java-gearman-service-0.6.6.zip

5.结论

经过以上配置犀牛一样大的家伙后(要装一个Gearman,还要跑个Py脚本),我们基本上就使PHP拥有了异步调用功能,当然其中还有一个状态维护神马的要自己去实现。所以发现,其实这个方案不咋样,太复杂了。还是使用一些web service的方式去做web callback会好点(问题是web callback一样会超时……),这个请留意后续。  

为防止上面的代码无法下载,三水点靠木特打包下载

原文链接:http://my.oschina.net/wakanoc/blog/101789

PHP 相关文章推荐
用PHP和ACCESS写聊天室(九)
Oct 09 PHP
一个好用的分页函数
Nov 16 PHP
中篇:安装及配置PHP
Dec 13 PHP
PHP版自动生成文章摘要
Jul 23 PHP
快速开发一个PHP扩展图文教程
Dec 12 PHP
php实现首页链接查询 友情链接检查的代码
Jan 05 PHP
PHP图片验证码制作实现分享(全)
May 10 PHP
浅析php面向对象public private protected 访问修饰符
Jun 30 PHP
Yii实现的多级联动下拉菜单
Jul 13 PHP
PHP去除字符串最后一个字符的三种方法实例
Mar 01 PHP
PHP实现留言板功能的详细代码
Mar 25 PHP
使用php的mail()函数实现发送邮件功能
Jun 03 PHP
PHP数组循环操作详细介绍 附实例代码
Feb 03 #PHP
php中将字符串转为HTML的实体引用的一个类
Feb 03 #PHP
php处理文件的小例子(解压缩,删除目录)
Feb 03 #PHP
php函数array_merge用法一例(合并同类数组)
Feb 03 #PHP
php存储过程调用实例代码
Feb 03 #PHP
php中导出数据到excel时数字变为科学计数的解决方法
Feb 03 #PHP
php中删除字符串中最先出现某个字符的实现代码
Feb 03 #PHP
You might like
php4的session功能评述(三)
2006/10/09 PHP
Yii中srbac权限扩展模块工作原理与用法分析
2016/07/14 PHP
php版微信开发之接收消息,自动判断及回复相应消息的方法
2016/09/23 PHP
PHP长连接实现与使用方法详解
2018/02/11 PHP
Yii2框架中一些折磨人的坑
2019/12/15 PHP
gearman中任务的优先级和返回状态实例分析
2020/02/27 PHP
[原创]来自ImageSee官方 JavaScript图片浏览器
2008/01/16 Javascript
点图片上一页下一页翻页效果
2008/07/09 Javascript
jQuery获取注册信息并提示实现代码
2013/04/21 Javascript
JS注册/移除事件处理程序(ExtJS应用程序设计实战)
2013/05/07 Javascript
跟我学习javascript的var预解析与函数声明提升
2015/11/16 Javascript
JS中如何实现复选框全选功能
2016/12/19 Javascript
Angular简单验证功能示例
2017/12/22 Javascript
vue.js 双层嵌套for遍历的方法详解, 类似php foreach()
2018/09/07 Javascript
巧妙运用v-model实现父子组件传值的方法示例
2019/04/07 Javascript
详解ECMAScript2019/ES10新属性
2019/12/06 Javascript
vant-ui AddressEdit地址编辑和van-area的用法说明
2020/11/03 Javascript
Jquery Fade用法详解
2020/11/06 jQuery
利用python获取某年中每个月的第一天和最后一天
2016/12/15 Python
Python实现PS图像调整之对比度调整功能示例
2018/01/26 Python
Python中生成器和迭代器的区别详解
2018/02/10 Python
python中redis查看剩余过期时间及用正则通配符批量删除key的方法
2018/07/30 Python
Python时间和字符串转换操作实例分析
2019/03/16 Python
使用tensorflow框架在Colab上跑通猫狗识别代码
2020/04/26 Python
完美解决keras 读取多个hdf5文件进行训练的问题
2020/07/01 Python
详解CSS 3 中的 calc() 方法
2018/01/12 HTML / CSS
递归计算如下递归函数的值(斐波拉契)
2012/02/04 面试题
怎么可以提高数据库查询数据的速度
2014/06/28 面试题
建筑工程技术应届生求职信
2013/11/17 职场文书
元宵节主持词
2014/03/25 职场文书
残疾人小组计划书
2014/04/27 职场文书
初中成绩单评语
2014/12/29 职场文书
2015年人事科工作总结
2015/04/28 职场文书
HR必备:超全面的薪酬待遇管理方案!
2019/07/12 职场文书
Django中session进行权限管理的使用
2021/07/09 Python
sql server删除前1000行数据的方法实例
2021/08/30 SQL Server