详解PHP中curl_multi并发的实现


Posted in PHP onJune 08, 2020

PHP中的curl_multi系列函数可以实现同时请求多个URL来实现并发,而不是像普通curl函数那样请求后会阻塞,直到结果返回才进行下一个请求。因此在批量请求URL时可通过curl_multi系列函数提升程序的运行效率。

curl普通请求

$startTime = microtime(true);
$chArr = [];
$optArr = [
  CURLOPT_URL => 'http://www.httpbin.org/ip',
  CURLOPT_HEADER => 0,
  CURLOPT_RETURNTRANSFER => 1,
];
$result = [];

//创建多个curl资源并执行
for ($i=0; $i<10; $i++) {
  $chArr[$i] = curl_init();
  curl_setopt_array($chArr[$i], $optArr);
  $result[$i] = curl_exec($chArr[$i]);
  curl_close($chArr[$i]);
}

$endTime = microtime(true);
echo sprintf("use time: %.3f s".PHP_EOL, $endTime - $startTime);

use time: 6.080 s

curl_multi并发请求

$startTime = microtime(true);
$chArr = [];
$optArr = [
  CURLOPT_URL => 'http://www.httpbin.org/ip',
  CURLOPT_HEADER => 0,
  CURLOPT_RETURNTRANSFER => 1,
];
$result = [];

//创建多个curl资源
for ($i=0; $i<10; $i++) {
  $chArr[$i] = curl_init();
  curl_setopt_array($chArr[$i], $optArr);
}
//创建批处理curl句柄
$mh = curl_multi_init();
//将单个curl句柄添加到批处理curl句柄中
foreach ($chArr as $ch) {
  curl_multi_add_handle($mh, $ch);
}
//判断操作是否仍在执行的标识的引用
$active = null;
/**
 * 本次循环第一次处理 $mh 批处理中的 $ch 句柄,并将 $mh 批处理的执行状态写入 $active,
 * 当状态值等于 CURLM_CALL_MULTI_PERFORM 时,表明数据还在写入或读取中,执行循环,
 * 当第一次 $ch 句柄的数据写入或读取成功后,状态值变为 CURLM_OK ,跳出本次循环,进入下面的大循环中。
 */
do {
  //处理在批处理栈中的每一个句柄
  $mrc = curl_multi_exec($mh, $active);
} while ($mrc == CURLM_CALL_MULTI_PERFORM);
/**
 * 上面这段代码中,是可以直接使用 $active > 0 来作为 while 的条件,如下:
 * do {
 *  $mrc = curl_multi_exec($mh, $active);
 * } while ($active > 0);
 * 此时如果整个批处理句柄没有全部执行完毕时,系统会不停的执行 curl_multi_exec 函数,从而导致系统CPU占用会很高,
 * 因此一般不采用这种方案,可以通过 curl_multi_select 函数来达到没有需要读取的程序就阻塞住的目的。
 */

/**
 * $active 为 true 时,即 $mh 批处理之中还有 $ch 句柄等待处理,
 * $mrc == CURLM_OK,即上一次 $ch 句柄的读取或写入已经执行完毕。
 */
while ($active && $mrc == CURLM_OK) {
  /** 
   * 程序进入阻塞状态,直到批处理中有活动连接(即 $mh 批处理中还有可执行的 $ch 句柄),
   * 这样执行的好处是 $mh 批处理中的 $ch 句柄会在读取或写入数据结束后($mrc == CURLM_OK)进入阻塞阶段,
   * 而不会在整个 $mh 批处理执行时不停地执行 curl_multi_exec 函数,白白浪费CPU资源。
   */
   if (curl_multi_select($mh) != -1) {
    //程序退出阻塞状态继续执行需要处理的 $ch 句柄
    do {
      $mrc = curl_multi_exec($mh, $active);
    } while ($mrc == CURLM_CALL_MULTI_PERFORM);
  }
}

foreach ($chArr as $i=>$ch) {
  //获取某个curl句柄的返回值
  $result[$i] = curl_multi_getcontent($ch);
  //移除批处理句柄中的某个句柄资源
  curl_multi_remove_handle($mh, $ch);
}
//关闭一组curl句柄
curl_multi_close($mh);
$endTime = microtime(true);
echo sprintf("use time: %.3f s".PHP_EOL, $endTime - $startTime);

use time: 0.599 s

通过对比上述程序的运行时间可以得知,使用curl_multi系列函数并发请求要比普通的curl函数依次请求效率高很多。

到此这篇关于详解PHP中curl_multi并发的实现的文章就介绍到这了,更多相关PHP curl_multi并发内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木! 

PHP 相关文章推荐
BBS(php &amp; mysql)完整版(七)
Oct 09 PHP
获得Google PR值的PHP代码
Jan 28 PHP
一些常用的php简单命令代码集锦
Sep 24 PHP
一个基于PDO的数据库操作类
Mar 24 PHP
浅析PHP递归函数返回值使用方法
Feb 18 PHP
PHP实现多文件上传的方法
Jul 08 PHP
基于thinkPHP框架实现留言板的方法
Oct 17 PHP
PHP 结合 Boostrap 结合 js 实现学生列表删除编辑及搜索功能
May 21 PHP
php无限极分类实现方法分析
Jul 04 PHP
详解将数据从Laravel传送到vue的四种方式
Oct 16 PHP
php设计模式之建造器模式分析【星际争霸游戏案例】
Jan 23 PHP
基于PHP的微信公众号的开发流程详解
Aug 07 PHP
THINKPHP5.1 Config的配置与获取详解
Jun 08 #PHP
ThinkPHP5.1验证码功能实现的示例代码
Jun 08 #PHP
php框架CI(codeigniter)自动加载与自主创建对象操作实例分析
Jun 06 #PHP
CI框架简单分页类用法示例
Jun 06 #PHP
简单的php购物车代码
Jun 05 #PHP
实例化php类时传参的方法分析
Jun 05 #PHP
PHP页面静态化――纯静态与伪静态用法详解
Jun 05 #PHP
You might like
【动漫杂谈】关于《请在T台上微笑》
2020/03/03 日漫
PHP iconv 解决utf-8和gb2312编码转换问题
2010/04/12 PHP
Thinkphp中数据按分类嵌套循环实现方法
2014/10/30 PHP
解决phpcms更换javascript的幻灯片代码调用图片问题
2014/12/26 PHP
PHP实现用户登录的案例代码
2018/05/10 PHP
PHP实现的分解质因数操作示例
2018/08/01 PHP
基于jquery的仿百度搜索框效果代码
2011/04/11 Javascript
jQuery链式操作如何实现以及为什么要用链式操作
2013/01/17 Javascript
使用js+jquery实现无限极联动
2013/05/23 Javascript
css3元素简单的闪烁效果实现(html5 jquery)
2013/12/28 Javascript
Nodejs Post请求报socket hang up错误的解决办法
2014/09/25 NodeJs
JS实现随机乱撞彩色圆球特效的方法
2015/05/05 Javascript
解析javascript瀑布流原理实现图片滚动加载
2016/03/10 Javascript
javascript获取网页各种高宽及位置的方法总结
2016/07/27 Javascript
js生成随机数方法和实例
2017/01/17 Javascript
vue实现底部菜单功能
2018/07/24 Javascript
vue 详情跳转至列表页实现列表页缓存
2019/03/27 Javascript
[01:02:32]DOTA2-DPC中国联赛 正赛 iG vs PSG.LGD BO3 第二场 2月26日
2021/03/11 DOTA
浅谈python字符串方法的简单使用
2016/07/18 Python
python库lxml在linux和WIN系统下的安装
2018/06/24 Python
python 字符串只保留汉字的方法
2018/11/16 Python
详解Python 调用C# dll库最简方法
2019/06/20 Python
简单了解python协程的相关知识
2019/08/31 Python
Python数据可视化:饼状图的实例讲解
2019/12/07 Python
Python 实现向word(docx)中输出
2020/02/13 Python
德国的大型美妆个护电商:Flaconi
2020/06/26 全球购物
介绍一下EJB的分类及其各自的功能及应用
2016/08/23 面试题
口腔工艺技术专业毕业生自荐信
2013/09/27 职场文书
婚礼答谢宴主持词
2014/03/14 职场文书
感恩小明星事迹材料
2014/05/23 职场文书
优秀求职信
2014/05/29 职场文书
平安建设工作方案
2014/06/02 职场文书
企业与个人合作经营协议书
2014/11/01 职场文书
给老婆的保证书怎么写
2015/05/08 职场文书
python 机器学习的标准化、归一化、正则化、离散化和白化
2021/04/16 Python
分享几个简单MySQL优化小妙招
2022/03/31 MySQL