php中file_get_contents与curl性能比较分析


Posted in PHP onNovember 08, 2014

本文实例讲述了php中file_get_contents与curl性能比较分析。分享给大家供大家参考。具体如下:

在php中如果不仔细的去分析性能会发现file_get_contents与curl两个同很多共同点的,他们都可以采集文件打开文件,但是如果仔细一对比会发现很多不同点,下面我们一起来看看file_get_contents与curl区别。

PHP中fopen,file_get_contents,curl函数的区别:

1.fopen /file_get_contents 每次请求都会重新做DNS查询,并不对 DNS信息进行缓存。但是CURL会自动对DNS信息进行缓存。对同一域名下的网页或者图片的请求只需要一次DNS查询。这大大减少了DNS查询的次数。所以CURL的性能比fopen /file_get_contents 好很多。

2.fopen /file_get_contents 在请求HTTP时,使用的是http_fopen_wrapper,不会keeplive。而curl却可以。这样在多次请求多个链接时,curl效率会好一些。

3.fopen / file_get_contents 函数会受到php.ini文件中allow_url_open选项配置的影响。如果该配置关闭了,则该函数也就失效了。而curl不受该配置的影响。

4.curl 可以模拟多种请求,例如:POST数据,表单提交等,用户可以按照自己的需求来定制请求。而fopen / file_get_contents只能使用get方式获取数据。
file_get_contents 获取远程文件时会把结果都存在一个字符串中 fiels函数则会储存成数组形式

因此,我还是比较倾向于使用curl来访问远程url。Php有curl模块扩展,功能很是强大。

说了半天大家可能说性能怎么没对比呢,那我们就来看看

最近需要获取别人网站上的音乐数据。用了file_get_contents函数,但是总是会遇到获取失败的问题,尽管按照手册中的 例子设置了超时,可多数时候不会奏效:

$config['context'] = stream_context_create(array('http' => array('method' => "GET",

   'timeout' => 5//这个超时时间不稳定,经常不奏效

   )

));

这时候,看一下服务器的连接池,会发现一堆类似的错误,让我头疼万分:

file_get_contents(http://***): failed to open stream…
现在改用了curl库,写了一个函数替换:

function curl_file_get_contents($durl){

  $ch = curl_init();

  curl_setopt($ch, CURLOPT_URL, $durl);

  curl_setopt($ch, CURLOPT_TIMEOUT, 5);

  curl_setopt($ch, CURLOPT_USERAGENT, _USERAGENT_);

  curl_setopt($ch, CURLOPT_REFERER,_REFERER_);

  curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

  $r = curl_exec($ch);

  curl_close($ch);

   return $r;

}

如此,除了真正的网络问题外,没再出现任何问题。
这是别人做过的关于curl和file_get_contents的测试:
file_get_contents抓取google.com需用秒数:
 
2.31319094
2.30374217
2.21512604
3.30553889
2.30124092
curl使用的时间:
 
0.68719101
0.64675593
0.64326
0.81983113
0.63956594

差距很大?呵呵,从我使用的经验来说,这两个工具不只是速度有差异,稳定性也相差很大。

建议对网络数据抓取稳定性要求比较高的朋友使用上面的 curl_file_get_contents函数,不但稳定速度快,还能假冒浏览器欺骗目标地址哦

再看一个实例

后续贴出了curl和file_get_contents的对比结果,这边除了curl与file_get_contents的性能对比,还包含了他们的性能对比,讲之前看下如下的结果图:

php中file_get_contents与curl性能比较分析

curl与file_get_contents性能对比PHP源代码如下:

<?php 

/** 

 

* 通过淘宝IP接口获取IP地理位置 

 

* @param string $ip 

 

* @return: string 

 

**/

function getCityCurl($ip) 

{ 

    $url="http://ip.taobao.com/service/getIpInfo.php?ip=".$ip; 

    $ch = curl_init(); 

    $timeout = 5; 

    curl_setopt ($ch, CURLOPT_URL, $url); 

    curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1); 

    curl_setopt ($ch, CURLOPT_CONNECTTIMEOUT, $timeout); 

    $file_contents = curl_exec($ch); 

    curl_close($ch); 

  

    $ipinfo=json_decode($file_contents); 

    if($ipinfo->code=='1'){ 

        return false; 

    } 

    $city = $ipinfo->data->region.$ipinfo->data->city; 

    return $city; 

} 

  

function getCity($ip) 

{ 

    $url="http://ip.taobao.com/service/getIpInfo.php?ip=".$ip; 

    $ipinfo=json_decode(file_get_contents($url)); 

    if($ipinfo->code=='1'){ 

        return false; 

    } 

    $city = $ipinfo->data->region.$ipinfo->data->city; 

    return $city; 

} 

  

// for file_get_contents 

$startTime=explode(' ',microtime()); 

$startTime=$startTime[0] + $startTime[1]; 

for($i=1;$i<=10;$i++) 

{ 

   echo getCity("121.207.247.202")."</br>"; 

} 

$endTime = explode(' ',microtime()); 

$endTime = $endTime[0] + $endTime[1]; 

$totalTime = $endTime - $startTime; 

echo 'file_get_contents:'.number_format($totalTime, 10, '.', "")." seconds</br>"; 

  

//for curl 

$startTime2=explode(' ',microtime()); 

$startTime2=$startTime2[0] + $startTime2[1]; 

for($i=1;$i<=10;$i++) 

{ 

   echo getCityCurl('121.207.247.202')."</br>"; 

} 

$endTime2 = explode(' ',microtime()); 

$endTime2=$endTime2[0] + $endTime2[1]; 

$totalTime2 = $endTime2 - $startTime2; 

echo "curl:".number_format($totalTime2, 10, '.', "")." seconds"; 

?>

测试访问
https://3water.com
file_get_contents速度:4.2404510975 seconds
curl速度:2.8205530643 seconds
curl比file_get_contents速度快了30%左右,最重要的是服务器负载更低.

总结

file_get_contents处理频繁小的时候,用它感觉挺好的。没什么异常。如果你的文件被1k+人处理。那么你的服务器cpu就等着高升吧。所以建议自己和大家在以后写php代码的时候使用curl库。

希望本文所述对大家的PHP程序设计有所帮助。

PHP 相关文章推荐
php自动加载的两种实现方法
Jun 21 PHP
PHP代码优化之成员变量获取速度对比
Feb 28 PHP
让CodeIgniter的ellipsize()支持中文截断的方法
Jun 12 PHP
php正则匹配html中带class的div并选取其中内容的方法
Jan 13 PHP
微信公众平台开发之天气预报功能
Aug 31 PHP
weiphp微信公众平台授权设置
Jan 04 PHP
Laravel日志用法详解
Oct 09 PHP
php封装的单文件(图片)上传类完整实例
Oct 18 PHP
php 微信公众平台开发模式实现多客服的实例代码
Nov 07 PHP
yii2 数据库读写分离配置示例
Feb 10 PHP
PHP 7.0新增加的特性介绍
Jun 08 PHP
php swoole多进程/多线程用法示例【基于php7nts版】
Aug 12 PHP
Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 2611816 bytes)
Nov 08 #PHP
PHP中使用循环实现的金字塔图形
Nov 08 #PHP
php调用新浪短链接API的方法
Nov 08 #PHP
php禁止浏览器使用缓存页面的方法
Nov 07 #PHP
php实现把url转换迅雷thunder资源下载地址的方法
Nov 07 #PHP
php采用file_get_contents代替使用curl实例
Nov 07 #PHP
php采用curl模仿登录人人网发布动态的方法
Nov 07 #PHP
You might like
PHP MySQL应用中使用XOR运算加密算法分享
2011/08/28 PHP
PHP+MySQL插入操作实例
2015/01/21 PHP
PHP通过微信跳转的Code参数获取用户的openid(关键代码)
2016/07/06 PHP
PHP XML和数组互相转换详解
2016/10/26 PHP
PHP迭代与递归实现无限级分类
2017/08/28 PHP
PHP文件操作实例总结【文件上传、下载、分页】
2018/12/08 PHP
datePicker——日期选择控件(with jquery)
2007/02/20 Javascript
推荐30个新鲜出炉的精美 jQuery 效果
2012/03/26 Javascript
JavaScript高级程序设计(第3版)学习笔记3 js简单数据类型
2012/10/11 Javascript
jQuery中removeData()方法用法实例
2014/12/27 Javascript
AngularJS的表单使用详解
2015/06/17 Javascript
javascript实现多栏闭合展开式广告位菜单效果实例
2015/08/05 Javascript
跟我学习javascript的Date对象
2015/11/19 Javascript
灵活使用数组制作图片切换js实现
2016/07/28 Javascript
用原生js统计文本行数的简单示例
2016/08/19 Javascript
JavaScript实现提交模式窗口后刷新父窗口数据的方法
2017/06/16 Javascript
AngularJS页面带参跳转及参数解析操作示例
2017/06/28 Javascript
浅谈Vue.js路由管理器 Vue Router
2018/08/16 Javascript
小程序input数据双向绑定实现方法
2019/10/17 Javascript
[01:03]悬念揭晓 11月26日DOTA2完美盛典不见不散
2017/11/23 DOTA
[52:36]VGJ.S vs Serenity 2018国际邀请赛小组赛BO2 第一场 8.19
2018/08/21 DOTA
Python编写检测数据库SA用户的方法
2014/07/11 Python
Python实现的数据结构与算法之双端队列详解
2015/04/22 Python
Python基于Tkinter的HelloWorld入门实例
2015/06/17 Python
小议Python中自定义函数的可变参数的使用及注意点
2016/06/21 Python
对Python 2.7 pandas 中的read_excel详解
2018/05/04 Python
对Xpath 获取子标签下所有文本的方法详解
2019/01/02 Python
Python连接mysql数据库及简单增删改查操作示例代码
2020/08/03 Python
CSS3使用transition实现的鼠标悬停淡入淡出
2015/01/09 HTML / CSS
《那片绿绿的爬山虎》教学反思
2014/02/27 职场文书
升旗仪式演讲稿
2014/05/08 职场文书
协议书范文
2015/01/27 职场文书
借款民事起诉状范文
2015/05/19 职场文书
《跨越海峡的生命桥》教学反思
2016/02/18 职场文书
2016年社区综治宣传月活动总结
2016/03/16 职场文书
感恩信:写给爸爸妈妈的一封感谢信
2019/09/12 职场文书