详解PHP内置访问资源的超时时间 time_out file_get_contents read_file


Posted in PHP onJune 03, 2013

提问
我循环用file_get_contents抓取一堆url,但总是会在不到第100个URL的时候停下,提示我:“Warning: file_get_contents(URL) [function.file-get-
contents]: failed to open stream: HTTP request failed! HTTP/1.0 500 Read timed out
in D:\website\extra.php on line 65”
我在程序的开始已经有set_time_limit(0);了啊,那上面的错误会是因为什么呢?
回答
set_time_limit只是设置你的PHP程序的超时时间,而不是file_get_contents函数读取URL的超时时间。
从警告信息来看,是被抓取的网页出现了服务器500错误,可能是他的程序出现超时了。
如果想改变file_get_contents的超时时间,可以用resource $context的timeout参数:

$opts = array(
'http'=>array(
    'method'=>"GET",
    'timeout'=>60,
   )
);
$context = stream_context_create($opts);
$html =file_get_contents('http://www.example.com', false, $context);
fpassthru($fp);

这样readfile函数的超时时间就设置成了10秒,如果你够细心的话,还会发现数组中还有一些其他的配置,第一维中的http是指定使用的网络协议,二维中的method批的是http的请求方法get,post,head等,timeout就是超时时间了。我想很多人会使用php内置的file_get_contents函数来下载网页,因为这个函数使用起来够简单。很多人也都很简单的使用它,只要传递一个链接它就可以自动的发送get请求,并将网页内容下载下来。如果比较复杂的情况,比如使用POST请求,使用代理下载,定义User-Agent等等,这时很多人就会认为这个函数做不了这样的事情,就会选择其他方式,如curl,来实现。实际上,这些事情file_get_contents也可以做到,
就是通过它的第三个参数,设置http请求的context
支持的设置和使用方式见官方说明:http://www.php.net/manual/en/context.http.php
附:目前我知道的支持context参数的php内置函数有file_get_contents,file_put_contents,readfile,file,fopen,copy(估计这一类的函数都支持吧,待确认)。
function Post($url, $post = null)
{
$context = array();
if (is_array($post))
{
ksort($post);
$context['http'] = array
(
'timeout'=>60,
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}
return file_get_contents($url, false, stream_context_create($context));
}
$data = array
(
'name' => 'test',
'email' => 'test@gmail.com',
'submit' => 'submit',
);
echo Post('http://www.yifu.info', $data);

OK , 上面函数完美了,既解决了超时控制又解决了Post传值。再配合康盛的改良版RC4加密解密算法,做一个安全性很高的webservice就简单多了。
PHP 相关文章推荐
攻克CakePHP系列二 表单数据显示
Oct 22 PHP
phpMyAdmin 安装及问题总结
May 28 PHP
深入PHP empty(),isset(),is_null()的实例测试详解
Jun 06 PHP
php反射应用示例
Feb 25 PHP
PHP类的反射用法实例
Nov 03 PHP
[原创]ThinkPHP中SHOW_RUN_TIME不能正常显示运行时间的解决方法
Oct 10 PHP
PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例
Apr 14 PHP
PHP查询大量数据内存耗尽问题的解决方法
Oct 28 PHP
thinkPHP5.0框架引入Traits功能实例分析
Mar 18 PHP
php从数据库中读取特定的行(实例)
Jun 02 PHP
如何通过PHP实现Des加密算法代码实例
May 09 PHP
一次项目中Thinkphp绕过禁用函数的实战记录
Nov 17 PHP
PHP CLI模式下的多进程应用分析
Jun 03 #PHP
基于php-fpm 参数的深入理解
Jun 03 #PHP
php-cli简介(不会Shell语言一样用Shell)
Jun 03 #PHP
基于在生产环境中使用php性能测试工具xhprof的详解
Jun 03 #PHP
php cli模式学习(PHP命令行模式)
Jun 03 #PHP
获取PHP警告错误信息的解决方法
Jun 03 #PHP
php cli 小技巧
Jun 03 #PHP
You might like
无数据库的详细域名查询程序PHP版(3)
2006/10/09 PHP
如何使用PHP中的字符串函数
2006/11/24 PHP
php下载远程文件类(支持断点续传)
2008/11/14 PHP
PHP时间格式控制符对照表分享
2013/07/23 PHP
PHP中addslashes与mysql_escape_string的区别分析
2016/04/25 PHP
thinkPHP分页功能实例详解
2017/05/05 PHP
mouse_on_title.js
2006/08/25 Javascript
jquery获取颜色在ie和ff下的区别示例介绍
2014/03/28 Javascript
jquery动态调整div大小使其宽度始终为浏览器宽度
2014/06/06 Javascript
Jquery简单实现GridView行高亮的方法
2015/06/15 Javascript
js实现瀑布流的三种方式比较
2020/06/28 Javascript
JavaScript sort数组排序方法和自我实现排序方法小结
2016/06/06 Javascript
jQuery实现通过方向键控制div块上下左右移动的方法【测试可用】
2018/04/26 jQuery
vue 中动态绑定class 和 style的方法代码详解
2018/06/01 Javascript
JavaScript基于对象方法实现数组去重及排序操作示例
2018/07/10 Javascript
node.js express框架实现文件上传与下载功能实例详解
2019/10/15 Javascript
vue+axios 拦截器实现统一token的案例
2020/09/11 Javascript
[00:52]DOTA2第二届亚洲邀请赛预选赛宣传片
2017/01/13 DOTA
[01:07:53]RNG vs VG 2019国际邀请赛小组赛 BO2 第一场 8.15
2019/08/17 DOTA
Python批量查询域名是否被注册过
2017/06/21 Python
Django使用中间件解决前后端同源策略问题
2019/09/02 Python
python3 动态模块导入与全局变量使用实例
2019/12/22 Python
使用Python发现隐藏的wifi
2020/03/04 Python
给keras层命名,并提取中间层输出值,保存到文档的实例
2020/05/23 Python
Python StringIO及BytesIO包使用方法解析
2020/06/15 Python
pycharm2020.2 配置使用的方法详解
2020/09/16 Python
css3 线性渐变和径向渐变示例附图
2014/04/08 HTML / CSS
全球航班旅行搜索网站:Cheapflights
2017/05/19 全球购物
30岁生日感言
2014/01/25 职场文书
火锅店营销方案
2014/02/26 职场文书
商务专员岗位职责范本
2014/06/29 职场文书
软件研发工程师岗位职责
2014/09/30 职场文书
《伯牙绝弦》教学反思
2016/02/16 职场文书
人身损害赔偿协议书
2016/03/22 职场文书
CSS3 制作的书本翻页特效
2021/04/13 HTML / CSS
「女孩的钓鱼慢活」全新版权绘公布
2022/03/21 日漫