详解PHP内置访问资源的超时时间 time_out file_get_contents read_file


Posted in PHP onJune 03, 2013

提问
我循环用file_get_contents抓取一堆url,但总是会在不到第100个URL的时候停下,提示我:“Warning: file_get_contents(URL) [function.file-get-
contents]: failed to open stream: HTTP request failed! HTTP/1.0 500 Read timed out
in D:\website\extra.php on line 65”
我在程序的开始已经有set_time_limit(0);了啊,那上面的错误会是因为什么呢?
回答
set_time_limit只是设置你的PHP程序的超时时间,而不是file_get_contents函数读取URL的超时时间。
从警告信息来看,是被抓取的网页出现了服务器500错误,可能是他的程序出现超时了。
如果想改变file_get_contents的超时时间,可以用resource $context的timeout参数:

$opts = array(
'http'=>array(
    'method'=>"GET",
    'timeout'=>60,
   )
);
$context = stream_context_create($opts);
$html =file_get_contents('http://www.example.com', false, $context);
fpassthru($fp);

这样readfile函数的超时时间就设置成了10秒,如果你够细心的话,还会发现数组中还有一些其他的配置,第一维中的http是指定使用的网络协议,二维中的method批的是http的请求方法get,post,head等,timeout就是超时时间了。我想很多人会使用php内置的file_get_contents函数来下载网页,因为这个函数使用起来够简单。很多人也都很简单的使用它,只要传递一个链接它就可以自动的发送get请求,并将网页内容下载下来。如果比较复杂的情况,比如使用POST请求,使用代理下载,定义User-Agent等等,这时很多人就会认为这个函数做不了这样的事情,就会选择其他方式,如curl,来实现。实际上,这些事情file_get_contents也可以做到,
就是通过它的第三个参数,设置http请求的context
支持的设置和使用方式见官方说明:http://www.php.net/manual/en/context.http.php
附:目前我知道的支持context参数的php内置函数有file_get_contents,file_put_contents,readfile,file,fopen,copy(估计这一类的函数都支持吧,待确认)。
function Post($url, $post = null)
{
$context = array();
if (is_array($post))
{
ksort($post);
$context['http'] = array
(
'timeout'=>60,
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}
return file_get_contents($url, false, stream_context_create($context));
}
$data = array
(
'name' => 'test',
'email' => 'test@gmail.com',
'submit' => 'submit',
);
echo Post('http://www.yifu.info', $data);

OK , 上面函数完美了,既解决了超时控制又解决了Post传值。再配合康盛的改良版RC4加密解密算法,做一个安全性很高的webservice就简单多了。
PHP 相关文章推荐
php中处理mysql_fetch_assoc返回来的数组 不用foreach----echo
May 04 PHP
PHP setcookie指定domain参数后,在IE下设置cookie失效的解决方法
Sep 09 PHP
phpadmin如何导入导出大数据文件及php.ini参数修改
Feb 18 PHP
基于session_unset与session_destroy的区别详解
Jun 03 PHP
PHP内置过滤器FILTER使用实例
Jun 25 PHP
php实现读取手机客户端浏览器的类
Jan 09 PHP
php中使用sftp教程
Mar 30 PHP
浅析iis7.5安装配置php环境
May 10 PHP
PHP MPDF中文乱码的解决方式
Dec 08 PHP
phpStorm+XDebug+chrome 配置详解
Apr 01 PHP
laravel框架添加数据,显示数据,返回成功值的方法
Oct 11 PHP
laravel 实现向公共模板中传值 (view composer)
Oct 22 PHP
PHP CLI模式下的多进程应用分析
Jun 03 #PHP
基于php-fpm 参数的深入理解
Jun 03 #PHP
php-cli简介(不会Shell语言一样用Shell)
Jun 03 #PHP
基于在生产环境中使用php性能测试工具xhprof的详解
Jun 03 #PHP
php cli模式学习(PHP命令行模式)
Jun 03 #PHP
获取PHP警告错误信息的解决方法
Jun 03 #PHP
php cli 小技巧
Jun 03 #PHP
You might like
PHP获取搜索引擎关键字来源的函数(支持百度和谷歌等搜索引擎)
2012/10/03 PHP
深入认识javascript中的eval函数
2009/11/02 Javascript
seajs1.3.0源码解析之module依赖有序加载
2012/11/07 Javascript
jQuery 网易相册鼠标移动显示隐藏效果实现代码
2013/03/31 Javascript
jQuery实现等比例缩放大图片让大图片自适应页面布局
2013/10/16 Javascript
全面解析Bootstrap中form、navbar的使用方法
2016/05/30 Javascript
Wireshark基本介绍和学习TCP三次握手
2016/08/15 Javascript
js两种拼接字符串的简单方法(必看)
2016/09/02 Javascript
百度多文件异步上传控件webuploader基本用法解析
2016/11/07 Javascript
ReactNative之FlatList的具体使用方法
2017/11/29 Javascript
vue使用pdfjs显示PDF可复制的实现方法
2018/12/14 Javascript
vue+express+jwt持久化登录的方法
2019/06/14 Javascript
微信小程序设置滚动条过程详解
2019/07/25 Javascript
vue实现评论列表功能
2019/10/25 Javascript
浅谈小程序globalData的那些事儿
2019/11/01 Javascript
Vue的双向数据绑定实现原理解析
2020/02/17 Javascript
Vue过滤器,生命周期函数和vue-resource简单介绍
2021/01/12 Vue.js
[01:14:12]2018DOTA2亚洲邀请赛4.7 总决赛 LGD vs Mineski 第二场
2018/04/09 DOTA
[01:11:08]Winstrike vs NB 2018国际邀请赛淘汰赛BO1 8.21
2018/08/22 DOTA
python交互式图形编程实例(三)
2017/11/17 Python
一条命令解决mac版本python IDLE不能输入中文问题
2018/05/15 Python
正则给header的冒号两边参数添加单引号(Python请求用)
2019/08/09 Python
window环境pip切换国内源(pip安装异常缓慢的问题)
2019/12/31 Python
4行Python代码生成图像验证码(2种)
2020/04/07 Python
pandas DataFrame运算的实现
2020/06/14 Python
Bobbi Brown芭比波朗美国官网:化妆师专业彩妆保养品品牌
2016/08/18 全球购物
英国家电直销:Appliances Direct
2016/09/22 全球购物
香港万宁官方海外旗舰店:香港健与美连锁店
2018/09/27 全球购物
集团公司总经理岗位职责
2013/12/20 职场文书
初中家长寄语
2014/04/02 职场文书
教师个人工作总结范文2014
2014/11/10 职场文书
2014年员工工作总结范文
2014/11/18 职场文书
六一晚会主持词开场白
2015/05/28 职场文书
家长会主持词开场白
2015/05/29 职场文书
暑期社会实践新闻稿
2015/07/17 职场文书
bat批处理之字符串操作的实现
2022/03/16 Python