详解PHP内置访问资源的超时时间 time_out file_get_contents read_file


Posted in PHP onJune 03, 2013

提问
我循环用file_get_contents抓取一堆url,但总是会在不到第100个URL的时候停下,提示我:“Warning: file_get_contents(URL) [function.file-get-
contents]: failed to open stream: HTTP request failed! HTTP/1.0 500 Read timed out
in D:\website\extra.php on line 65”
我在程序的开始已经有set_time_limit(0);了啊,那上面的错误会是因为什么呢?
回答
set_time_limit只是设置你的PHP程序的超时时间,而不是file_get_contents函数读取URL的超时时间。
从警告信息来看,是被抓取的网页出现了服务器500错误,可能是他的程序出现超时了。
如果想改变file_get_contents的超时时间,可以用resource $context的timeout参数:

$opts = array(
'http'=>array(
    'method'=>"GET",
    'timeout'=>60,
   )
);
$context = stream_context_create($opts);
$html =file_get_contents('http://www.example.com', false, $context);
fpassthru($fp);

这样readfile函数的超时时间就设置成了10秒,如果你够细心的话,还会发现数组中还有一些其他的配置,第一维中的http是指定使用的网络协议,二维中的method批的是http的请求方法get,post,head等,timeout就是超时时间了。我想很多人会使用php内置的file_get_contents函数来下载网页,因为这个函数使用起来够简单。很多人也都很简单的使用它,只要传递一个链接它就可以自动的发送get请求,并将网页内容下载下来。如果比较复杂的情况,比如使用POST请求,使用代理下载,定义User-Agent等等,这时很多人就会认为这个函数做不了这样的事情,就会选择其他方式,如curl,来实现。实际上,这些事情file_get_contents也可以做到,
就是通过它的第三个参数,设置http请求的context
支持的设置和使用方式见官方说明:http://www.php.net/manual/en/context.http.php
附:目前我知道的支持context参数的php内置函数有file_get_contents,file_put_contents,readfile,file,fopen,copy(估计这一类的函数都支持吧,待确认)。
function Post($url, $post = null)
{
$context = array();
if (is_array($post))
{
ksort($post);
$context['http'] = array
(
'timeout'=>60,
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}
return file_get_contents($url, false, stream_context_create($context));
}
$data = array
(
'name' => 'test',
'email' => 'test@gmail.com',
'submit' => 'submit',
);
echo Post('http://www.yifu.info', $data);

OK , 上面函数完美了,既解决了超时控制又解决了Post传值。再配合康盛的改良版RC4加密解密算法,做一个安全性很高的webservice就简单多了。
PHP 相关文章推荐
文件系统基本操作类
Nov 23 PHP
PHP得到mssql的存储过程的输出参数功能实现
Nov 23 PHP
php存储过程调用实例代码
Feb 03 PHP
php引用返回与取消引用的详解
Jun 08 PHP
浅析ThinkPHP中execute和query方法的区别
Jun 13 PHP
PHP中echo,print_r与var_dump区别分析
Sep 29 PHP
php实现网页缓存的工具类分享
Jul 14 PHP
PHP的Yii框架中View视图的使用进阶
Mar 29 PHP
PHP+Apache+Mysql环境搭建教程
Aug 01 PHP
php利用递归实现删除文件目录的方法
Sep 23 PHP
阿里云Win2016安装Apache和PHP环境图文教程
Mar 11 PHP
使用laravel和ECharts实现折线图效果的例子
Oct 09 PHP
PHP CLI模式下的多进程应用分析
Jun 03 #PHP
基于php-fpm 参数的深入理解
Jun 03 #PHP
php-cli简介(不会Shell语言一样用Shell)
Jun 03 #PHP
基于在生产环境中使用php性能测试工具xhprof的详解
Jun 03 #PHP
php cli模式学习(PHP命令行模式)
Jun 03 #PHP
获取PHP警告错误信息的解决方法
Jun 03 #PHP
php cli 小技巧
Jun 03 #PHP
You might like
SONY SRF-40W电路分析
2021/03/02 无线电
功能齐全的PHP发送邮件类代码附详细说明
2008/07/10 PHP
PHP setcookie指定domain参数后,在IE下设置cookie失效的解决方法
2011/09/09 PHP
PHP实现断点续传乱序合并文件的方法
2018/09/06 PHP
关于Anemometer图形化显示MySQL慢日志的工具搭建及使用的详细介绍
2020/07/13 PHP
Extjs学习笔记之四 工具栏和菜单
2010/01/07 Javascript
jquery ajax 调用失败的原因示例介绍
2013/09/27 Javascript
js实现文本框中焦点在最后位置
2014/03/04 Javascript
js对图片base64编码字符串进行解码并输出图像示例
2014/03/17 Javascript
jQuery插件PageSlide实现左右侧栏导航菜单
2015/04/12 Javascript
js事件监听器用法实例详解
2015/06/01 Javascript
Javascript实现网络监测的方法
2015/07/31 Javascript
jQuery的ready方法实现原理分析
2016/10/26 Javascript
AngularJS解决ng界面长表达式(ui-set)的方法分析
2016/11/07 Javascript
Bootstrap的class样式小结
2016/12/01 Javascript
js制作可以延时消失的菜单
2017/01/13 Javascript
详解AngularJS 模块化
2017/06/14 Javascript
深入koa-bodyparser原理解析
2019/01/16 Javascript
[02:53]DOTA2英雄昆卡基础教程
2013/11/25 DOTA
Python GAE、Django导出Excel的方法
2008/11/24 Python
浅谈Python的异常处理
2016/06/19 Python
python 网络编程常用代码段
2016/08/28 Python
Pycharm学习教程(4) Python解释器的相关配置
2017/05/03 Python
Python+Socket实现基于UDP协议的局域网广播功能示例
2017/08/31 Python
python实现反转部分单向链表
2018/09/27 Python
Python正则表达式匹配日期与时间的方法
2019/07/07 Python
关于pytorch中全连接神经网络搭建两种模式详解
2020/01/14 Python
python中pandas库中DataFrame对行和列的操作使用方法示例
2020/06/14 Python
德国足球商店:OUTFITTER
2019/05/06 全球购物
历史学专业推荐信
2013/11/06 职场文书
工程力学硕士生的自我评价范文
2013/11/16 职场文书
财务方面个人工作的自我评价
2013/12/28 职场文书
护士进修自我鉴定
2014/02/07 职场文书
投资合作协议书
2014/04/17 职场文书
励志演讲稿600字
2014/08/21 职场文书
html中两种获取标签内的值的方法
2022/06/16 jQuery