详解PHP内置访问资源的超时时间 time_out file_get_contents read_file


Posted in PHP onJune 03, 2013

提问
我循环用file_get_contents抓取一堆url,但总是会在不到第100个URL的时候停下,提示我:“Warning: file_get_contents(URL) [function.file-get-
contents]: failed to open stream: HTTP request failed! HTTP/1.0 500 Read timed out
in D:\website\extra.php on line 65”
我在程序的开始已经有set_time_limit(0);了啊,那上面的错误会是因为什么呢?
回答
set_time_limit只是设置你的PHP程序的超时时间,而不是file_get_contents函数读取URL的超时时间。
从警告信息来看,是被抓取的网页出现了服务器500错误,可能是他的程序出现超时了。
如果想改变file_get_contents的超时时间,可以用resource $context的timeout参数:

$opts = array(
'http'=>array(
    'method'=>"GET",
    'timeout'=>60,
   )
);
$context = stream_context_create($opts);
$html =file_get_contents('http://www.example.com', false, $context);
fpassthru($fp);

这样readfile函数的超时时间就设置成了10秒,如果你够细心的话,还会发现数组中还有一些其他的配置,第一维中的http是指定使用的网络协议,二维中的method批的是http的请求方法get,post,head等,timeout就是超时时间了。我想很多人会使用php内置的file_get_contents函数来下载网页,因为这个函数使用起来够简单。很多人也都很简单的使用它,只要传递一个链接它就可以自动的发送get请求,并将网页内容下载下来。如果比较复杂的情况,比如使用POST请求,使用代理下载,定义User-Agent等等,这时很多人就会认为这个函数做不了这样的事情,就会选择其他方式,如curl,来实现。实际上,这些事情file_get_contents也可以做到,
就是通过它的第三个参数,设置http请求的context
支持的设置和使用方式见官方说明:http://www.php.net/manual/en/context.http.php
附:目前我知道的支持context参数的php内置函数有file_get_contents,file_put_contents,readfile,file,fopen,copy(估计这一类的函数都支持吧,待确认)。
function Post($url, $post = null)
{
$context = array();
if (is_array($post))
{
ksort($post);
$context['http'] = array
(
'timeout'=>60,
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}
return file_get_contents($url, false, stream_context_create($context));
}
$data = array
(
'name' => 'test',
'email' => 'test@gmail.com',
'submit' => 'submit',
);
echo Post('http://www.yifu.info', $data);

OK , 上面函数完美了,既解决了超时控制又解决了Post传值。再配合康盛的改良版RC4加密解密算法,做一个安全性很高的webservice就简单多了。
PHP 相关文章推荐
一个高ai的分页函数和一个url函数
Oct 09 PHP
wordpress之wp-settings.php
Aug 17 PHP
PHP CURL获取cookies模拟登录的方法
Nov 04 PHP
PHP中spl_autoload_register函数的用法总结
Nov 07 PHP
php获取当前页面完整URL地址
Dec 30 PHP
PHP的Laravel框架中使用AdminLTE模板来编写网站后台界面
Mar 21 PHP
php 数组字符串搜索array_search技巧
Jul 05 PHP
php图片添加水印例子
Jul 20 PHP
PHP实现留言板功能的详细代码
Mar 25 PHP
谈谈从phpinfo中能获取哪些值得注意的信息
Mar 28 PHP
Laravel获取所有的数据库表及结构的方法
Oct 10 PHP
Laravel如何实现自动加载类
Oct 14 PHP
PHP CLI模式下的多进程应用分析
Jun 03 #PHP
基于php-fpm 参数的深入理解
Jun 03 #PHP
php-cli简介(不会Shell语言一样用Shell)
Jun 03 #PHP
基于在生产环境中使用php性能测试工具xhprof的详解
Jun 03 #PHP
php cli模式学习(PHP命令行模式)
Jun 03 #PHP
获取PHP警告错误信息的解决方法
Jun 03 #PHP
php cli 小技巧
Jun 03 #PHP
You might like
深入file_get_contents函数抓取内容失败的原因分析
2013/06/25 PHP
一个经典的PHP文件上传类分享
2014/11/18 PHP
PHP答题类应用接口实例
2015/02/09 PHP
php使用curl并发减少后端访问时间的方法分析
2016/05/12 PHP
Prototype源码浅析 String部分(四)之补充
2012/01/16 Javascript
Jquery对数组的操作技巧整理
2014/03/25 Javascript
JavaScript仿商城实现图片广告轮播实例代码
2016/02/06 Javascript
JSON 的正确用法探讨:Pyhong、MongoDB、JavaScript与Ajax
2016/05/15 Javascript
判断输入的字符串是否是日期格式的简单方法
2016/07/11 Javascript
JS基础随笔(菜鸟必看篇)
2016/07/13 Javascript
js实现倒计时及时间对象
2016/11/15 Javascript
详解从Vue-router到html5的pushState
2018/07/21 Javascript
react-router-dom 嵌套路由的实现
2020/05/02 Javascript
[00:12]DAC2018 天才少年转战三号位,他的SOLO是否仍如昔日般强大?
2018/04/06 DOTA
linux系统使用python获取cpu信息脚本分享
2014/01/15 Python
Python中用sleep()方法操作时间的教程
2015/05/22 Python
Python 如何访问外围作用域中的变量
2016/09/11 Python
python+matplotlib绘制简单的海豚(顶点和节点的操作)
2018/01/02 Python
Python3一行代码实现图片文字识别的示例
2018/01/15 Python
Python实现Kmeans聚类算法
2020/06/10 Python
Python结合ImageMagick实现多张图片合并为一个pdf文件的方法
2018/04/24 Python
利用Python求阴影部分的面积实例代码
2018/12/05 Python
Python 带有参数的装饰器实例代码详解
2018/12/06 Python
详解opencv Python特征检测及K-最近邻匹配
2019/01/21 Python
python实现打砖块游戏
2020/02/25 Python
使用pymysql查询数据库,把结果保存为列表并获取指定元素下标实例
2020/05/15 Python
如何从csv文件构建Tensorflow的数据集
2020/09/21 Python
Pycharm创建文件时自动生成文件头注释(自定义设置作者日期)
2020/11/24 Python
Pycharm 如何一键加引号的方法步骤
2021/02/05 Python
CSS3绘制六边形的简单实现
2016/08/25 HTML / CSS
西班牙床垫网上商店:Colchones.es
2018/05/06 全球购物
企业文明单位申报材料
2014/05/16 职场文书
诚信承诺书
2015/01/19 职场文书
民事辩护词范文
2015/05/21 职场文书
Redis入门基础常用操作命令整理
2022/06/01 Redis
django项目、vue项目部署云服务器的详细过程
2022/07/23 Servers