php获取网页请求状态程序示例


Posted in PHP onJune 17, 2014

对于网页返回状态代码一般情况下我们都会去查自己网站状态码是不是200或错误页面是不是404代码,并且多数情况下我们的查看方法就是使用站长工具或ff浏览器等来查看,极少有人想到自己写一个查看状态代码的功能。

本文就此简述php获取网页请求状态程序示例如下:

方法一,使用 fsockopen
(不推荐使用curl_getinfo!)

function get_http_code($url="localhost", $port=80, $fsock_timeout=10){
    set_time_limit(0);
    ignore_user_abort(true);    // 记录开始时间
    list($usec, $sec) = explode(" ", microtime(true));
    $timer['start'] = (float)$usec + (float)$sec;
    // 校验URL
    if(!preg_match("/^https?:\/\//i", $url)){
        $url = "http://".$url;
    }
    // 支持HTTPS
    if(preg_match("/^https:\/\//i", $url)){
        $port = 443;
    }
    // 解析URL
    $urlinfo = parse_url($url);
    if(empty($urlinfo['path'])){
        $urlinfo['path'] = '/';
    }
    $host = $urlinfo['host'];
    $uri = $urlinfo['path'] . (empty($urlinfo['query'])?'':$urlinfo['query']);
    // 通过fsock打开连接
    if(!$fp = fsockopen($host, $port, $errno, $error, $fsock_timeout)){
        list($usec, $sec) = explode(" ", microtime(true));
        $timer['end'] = (float)$usec + (float)$sec;
        $usetime = (float)$timer['end'] - (float)$timer['start'];
        return array('code'=>-1, 'usetime'=>$usetime);
    }
    // 提交请求
    $status = socket_get_status($fp);
    $out = "GET {$uri} HTTP/1.1\r\n";
    $out .= "Host: {$host}\r\n";
    $out .= "Connection: Close\r\n\r\n";
    $write = fwrite($fp, $out);
    if(!$write){
        list($usec, $sec) = explode(" ", microtime(true));
        $timer['end'] = (float)$usec + (float)$sec;
        $usetime = (float)$timer['end'] - (float)$timer['start'];
        return array('code'=>-2, 'usetime'=>$usetime);
    }
    $ret = fgets($fp, 1024);
    preg_match("/http\/\d\.\d\s(\d+)/i", $ret, $m);
    $code = $m[1];
    fclose($fp);
    list($usec, $sec) = explode(" ", microtime(true));
    $timer['end'] = (float)$usec + (float)$sec;
    $usetime = (float)$timer['end'] - (float)$timer['start'];
    return array('code'=>$code, 'usetime'=>$usetime);
}

file_get_contents 是 fsockopen 功能的简单打包,效率稍低些,但是抓取成功率很高,所以在 snoopy 出问题的时候我一般拿他来用。5.0.0 添加了对 context 的支持,有了context,他也可以发送 header 信息,自定义用户 agent, referer, cookies 都不在话下。5.1.0 添加了 offset 和 maxlen 参数,可以只读文件的一部分内容。

方法二,使用snoopy.class.php

Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。

$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'https://3water.com/');
curl_setopt($ch, CURLOPT_RANGE, '0-500');
curl_setopt($ch, CURLOPT_BINARYTRANSFER, 1);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$result = curl_exec($ch);
curl_close($ch);
echo $result;
$writefn = function($ch, $chunk) {
  static $data='';
  static $limit = 500; // 500 bytes, it's only a test
  $len = strlen($data) + strlen($chunk);
  if ($len >= $limit ) {
    $data .= substr($chunk, 0, $limit-strlen($data));
    echo strlen($data) , ' ', $data;
    return -1;
  }
  $data .= $chunk;
  return strlen($chunk);
};
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'https://3water.com/');
curl_setopt($ch, CURLOPT_RANGE, '0-500');
curl_setopt($ch, CURLOPT_BINARYTRANSFER, 1);
curl_setopt($ch, CURLOPT_WRITEFUNCTION, $writefn);
$result = curl_exec($ch);
curl_close($ch);

一些常见的状态码为:
200 - 服务器成功返回网页
404 - 请求的网页不存在
503 - 服务器超时
301 - 页面重定向

PHP 相关文章推荐
基于mysql的论坛(1)
Oct 09 PHP
IIS6+PHP5+MySQL5+Zend Optimizer+phpMyAdmin安装配置图文教程 2009年
Jun 08 PHP
php 获取当前访问的url文件名的方法小结
Feb 08 PHP
PHP基础学习小结
Apr 17 PHP
php eval函数用法 PHP中eval()函数小技巧
Oct 31 PHP
php字符串截取的简单方法
Jul 04 PHP
MongoDB在PHP中的常用操作小结
Feb 20 PHP
在Win7 中为php扩展配置Xcache
Oct 08 PHP
php遍历删除整个目录及文件的方法
Mar 13 PHP
php使用GD库创建图片缩略图的方法
Jun 10 PHP
PHP自定义函数获取URL中一级域名的方法
Aug 23 PHP
Laravel 将数据表的数据导出,并生成seeds种子文件的方法
Oct 09 PHP
php版淘宝网查询商品接口代码示例
Jun 17 #PHP
php+ajax实现图片文件上传功能实例
Jun 17 #PHP
PHP实现删除非站内外部链接实例代码
Jun 17 #PHP
php的SimpleXML方法读写XML接口文件实例解析
Jun 16 #PHP
Thinkphp中Create方法深入探究
Jun 16 #PHP
ThinkPHP中的关联模型注意点
Jun 16 #PHP
用PHP代替JS玩转DOM的思路及示例代码
Jun 15 #PHP
You might like
PHP.MVC的模板标签系统(一)
2006/09/05 PHP
php判断字符以及字符串的包含方法属性
2008/08/30 PHP
PHP 抽象方法与抽象类abstract关键字介绍及应用
2014/10/16 PHP
php实现的xml操作类
2016/01/15 PHP
纯js实现瀑布流展现照片(自动适应窗口大小)
2013/04/08 Javascript
jquery html动态生成select标签出问题的解决方法
2013/11/20 Javascript
jquery实现非叠加式的搜索框提示效果
2014/01/07 Javascript
JavaScript将字符串转换成字符编码列表的方法
2015/03/19 Javascript
js+html5实现页面可刷新的倒计时效果
2017/07/15 Javascript
jQuery代码优化方法总结
2018/01/29 jQuery
vue项目中,main.js,App.vue,index.html的调用方法
2018/09/20 Javascript
详解vuex之store拆分即多模块状态管理(modules)篇
2018/11/13 Javascript
JavaScript文档加载模式以及元素获取
2020/07/28 Javascript
vue实现在进行增删改操作后刷新页面
2020/08/05 Javascript
Openlayers绘制聚合标注
2020/09/28 Javascript
[52:40]完美世界DOTA2联赛PWL S2 Magma vs GXR 第一场 11.29
2020/12/02 DOTA
python与php实现分割文件代码
2017/03/06 Python
python基于opencv检测程序运行效率
2019/12/28 Python
python标准库sys和OS的函数使用方法与实例详解
2020/02/12 Python
Win10环境中如何实现python2和python3并存
2020/07/20 Python
python map比for循环快在哪
2020/09/21 Python
通过代码实例了解Python3编程技巧
2020/10/13 Python
使用css3实现的tab选项卡代码分享
2014/12/09 HTML / CSS
加拿大在线隐形眼镜专家:PerfectLens.ca
2016/11/19 全球购物
Clarks鞋法国官方网站:英国其乐鞋品牌
2018/02/11 全球购物
SheIn沙特阿拉伯:女装在线
2020/03/23 全球购物
c语言常见笔试题总结
2016/09/05 面试题
本科生职业生涯规划书范文
2014/01/21 职场文书
致400米运动员广播稿
2014/02/07 职场文书
元旦联欢会感言
2014/03/04 职场文书
电工技术比武方案
2014/05/11 职场文书
车贷收入证明范本
2014/09/14 职场文书
2015年学校办公室工作总结
2015/05/26 职场文书
html form表单基础入门案例讲解
2021/07/15 HTML / CSS
为什么MySQL不建议使用SELECT *
2022/04/03 MySQL
Win11如何设置右键单击显示所有选项?Win11右键单击显示所有选项设置教程
2022/04/08 数码科技