php获取网页请求状态程序示例


Posted in PHP onJune 17, 2014

对于网页返回状态代码一般情况下我们都会去查自己网站状态码是不是200或错误页面是不是404代码,并且多数情况下我们的查看方法就是使用站长工具或ff浏览器等来查看,极少有人想到自己写一个查看状态代码的功能。

本文就此简述php获取网页请求状态程序示例如下:

方法一,使用 fsockopen
(不推荐使用curl_getinfo!)

function get_http_code($url="localhost", $port=80, $fsock_timeout=10){
    set_time_limit(0);
    ignore_user_abort(true);    // 记录开始时间
    list($usec, $sec) = explode(" ", microtime(true));
    $timer['start'] = (float)$usec + (float)$sec;
    // 校验URL
    if(!preg_match("/^https?:\/\//i", $url)){
        $url = "http://".$url;
    }
    // 支持HTTPS
    if(preg_match("/^https:\/\//i", $url)){
        $port = 443;
    }
    // 解析URL
    $urlinfo = parse_url($url);
    if(empty($urlinfo['path'])){
        $urlinfo['path'] = '/';
    }
    $host = $urlinfo['host'];
    $uri = $urlinfo['path'] . (empty($urlinfo['query'])?'':$urlinfo['query']);
    // 通过fsock打开连接
    if(!$fp = fsockopen($host, $port, $errno, $error, $fsock_timeout)){
        list($usec, $sec) = explode(" ", microtime(true));
        $timer['end'] = (float)$usec + (float)$sec;
        $usetime = (float)$timer['end'] - (float)$timer['start'];
        return array('code'=>-1, 'usetime'=>$usetime);
    }
    // 提交请求
    $status = socket_get_status($fp);
    $out = "GET {$uri} HTTP/1.1\r\n";
    $out .= "Host: {$host}\r\n";
    $out .= "Connection: Close\r\n\r\n";
    $write = fwrite($fp, $out);
    if(!$write){
        list($usec, $sec) = explode(" ", microtime(true));
        $timer['end'] = (float)$usec + (float)$sec;
        $usetime = (float)$timer['end'] - (float)$timer['start'];
        return array('code'=>-2, 'usetime'=>$usetime);
    }
    $ret = fgets($fp, 1024);
    preg_match("/http\/\d\.\d\s(\d+)/i", $ret, $m);
    $code = $m[1];
    fclose($fp);
    list($usec, $sec) = explode(" ", microtime(true));
    $timer['end'] = (float)$usec + (float)$sec;
    $usetime = (float)$timer['end'] - (float)$timer['start'];
    return array('code'=>$code, 'usetime'=>$usetime);
}

file_get_contents 是 fsockopen 功能的简单打包,效率稍低些,但是抓取成功率很高,所以在 snoopy 出问题的时候我一般拿他来用。5.0.0 添加了对 context 的支持,有了context,他也可以发送 header 信息,自定义用户 agent, referer, cookies 都不在话下。5.1.0 添加了 offset 和 maxlen 参数,可以只读文件的一部分内容。

方法二,使用snoopy.class.php

Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。

$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'https://3water.com/');
curl_setopt($ch, CURLOPT_RANGE, '0-500');
curl_setopt($ch, CURLOPT_BINARYTRANSFER, 1);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$result = curl_exec($ch);
curl_close($ch);
echo $result;
$writefn = function($ch, $chunk) {
  static $data='';
  static $limit = 500; // 500 bytes, it's only a test
  $len = strlen($data) + strlen($chunk);
  if ($len >= $limit ) {
    $data .= substr($chunk, 0, $limit-strlen($data));
    echo strlen($data) , ' ', $data;
    return -1;
  }
  $data .= $chunk;
  return strlen($chunk);
};
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, 'https://3water.com/');
curl_setopt($ch, CURLOPT_RANGE, '0-500');
curl_setopt($ch, CURLOPT_BINARYTRANSFER, 1);
curl_setopt($ch, CURLOPT_WRITEFUNCTION, $writefn);
$result = curl_exec($ch);
curl_close($ch);

一些常见的状态码为:
200 - 服务器成功返回网页
404 - 请求的网页不存在
503 - 服务器超时
301 - 页面重定向

PHP 相关文章推荐
PHP 字符串分割和比较
Oct 06 PHP
php文件上传表单摘自drupal的代码
Feb 15 PHP
php中全局变量global的使用演示代码
May 18 PHP
php 按指定元素值去除数组元素的实现方法
Nov 04 PHP
php实现发送微信模板消息的方法
Mar 07 PHP
PHP SplObjectStorage使用实例
May 12 PHP
用PHP代码在网页上生成图片
Jul 01 PHP
PHP基于phpqrcode生成带LOGO图像的二维码实例
Jul 10 PHP
Smarty日期时间操作方法示例
Nov 15 PHP
php实现遍历文件夹的方法汇总
Mar 02 PHP
通过修改Laravel Auth使用salt和password进行认证用户详解
Aug 17 PHP
浅谈laravel5.5 belongsToMany自身的正确用法
Oct 17 PHP
php版淘宝网查询商品接口代码示例
Jun 17 #PHP
php+ajax实现图片文件上传功能实例
Jun 17 #PHP
PHP实现删除非站内外部链接实例代码
Jun 17 #PHP
php的SimpleXML方法读写XML接口文件实例解析
Jun 16 #PHP
Thinkphp中Create方法深入探究
Jun 16 #PHP
ThinkPHP中的关联模型注意点
Jun 16 #PHP
用PHP代替JS玩转DOM的思路及示例代码
Jun 15 #PHP
You might like
JavaScript效率调优经验
2009/06/04 Javascript
ExtJs中简单的登录界面制作方法
2010/08/19 Javascript
学习面向对象之面向对象的基本概念:对象和其他基本要素
2010/11/30 Javascript
js对象与打印对象分析比较
2013/04/23 Javascript
javaScript实现浮点数转十六进制字符
2013/10/29 Javascript
浅析jQuery1.8的几个小变化
2013/12/10 Javascript
js post提交调用方法
2014/02/12 Javascript
利用Jquery实现可多选的下拉框
2014/02/21 Javascript
根据配置文件加载js依赖模块
2014/12/29 Javascript
深入理解JavaScript单体内置对象
2016/06/06 Javascript
jQuery Dialog 取消右上角删除按钮事件
2016/09/07 Javascript
JavaScript正则表达式替换字符串中图片地址(img src)的方法
2017/01/13 Javascript
Ajax验证用户名或昵称是否已被注册
2017/04/05 Javascript
认识less和webstrom的less配置方法
2017/08/02 Javascript
vue项目如何刷新当前页面的方法
2018/05/18 Javascript
vue组件间的参数传递实例详解
2019/04/26 Javascript
JavaScript 继承 封装 多态实现及原理详解
2019/07/29 Javascript
vue跳转方式(打开新页面)及传参操作示例
2020/01/26 Javascript
Vue组件间的通信pubsub-js实现步骤解析
2020/03/11 Javascript
[01:33]DOTA2上海特级锦标赛 LIQUID战队完整宣传片
2016/03/16 DOTA
Python编写一个优美的下载器
2018/04/15 Python
Python requests库用法实例详解
2018/08/14 Python
python global关键字的用法详解
2019/09/05 Python
Python3 JSON编码解码方法详解
2019/09/06 Python
python 实现单通道转3通道
2019/12/03 Python
Pytorch 数据加载与数据预处理方式
2019/12/31 Python
技校生自我鉴定范文
2013/09/26 职场文书
咨询公司各岗位职责
2013/12/02 职场文书
马丁路德金演讲稿
2014/05/19 职场文书
机关驾驶员违规检讨书
2014/09/13 职场文书
庆祝儿童节标语
2014/10/09 职场文书
2015年护士医德医风自我评价
2015/03/03 职场文书
2015年机关后勤工作总结
2015/05/26 职场文书
python - timeit 时间模块
2021/04/06 Python
源码解读Spring-Integration执行过程
2021/06/11 Java/Android
Apache Linkis 中间件架构及快速安装步骤
2022/03/16 Servers