PHP的cURL库简介及使用示例


Posted in PHP onFebruary 06, 2015

使用PHP的cURL库可以简单和有效地去抓网页。你只需要运行一个脚本,然后分析一下你所抓取的网页,然后就可以以程序的方式得到你想要的数据了。无论是你想从从一个链接上取部分数据,或是取一个XML文件并把其导入数据库,那怕就是简单的获取网页内容,cURL 是一个功能强大的PHP库。

PHP中的CURL函数库(Client URL Library Function)

curl_close — 关闭一个curl会话

curl_copy_handle — 拷贝一个curl连接资源的所有内容和参数

curl_errno — 返回一个包含当前会话错误信息的数字编号

curl_error — 返回一个包含当前会话错误信息的字符串

curl_exec — 执行一个curl会话

curl_getinfo — 获取一个curl连接资源句柄的信息

curl_init — 初始化一个curl会话

curl_multi_add_handle — 向curl批处理会话中添加单独的curl句柄资源

curl_multi_close — 关闭一个批处理句柄资源

curl_multi_exec — 解析一个curl批处理句柄

curl_multi_getcontent — 返回获取的输出的文本流

curl_multi_info_read — 获取当前解析的curl的相关传输信息

curl_multi_init — 初始化一个curl批处理句柄资源

curl_multi_remove_handle — 移除curl批处理句柄资源中的某个句柄资源

curl_multi_select — Get all the sockets associated with the cURL extension, which can then be "selected"

curl_setopt_array — 以数组的形式为一个curl设置会话参数

curl_setopt — 为一个curl设置会话参数

curl_version — 获取curl相关的版本信息

curl_init()函数的作用初始化一个curl会话,curl_init()函数唯一的一个参数是可选的,表示一个url地址。

curl_exec()函数的作用是执行一个curl会话,唯一的参数是curl_init()函数返回的句柄。

curl_close()函数的作用是关闭一个curl会话,唯一的参数是curl_init()函数返回的句柄。

例子一: 基本例子

??php

// 初始化一个 cURL 对象

$curl = curl_init();

// 设置你需要抓取的URL

curl_setopt($curl, CURLOPT_URL, 'http://www.cmx8.cn');

// 设置header

curl_setopt($curl, CURLOPT_HEADER, 1);

// 设置cURL 参数,要求结果保存到字符串中还是输出到屏幕上。

curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

// 运行cURL,请求网页

$data = curl_exec($curl);

// 关闭URL请求

curl_close($curl);

// 显示获得的数据

var_dump($data);

?>

例子二: POST数据

sendSMS.php,其可以接受两个表单域,一个是电话号码,一个是短信内容。

??php

$phoneNumber = '13812345678';

$message = 'This message was generated by curl and php';

$curlPost = 'pNUMBER=' . urlencode($phoneNumber) . '&MESSAGE=' . urlencode($message) . '&SUBMIT=Send';

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, 'http://www.lxvoip.com/sendSMS.php');

curl_setopt($ch, CURLOPT_HEADER, 1);

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

curl_setopt($ch, CURLOPT_POST, 1);

curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);

$data = curl_exec();

curl_close($ch);

??

例子三:使用代理服务器

??php 

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, 'http://www.cmx8.cn');

curl_setopt($ch, CURLOPT_HEADER, 1);

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

curl_setopt($ch, CURLOPT_HTTPPROXYTUNNEL, 1);

curl_setopt($ch, CURLOPT_PROXY, 'proxy.lxvoip.com:1080');

curl_setopt($ch, CURLOPT_PROXYUSERPWD, 'user:password');

$data = curl_exec();

curl_close($ch);

??

例子四: 模拟登录

Curl 模拟登录 discuz 程序,适合DZ7.0,将username改成你的用户名,userpass改成你的密码就可以了.

<?php    

/**   

* Curl 模拟登录 discuz 程序   

* 尚未实现开启验证码的的论坛登录功能   

*/   

!extension_loaded('curl') && die('The curl extension is not loaded.');    

$discuz_url = 'http://www.lxvoip.com';//论坛地址    

$login_url = $discuz_url .'/logging.php?action=login';//登录页地址    

$get_url = $discuz_url .'/my.php?item=threads'; //我的帖子    

$post_fields = array();    

//以下两项不需要修改    

$post_fields['loginfield'] = 'username';    

$post_fields['loginsubmit'] = 'true';    

//用户名和密码,必须填写    

$post_fields['username'] = 'lxvoip';    

$post_fields['password'] = '88888888';    

//安全提问    

$post_fields['questionid'] = 0;    

$post_fields['answer'] = '';    
//@todo验证码    

$post_fields['seccodeverify'] = '';    

//获取表单FORMHASH    

$ch = curl_init($login_url);    

curl_setopt($ch, CURLOPT_HEADER, 0);    

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);    

$contents = curl_exec($ch);    

curl_close($ch);    

preg_match('/<input\s*type="hidden"\s*name="formhash"\s*value="(.*?)"\s*\/>/i', $contents, $matches);    

if(!empty($matches)) {    

    $formhash = $matches[1];    

} else {    

    die('Not found the forumhash.');    

}    

//POST数据,获取COOKIE    

$cookie_file = dirname(__FILE__) . '/cookie.txt';    

//$cookie_file = tempnam('/tmp');    

$ch = curl_init($login_url);    

curl_setopt($ch, CURLOPT_HEADER, 0);    

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);    

curl_setopt($ch, CURLOPT_POST, 1);    

curl_setopt($ch, CURLOPT_POSTFIELDS, $post_fields);    

curl_setopt($ch, CURLOPT_COOKIEJAR, $cookie_file);    

curl_exec($ch);    

curl_close($ch);    

//带着上面得到的COOKIE获取需要登录后才能查看的页面内容    

$ch = curl_init($get_url);    

curl_setopt($ch, CURLOPT_HEADER, 0);    

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 0);    

curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file);    

$contents = curl_exec($ch);    

curl_close($ch);    

var_dump($contents);    

?>

以上就是本文的全部内容了,希望大家能够喜欢。

PHP 相关文章推荐
用PHP的ob_start() 控制您的浏览器cache
Aug 03 PHP
php cout&amp;lt;&amp;lt;的一点看法
Jan 24 PHP
PHP Zip解压 文件在线解压缩的函数代码
May 26 PHP
php中static静态变量的使用方法详解
Jun 04 PHP
PHP内核介绍及扩展开发指南―基础知识
Sep 11 PHP
php之readdir函数用法实例
Nov 13 PHP
windows下配置php5.5开发环境及开发扩展
Dec 25 PHP
54个提高PHP程序运行效率的方法
Jul 19 PHP
DWZ+ThinkPHP开发时遇到的问题分析
Dec 12 PHP
PHP面向对象程序设计方法实例详解
Dec 24 PHP
PHP中CheckBox多选框上传失败的代码写法
Feb 13 PHP
使用XHProf查找PHP性能瓶颈的实例
Dec 13 PHP
PHP实用函数分享之去除多余的0
Feb 06 #PHP
php定时执行任务设置详解
Feb 06 #PHP
PHP四舍五入、取整、round函数使用示例
Feb 06 #PHP
WordPress中is_singular()函数简介
Feb 05 #PHP
php简单实现MVC
Feb 05 #PHP
php中curl使用指南
Feb 05 #PHP
PHP开发注意事项总结
Feb 04 #PHP
You might like
如何在PHP中使用Oracle数据库(6)
2006/10/09 PHP
建立动态的WML站点(一)
2006/10/09 PHP
php循环创建目录示例分享(php创建多级目录)
2014/03/04 PHP
解决windows上php xdebug 无法调试的问题
2020/02/19 PHP
小议Javascript中的this指针
2010/03/18 Javascript
20个最新的jQuery插件
2012/01/13 Javascript
jQuery Easyui学习之datagrid 动态添加、移除editor
2016/01/27 Javascript
AngularJs页面筛选标签小功能
2016/08/01 Javascript
webpack学习--webpack经典7分钟入门教程
2017/06/28 Javascript
jQuery层级选择器_动力节点节点Java学院整理
2017/07/04 jQuery
教你5分钟学会用requirejs(必看篇)
2017/07/25 Javascript
node.js express框架简介与实现
2019/07/23 Javascript
使用Vue Composition API写出清晰、可扩展的表单实现
2020/06/10 Javascript
python 爬虫出现403禁止访问错误详解
2017/03/11 Python
Python算术运算符实例详解
2017/05/31 Python
基于Python socket的端口扫描程序实例代码
2018/02/09 Python
python3转换code128条形码的方法
2019/04/17 Python
python字典的遍历3种方法详解
2019/08/10 Python
Python 处理文件的几种方式
2019/08/23 Python
Pycharm+Python+PyQt5使用详解
2019/09/25 Python
Python中常用的高阶函数实例详解
2020/02/21 Python
关于Python字符串显示u...的解决方式
2020/03/06 Python
CAT鞋英国官网:坚固耐用的靴子和鞋
2016/10/21 全球购物
Bath & Body Works阿联酋:在线购买沐浴和身体用品
2021/02/27 全球购物
WebSphere 应用服务器都支持哪些认证
2013/12/26 面试题
Linux上比较文件的命令都有哪些
2012/02/24 面试题
大学本科毕业生的自我鉴定范文
2013/11/19 职场文书
临床医师专业个人自我评价
2014/01/08 职场文书
文明礼仪事迹材料
2014/01/09 职场文书
《中彩那天》教学反思
2014/02/22 职场文书
广告艺术设计专业自荐书
2014/07/08 职场文书
2016个人廉洁自律承诺书
2016/03/25 职场文书
python基础之停用词过滤详解
2021/04/21 Python
CSS 使用 resize 实现图片拖拽切换预览功能(强大功能)
2021/08/23 HTML / CSS
详解JAVA的控制语句
2021/11/11 Java/Android
二维码条形码生成的JavaScript脚本库
2022/07/07 Javascript