利用curl抓取远程页面内容的示例代码


Posted in PHP onJuly 23, 2013

最基本的操作如下

$curlPost = 'a=1&b=2';//模拟POST数据
$ch = curl_init();
curl_setopt($ch, CURLOPT_HTTPHEADER, array('X-FORWARDED-FOR:0.0.0.0', 'CLIENT-IP:0.0.0.0'));  //构造IP
curl_setopt($ch, CURLOPT_REFERER, "https://3water.com/");   //构造来路 
curl_setopt($ch,CURLOPT_URL, 'https://3water.com');//需要抓取的页面路径
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1); 
curl_setopt ($ch, CURLOPT_TIMEOUT, 30);
curl_setopt($ch, CURLOPT_POSTFIELDS, $curlPost);//post值$file_contents = curl_exec($ch);//抓取的内容放在变量中
curl_close($ch)
PHP 相关文章推荐
PHP个人网站架设连环讲(三)
Oct 09 PHP
php图片加水印原理(超简单的实例代码)
Jan 18 PHP
ThinkPHP模板引擎之导入资源文件方法详解
Jun 18 PHP
PHP中new static() 和 new self() 的区别介绍
Jan 09 PHP
如何批量清理系统临时文件(语言:C#、 C/C++、 php 、python 、java )
Feb 01 PHP
PHP 自动加载的简单实现(推荐)
Aug 12 PHP
php版微信公众平台入门教程之开发者认证的方法
Sep 26 PHP
PHP异常处理定义与使用方法分析
Jul 25 PHP
Laravel中批量赋值Mass-Assignment的真正含义详解
Sep 29 PHP
PHP序列化的四种实现方法与横向对比
Nov 29 PHP
PHP Trait代码复用类与多继承实现方法详解
Jun 17 PHP
PHP filter_var() 函数, 验证判断EMAIL,URL等
Mar 09 PHP
奉献出一个封装的curl函数 便于调用(抓数据专用)
Jul 22 #PHP
解析VS2010利用VS.PHP插件调试PHP的方法
Jul 19 #PHP
js限制checkbox勾选的个数以及php获取多个checkbbox的方法深入解析
Jul 18 #PHP
php的数组与字符串的转换函数整理汇总
Jul 18 #PHP
使用PHP编写的SVN类
Jul 18 #PHP
请离开include_once和require_once
Jul 18 #PHP
解析PHP中的unset究竟会不会释放内存
Jul 18 #PHP
You might like
解析php php_openssl.dll的作用
2013/07/01 PHP
phpnow php探针环境检测代码
2014/11/04 PHP
cakephp打印sql语句的方法
2015/02/13 PHP
PHP载入图像imagecreatefrom_gif_jpeg_png系列函数用法分析
2016/11/14 PHP
PHP中call_user_func_array回调函数的用法示例
2016/11/26 PHP
Laravel 自带的Auth验证登录方法
2019/09/30 PHP
JavaScript Base64编码和解码,实现URL参数传递。
2006/09/18 Javascript
dojo 之基础篇(三)之向服务器发送数据
2007/03/24 Javascript
javascript下IE与FF兼容函数收集
2008/09/17 Javascript
jQuery图片的展开和收缩实现代码
2013/04/16 Javascript
JQuery页面的表格数据的增加与分页的实现
2013/12/10 Javascript
js中substring和substr的定义和用法
2014/05/05 Javascript
jQuery DOM插入节点操作指南
2015/03/03 Javascript
微信小程序 后台https域名绑定和免费的https证书申请详解
2016/11/10 Javascript
关于Node.js中Buffer的一些你可能不知道的用法
2017/03/28 Javascript
详解nodejs微信jssdk后端接口
2017/05/25 NodeJs
VUE2 前端实现 静态二级省市联动选择select的示例
2018/02/09 Javascript
Vue2 添加数据可视化支持的方法步骤
2019/01/02 Javascript
uploadify插件实现多个图片上传并预览
2019/09/30 Javascript
微信小程序自定义弹出模态框禁止底部滚动功能
2020/03/09 Javascript
vue中的.$mount('#app')手动挂载操作
2020/09/02 Javascript
Vue利用localStorage本地缓存使页面刷新验证码不清零功能的实现
2020/09/04 Javascript
一步步教你用Python实现2048小游戏
2017/01/19 Python
python:pandas合并csv文件的方法(图书数据集成)
2018/04/12 Python
python 通过字符串调用对象属性或方法的实例讲解
2018/04/21 Python
PySide和PyQt加载ui文件的两种方法
2019/02/27 Python
numpy库与pandas库axis=0,axis= 1轴的用法详解
2019/05/27 Python
PyQT5 emit 和 connect的用法详解
2019/12/13 Python
Jupyter Notebook远程登录及密码设置操作
2020/04/10 Python
python输入一个水仙花数(三位数) 输出百位十位个位实例
2020/05/03 Python
CSS3控制HTML元素动画效果
2014/02/08 HTML / CSS
Strawberrynet草莓网新加坡站:护肤、彩妆、香水及美发产品
2018/08/31 全球购物
最新会计专业求职信范文
2014/01/28 职场文书
蜜蜂引路教学反思
2014/02/04 职场文书
奥巴马就职演讲稿
2014/05/15 职场文书
win10更新失败无限重启解决方法
2022/04/19 数码科技