PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例


Posted in PHP onApril 14, 2016

说起来做这个功能还真是一时好奇。前段时间在做一个淘客网站的时候,想到是否能抓取到淘宝商品的买家秀呢?经过一番折腾发现,淘宝商品用户评价信息是通过Ajax来调取的,通过嗅探网址发现,评论数据的请求接口是:

https://rate.tmall.com/list_detail_rate.htm?itemId=524394294771&spuId=341564036&sellerId=100414600&order=3¤tPage=1&append=0&content=1&tagId=&posi=&picture=1&callback=jsonp2339

其实上面很多参数也很容易理解,itemId是商品的ID,currentPage是当前页,picture为1时显示有图的评价,既然是抓取买家秀,那么picture参数一定要为1了。

如果你直接去访问上面的接口时,会得到如下图所示的请求结果:

PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例

看到请求结果是jsonp格式我就蛋碎了,我不知道如何去解析,但是换种思路,直接用PHP的正则去解析也未尝不可嘛,通过尝试,已经正确的能够解析到评论内容和买家秀的图片内容,如图:

PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例

效果不错,代码实现了评论内容的抓取、买家秀图片的抓取,代码奉上:

<?php
$url = "https://rate.tmall.com/list_detail_rate.htm?itemId=524394294771&spuId=341564036&sellerId=100414600&order=3¤tPage=1&append=0&content=1&tagId=&posi=&picture=1&callback=jsonp2339";
$ch2 = curl_init();
curl_setopt($ch2, CURLOPT_URL, $url);
curl_setopt($ch2, CURLOPT_FOLLOWLOCATION, TRUE);
curl_setopt($ch2, CURLOPT_SSL_VERIFYHOST, FALSE);
curl_setopt($ch2, CURLOPT_SSL_VERIFYPEER, false);
curl_setopt($ch2, CURLOPT_RETURNTRANSFER, TRUE);
$texts = curl_exec($ch2);
curl_close($ch2);
//echo $texts;
$pattern = '/"pics"(.+?)","reply"/is';
preg_match_all($pattern, $texts, $match);
for($i=0;$i<count($match[0]);$i++){
$pattern2 = '/"rateContent":"(.+?)."reply"/is';
preg_match($pattern2, $match[0][$i], $matchcomments_only);
echo "<p>".str_replace('","rateDate":"',' ',str_replace('","reply"','',str_replace('"rateContent":"','',$matchcomments_only[0])))."</p>";
$pattern3 = '/img.alicdn(.+?).jpg/is';
preg_match($pattern3, $match[0][$i], $matchpic_only);
echo '<img src="http://'.$matchpic_only[0].'" width=120>';
}
/*匹配一张图片
$pattern = '/"pics"(.+?)","position"/is';
preg_match_all($pattern, $texts, $matchpic);
for($i=0;$i<count($matchpic[0]);$i++){
$pattern3 = '/img.alicdn(.+?).jpg/is';
preg_match($pattern3, $matchpic[0][$i], $matchpic_only);
echo "<p>".$matchpic_only[0]."</p>";
}*/
/*匹配所有图片
$pattern = '/"pics"(.+?)","position"/is';
preg_match_all($pattern, $texts, $matchpic);
for($i=0;$i<count($matchpic[0]);$i++){
$pics_str=str_replace('"pics":["//','',str_replace('"],"picsSmall":"","position"','',$matchpic[0][$i]));
$arr = explode('","//',$pics_str);
echo "<p>";
foreach($arr as $newstr){
echo '<img src=http://'.$newstr.' width=100 >';
}
echo "</p>";
}*/
?>

下面给大家介绍PHP抓取淘宝搜索商品列表实例

<?php
header("Content-Type:text/html;charset=gbk");
include "Snoopy.class.php"; 
$snoopy = new Snoopy; 
$snoopy->fetch("http://s.taobao.com/search?spm=a230r.1.8.7.2NN4M7&q=%C7%EF%B6%AC%B4%F3%D2%C2&source=tbsy&refpid=420461_1006&discount_index=1&newpre=null&p4p_str=fp_midtop%3D0%26firstpage_pushleft%3D0&style=list&s=0#J_Filter"); 
$html=$snoopy->results; 
//说明:抓取网页使用的是 Snoopyphp 框架 也可以直接使用file_get_contents函数获取即可,
//var_dump($html);
preg_match_all('/<h3 class="summary">.*</a>/',$html,$result);
//preg_match_all('/<divsid="([a-z0-9_]+)">([^<>]+)</div>/',$html,$result);
var_dump($result);
echo "<br>";
/*
//循环读取数组
foreach($result as $key1){
foreach($key1 as $key => $val){
echo $key.$val;
}
}
*/

以上所述是小编给大家介绍的PHP抓取淘宝商品的用户晒单评论+图片+搜索商品列表实例,希望对大家有所帮助!

PHP 相关文章推荐
一篇有意思的技术文章php介绍篇
Oct 26 PHP
php 5.3.5安装memcache注意事项小结
Apr 12 PHP
模板引擎正则表达式调试小技巧
Jul 20 PHP
用php来改写404错误页让你的页面更友好
Jan 24 PHP
深入理解require与require_once与include以及include_once的区别
Jun 05 PHP
深入解析PHP垃圾回收机制对内存泄露的处理
Jun 14 PHP
CI框架学习笔记(二) -入口文件index.php
Oct 27 PHP
PHP使用CURL模拟登录的方法
Jul 08 PHP
PHP可变变量学习小结
Nov 29 PHP
PHP函数import_request_variables()用法分析
Apr 02 PHP
PHP写API输出的时用echo的原因详解
Apr 28 PHP
PHP多进程简单实例小结
Nov 09 PHP
php上传大文件设置方法
Apr 14 #PHP
什么是OneThink oneThink后台添加插件步骤
Apr 13 #PHP
java模拟PHP的pack和unpack类
Apr 13 #PHP
php远程下载类分享
Apr 13 #PHP
Thinkphp和onethink实现微信支付插件
Apr 13 #PHP
PHP MSSQL 分页实例
Apr 13 #PHP
php构造方法中析构方法在继承中的表现
Apr 12 #PHP
You might like
重置版宣传动画
2020/04/09 魔兽争霸
PHP 常用数组内部函数(Array Functions)介绍
2013/06/05 PHP
解决PHP4.0 和 PHP5.0类构造函数的兼容问题
2013/08/01 PHP
php使用正则表达式获取图片url的方法
2015/01/16 PHP
PHP树-不需要递归的实现方法
2016/06/21 PHP
详解Yii2.0 rules验证规则集合
2017/03/21 PHP
PHP实现新型冠状病毒疫情实时图的实例
2020/02/04 PHP
jQuery筛选数组之grep、each、inArray、map的用法及遍历json对象
2016/06/20 Javascript
jQuery选择器总结之常用元素查找方法
2016/08/04 Javascript
Backbone View 之间通信的三种方式
2016/08/09 Javascript
jQuery弹出层后禁用底部滚动条(移动端关闭回到原位置)
2016/08/29 Javascript
Bootstrap复选框和单选按钮美化插件(推荐)
2016/11/23 Javascript
js canvas实现放大镜查看图片功能
2017/06/08 Javascript
Node层模拟实现multipart表单的文件上传示例
2018/01/02 Javascript
详解React native fetch遇到的坑
2018/08/30 Javascript
微信小程序云开发如何使用云函数生成二维码
2019/05/18 Javascript
微信小程序页面间跳转传参方式总结
2019/06/13 Javascript
nodejs环境使用Typeorm连接查询Oracle数据
2019/12/05 NodeJs
JS指定音频audio在某个时间点进行播放
2020/11/28 Javascript
Angular处理未可知异常错误的方法详解
2021/01/17 Javascript
[59:08]Ti4 冒泡赛第二天 NEWBEE vs Titan 2
2014/07/15 DOTA
Python实现3行代码解简单的一元一次方程
2014/08/18 Python
跟老齐学Python之做一个小游戏
2014/09/28 Python
详谈Python基础之内置函数和递归
2017/06/21 Python
python与C互相调用的方法详解
2017/07/14 Python
python3 小数位的四舍五入(用两种方法解决round 遇5不进)
2019/04/11 Python
numpy.meshgrid()理解(小结)
2019/08/01 Python
python实现批量修改服务器密码的方法
2019/08/13 Python
python3实现单目标粒子群算法
2019/11/14 Python
在 Python 中使用 7zip 备份文件的操作
2020/12/11 Python
基于HTML5 Canvas 实现弹出框效果
2017/06/05 HTML / CSS
法学研究生自我鉴定范文
2013/12/04 职场文书
幼儿园教师辞职信
2014/01/18 职场文书
运动会跳远广播稿
2014/02/04 职场文书
经理助理岗位职责
2014/03/05 职场文书
城市轨道交通工程职业生涯规划书范文
2014/09/16 职场文书