python爬虫教程之爬取百度贴吧并下载的示例


Posted in Python onMarch 07, 2014

测试url:http://tieba.baidu.com/p/27141123322?pn=
begin  1
end   4

import string ,urllib2
def baidu_tieba(url,begin_page,end_page):
    for i in range(begin_page, end_page+1):
        sName = string.zfill(i,5)+ '.html'
        print '正在下载第' + str(i) + '个网页,并将其存储为' + sName + '..........'
        f = open (sName,'w+')
        m = urllib2.urlopen(url + str(i)).read()
        f.write(m)
        f.close()

bdurl = str(raw_input('url:  \n'))
begin_page = int(raw_input('begin :\n'))
end_page = int(raw_input('end : \n'))
baidu_tieba(bdurl,begin_page,end_page)
Python 相关文章推荐
python 截取 取出一部分的字符串方法
Mar 01 Python
django 多数据库配置教程
May 30 Python
python实现多进程代码示例
Oct 31 Python
python pygame实现2048游戏
Nov 20 Python
Django框架实现分页显示内容的方法详解
May 10 Python
pycharm配置当鼠标悬停时快速提示方法参数
Jul 31 Python
快速查找Python安装路径方法
Feb 06 Python
python GUI库图形界面开发之pyinstaller打包python程序为exe安装文件
Feb 26 Python
python输出数学符号实例
May 11 Python
利用OpenCV中对图像数据进行64F和8U转换的方式
Jun 03 Python
Python数据相关系数矩阵和热力图轻松实现教程
Jun 16 Python
MATLAB 全景图切割及盒图显示的实现步骤
May 14 Python
python处理json数据中的中文
Mar 06 #Python
Python中针对函数处理的特殊方法
Mar 06 #Python
python连接mysql调用存储过程示例
Mar 05 #Python
python益智游戏计算汉诺塔问题示例
Mar 05 #Python
python连接mysql并提交mysql事务示例
Mar 05 #Python
python遍历文件夹并删除特定格式文件的示例
Mar 05 #Python
python的三目运算符和not in运算符使用示例
Mar 03 #Python
You might like
世界第一个无线广播电台 KDKA
2021/03/01 无线电
php读取图片内容并输出到浏览器的实现代码
2013/08/08 PHP
php判断一个数组是否为有序的方法
2015/03/27 PHP
分享PHP源码批量抓取远程网页图片并保存到本地的实现方法
2015/12/01 PHP
PHP设计模式之单例模式原理与实现方法分析
2018/04/25 PHP
Laravel框架路由和控制器的绑定操作方法
2018/06/12 PHP
jQuery 性能优化指南 (1)
2009/05/21 Javascript
javascript 新浪背投广告实现代码
2009/07/07 Javascript
JQuery跨Iframe选择实现代码
2010/08/19 Javascript
基于jquery的网站幻灯片切换效果焦点图代码
2013/09/15 Javascript
Nodejs初级阶段之express
2015/11/23 NodeJs
JavaScript 七大技巧(二)
2015/12/13 Javascript
webpack项目使用eslint建立代码规范实现
2019/05/16 Javascript
javascript异步编程的六种方式总结
2019/05/17 Javascript
VUE脚手架具体使用方法
2019/05/20 Javascript
jquery实现掷骰子小游戏
2019/10/24 jQuery
Python中无限元素列表的实现方法
2014/08/18 Python
在Python中使用HTMLParser解析HTML的教程
2015/04/29 Python
python实现全盘扫描搜索功能的方法
2019/02/14 Python
python实现智能语音天气预报
2019/12/02 Python
html5 datalist 选中option选项后的触发事件
2020/03/05 HTML / CSS
cosme官方海外旗舰店:日本最大化妆品和美容产品的综合口碑网站
2017/01/18 全球购物
高一物理教学反思
2014/01/24 职场文书
酒店营销策划方案
2014/02/07 职场文书
销售员个人求职的自我评价
2014/02/10 职场文书
岗位职责风险防控
2014/02/18 职场文书
党的群众路线教育实践活动公开承诺书
2014/03/28 职场文书
商场开业庆典策划方案
2014/06/02 职场文书
护理专业毕业生自荐信
2014/06/15 职场文书
销售顾问工作计划书
2014/08/15 职场文书
安全保卫工作竞聘材料
2014/08/25 职场文书
党的群众路线教育实践活动对照检查材料
2014/09/22 职场文书
2014年学校工作总结
2014/11/20 职场文书
导游词400字
2015/02/13 职场文书
工作简报范文
2015/07/21 职场文书
Spring中bean的生命周期之getSingleton方法
2021/06/30 Java/Android