python采用requests库模拟登录和抓取数据的简单示例


Posted in Python onJuly 05, 2014

如果你还在为python的各种urllib和urlibs,cookielib 头疼,或者还还在为python模拟登录和抓取数据而抓狂,那么来看看我们推荐的requests,python采集数据模拟登录必备利器!

这也是python推荐的HTTP客户端库:

本文就以一个模拟登录的例子来加以说明,至于采集大家就请自行发挥吧。

代码很简单,主要是展现python的requests库的简单至极,代码如下:

s = requests.session()
data = {'user':'用户名','passdw':'密码'}
#post 换成登录的地址,
res=s.post('http://www.xxx.net/index.php?action=login',data);
#换成抓取的地址
s.get('http://www.xxx.net/archives/155/');

看!仅仅4行代码,即可模拟登录。

Python 相关文章推荐
python进阶教程之函数对象(函数也是对象)
Aug 30 Python
Python中if __name__ == "__main__"详细解释
Oct 21 Python
在Python中利用Pandas库处理大数据的简单介绍
Apr 07 Python
Python中用max()方法求最大值的介绍
May 15 Python
在主机商的共享服务器上部署Django站点的方法
Jul 22 Python
解决pyqt中ui编译成窗体.py中文乱码的问题
Dec 23 Python
Python编程实现的简单神经网络算法示例
Jan 26 Python
Python学习之Django的管理界面代码示例
Feb 10 Python
Python中的sys.stdout.write实现打印刷新功能
Feb 21 Python
使用Python文件读写,自定义分隔符(custom delimiter)
Jul 05 Python
2021年值得向Python开发者推荐的VS Code扩展插件
Jan 25 Python
Elasticsearch 基本查询和组合查询
Apr 19 Python
浅析python 中__name__ = '__main__' 的作用
Jul 05 #Python
python在windows下实现备份程序实例
Jul 04 #Python
python调用短信猫控件实现发短信功能实例
Jul 04 #Python
Python实现类继承实例
Jul 04 #Python
Django集成百度富文本编辑器uEditor攻略
Jul 04 #Python
一个小示例告诉你Python语言的优雅之处
Jul 04 #Python
教你如何将 Sublime 3 打造成 Python/Django IDE开发利器
Jul 04 #Python
You might like
php对图像的各种处理函数代码小结
2013/07/08 PHP
php简单实现无限分类树形列表的方法
2015/03/27 PHP
PHP制作登录异常ip检测功能的实例代码
2016/11/16 PHP
laravel开发环境homestead搭建过程详解
2020/07/03 PHP
IE6,IE7,IE8下使用Javascript记录光标选中范围(已补全)
2011/08/28 Javascript
基于jQuery全屏焦点图左右切换插件responsiveslides
2015/09/07 Javascript
浅谈angular懒加载的一些坑
2016/08/20 Javascript
Javascript将JSON日期格式化
2016/08/23 Javascript
微信小程序使用第三方库Underscore.js步骤详解
2016/09/27 Javascript
JS取模、取商及取整运算方法示例
2016/10/13 Javascript
一个例子轻松学会Vue.js
2017/01/02 Javascript
基于jQuery实现瀑布流页面
2017/04/11 jQuery
详解使用Vue Router导航钩子与Vuex来实现后退状态保存
2017/09/11 Javascript
javascript实现文本框标签验证的实例代码
2018/10/14 Javascript
JavaScript多种滤镜算法实现代码实例
2019/12/10 Javascript
[01:06:54]DOTA2-DPC中国联赛 正赛 RNG vs Dragon BO3 第一场 1月24日
2021/03/11 DOTA
django 删除数据库表后重新同步的方法
2018/05/27 Python
Django 连接sql server数据库的方法
2018/06/30 Python
Python找出微信上删除你好友的人脚本写法
2018/11/01 Python
python通过tcp发送xml报文的方法
2018/12/28 Python
在PyCharm中批量查找及替换的方法
2019/01/20 Python
tensorflow 实现数据类型转换
2020/02/17 Python
Python切割图片成九宫格的示例代码
2020/03/10 Python
python3.6环境下安装freetype库和基本使用方法(推荐)
2020/05/10 Python
Django如何重置migration的几种情景
2021/02/24 Python
早读迟到检讨书
2014/01/24 职场文书
贸易跟单员英文求职信
2014/04/19 职场文书
党员学习正风肃纪思想汇报
2014/09/12 职场文书
党支部四风整改方案
2014/10/25 职场文书
2014年房地产工作总结范文
2014/11/19 职场文书
写给老婆的保证书
2015/02/27 职场文书
2015年销售人员工作总结
2015/04/07 职场文书
小学生安全教育主题班会
2015/08/12 职场文书
《角的度量》教学反思
2016/02/18 职场文书
2019年最新版见习人员管理制度!
2019/07/08 职场文书
Python连接Postgres/Mysql/Mongo数据库基本操作大全
2021/06/29 Python