python采用requests库模拟登录和抓取数据的简单示例


Posted in Python onJuly 05, 2014

如果你还在为python的各种urllib和urlibs,cookielib 头疼,或者还还在为python模拟登录和抓取数据而抓狂,那么来看看我们推荐的requests,python采集数据模拟登录必备利器!

这也是python推荐的HTTP客户端库:

本文就以一个模拟登录的例子来加以说明,至于采集大家就请自行发挥吧。

代码很简单,主要是展现python的requests库的简单至极,代码如下:

s = requests.session()
data = {'user':'用户名','passdw':'密码'}
#post 换成登录的地址,
res=s.post('http://www.xxx.net/index.php?action=login',data);
#换成抓取的地址
s.get('http://www.xxx.net/archives/155/');

看!仅仅4行代码,即可模拟登录。

Python 相关文章推荐
重命名批处理python脚本
Apr 05 Python
正确理解python中的关键字“with”与上下文管理器
Apr 21 Python
Python Unittest根据不同测试环境跳过用例的方法
Dec 16 Python
python中enumerate() 与zip()函数的使用比较实例分析
Sep 03 Python
Tensorflow tf.dynamic_partition矩阵拆分示例(Python3)
Feb 07 Python
Python基础之字符串常见操作经典实例详解
Feb 26 Python
Python实现井字棋小游戏
Mar 09 Python
python脚本第一行如何写
Aug 30 Python
通过代码实例了解Python异常本质
Sep 16 Python
python实现图书馆抢座(自动预约)功能的示例代码
Sep 29 Python
详解Open Folder as PyCharm Project怎么添加的方法
Dec 29 Python
pytorch 一行代码查看网络参数总量的实现
May 12 Python
浅析python 中__name__ = '__main__' 的作用
Jul 05 #Python
python在windows下实现备份程序实例
Jul 04 #Python
python调用短信猫控件实现发短信功能实例
Jul 04 #Python
Python实现类继承实例
Jul 04 #Python
Django集成百度富文本编辑器uEditor攻略
Jul 04 #Python
一个小示例告诉你Python语言的优雅之处
Jul 04 #Python
教你如何将 Sublime 3 打造成 Python/Django IDE开发利器
Jul 04 #Python
You might like
2021年最新CPU天梯图
2021/03/04 数码科技
PHP生成静态页面详解
2006/11/19 PHP
php ZipArchive压缩函数详解实例
2013/11/06 PHP
PHP定时任务获取微信access_token的方法
2016/10/10 PHP
PHP手机号中间四位用星号*代替显示的实例
2017/06/02 PHP
Yii框架ACF(accessController)简单权限控制操作示例
2019/04/26 PHP
在Javascript中为String对象添加trim,ltrim,rtrim方法
2006/09/22 Javascript
JavaScript入门教程(10) 认识其他对象
2009/01/31 Javascript
jquery 页眉单行信息滚动显示实现思路及代码
2014/06/26 Javascript
无刷新上传文件并返回自定义值
2015/06/11 Javascript
js限制文本框的输入内容代码分享(3类)
2015/08/20 Javascript
JS产生随机数的几个用法详解
2016/06/22 Javascript
JS及PHP代码编写八大排序算法
2016/07/12 Javascript
node.js+jQuery实现用户登录注册AJAX交互
2017/04/28 jQuery
NodeJS实现图片上传代码(Express)
2017/06/30 NodeJs
JS实现不用中间变量temp 实现两个变量值得交换方法
2018/02/04 Javascript
vue-vuex中使用commit提交mutation来修改state的方法详解
2018/09/16 Javascript
Django+vue跨域问题解决的详细步骤
2019/01/20 Javascript
详解基于electron制作一个node压缩图片的桌面应用
2019/01/29 Javascript
ES6中Symbol、Set和Map用法详解
2019/08/20 Javascript
原生js+css调节音量滑块
2020/01/15 Javascript
小结Python用fork来创建子进程注意事项
2014/07/03 Python
python批量同步web服务器代码核心程序
2014/09/01 Python
100行python代码实现跳一跳辅助程序
2018/01/15 Python
在dataframe两列日期相减并且得到具体的月数实例
2018/07/03 Python
Python中正则表达式的用法总结
2019/02/22 Python
python设计tcp数据包协议类的例子
2019/07/23 Python
python 根据字典的键值进行排序的方法
2019/07/24 Python
python中的RSA加密与解密实例解析
2019/11/18 Python
Pycharm内置终端及远程SSH工具的使用教程图文详解
2020/03/19 Python
python对批量WAV音频进行等长分割的方法实现
2020/09/25 Python
艺术设计专业个人求职信
2013/09/21 职场文书
化工专业求职信
2014/07/01 职场文书
淘宝好评语句大全
2014/12/31 职场文书
教导主任个人总结
2015/03/03 职场文书
总结会主持词
2015/07/02 职场文书