python采用requests库模拟登录和抓取数据的简单示例


Posted in Python onJuly 05, 2014

如果你还在为python的各种urllib和urlibs,cookielib 头疼,或者还还在为python模拟登录和抓取数据而抓狂,那么来看看我们推荐的requests,python采集数据模拟登录必备利器!

这也是python推荐的HTTP客户端库:

本文就以一个模拟登录的例子来加以说明,至于采集大家就请自行发挥吧。

代码很简单,主要是展现python的requests库的简单至极,代码如下:

s = requests.session()
data = {'user':'用户名','passdw':'密码'}
#post 换成登录的地址,
res=s.post('http://www.xxx.net/index.php?action=login',data);
#换成抓取的地址
s.get('http://www.xxx.net/archives/155/');

看!仅仅4行代码,即可模拟登录。

Python 相关文章推荐
python批量生成本地ip地址的方法
Mar 23 Python
python 实现网上商城,转账,存取款等功能的信用卡系统
Jul 15 Python
Python爬虫爬取美剧网站的实现代码
Sep 03 Python
python虚拟环境virualenv的安装与使用
Dec 18 Python
python数据结构链表之单向链表(实例讲解)
Jul 25 Python
Python基于Matplotlib库简单绘制折线图的方法示例
Aug 14 Python
PyTorch快速搭建神经网络及其保存提取方法详解
Apr 28 Python
一看就懂得Python的math模块
Oct 21 Python
python实现石头剪刀布程序
Jan 20 Python
Selenium自动化测试工具使用方法汇总
Jun 12 Python
keras绘制acc和loss曲线图实例
Jun 15 Python
python not运算符的实例用法
Jun 30 Python
浅析python 中__name__ = '__main__' 的作用
Jul 05 #Python
python在windows下实现备份程序实例
Jul 04 #Python
python调用短信猫控件实现发短信功能实例
Jul 04 #Python
Python实现类继承实例
Jul 04 #Python
Django集成百度富文本编辑器uEditor攻略
Jul 04 #Python
一个小示例告诉你Python语言的优雅之处
Jul 04 #Python
教你如何将 Sublime 3 打造成 Python/Django IDE开发利器
Jul 04 #Python
You might like
利用php+mysql来做一个功能强大的在线计算器
2010/10/12 PHP
php判断页面是否是微信打开的示例(微信打开网页)
2014/04/25 PHP
php开启与关闭错误提示适用于没有修改php.ini的权限
2014/10/16 PHP
php版微信发红包接口用法示例
2016/09/23 PHP
浅谈PHP的排列组合(如输入a,b,c 输出他们的全部组合)
2017/03/14 PHP
javascript 动态设置已知select的option的value值的代码
2009/12/16 Javascript
20款非常优秀的 jQuery 工具提示插件 推荐
2012/07/15 Javascript
Javascript操作cookie的函数代码
2012/10/03 Javascript
在JavaScript中访问字符串的子串
2015/07/07 Javascript
AngularJS ng-bind 指令简单实现
2016/07/30 Javascript
详解js中Json的语法与格式
2016/11/22 Javascript
完美的js图片轮换效果
2017/02/05 Javascript
详解设置Webstorm 利用babel将ES6自动转码成ES5
2017/12/20 Javascript
JavaScript树的深度优先遍历和广度优先遍历算法示例
2018/07/30 Javascript
JavaScript中join()、splice()、slice()和split()函数用法示例
2018/08/24 Javascript
使用Vuex解决Vue中的身份验证问题
2018/09/28 Javascript
element-plus一个vue3.xUI框架(element-ui的3.x 版初体验)
2020/12/02 Vue.js
Python3 入门教程 简单但比较不错
2009/11/29 Python
创建pycharm的自定义python模板方法
2018/05/23 Python
python中sys.argv函数精简概括
2018/07/08 Python
一步步教你用python的scrapy编写一个爬虫
2019/04/17 Python
Python实现快速排序的方法详解
2019/10/25 Python
css3中transition属性详解
2014/09/02 HTML / CSS
CSS3 text shadow字体阴影效果
2016/01/08 HTML / CSS
HTML 5 标签、属性、事件及浏览器兼容性速查表 附打包下载
2012/10/20 HTML / CSS
健康监测猫砂:Pretty Litter
2017/05/25 全球购物
世界上最大的字体市场:MyFonts
2020/01/10 全球购物
Kipling澳洲官网:购买凯浦林包包
2020/12/17 全球购物
空字符串(“”)和null的区别
2012/11/13 面试题
交通事故赔偿协议书范本
2014/04/15 职场文书
电视节目策划方案
2014/05/16 职场文书
写给孩子的新学期寄语
2015/02/27 职场文书
个人党性分析总结
2015/03/05 职场文书
自主招生专家推荐信
2015/03/26 职场文书
北京青年观后感
2015/06/15 职场文书
Windows server 2012 R2 安装IIS服务器
2022/04/29 Servers