python采用requests库模拟登录和抓取数据的简单示例


Posted in Python onJuly 05, 2014

如果你还在为python的各种urllib和urlibs,cookielib 头疼,或者还还在为python模拟登录和抓取数据而抓狂,那么来看看我们推荐的requests,python采集数据模拟登录必备利器!

这也是python推荐的HTTP客户端库:

本文就以一个模拟登录的例子来加以说明,至于采集大家就请自行发挥吧。

代码很简单,主要是展现python的requests库的简单至极,代码如下:

s = requests.session()
data = {'user':'用户名','passdw':'密码'}
#post 换成登录的地址,
res=s.post('http://www.xxx.net/index.php?action=login',data);
#换成抓取的地址
s.get('http://www.xxx.net/archives/155/');

看!仅仅4行代码,即可模拟登录。

Python 相关文章推荐
跟老齐学Python之for循环语句
Oct 02 Python
python监控linux内存并写入mongodb(推荐)
Sep 11 Python
Python实现从log日志中提取ip的方法【正则提取】
Mar 31 Python
利用Python+阿里云实现DDNS动态域名解析的方法
Apr 01 Python
python能做什么 python的含义
Oct 12 Python
2020新版本pycharm+anaconda+opencv+pyqt环境配置学习笔记,亲测可用
Mar 24 Python
Python3 ID3决策树判断申请贷款是否成功的实现代码
May 21 Python
Python smtp邮件发送模块用法教程
Jun 15 Python
Keras 切换后端方式(Theano和TensorFlow)
Jun 19 Python
python 实现一个图形界面的汇率计算器
Nov 09 Python
详解解决jupyter不能使用pytorch的问题
Feb 18 Python
Python实现排序方法常见的四种
Jul 15 Python
浅析python 中__name__ = '__main__' 的作用
Jul 05 #Python
python在windows下实现备份程序实例
Jul 04 #Python
python调用短信猫控件实现发短信功能实例
Jul 04 #Python
Python实现类继承实例
Jul 04 #Python
Django集成百度富文本编辑器uEditor攻略
Jul 04 #Python
一个小示例告诉你Python语言的优雅之处
Jul 04 #Python
教你如何将 Sublime 3 打造成 Python/Django IDE开发利器
Jul 04 #Python
You might like
同时提取多条新闻中的文本一例
2006/10/09 PHP
php数组函数序列之array_unique() - 去除数组中重复的元素值
2011/10/29 PHP
解析php入库和出库
2013/06/25 PHP
PHP获取某个月最大天数(最后一天)的方法
2015/07/29 PHP
php批量删除超链接的实现方法
2015/10/19 PHP
Yii清理缓存的方法
2016/01/06 PHP
php 截取中英文混合字符串的方法
2018/05/31 PHP
PHP中Static(静态)关键字功能与用法实例分析
2019/04/05 PHP
PHP常量及变量区别原理详解
2020/08/14 PHP
jQuery each()小议
2010/03/18 Javascript
面向对象的Javascript之一(初识Javascript)
2012/01/20 Javascript
Javascript获取窗口(容器)的大小及位置参数列举及简要说明
2012/12/09 Javascript
jquery异步跨域访问代码
2013/06/28 Javascript
JS+Canvas 实现下雨下雪效果
2016/05/18 Javascript
JavaScript中的操作符类型转换示例总结
2016/05/30 Javascript
JS实现简单的天数计算器完整实例
2017/04/28 Javascript
使用Vue做一个简单的todo应用的三种方式的示例代码
2018/10/20 Javascript
js实现简单音乐播放器
2020/06/30 Javascript
Vue3新特性之在Composition API中使用CSS Modules
2020/07/13 Javascript
node使用async_hooks模块进行请求追踪
2021/01/28 Javascript
Python群发邮件实例代码
2014/01/03 Python
Python中使用Boolean操作符做真值测试实例
2015/01/30 Python
pandas 数据归一化以及行删除例程的方法
2018/11/10 Python
使用python3实现操作串口详解
2019/01/01 Python
详解python函数的闭包问题(内部函数与外部函数详述)
2019/05/17 Python
Python任意字符串转16, 32, 64进制的方法
2019/06/12 Python
决策树剪枝算法的python实现方法详解
2019/09/18 Python
基于Python爬虫采集天气网实时信息
2020/06/05 Python
基于python实现模拟数据结构模型
2020/06/12 Python
Python开发.exe小工具的详细步骤
2021/01/27 Python
班长岗位职责
2013/11/10 职场文书
产品质量承诺范本
2014/03/31 职场文书
环保倡议书范文
2014/05/12 职场文书
社区服务活动报告
2015/02/05 职场文书
KTV员工管理制度
2015/08/06 职场文书
spring IOC容器的Bean管理XML自动装配过程
2022/05/30 Java/Android