Python使用cookielib模块操作cookie的实例教程


Posted in Python onJuly 12, 2016

cookielib是一个自动处理cookies的模块,如果我们在使用爬虫等技术的时候需要保存cookie,那么cookielib会让你事半功倍!他最常见的搭档模块就是python下的urllib和request。

核心类
1.Cookie
该类实现了Netscape and RFC 2965 cookies定义的cookie标准,基本可以理解为某一条cookie数据。
部分代码如下,很多属性是不是很眼熟?

self.domain_initial_dot = domain_initial_dot
    self.path = path
    self.path_specified = path_specified
    self.secure = secure
    self.expires = expires
    self.discard = discard
    self.comment = comment
    self.comment_url = comment_url
    self.rfc2109 = rfc2109

2.CookiePolicy
该类的主要功能是收发cookie,即确保正确的cookie发往对应的域名,反之一样。
3.DefaultCookiePolicy
该类实现了CookiePolicy的接口。
4.CookieJar
CookieJar是cookie的集合,可以包含有很多Cookie类,是我们的主要操作对象。里面有一系列的方法可以支持更加细致的操作!
5.FileCookieJar
该类继承自CookieJar,CookieJar只是在内存中完成自己的生命周期,FileCookieJar的子类能够实现数据持久化,定义了save、load、revert三个接口。
6.MozillaCookieJar & LWPCookieJar
两个实现类,继承关系如下:

Python使用cookielib模块操作cookie的实例教程

实例:登录人人网
在firefox下使用httpFox插件来查到人人网的登录时需要POST的地址是http://www.renren.com/ajaxLogin

Python使用cookielib模块操作cookie的实例教程

而且查看到需要POST的DATA有email和password
python通过cookielib来处理cookie,以下是简单的代码

>>> import urllib
>>> import urllib2,cookielib
>>> login_page = "http://www.renren.com/ajaxLogin"
>>> cj = cookielib.CookieJar()
>>> opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cj))
>>> opener.add_handler = [('User-agent','Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)')]
>>> data = urllib.urlencode({"email":'username',"password":'password'}) 
>>> opener.open(login_page,data)
<addinfourl at 53653216 whose fp = <socket._fileobject object at 0x03307B70>>
>>> if cj:
... for index,cookie in enumerate(cj):
...  print index,':',cookie
...  
0 : <Cookie _de=90D533AE20EB964CA96710977F452897 for .renren.com/>
1 : <Cookie anonymid=hlehtdzg-8359yw for .renren.com/>
2 : <Cookie first_login_flag=1 for .renren.com/>
3 : <Cookie id=224967207 for .renren.com/>
4 : <Cookie loginfrom=null for .renren.com/>
5 : <Cookie p=9beb60859c004bcaf0a32ff2c973473d7 for .renren.com/>
6 : <Cookie societyguester=86b6a6006002ab6316f708521ab50bfc7 for .renren.com/>
7 : <Cookie t=86b6a6006002ab6316f708521ab50bfc7 for .renren.com/>
8 : <Cookie xnsid=fa53da51 for .renren.com/>
9 : <Cookie t=30af9ffe774f4d6f242e92da1ccd6670 for .renren.com/xtalk/>
10 : <Cookie feedType=224967207_hot for .www.renren.com/>
11 : <Cookie JSESSIONID=abc3IP9kEhTExblxcRfeu for www.renren.com/>
>>>

可以和firebug或者httpFox中得到的cookie进行对比,值可能不一致,但key基本上是一致的,你每次登录应该都不一致

Python使用cookielib模块操作cookie的实例教程

我也尝试过使用fidder模拟发送没有cookie的POST数据,但是没有得到想要的返回值

Python使用cookielib模块操作cookie的实例教程

而加上cookie信息以后就可以正常的跳转到自己的主页了

Python使用cookielib模块操作cookie的实例教程

Python使用cookielib模块操作cookie的实例教程

好了,基本上了解了python中使用cookie来发送登录信息,现在我们来写一个小脚本来登录自己人人网。

#encoding=utf-8
import urllib2
import urllib
import cookielib
def renrenBrower(url,user,password):
  login_page = "http://www.renren.com/ajaxLogin"
  try:    
    cj = cookielib.CookieJar()    
    opener=urllib2.build_opener(urllib2.HTTPCookieProcessor(cj))
    opener.addheaders = [('User-agent','Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)')]
    data = urllib.urlencode({"email":user,"password":password})
    opener.open(login_page,data)
    op=opener.open(url)
    data= op.read()
    return data
  except Exception,e:
    print str(e)
print renrenBrower("http://www.renren.com/home","用户名","密码")

这样就可以将自己首页的信息显示出来了,其实在登录完以后,还可以接着写脚本来获取自己想要的信息,如朋友的新鲜事等,这里就不作过多说明了~

Python 相关文章推荐
Python实现的HTTP并发测试完整示例
Apr 23 Python
window下eclipse安装python插件教程
Apr 24 Python
python验证码识别的示例代码
Sep 21 Python
Python读写及备份oracle数据库操作示例
May 17 Python
实例介绍Python中整型
Feb 11 Python
详解Matplotlib绘图之属性设置
Aug 23 Python
Python openpyxl读取单元格字体颜色过程解析
Sep 03 Python
python使用socket实现的传输demo示例【基于TCP协议】
Sep 24 Python
以SQLite和PySqlite为例来学习Python DB API
Feb 05 Python
Python学习之time模块的基本使用
Jan 17 Python
Django migrate报错的解决方案
May 20 Python
OpenCV-Python实现图像平滑处理操作
Jun 08 Python
Python网络编程中urllib2模块的用法总结
Jul 12 #Python
Python中内置的日志模块logging用法详解
Jul 12 #Python
Swift 3.0在集合类数据结构上的一些新变化总结
Jul 11 #Python
浅析Python的web.py框架中url的设定方法
Jul 11 #Python
深入解析Python的Tornado框架中内置的模板引擎
Jul 11 #Python
使用Python的Tornado框架实现一个Web端图书展示页面
Jul 11 #Python
Windows中使用wxPython和py2exe开发Python的GUI程序的实例教程
Jul 11 #Python
You might like
数据库中排序的对比及使用条件详解
2012/02/23 PHP
具有时效性的php加密解密函数代码
2013/06/19 PHP
[原创]CI(CodeIgniter)简单统计访问人数实现方法
2016/01/19 PHP
php递归函数怎么用才有效
2018/02/24 PHP
window.location.hash 属性使用说明
2010/03/20 Javascript
全面了解JavaScript的数据类型转换
2016/07/01 Javascript
JS跨域交互(jQuery+php)之jsonp使用心得
2016/07/01 Javascript
深入理解Javascript中的valueOf与toString
2017/01/04 Javascript
讲解vue-router之什么是动态路由
2018/05/28 Javascript
vue百度地图 + 定位的详解
2019/05/13 Javascript
vue spa应用中的路由缓存问题与解决方案
2019/05/31 Javascript
vscode调试node.js的实现方法
2020/03/22 Javascript
element-ui和vue表单(对话框)验证提示语(残留)清除操作
2020/09/11 Javascript
vue+element实现动态加载表单
2020/12/13 Vue.js
如何在现代JavaScript中编写异步任务
2021/01/31 Javascript
[01:52]2020年DOTA2 TI10夏季活动预告片
2020/07/15 DOTA
Python实现计算最小编辑距离
2016/03/17 Python
Python中格式化format()方法详解
2017/04/01 Python
如何高效使用Python字典的方法详解
2017/08/31 Python
Python给你的头像加上圣诞帽
2018/01/04 Python
Python告诉你木马程序的键盘记录原理
2019/02/02 Python
Django结合ajax进行页面实时更新的例子
2019/08/12 Python
利用Python绘制有趣的万圣节南瓜怪效果
2019/10/31 Python
python中p-value的实现方式
2019/12/16 Python
python使用paramiko实现ssh的功能详解
2020/03/06 Python
jupyter notebook 参数传递给shell命令行实例
2020/04/10 Python
解决Python3.7.0 SSL低版本导致Pip无法使用问题
2020/09/03 Python
Html5实现iPhone开机界面示例代码
2013/06/30 HTML / CSS
美国一家著名的儿童鞋制造商:Stride Rite
2017/01/02 全球购物
光电信息专业应届生求职信
2013/10/07 职场文书
大学生自助营养快餐店创业计划书
2014/01/13 职场文书
趣味体育活动方案
2014/02/08 职场文书
软件毕业生个人鉴定
2014/03/03 职场文书
防沙治沙典型材料
2014/05/07 职场文书
java设计模式--七大原则详解
2021/07/21 Java/Android
CSS中calc(100%-100px)不加空格不生效
2023/05/07 HTML / CSS