在Python中使用base64模块处理字符编码的教程


Posted in Python onApril 28, 2015

Base64是一种用64个字符来表示任意二进制数据的方法。

用记事本打开exe、jpg、pdf这些文件时,我们都会看到一大堆乱码,因为二进制文件包含很多无法显示和打印的字符,所以,如果要让记事本这样的文本处理软件能处理二进制数据,就需要一个二进制到字符串的转换方法。Base64是一种最常见的二进制编码方法。

Base64的原理很简单,首先,准备一个包含64个字符的数组:

['A', 'B', 'C', ... 'a', 'b', 'c', ... '0', '1', ... '+', '/']

然后,对二进制数据进行处理,每3个字节一组,一共是3x8=24bit,划为4组,每组正好6个bit:

在Python中使用base64模块处理字符编码的教程

这样我们得到4个数字作为索引,然后查表,获得相应的4个字符,就是编码后的字符串。

所以,Base64编码会把3字节的二进制数据编码为4字节的文本数据,长度增加33%,好处是编码后的文本数据可以在邮件正文、网页等直接显示。

如果要编码的二进制数据不是3的倍数,最后会剩下1个或2个字节怎么办?Base64用\x00字节在末尾补足后,再在编码的末尾加上1个或2个=号,表示补了多少字节,解码的时候,会自动去掉。

Python内置的base64可以直接进行base64的编解码:

>>> import base64
>>> base64.b64encode('binary\x00string')
'YmluYXJ5AHN0cmluZw=='
>>> base64.b64decode('YmluYXJ5AHN0cmluZw==')
'binary\x00string'

由于标准的Base64编码后可能出现字符+和/,在URL中就不能直接作为参数,所以又有一种"url safe"的base64编码,其实就是把字符+和/分别变成-和_:

>>> base64.b64encode('i\xb7\x1d\xfb\xef\xff')
'abcd++//'
>>> base64.urlsafe_b64encode('i\xb7\x1d\xfb\xef\xff')
'abcd--__'
>>> base64.urlsafe_b64decode('abcd--__')
'i\xb7\x1d\xfb\xef\xff'

还可以自己定义64个字符的排列顺序,这样就可以自定义Base64编码,不过,通常情况下完全没有必要。

Base64是一种通过查表的编码方法,不能用于加密,即使使用自定义的编码表也不行。

Base64适用于小段内容的编码,比如数字证书签名、Cookie的内容等。

由于=字符也可能出现在Base64编码中,但=用在URL、Cookie里面会造成歧义,所以,很多Base64编码后会把=去掉:

# 标准Base64:
'abcd' -> 'YWJjZA=='
# 自动去掉=:
'abcd' -> 'YWJjZA'

去掉=后怎么解码呢?因为Base64是把3个字节变为4个字节,所以,Base64编码的长度永远是4的倍数,因此,需要加上=把Base64字符串的长度变为4的倍数,就可以正常解码了。

请写一个能处理去掉=的base64解码函数:

>>> base64.b64decode('YWJjZA==')
'abcd'
>>> base64.b64decode('YWJjZA')
Traceback (most recent call last):
 ...
TypeError: Incorrect padding
>>> safe_b64decode('YWJjZA')
'abcd'

小结

Base64是一种任意二进制到文本字符串的编码方法,常用于在URL、Cookie、网页中传输少量二进制数据。

Python 相关文章推荐
python生成指定长度的随机数密码
Jan 23 Python
Python实现Logger打印功能的方法详解
Sep 01 Python
Python使用base64模块进行二进制数据编码详解
Jan 11 Python
浅谈Series和DataFrame中的sort_index方法
Jun 07 Python
Python之csv文件从MySQL数据库导入导出的方法
Jun 21 Python
python中使用 xlwt 操作excel的常见方法与问题
Jan 13 Python
Python基于opencv调用摄像头获取个人图片的实现方法
Feb 21 Python
在Python运行时动态查看进程内部信息的方法
Feb 22 Python
使用Flask-Cache缓存实现给Flask提速的方法详解
Jun 11 Python
python爬取Ajax动态加载网页过程解析
Sep 05 Python
python实时监控logstash日志代码
Apr 27 Python
Pandas实现DataFrame的简单运算、统计与排序
Mar 31 Python
使用Python的内建模块collections的教程
Apr 28 #Python
进一步探究Python中的正则表达式
Apr 28 #Python
在Python程序中实现分布式进程的教程
Apr 28 #Python
浅析Python多线程下的变量问题
Apr 28 #Python
python实现向ppt文件里插入新幻灯片页面的方法
Apr 28 #Python
Python实现对PPT文件进行截图操作的方法
Apr 28 #Python
在Python下尝试多线程编程
Apr 28 #Python
You might like
Linux编译升级php的详细方法
2013/11/04 PHP
thinkphp的CURD和查询方式介绍
2013/12/19 PHP
php 邮件发送问题解决
2014/03/22 PHP
PHP 数组操作详解【遍历、指针、函数等】
2020/05/13 PHP
PHP 8新特性简介
2020/08/18 PHP
javascript Zifa FormValid 0.1表单验证 代码打包下载
2007/06/08 Javascript
JS 自动安装exe程序
2008/11/30 Javascript
Extjs TriggerField在弹出窗口显示不出问题的解决方法
2010/01/08 Javascript
利用Javascript判断操作系统的类型实现不同操作系统下的兼容性
2013/01/29 Javascript
jQuery实现拖拽效果插件的方法
2015/03/23 Javascript
表单验证正则表达式实例代码详解
2015/11/09 Javascript
JavaScript File分段上传
2016/03/10 Javascript
js HTML5多图片上传及预览实例解析(不含前端的文件分割)
2016/08/26 Javascript
详谈js模块化规范
2017/07/07 Javascript
vue2.0 父组件给子组件传递数据的方法
2018/01/15 Javascript
JS中多层次排序算法的实现代码
2021/01/06 Javascript
JavaScript 中的执行上下文和执行栈实例讲解
2021/02/25 Javascript
[55:56]NB vs Infamous 2019国际邀请赛淘汰赛 败者组 BO3 第二场 8.22
2019/09/05 DOTA
Python写的一个简单DNS服务器实例
2014/06/04 Python
Python爬虫包BeautifulSoup实例(三)
2018/06/17 Python
python垃圾回收机制(GC)原理解析
2019/12/30 Python
python使用SQLAlchemy操作MySQL
2020/01/02 Python
Python实现屏幕录制功能的代码
2020/03/02 Python
django 扩展user用户字段inlines方式
2020/03/30 Python
Python如何实现大型数组运算(使用NumPy)
2020/07/24 Python
python Cartopy的基础使用详解
2020/11/01 Python
Woolworth官网:澳洲第一大超市
2017/06/25 全球购物
2019年Java 最常见的 面试题
2016/10/19 面试题
会计专业大学生职业生涯规划范文
2014/01/11 职场文书
现场施工员岗位职责
2014/03/10 职场文书
合伙经营协议书
2014/04/18 职场文书
地理信息科学专业推荐信
2014/09/08 职场文书
出纳岗位职责
2015/01/31 职场文书
出国导师推荐信
2015/03/25 职场文书
你对自己的信用报告有过了解吗?
2019/07/09 职场文书
《女娲补天》读后感5篇
2019/12/31 职场文书