在Python中使用base64模块处理字符编码的教程


Posted in Python onApril 28, 2015

Base64是一种用64个字符来表示任意二进制数据的方法。

用记事本打开exe、jpg、pdf这些文件时,我们都会看到一大堆乱码,因为二进制文件包含很多无法显示和打印的字符,所以,如果要让记事本这样的文本处理软件能处理二进制数据,就需要一个二进制到字符串的转换方法。Base64是一种最常见的二进制编码方法。

Base64的原理很简单,首先,准备一个包含64个字符的数组:

['A', 'B', 'C', ... 'a', 'b', 'c', ... '0', '1', ... '+', '/']

然后,对二进制数据进行处理,每3个字节一组,一共是3x8=24bit,划为4组,每组正好6个bit:

在Python中使用base64模块处理字符编码的教程

这样我们得到4个数字作为索引,然后查表,获得相应的4个字符,就是编码后的字符串。

所以,Base64编码会把3字节的二进制数据编码为4字节的文本数据,长度增加33%,好处是编码后的文本数据可以在邮件正文、网页等直接显示。

如果要编码的二进制数据不是3的倍数,最后会剩下1个或2个字节怎么办?Base64用\x00字节在末尾补足后,再在编码的末尾加上1个或2个=号,表示补了多少字节,解码的时候,会自动去掉。

Python内置的base64可以直接进行base64的编解码:

>>> import base64
>>> base64.b64encode('binary\x00string')
'YmluYXJ5AHN0cmluZw=='
>>> base64.b64decode('YmluYXJ5AHN0cmluZw==')
'binary\x00string'

由于标准的Base64编码后可能出现字符+和/,在URL中就不能直接作为参数,所以又有一种"url safe"的base64编码,其实就是把字符+和/分别变成-和_:

>>> base64.b64encode('i\xb7\x1d\xfb\xef\xff')
'abcd++//'
>>> base64.urlsafe_b64encode('i\xb7\x1d\xfb\xef\xff')
'abcd--__'
>>> base64.urlsafe_b64decode('abcd--__')
'i\xb7\x1d\xfb\xef\xff'

还可以自己定义64个字符的排列顺序,这样就可以自定义Base64编码,不过,通常情况下完全没有必要。

Base64是一种通过查表的编码方法,不能用于加密,即使使用自定义的编码表也不行。

Base64适用于小段内容的编码,比如数字证书签名、Cookie的内容等。

由于=字符也可能出现在Base64编码中,但=用在URL、Cookie里面会造成歧义,所以,很多Base64编码后会把=去掉:

# 标准Base64:
'abcd' -> 'YWJjZA=='
# 自动去掉=:
'abcd' -> 'YWJjZA'

去掉=后怎么解码呢?因为Base64是把3个字节变为4个字节,所以,Base64编码的长度永远是4的倍数,因此,需要加上=把Base64字符串的长度变为4的倍数,就可以正常解码了。

请写一个能处理去掉=的base64解码函数:

>>> base64.b64decode('YWJjZA==')
'abcd'
>>> base64.b64decode('YWJjZA')
Traceback (most recent call last):
 ...
TypeError: Incorrect padding
>>> safe_b64decode('YWJjZA')
'abcd'

小结

Base64是一种任意二进制到文本字符串的编码方法,常用于在URL、Cookie、网页中传输少量二进制数据。

Python 相关文章推荐
python实现的登录和操作开心网脚本分享
Jul 09 Python
python检测远程服务器tcp端口的方法
Mar 14 Python
在Python中使用判断语句和循环的教程
Apr 25 Python
Python实现配置文件备份的方法
Jul 30 Python
python使用webdriver爬取微信公众号
Aug 31 Python
Python XlsxWriter模块Chart类用法实例分析
Mar 11 Python
PyCharm+Qt Designer+PyUIC安装配置教程详解
Jun 13 Python
Python中的几种矩阵乘法(小结)
Jul 10 Python
python tkinter库实现气泡屏保和锁屏
Jul 29 Python
Python中sorted()排序与字母大小写的问题
Jan 14 Python
django处理select下拉表单实例(从model到前端到post到form)
Mar 13 Python
基于Python-turtle库绘制路飞的草帽骷髅旗、美国队长的盾牌、高达的源码
Feb 18 Python
使用Python的内建模块collections的教程
Apr 28 #Python
进一步探究Python中的正则表达式
Apr 28 #Python
在Python程序中实现分布式进程的教程
Apr 28 #Python
浅析Python多线程下的变量问题
Apr 28 #Python
python实现向ppt文件里插入新幻灯片页面的方法
Apr 28 #Python
Python实现对PPT文件进行截图操作的方法
Apr 28 #Python
在Python下尝试多线程编程
Apr 28 #Python
You might like
用Apache反向代理设置对外的WWW和文件服务器
2006/10/09 PHP
PHP采用curl模仿用户登陆新浪微博发微博的方法
2014/11/07 PHP
thinkphp3.2.2实现生成多张缩略图的方法
2014/12/19 PHP
typecho插件编写教程(二):写一个新插件
2015/05/28 PHP
PHP仿微信发红包领红包效果
2016/10/30 PHP
解决Yii2邮件发送结果返回成功,但接收不到邮件的问题
2017/05/23 PHP
PHP crc32()函数讲解
2019/02/14 PHP
php过滤htmlspecialchars() 函数实现把预定义的字符转换为 HTML 实体用法分析
2019/06/25 PHP
JavaScript中令你抓狂的魔术变量
2006/11/30 Javascript
如何在Mozilla Gecko 用Javascript加载XSL
2007/01/09 Javascript
jQuery 一个图片切换的插件
2011/10/09 Javascript
Javascript 函数parseInt()转换时出现bug问题
2014/05/20 Javascript
JS从数组中随机取出几个数组元素的方法
2016/08/02 Javascript
BootStrap iCheck插件全选与获取value值的解决方法
2016/08/24 Javascript
Bootstrap实现的标签页内容切换显示效果示例
2017/05/25 Javascript
详解vuex持久化插件解决浏览器刷新数据消失问题
2019/04/15 Javascript
js获取对象,数组所有属性键值(key)和对应值(value)的方法示例
2019/06/19 Javascript
nodejs和react实现即时通讯简易聊天室功能
2019/08/21 NodeJs
Vue3.0中的monorepo管理模式的实现
2019/10/14 Javascript
python解析xml文件操作实例
2014/10/05 Python
解析Python中的生成器及其与迭代器的差异
2016/06/20 Python
Python实现基本数据结构中队列的操作方法示例
2017/12/04 Python
Python实现的字典值比较功能示例
2018/01/08 Python
详解PyTorch批训练及优化器比较
2018/04/28 Python
pandas 对series和dataframe进行排序的实例
2018/06/09 Python
浅谈python3发送post请求参数为空的情况
2018/12/28 Python
Python实现的爬取豆瓣电影信息功能案例
2019/09/15 Python
在Ubuntu 20.04中安装Pycharm 2020.1的图文教程
2020/04/30 Python
Python使用Excel将数据写入多个sheet
2020/05/16 Python
Python基于callable函数检测对象是否可被调用
2020/10/16 Python
Pycharm 跳转回之前所在页面的操作
2021/02/05 Python
WWE美国职业摔角官方商店:WWE Shop
2018/11/15 全球购物
九年级科学教学反思
2014/01/29 职场文书
五水共治捐款倡议书
2014/05/14 职场文书
统计员岗位职责
2015/02/11 职场文书
jackson json序列化实现首字母大写,第二个字母需小写
2021/06/29 Java/Android