Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式


Posted in Python onMay 11, 2020

查看字符编码:

import chardet
response = chardet.detect(b'\xe5\xbd\x93\xe5\x89\x8d\xe7\x9b\xae\xe5\xbd\x95\xe4\xb8\x8b\xe6\x89\x80\xe6\x9c\x89\xe6\x96\x87\xe4\xbb\xb6\xe5\x90\x8d\xe6\xb1\x87\xe6\x80\xbb\xe5\x88\x97\xe8\xa1\xa8')
print(response)

{'encoding': 'utf-8', 'confidence': 0.99, 'language': ''}

乱码字符转换:

response = b'\xe5\xbd\x93\xe5\x89\x8d\xe7\x9b\xae\xe5\xbd\x95\xe4\xb8\x8b\xe6\x89\x80\xe6\x9c\x89\xe6\x96\x87\xe4\xbb\xb6\xe5\x90\x8d\xe6\xb1\x87\xe6\x80\xbb\xe5\x88\x97\xe8\xa1\xa8'
print(response.decode('utf8'))
# def decode_char(*args):
#   response = args[0]
#   print(response.decode('utf8'))
#
# c = b'\a8\xe5\x90\xa7\xef\xbc\x81'
#
# decode_char(c)

补充知识:python3 中怎么把类似这样的'\xe5\xae\x9d\xe9\xb8\xa1\xe5\xb8\x82'转换成汉字输出

在编程的过程中遇到了类似的困扰,网上查了很多解决思路,终于算是明白了一些,这里和大家分享 一下。

python3相对于python2最重要的新特性之一就是对字符串(文本)和二进制数据流做了明确的区分,文本总是Unicode,由字符类型表示,而二进制数据则由bytes类型表示,python3不会以任意隐式方式混用字节型和字符型,也不能拼接字符串和字节流(python2中可以,会自动进行转换),也不能在字节流中搜索字符串,也不能将字符串传入参数为字节流的函数。

str和bytes类型之间的相互转换

字符串类str有一个encode()方法,它是字符串向比特流的编码过程。

bytes类则有一个decode()方法,它是比特流向字符串的解码过程

Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式

encode过程

s = '绝地求生'
ss = s.encode()
print(type(ss))
print(ss)

运行结果:

Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式

decode过程

s = b'\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'
ss = s.decode()
print(type(ss))
print(ss)

运行结果:

Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式

了解过基本的转化过程,下面回到主题,如何将'\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'转换成汉字输出呢?

要解决的问题是将bytes类型的内容以汉字的形式输出,但是该部分内容是字符串类型。因此首先需要将该str转换成bytes类型,再decode解码为str输出。这里需要用到的方法是encode(‘raw_unicode_escape')。当然,也可以使用decode(‘raw_unicode_escape')方法输出内容为bytes形式的字符串

s = '\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'
ss = s.encode('raw_unicode_escape')
print(type(ss))
print(ss)

sss = ss.decode()
print(sss)

结果:

Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式

方法补充:如果我们直接定义bytes类型的变量,也可以直接使用str(s, ‘utf8')的方式输出汉字

s = b'\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'

print(type(s))
print(s)

ss = str(s, 'utf8')
print(ss)

结果:

Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式

第二种方法可以输出从网络上直接抓取的网页中包含的中文字符。

我们使用如下代码,抓取网页www.baidu.com。

import urllib.request
response = urllib.request.urlopen('http://www.baidu.com')
html = response.read()
print(html)

显示的结果中,中文部分会以\xe7\x99\xbe\xe5\xba\xa6\xe4\xb8\x80代替,这里可以使用方法二进行转换。

import urllib.request
response = urllib.request.urlopen('http://www.baidu.com')
html =str(response.read(),'utf-8')
print(html)

结果如下:

Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式

以上这篇Python3之乱码\xe6\x97\xa0\xe6\xb3\x95处理方式就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python列表生成器的循环技巧分享
Mar 06 Python
Django中模版的子目录与include标签的使用方法
Jul 16 Python
使用python加密自己的密码
Aug 04 Python
Python MySQLdb 使用utf-8 编码插入中文数据问题
Mar 13 Python
python Web开发你要理解的WSGI & uwsgi详解
Aug 01 Python
对python 命令的-u参数详解
Dec 03 Python
Python实现字典按key或者value进行排序操作示例【sorted】
May 03 Python
python 模拟贷款卡号生成规则过程解析
Aug 30 Python
Python操作Excel工作簿的示例代码(\*.xlsx)
Mar 23 Python
Python3合并两个有序数组代码实例
Aug 11 Python
地图可视化神器kepler.gl python接口的使用方法
Dec 22 Python
Python基本的内置数据类型及使用方法
Apr 13 Python
Python urllib.request对象案例解析
May 11 #Python
python将dict中的unicode打印成中文实例
May 11 #Python
ansible-playbook实现自动部署KVM及安装python3的详细教程
May 11 #Python
Python转换字典成为对象,可以用"."方式访问对象属性实例
May 11 #Python
Python3自定义json逐层解析器代码
May 11 #Python
Python3自定义http/https请求拦截mitmproxy脚本实例
May 11 #Python
Python 找出出现次数超过数组长度一半的元素实例
May 11 #Python
You might like
基于python发送邮件的乱码问题的解决办法
2013/04/25 PHP
使用PHP编写的SVN类
2013/07/18 PHP
PHP5中GD库生成图形验证码(有汉字)
2013/07/28 PHP
php读取3389的脚本
2014/05/06 PHP
用js实现计算代码行数的简单方法附代码
2007/08/13 Javascript
js 优化次数过多的循环 考虑到性能问题
2011/03/05 Javascript
JavaScript的事件绑定(方便不支持js的时候)
2013/10/01 Javascript
jQuery实现移动端滑块拖动选择数字效果
2015/12/24 Javascript
js实现精确到秒的倒计时效果
2016/05/29 Javascript
深入理解JS DOM事件机制
2016/08/06 Javascript
JS控制HTML元素的显示和隐藏的两种方法
2016/09/27 Javascript
原生js实现可拖拽效果
2017/02/28 Javascript
通过命令行生成vue项目框架的方法
2017/07/12 Javascript
浅谈JavaScript find 方法不支持IE的问题
2017/09/28 Javascript
使用vue点击li,获取当前点击li父辈元素的属性值方法
2018/09/12 Javascript
angular6开发steps步骤条组件
2019/07/04 Javascript
javascript二维数组和对象的深拷贝与浅拷贝实例分析
2019/10/26 Javascript
Python实现读取Properties配置文件的方法
2018/03/29 Python
Python登录注册验证功能实现
2018/06/18 Python
pycharm下查看python的变量类型和变量内容的方法
2018/06/26 Python
Python3.6实现根据电影名称(支持电视剧名称),获取下载链接的方法
2019/08/26 Python
python爬虫 2019中国好声音评论爬取过程解析
2019/08/26 Python
Python 实现一个手机号码获取妹子名字的功能
2019/09/25 Python
wxPython+Matplotlib绘制折线图表
2019/11/19 Python
Flask项目中实现短信验证码和邮箱验证码功能
2019/12/05 Python
python使用rsa非对称加密过程解析
2019/12/28 Python
Python猜数字算法题详解
2020/03/01 Python
html5-canvas中使用clip抠出一个区域的示例代码
2018/05/25 HTML / CSS
罗兰·穆雷官网:Roland Mouret
2018/09/28 全球购物
《生命 生命》教学反思
2014/04/19 职场文书
高中生评语大全
2014/04/25 职场文书
小型婚礼主持词
2015/06/30 职场文书
厉行节约工作总结
2015/08/12 职场文书
教师廉政准则心得体会
2016/01/20 职场文书
OpenCV3.3+Python3.6实现图片高斯模糊
2021/05/18 Python
解决SpringCloud Feign传对象参数调用失败的问题
2021/06/23 Java/Android