解决python爬虫中有中文的url问题


Posted in Python onMay 11, 2018

如果URL中存在中文,而你却不对它做任何处理,他不会达到你所想的那样,因此我们需要将中文部分进行处理,要用到urllib.parse模块中的quote将中文转化成URL所需的编码,url中的中文要单独处理,不能中英文全部合在一起处理(因为一部分的特殊字符也会被处理掉)。

import urllib.parse 
 
word='龙' 
word=urllib.parse.quote(word) 
url='https://baike.baidu.com/search/word?word=%s'%word 
print(url)

运行结果为:

解决python爬虫中有中文的url问题

以上这篇解决python爬虫中有中文的url问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python复制文件的方法实例详解
May 22 Python
python开发之IDEL(Python GUI)的使用方法图文详解
Nov 12 Python
Python模拟三级菜单效果
Sep 11 Python
Flask数据库迁移简单介绍
Oct 24 Python
python机器学习理论与实战(一)K近邻法
Jan 28 Python
Python中__slots__属性介绍与基本使用方法
Sep 05 Python
Python3爬虫之urllib携带cookie爬取网页的方法
Dec 28 Python
Python图像处理之图像的读取、显示与保存操作【测试可用】
Jan 04 Python
Python基于matplotlib画箱体图检验异常值操作示例【附xls数据文件下载】
Jan 07 Python
Python3 实现减少可调用对象的参数个数
Dec 20 Python
mac系统下安装pycharm、永久激活、中文汉化详细教程
Nov 24 Python
Python基础之元编程知识总结
May 23 Python
利用Python yagmail三行代码实现发送邮件
May 11 #Python
解决Pandas to_json()中文乱码,转化为json数组的问题
May 10 #Python
解决python3 json数据包含中文的读写问题
May 10 #Python
Python3.6通过自带的urllib通过get或post方法请求url的实例
May 10 #Python
对python3 urllib包与http包的使用详解
May 10 #Python
Python3处理HTTP请求的实例
May 10 #Python
python字符串与url编码的转换实例
May 10 #Python
You might like
php 破解防盗链图片函数
2008/12/09 PHP
php根据年月获取季度的方法
2014/03/31 PHP
PHP面向对象程序设计中的self、static、parent关键字用法分析
2019/08/14 PHP
PHP字符串与数组处理函数用法小结
2020/01/07 PHP
phpQuery采集网页实现代码实例
2020/04/02 PHP
让innerText在firefox火狐和IE浏览器都能用的写法
2011/05/14 Javascript
使用jQuery+HttpHandler+xml模拟一个三级联动的例子
2011/08/09 Javascript
jQuery中获取Radio元素值的方法
2013/07/02 Javascript
js Array操作的最简短最容易理解方法
2013/12/09 Javascript
基于jquery的simpleValidate简易验证插件
2014/01/31 Javascript
node.js中的console.timeEnd方法使用说明
2014/12/09 Javascript
JS实现在线统计一个页面内鼠标点击次数的方法
2015/02/28 Javascript
使用CamanJS在Web页面上处理图像的技巧
2015/08/18 Javascript
jQuery获取元素父节点的方法
2016/06/21 Javascript
微信小程序 出现47001 data format error原因解决办法
2017/03/10 Javascript
使用react context 实现vue插槽slot功能
2019/07/18 Javascript
微信小程序自定义导航栏(模板化)
2019/11/15 Javascript
vue-cli3 取消eslint校验代码的解决办法
2020/01/16 Javascript
Node.js中文件系统fs模块的使用及常用接口
2020/03/06 Javascript
[03:41]2018完美盛典-《Fight With Us》
2018/12/16 DOTA
Python3 中文文件读写方法
2018/01/23 Python
Python实现的建造者模式示例
2018/08/06 Python
python实现贪吃蛇双人大战
2020/04/18 Python
详解html2canvas截图不能截取圆角图片的解决方案
2018/01/30 HTML / CSS
div或img图片高度随宽度自适应的方法
2020/02/06 HTML / CSS
约瑟夫·特纳男装:Joseph Turner
2017/10/10 全球购物
Europcar比利时:租车
2019/08/26 全球购物
远程调用的原理
2014/07/05 面试题
编辑找工作求职信分享
2014/01/03 职场文书
九年级历史教学反思
2014/01/27 职场文书
拒绝黄毒毒宣传标语
2014/06/26 职场文书
2014年小学教师工作自我评价
2014/09/22 职场文书
四风问题自查自纠工作情况报告
2014/10/28 职场文书
2015年大学生村官工作总结
2015/04/21 职场文书
解决numpy数组互换两行及赋值的问题
2021/04/17 Python
Redis配置外网可访问(redis远程连接不上)的方法
2022/12/24 Redis