解决python爬虫中有中文的url问题


Posted in Python onMay 11, 2018

如果URL中存在中文,而你却不对它做任何处理,他不会达到你所想的那样,因此我们需要将中文部分进行处理,要用到urllib.parse模块中的quote将中文转化成URL所需的编码,url中的中文要单独处理,不能中英文全部合在一起处理(因为一部分的特殊字符也会被处理掉)。

import urllib.parse 
 
word='龙' 
word=urllib.parse.quote(word) 
url='https://baike.baidu.com/search/word?word=%s'%word 
print(url)

运行结果为:

解决python爬虫中有中文的url问题

以上这篇解决python爬虫中有中文的url问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
在Python的web框架中配置app的教程
Apr 30 Python
python使用xlrd模块读写Excel文件的方法
May 06 Python
在Python中操作字典之setdefault()方法的使用
May 21 Python
python中常用的九种预处理方法分享
Sep 11 Python
详解Django之auth模块(用户认证)
Apr 17 Python
python实现简易内存监控
Jun 21 Python
python3爬虫学习之数据存储txt的案例详解
Apr 24 Python
Python实现投影法分割图像示例(二)
Jan 17 Python
JetBrains PyCharm(Community版本)的下载、安装和初步使用图文教程详解
Mar 19 Python
Ubuntu18.04安装 PyCharm并使用 Anaconda 管理的Python环境
Apr 08 Python
pandas DataFrame 数据选取,修改,切片的实现
Apr 24 Python
用Python 执行cmd命令
Dec 18 Python
利用Python yagmail三行代码实现发送邮件
May 11 #Python
解决Pandas to_json()中文乱码,转化为json数组的问题
May 10 #Python
解决python3 json数据包含中文的读写问题
May 10 #Python
Python3.6通过自带的urllib通过get或post方法请求url的实例
May 10 #Python
对python3 urllib包与http包的使用详解
May 10 #Python
Python3处理HTTP请求的实例
May 10 #Python
python字符串与url编码的转换实例
May 10 #Python
You might like
现磨咖啡骗局!现磨咖啡=新鲜咖啡?现磨咖啡背后的猫腻你不懂!
2019/03/28 冲泡冲煮
PHP函数utf8转gb2312编码
2006/12/21 PHP
ThinkPHP Mobile使用方法简明教程
2014/06/18 PHP
PHP 实现人民币小写转换成大写的方法及大小写转换函数
2017/11/17 PHP
php 中phar包的使用教程详解
2018/10/26 PHP
PHP的PDO大对象(LOBs)
2019/01/27 PHP
JavaScript 捕获窗口关闭事件
2009/07/26 Javascript
js 创建快捷方式的代码(fso)
2010/11/19 Javascript
js下拉框二级关联菜单效果代码具体实现
2013/08/03 Javascript
JavaScript中instanceof运算符的用法总结
2013/11/19 Javascript
浅谈JavaScript中的String对象常用方法
2015/02/25 Javascript
Angularjs中UI Router的使用方法
2016/05/14 Javascript
详解nodejs微信公众号开发——1.接入微信公众号
2017/04/10 NodeJs
Vue的移动端多图上传插件vue-easy-uploader的示例代码
2017/11/27 Javascript
ejsExcel模板在Vue.js项目中的实际运用
2018/01/27 Javascript
vue.js 使用axios实现下载功能的示例
2018/03/05 Javascript
浅谈Vue2.0中v-for迭代语法的变化(key、index)
2018/03/06 Javascript
layui自定义验证,用ajax查询后台是否有重复数据,form.verify的例子
2019/09/06 Javascript
uni-app自定义导航栏按钮|uniapp仿微信顶部导航条功能
2019/11/12 Javascript
Echarts实现单条折线可拖拽效果
2019/12/19 Javascript
使用Python的Tornado框架实现一个简单的WebQQ机器人
2015/04/24 Python
使用Python的Bottle框架写一个简单的服务接口的示例
2015/08/25 Python
Python利用Beautiful Soup模块创建对象详解
2017/03/27 Python
python实现远程通过网络邮件控制计算机重启或关机
2018/02/22 Python
Django读取Mysql数据并显示在前端的实例
2018/05/27 Python
python读写文件write和flush的实现方式
2020/02/21 Python
Python是怎样处理json模块的
2020/07/16 Python
详解使用python爬取抖音app视频(appium可以操控手机)
2021/01/26 Python
使用CSS3制作响应式导航菜单的方法
2015/07/12 HTML / CSS
CSS3 不定高宽垂直水平居中的几种方式
2020/03/26 HTML / CSS
html5 input输入实时检测以及延时优化
2018/07/18 HTML / CSS
Java中有几种方法可以实现一个线程?用什么关键字修饰同步方法?stop()和suspend()方法为何不推荐使用?
2015/08/04 面试题
2014年协会工作总结
2014/11/22 职场文书
中秋节随笔
2015/08/15 职场文书
Python OpenCV超详细讲解基本功能
2022/04/02 Python
bose降噪耳机音能消除人声吗
2022/04/19 数码科技