解决python爬虫中有中文的url问题


Posted in Python onMay 11, 2018

如果URL中存在中文,而你却不对它做任何处理,他不会达到你所想的那样,因此我们需要将中文部分进行处理,要用到urllib.parse模块中的quote将中文转化成URL所需的编码,url中的中文要单独处理,不能中英文全部合在一起处理(因为一部分的特殊字符也会被处理掉)。

import urllib.parse 
 
word='龙' 
word=urllib.parse.quote(word) 
url='https://baike.baidu.com/search/word?word=%s'%word 
print(url)

运行结果为:

解决python爬虫中有中文的url问题

以上这篇解决python爬虫中有中文的url问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
使用python实现baidu hi自动登录的代码
Feb 10 Python
Python多线程编程(六):可重入锁RLock
Apr 05 Python
使用Python中的线程进行网络编程的入门教程
Apr 15 Python
python实现线程池的方法
Jun 30 Python
Python黑魔法Descriptor描述符的实例解析
Jun 02 Python
Python 批量合并多个txt文件的实例讲解
May 08 Python
在python 不同时区之间的差值与转换方法
Jan 14 Python
python list多级排序知识点总结
Oct 23 Python
python读取配置文件方式(ini、yaml、xml)
Apr 09 Python
python如何建立全零数组
Jul 19 Python
selenium框架中driver.close()和driver.quit()关闭浏览器
Dec 08 Python
python中用ggplot绘制画图实例讲解
Jan 26 Python
利用Python yagmail三行代码实现发送邮件
May 11 #Python
解决Pandas to_json()中文乱码,转化为json数组的问题
May 10 #Python
解决python3 json数据包含中文的读写问题
May 10 #Python
Python3.6通过自带的urllib通过get或post方法请求url的实例
May 10 #Python
对python3 urllib包与http包的使用详解
May 10 #Python
Python3处理HTTP请求的实例
May 10 #Python
python字符串与url编码的转换实例
May 10 #Python
You might like
php中OR与|| AND与&&的区别总结
2013/10/26 PHP
PHP页面转UTF-8中文编码乱码的解决办法
2015/10/20 PHP
php中替换字符串函数strtr()和str_repalce()的用法与区别
2016/11/25 PHP
php中yar框架实例用法讲解
2020/12/27 PHP
jQuery EasyUI API 中文文档 - Parser 解析器
2011/09/29 Javascript
基于jquery的禁用右键、文本选择功能、复制按键的实现代码
2013/08/27 Javascript
解决自定义$(id)的方法与jquery选择器$冲突的问题
2014/06/14 Javascript
js函数内变量的作用域分析
2015/01/12 Javascript
jquery图片倾斜层叠切换特效代码分享
2015/08/27 Javascript
基于JavaScript如何实现私有成员的语法特征及私有成员的实现方式
2015/10/28 Javascript
基于JavaScript实现一定时间后去执行一个函数
2015/12/14 Javascript
微信 java 实现js-sdk 图片上传下载完整流程
2016/10/21 Javascript
jquery获取input type=text中的值的各种方式(总结)
2016/12/02 Javascript
react-native中ListView组件点击跳转的方法示例
2017/09/30 Javascript
在vue项目中,使用axios跨域处理
2018/03/07 Javascript
用Object.prototype.toString.call(obj)检测对象类型原因分析
2018/10/11 Javascript
Vue开发之封装分页组件与使用示例
2019/04/25 Javascript
Vue使用zTree插件封装树组件操作示例
2019/04/25 Javascript
[06:06]2018DOTA2亚洲邀请赛主赛事第四日战况回顾 全明星赛欢乐上演
2018/04/07 DOTA
[00:38]TI珍贵瞬间系列(二):笑
2020/08/26 DOTA
基于进程内通讯的python聊天室实现方法
2015/06/28 Python
实例解析Python的Twisted框架中Deferred对象的用法
2016/05/25 Python
python 读写txt文件 json文件的实现方法
2016/10/22 Python
使用NumPy和pandas对CSV文件进行写操作的实例
2018/06/14 Python
python的scikit-learn将特征转成one-hot特征的方法
2018/07/10 Python
Python HTMLTestRunner测试报告view按钮失效解决方案
2020/05/25 Python
基于Python的身份证验证识别和数据处理详解
2020/11/14 Python
儿科护士自我鉴定
2013/10/14 职场文书
物理专业本科生自荐信
2014/01/30 职场文书
乡镇总工会学雷锋活动总结
2014/03/01 职场文书
民族团结先进个人事迹材料
2014/06/02 职场文书
离婚协议书怎么写2014
2014/09/30 职场文书
关爱留守儿童主题班会
2015/08/13 职场文书
SQL SERVER触发器详解
2022/02/24 SQL Server
WinServer2012搭建DNS服务器的方法步骤
2022/06/10 Servers
nginx配置指令之server_name的具体使用
2022/08/14 Servers