解决python爬虫中有中文的url问题


Posted in Python onMay 11, 2018

如果URL中存在中文,而你却不对它做任何处理,他不会达到你所想的那样,因此我们需要将中文部分进行处理,要用到urllib.parse模块中的quote将中文转化成URL所需的编码,url中的中文要单独处理,不能中英文全部合在一起处理(因为一部分的特殊字符也会被处理掉)。

import urllib.parse 
 
word='龙' 
word=urllib.parse.quote(word) 
url='https://baike.baidu.com/search/word?word=%s'%word 
print(url)

运行结果为:

解决python爬虫中有中文的url问题

以上这篇解决python爬虫中有中文的url问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python pdb调试方法分享
Jan 21 Python
实例讲解Python中的私有属性
Aug 21 Python
浅谈Python中函数的参数传递
Jun 21 Python
Python编程中NotImplementedError的使用方法
Apr 21 Python
win7 x64系统中安装Scrapy的方法
Nov 18 Python
python实现对任意大小图片均匀切割的示例
Dec 05 Python
python装饰器简介---这一篇也许就够了(推荐)
Apr 01 Python
python3.7 的新特性详解
Jul 25 Python
使用 Python 清理收藏夹里已失效的网站
Dec 03 Python
Python通过zookeeper实现分布式服务代码解析
Jul 22 Python
Django admin组件的使用
Oct 24 Python
Python解析微信dat文件的方法
Nov 30 Python
利用Python yagmail三行代码实现发送邮件
May 11 #Python
解决Pandas to_json()中文乱码,转化为json数组的问题
May 10 #Python
解决python3 json数据包含中文的读写问题
May 10 #Python
Python3.6通过自带的urllib通过get或post方法请求url的实例
May 10 #Python
对python3 urllib包与http包的使用详解
May 10 #Python
Python3处理HTTP请求的实例
May 10 #Python
python字符串与url编码的转换实例
May 10 #Python
You might like
php的正则处理函数总结分析
2008/06/20 PHP
phpmyadmin中禁止外网使用的方法
2014/11/04 PHP
php基于jquery的ajax技术传递json数据简单实例
2016/04/15 PHP
PHPUnit测试私有属性和方法功能示例
2018/06/12 PHP
JavaScript 组件之旅(二)编码实现和算法
2009/10/28 Javascript
扩展javascript的Date方法实现代码(prototype)
2010/11/20 Javascript
jQuery find和children方法使用
2011/01/31 Javascript
输入自动提示搜索提示功能的使用说明:sugggestion.txt
2013/09/02 Javascript
Google Dart编程语法和基本类型学习教程
2013/11/27 Javascript
jQuery动态星级评分效果实现方法
2015/08/06 Javascript
基于JavaScript实现快速转换文本语言(繁体中文和简体中文)
2016/03/07 Javascript
微信小程序购物商城系统开发系列-目录结构介绍
2016/11/21 Javascript
javascript中递归的两种写法
2017/01/17 Javascript
jQuery实现checkbox的简单操作
2017/11/18 jQuery
一个基于react的图片裁剪组件示例
2018/04/18 Javascript
mpvue 单文件页面配置详解
2018/12/02 Javascript
微信小程序实现顶部导航特效
2019/01/28 Javascript
简单理解Python中基于生成器的状态机
2015/04/13 Python
python 使用get_argument获取url query参数
2017/04/28 Python
python爬虫的一个常见简单js反爬详解
2019/07/09 Python
使用Python paramiko模块利用多线程实现ssh并发执行操作
2019/12/05 Python
Pytorch转keras的有效方法,以FlowNet为例讲解
2020/05/26 Python
Python3通过chmod修改目录或文件权限的方法示例
2020/06/08 Python
python中PyQuery库用法分享
2021/01/15 Python
css3实现垂直下拉动画菜单示例
2014/04/22 HTML / CSS
基于HTML5的WebGL实现json和echarts图表展现在同一个界面
2017/10/26 HTML / CSS
松本清官方海外旗舰店:日本最大的药妆连锁店
2017/11/21 全球购物
俄罗斯的精英皮具:Wittchen
2018/01/29 全球购物
文职个人求职信范文
2013/09/23 职场文书
公司财务总监岗位职责
2013/12/14 职场文书
个人简历自我评价范文
2014/02/04 职场文书
供应链金融服务方案
2014/05/25 职场文书
政府法律服务方案
2014/06/14 职场文书
仓库保管员岗位职责
2015/02/09 职场文书
昆虫记读书笔记
2015/06/26 职场文书
导游词之井冈山
2019/11/20 职场文书