基于python爬取有道翻译过程图解


Posted in Python onMarch 31, 2020

1.准备工作

先来到有道在线翻译的界面http://fanyi.youdao.com/

F12 审查元素 ->选Network一栏,然后F5刷新 (如果看不到Method一栏,右键Name栏,选中Method)

基于python爬取有道翻译过程图解

输入文字自动翻译后发现Method一栏有GET还有POST;GET是指从服务器请求和获得数据,POST是向指定服务器提交被处理的数据、

随便打开一个POST,找到preview可以看到我们输入的“我爱你一生一世”数据,可以证明post的提交数据的

基于python爬取有道翻译过程图解

下面分析一下Headers各个字段的意义;User-agent字段很重要

基于python爬取有道翻译过程图解

基于python爬取有道翻译过程图解

下面来看一下request模块中urlopen方法,查看文档;

发现urlopen有一个data参数,如果参数没赋值(默认None)就是GET形式,如果data参数被赋值了,就以POST形式提交

基于python爬取有道翻译过程图解

在这里,data参数其实是一个字典 ;就是源代码中From Data的数据

下面一篇文章是对urlencode与unquote的详细解释:(urllib库里可惜没有urldecode函数)

为什么要进行编码和解码呢?------》对于一些中文或者字符,url是不识别的,需要进行编码转换!encode('utf-8')把unicode的形式变成utf-8decode('utf-8')把utf-8形式变成Unicode编码形式2.下面进行敲!

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python日期操作学习笔记
Oct 07 Python
Python的lambda匿名函数的简单介绍
Apr 25 Python
python 循环while和for in简单实例
Aug 16 Python
Python实现扩展内置类型的方法分析
Oct 16 Python
python 提取tuple类型值中json格式的key值方法
Dec 31 Python
Python机器学习算法库scikit-learn学习之决策树实现方法详解
Jul 04 Python
pycharm配置当鼠标悬停时快速提示方法参数
Jul 31 Python
Django ORM 自定义 char 类型字段解析
Aug 09 Python
Python使用random模块生成随机数操作实例详解
Sep 17 Python
Django数据库操作之save与update的使用
Apr 01 Python
Python3+selenium配置常见报错解决方案
Aug 28 Python
基于Python-turtle库绘制路飞的草帽骷髅旗、美国队长的盾牌、高达的源码
Feb 18 Python
django实现将修改好的新模型写入数据库
Mar 31 #Python
Python urlencode和unquote函数使用实例解析
Mar 31 #Python
Python响应对象text属性乱码解决方案
Mar 31 #Python
django执行数据库查询之后实现返回的结果集转json
Mar 31 #Python
Python super()方法原理详解
Mar 31 #Python
django实现更改数据库某个字段以及字段段内数据
Mar 31 #Python
django rest framework serializer返回时间自动格式化方法
Mar 31 #Python
You might like
PHP表单递交控件名称含有点号(.)会被转化为下划线(_)的处理方法
2013/01/06 PHP
php实现分页工具类分享
2014/01/09 PHP
php常用数学函数汇总
2014/11/21 PHP
基于ThinkPHP5.0实现图片上传插件
2017/09/25 PHP
[原创]保存的js无法执行的解决办法
2007/02/25 Javascript
合并table相同单元格的jquery插件分享(很精简)
2011/06/20 Javascript
$.ajax返回的JSON无法执行success的解决方法
2011/09/09 Javascript
JavaScript中统计Textarea字数并提示还能输入的字符
2014/06/10 Javascript
Bootstrap时间选择器datetimepicker和daterangepicker使用实例解析
2016/09/17 Javascript
微信小程序 实战小程序实例
2016/10/08 Javascript
input获取焦点时底部菜单被顶上来问题的解决办法
2017/01/24 Javascript
Bootstrap 3浏览器兼容性问题及解决方案
2017/04/11 Javascript
vue 页面加载进度条组件实例
2018/02/05 Javascript
Material(包括Material Icon)在Angular2中的使用详解
2018/02/11 Javascript
ES6下子组件调用父组件的方法(推荐)
2018/02/23 Javascript
vue移动端实现下拉刷新
2018/04/22 Javascript
Javascript的console['']常用输入方法汇总
2018/04/26 Javascript
基于jquery实现左右上下移动效果
2018/05/02 jQuery
JavaScript对象拷贝与Object.assign用法实例分析
2018/06/20 Javascript
JS滚轮控制图片缩放大小和拖动的实例代码
2018/11/20 Javascript
vue中tab选项卡的实现思路
2018/11/25 Javascript
vue实现微信分享功能
2018/11/28 Javascript
微信小程序实现菜单左右联动
2020/05/19 Javascript
JavaScript 中的六种循环方法
2021/01/06 Javascript
Python 调用VC++的动态链接库(DLL)
2008/09/06 Python
Python lxml模块安装教程
2015/06/02 Python
Python简单爬虫导出CSV文件的实例讲解
2018/07/06 Python
python实现图片批量压缩程序
2018/07/23 Python
python障碍式期权定价公式
2019/07/19 Python
python关于变量名的基础知识点
2020/03/03 Python
keras分类模型中的输入数据与标签的维度实例
2020/07/03 Python
莫斯科隐形眼镜网上商店:Linzi
2019/07/22 全球购物
中医药大学市场营销专业自荐信
2013/09/29 职场文书
书香家庭事迹材料
2014/05/09 职场文书
2015年发展党员工作总结报告
2015/03/31 职场文书
农业项目投资意向书
2015/05/09 职场文书