python3抓取中文网页的方法


Posted in Python onJuly 28, 2015

本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下:

#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
python控制台英汉汉英电子词典
Apr 23 Python
浅谈Python中的zip()与*zip()函数详解
Feb 24 Python
图解Python变量与赋值
Apr 03 Python
Python 删除连续出现的指定字符的实例
Jun 29 Python
python实现简易数码时钟
Feb 19 Python
Python HTML解析模块HTMLParser用法分析【爬虫工具】
Apr 05 Python
PYQT5设置textEdit自动滚屏的方法
Jun 14 Python
python脚本调用iftop 统计业务应用流量的思路详解
Oct 11 Python
pytorch中的weight-initilzation用法
Jun 24 Python
python获取本周、上周、本月、上月及本季的时间代码实例
Sep 08 Python
Python利用imshow制作自定义渐变填充柱状图(colorbar)
Dec 10 Python
Python办公自动化之教你如何用Python将任意文件转为PDF格式
Jun 28 Python
python列表操作之extend和append的区别实例分析
Jul 28 #Python
python创建列表并给列表赋初始值的方法
Jul 28 #Python
python更新列表的方法
Jul 28 #Python
python实现给数组按片赋值的方法
Jul 28 #Python
python通过加号运算符操作列表的方法
Jul 28 #Python
python比较两个列表是否相等的方法
Jul 28 #Python
python追加元素到列表的方法
Jul 28 #Python
You might like
pdo中使用参数化查询sql
2011/08/11 PHP
Codeigniter实现处理用户登录验证后的URL跳转
2014/06/12 PHP
php判断当前用户已在别处登录的方法
2015/01/06 PHP
php计算函数执行时间的方法
2015/03/20 PHP
php编写简单的文章发布程序
2015/06/18 PHP
PHPStorm 2020.1 调试 Nodejs的多种方法详解
2020/09/17 NodeJs
PHP+Mysql分布式事务与解决方案深入理解
2021/02/27 PHP
jQuery与其它库冲突的解决方法
2010/06/25 Javascript
eval与window.eval的差别分析
2011/03/17 Javascript
为JavaScript类型增加方法的实现代码(增加功能)
2011/12/29 Javascript
分享几种比较简单实用的JavaScript tabel切换
2015/12/31 Javascript
让图片跳跃起来  javascript图片轮播特效
2016/02/16 Javascript
JS深度拷贝Object Array实例分析
2016/03/31 Javascript
Javascript在IE和Firefox浏览器常见兼容性问题总结
2016/08/03 Javascript
jquery操作checkbox火狐下第二次无法勾选的解决方法
2016/10/10 Javascript
Jquery Easyui搜索框组件SearchBox使用详解(19)
2016/12/17 Javascript
详解Jquery 遍历数组之$().each方法与$.each()方法介绍
2017/01/09 Javascript
jQuery插件HighCharts实现的2D面积图效果示例【附demo源码下载】
2017/03/15 Javascript
JS中使用正则表达式g模式和非g模式的区别
2017/04/01 Javascript
详解nodejs爬虫程序解决gbk等中文编码问题
2017/04/06 NodeJs
在 React、Vue项目中使用SVG的方法
2018/02/09 Javascript
关于单文件组件.vue的使用
2018/09/20 Javascript
JS判断用户用的哪个浏览器实例详解
2018/10/09 Javascript
webpack中如何使用雪碧图的示例代码
2018/11/11 Javascript
对layui初始化列表的CheckBox属性详解
2019/09/13 Javascript
layui文件上传控件带更改后数据传值的方法
2019/09/23 Javascript
[03:44]2014DOTA2国际邀请赛 71专访:DK战队赛前讨论视频遭泄露
2014/07/13 DOTA
Python面向对象编程中的类和对象学习教程
2015/03/30 Python
使用rst2pdf实现将sphinx生成PDF
2016/06/07 Python
基于python实现操作git过程代码解析
2020/07/27 Python
从零实现一个自定义html5播放器的示例代码
2017/08/01 HTML / CSS
医学生求职自荐书
2014/06/12 职场文书
2015年纪念“卢沟桥事变”78周年活动方案
2015/05/06 职场文书
安全教育培训制度
2015/08/06 职场文书
html+css 实现简易导航栏功能
2021/04/07 HTML / CSS
JS异步堆栈追踪之为什么await胜过Promise
2021/04/28 Javascript