python3抓取中文网页的方法


Posted in Python onJuly 28, 2015

本文实例讲述了python3抓取中文网页的方法。分享给大家供大家参考。具体如下:

#! /usr/bin/python3.2
import sys
import urllib.request
req = urllib.request.Request('http://www.baidu.com')
response = urllib.request.urlopen(req)
the_page = response.read()
type = sys.getfilesystemencoding()
#转换成本地系统编码
print(the_page.decode(type))

希望本文所述对大家的Python程序设计有所帮助。

Python 相关文章推荐
Python编写检测数据库SA用户的方法
Jul 11 Python
python pandas中DataFrame类型数据操作函数的方法
Apr 08 Python
python 函数内部修改外部变量的方法
Dec 18 Python
基于Python的Post请求数据爬取的方法详解
Jun 14 Python
python实现websocket的客户端压力测试
Jun 25 Python
使用python实现滑动验证码功能
Aug 05 Python
python2与python3爬虫中get与post对比解析
Sep 18 Python
pytorch 状态字典:state_dict使用详解
Jan 17 Python
Python3.9 beta2版本发布了,看看这7个新的PEP都是什么
Jun 10 Python
python 浮点数四舍五入需要注意的地方
Aug 18 Python
bat批处理之字符串操作的实现
Mar 16 Python
python小型的音频操作库mp3Play
Apr 24 Python
python列表操作之extend和append的区别实例分析
Jul 28 #Python
python创建列表并给列表赋初始值的方法
Jul 28 #Python
python更新列表的方法
Jul 28 #Python
python实现给数组按片赋值的方法
Jul 28 #Python
python通过加号运算符操作列表的方法
Jul 28 #Python
python比较两个列表是否相等的方法
Jul 28 #Python
python追加元素到列表的方法
Jul 28 #Python
You might like
Yii列表定义与使用分页方法小结(3种方法)
2016/07/15 PHP
php 替换文章中的图片路径,下载图片到本地服务器的方法
2018/02/06 PHP
php使用gearman进行任务分发操作实例详解
2020/02/26 PHP
jquery中获得$.ajax()事件返回的值并添加事件的方法
2010/04/15 Javascript
jquery中的 $("#jb51")与document.getElementById("jb51") 的区别
2011/07/26 Javascript
window.open关于浏览器拦截问题分析及解决方法
2013/02/05 Javascript
javascript解析json数据的3种方式
2014/05/08 Javascript
jquery的ajax异步请求接收返回json数据实例
2014/06/16 Javascript
Bootstrap3学习笔记(二)之排版
2016/05/20 Javascript
JavaScript获取当前url根目录(路径)
2016/06/17 Javascript
JS实现拖拽的方法分析
2016/12/20 Javascript
js判断手机号是否正确并返回的实现代码
2017/01/17 Javascript
Angular2的管道Pipe的使用方法
2017/11/07 Javascript
详解react-router 4.0 下服务器如何配合BrowserRouter
2017/12/29 Javascript
基于JavaScript获取base64图片大小
2019/10/18 Javascript
Python打包文件夹的方法小结(zip,tar,tar.gz等)
2016/09/18 Python
Series和DataFrame使用简单入门
2019/11/13 Python
Python 装饰器原理、定义与用法详解
2019/12/07 Python
python将时分秒转换成秒的实例
2019/12/07 Python
python随机模块random的22种函数(小结)
2020/05/15 Python
python 元组和列表的区别
2020/12/30 Python
python绕过图片滑动验证码实现爬取PTA所有题目功能 附源码
2021/01/06 Python
安装不同版本的tensorflow与models方法实现
2021/02/20 Python
python爬虫破解字体加密案例详解
2021/03/02 Python
HTML5添加鼠标悬浮音响效果不使用FLASH
2014/04/23 HTML / CSS
The North Face北面荷兰官网:美国著名户外品牌
2019/10/16 全球购物
网络工程师个人的自我评价范文
2013/10/01 职场文书
追悼会上的答谢词
2014/01/10 职场文书
电台编导求职信
2014/05/06 职场文书
做一个有道德的人演讲稿
2014/05/14 职场文书
创建绿色社区汇报材料
2014/08/22 职场文书
2014年政府采购工作总结
2014/12/09 职场文书
2015年大学生入党自荐书
2015/03/24 职场文书
Nginx配置并兼容HTTP实现代码解析
2021/03/31 Servers
js Proxy的原理详解
2021/05/25 Javascript
Django模型层实现多表关系创建和多表操作
2021/07/21 Python