Python大数据之网络爬虫的post请求、get请求区别实例分析


Posted in Python onNovember 16, 2019

本文实例讲述了Python大数据之网络爬虫的post请求、get请求区别。分享给大家供大家参考,具体如下:

在JetBrains PyCharm 2016.3软件中编写代码前,需要指定python和编码方式:

#!user/bin/python

编码方式 :#coding=utf-8 或者 #-*-coding:utf-8-*-

post请求:

#导入工具,内置的库
import urllib
import urllib2
#加一个\可以换行
#response = \
  #urllib2.urlopen("https://hao.360.cn/?wd_xp1")
#print response.read()
request = urllib2.Request('http://www.baidu.com')
#response = urllib2.urlopen(request)
#构造post请求
params={}
params['account']='jredu'
params['pwd']=''
#对数据进行编码
data = urllib.urlencode(params)
response = urllib2.urlopen(request,data)
print response.url
print response.code
print response.read()

get请求:

#导入工具,内置的库
import urllib
import urllib2
#加一个\可以换行
#response = \
  #urllib2.urlopen("https://hao.360.cn/?wd_xp1")
#print response.read()
url='http://www.baidu.com'
#response = urllib2.urlopen(request)
#构造post请求
params={}
params['account']='jredu'
params['pwd']=''
#对数据进行编码
data = urllib.urlencode(params)
request = urllib2.Request(url+"?"+data)
response = urllib2.urlopen(request)
print response.url
print response.code
print response.read()

更多关于Python相关内容可查看本站专题:《Python Socket编程技巧总结》、《Python正则表达式用法总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》及《Python文件与目录操作技巧汇总》

希望本文所述对大家Python程序设计有所帮助。

Python 相关文章推荐
python psutil库安装教程
Mar 19 Python
基于python中theano库的线性回归
Aug 31 Python
解决Pycharm界面的子窗口不见了的问题
Jan 17 Python
在自动化中用python实现键盘操作的方法详解
Jul 19 Python
Numpy数组array和矩阵matrix转换方法
Aug 05 Python
python将print输出的信息保留到日志文件中
Sep 27 Python
Python模块_PyLibTiff读取tif文件的实例
Jan 13 Python
解决python中显示图片的plt.imshow plt.show()内存泄漏问题
Apr 24 Python
python使用matplotlib绘制折线图的示例代码
Sep 22 Python
Python内置函数及功能简介汇总
Oct 13 Python
基于Django集成CAS实现流程详解
Nov 28 Python
详解Django自定义图片和文件上传路径(upload_to)的2种方式
Dec 01 Python
基于python实现雪花算法过程详解
Nov 16 #Python
Python大数据之使用lxml库解析html网页文件示例
Nov 16 #Python
Python大数据之从网页上爬取数据的方法详解
Nov 16 #Python
简单了解Pandas缺失值处理方法
Nov 16 #Python
python selenium 执行完毕关闭chromedriver进程示例
Nov 15 #Python
浅谈Django2.0 加xadmin踩的坑
Nov 15 #Python
Django 实现xadmin后台菜单改为中文
Nov 15 #Python
You might like
php将时间差转换为字符串提示
2011/09/07 PHP
windows下配置apache+php+mysql时出现问题的处理方法
2014/06/20 PHP
Yii实现简单分页的方法
2016/04/29 PHP
php创建多级目录与级联删除文件的方法示例
2019/09/12 PHP
wordpress之js库集合研究介绍
2007/08/17 Javascript
js function定义函数使用心得
2010/04/15 Javascript
获得所有表单值的JQuery实现代码[IE暂不支持]
2012/05/24 Javascript
jquery 实现表单验证功能代码(简洁)
2012/07/03 Javascript
javascript中input中readonly和disabled区别介绍
2012/10/23 Javascript
javascript 实现简单的table排序及table操作练习
2012/12/28 Javascript
jQuery ReferenceError: $ is not defined 错误的处理办法
2013/05/10 Javascript
Jquery 复选框取值兼容FF和IE8(测试有效)
2013/10/29 Javascript
jquery判断元素是否隐藏的多种方法
2014/05/06 Javascript
jQuery判断元素是否存在的可靠方法
2014/05/06 Javascript
jQuery层动画定位滑动效果的方法
2015/04/30 Javascript
javascript实现2016新年版日历
2016/01/25 Javascript
jquery 键盘事件的使用方法详解
2017/09/13 jQuery
浅谈关于iview表单验证的问题
2018/09/29 Javascript
JS基于Location实现访问Url、重定向及刷新页面的方法分析
2018/12/03 Javascript
vue-video-player 断点续播的实现
2021/02/01 Vue.js
[02:56]DOTA2矮人直升机 英雄基础教程
2013/11/26 DOTA
Pycharm保存不能自动同步到远程服务器的解决方法
2019/06/27 Python
PyTorch笔记之scatter()函数的使用
2020/02/12 Python
Python日志器使用方法及原理解析
2020/09/27 Python
python中的split、rsplit、splitlines用法说明
2020/10/23 Python
Numpy ndarray 多维数组对象的使用
2021/02/10 Python
一款基于css3的列表toggle特效实例教程
2015/01/04 HTML / CSS
马来西亚最大的在线隐形眼镜商店:MrLens
2019/03/27 全球购物
介绍一下RMI的基本概念
2016/12/17 面试题
纪检监察建议书
2014/05/19 职场文书
党员干部一句话承诺
2014/05/30 职场文书
大学入学感言
2015/08/01 职场文书
详解Nginx 工作原理
2021/03/31 Servers
为什么你写的height:100%不起作用
2021/05/10 HTML / CSS
关于CSS浮动与取消浮动的问题
2021/06/28 HTML / CSS
Java日常练习题,每天进步一点点(38)
2021/07/26 Java/Android