Python3 requests模块如何模仿浏览器及代理


Posted in Python onJune 15, 2020

requests是使用Apache2 licensed 许可证的HTTP库。

用python编写。

比urllib2模块更简洁。

Request支持HTTP连接保持和连接池,支持使用cookie保持会话,支持文件上传,支持自动响应内容的编码,支持国际化的URL和POST数据自动编码。

在python内置模块的基础上进行了高度的封装,从而使得python进行网络请求时,变得人性化,使用Requests可以轻而易举的完成浏览器可有的任何操作。

代码如下

import requests


def xiaodai():
  url = 'http://erge1998.cn/'

  proxies = {
    'http': 'http://149.28.38.64:1081',
    'https': 'https://149.28.38.64:1081'
  }

  headers = {
    'User-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.163 Safari/537.36'
  }

  try:
    response = requests.get (url, headers=headers, proxies=proxies)
    print(response.text)
  except Exception as e:
    print(e)

if __name__ == '__main__':
  xiaodai()

结果

Python3 requests模块如何模仿浏览器及代理

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python网络编程之UDP通信实例(含服务器端、客户端、UDP广播例子)
Apr 25 Python
用Python的SimPy库简化复杂的编程模型的介绍
Apr 13 Python
对python中for、if、while的区别与比较方法
Jun 25 Python
python爬取哈尔滨天气信息
Jul 14 Python
使用Python开发SQLite代理服务器的方法
Dec 07 Python
python 实现图片旋转 上下左右 180度旋转的示例
Jan 24 Python
Python实现简单查找最长子串功能示例
Feb 26 Python
python 读写excel文件操作示例【附源码下载】
Jun 19 Python
Python多线程爬取豆瓣影评API接口
Oct 22 Python
浅析pip安装第三方库及pycharm中导入第三方库的问题
Mar 10 Python
使用Keras预训练好的模型进行目标类别预测详解
Jun 27 Python
用python爬虫批量下载pdf的实现
Dec 01 Python
keras读取训练好的模型参数并把参数赋值给其它模型详解
Jun 15 #Python
keras得到每层的系数方式
Jun 15 #Python
Python类及获取对象属性方法解析
Jun 15 #Python
在Keras中实现保存和加载权重及模型结构
Jun 15 #Python
简单了解Python多态与属性运行原理
Jun 15 #Python
Python类super()及私有属性原理解析
Jun 15 #Python
Keras 实现加载预训练模型并冻结网络的层
Jun 15 #Python
You might like
无数据库的详细域名查询程序PHP版(2)
2006/10/09 PHP
一个简单的PHP&MYSQL留言板源码
2020/07/19 PHP
PHP chmod 函数与批量修改文件目录权限
2010/05/10 PHP
PHP反射机制用法实例
2014/08/28 PHP
PHP之sprintf函数用法详解
2014/11/12 PHP
php判断两个日期之间相差多少个月份的方法
2015/06/18 PHP
使用PHP编写发红包程序
2015/07/22 PHP
详谈PHP编码转换问题
2015/07/28 PHP
简单了解WordPress开发中update_option()函数的用法
2016/01/11 PHP
Symfony控制层深入详解
2016/03/17 PHP
微信公众号开发之语音消息识别php代码
2016/08/08 PHP
PHP7.1实现的AES与RSA加密操作示例
2018/06/15 PHP
基于JQuery的密码强度验证代码
2010/03/01 Javascript
jQuery AjaxQueue改进步骤
2011/10/06 Javascript
jQuery实现复选框全选/取消全选/反选及获得选择的值
2014/06/12 Javascript
浏览器复制插件zeroclipboard使用指南
2016/03/26 Javascript
Nodejs实现短信验证码功能
2017/02/09 NodeJs
nodeJS(express4.x)+vue(vue-cli)构建前后端分离实例(带跨域)
2017/07/05 NodeJs
详解如何在react中搭建d3力导向图
2018/01/12 Javascript
jQuery基于闭包实现的显示与隐藏div功能示例
2018/06/09 jQuery
Python实现的Kmeans++算法实例
2014/04/26 Python
简单解析Django框架中的表单验证
2015/07/17 Python
python引入导入自定义模块和外部文件的实例
2017/07/24 Python
python中单例常用的几种实现方法总结
2018/10/13 Python
使用Python抓取豆瓣影评数据的方法
2018/10/17 Python
python 格式化输出百分号的方法
2019/01/20 Python
JetBrains PyCharm(Community版本)的下载、安装和初步使用图文教程详解
2020/03/19 Python
Python telnet登陆功能实现代码
2020/04/16 Python
Python爬虫获取豆瓣电影并写入excel
2020/07/31 Python
使用python爬取抖音app视频的实例代码
2020/12/01 Python
美国购买隐形眼镜网站:Lenses For Less
2020/07/05 全球购物
完美主义个人的自我评价
2014/02/17 职场文书
保研推荐信
2014/05/09 职场文书
活动总结报告怎么写
2014/07/03 职场文书
环境科学专业教师求职信
2014/07/12 职场文书
幼儿园六一亲子活动方案
2014/08/26 职场文书