Python使用mitmproxy工具监控手机 下载手机小视频


Posted in Python onApril 18, 2022

今天为大家介绍使用 mitmproxy 这个抓包工具如何监控手机上网,并且通过抓包,把我们想要的数据下载下来。

启动 mitmproxy

首先我们通过执行命令 mitmweb 启动mitmproxy,让它处理监听状态,服务会监听本机 8080 端口,启动后如下:

$ mitmweb
Web server listening at http://127.0.0.1:8081/
Proxy server listening at http://*:8080

手机网络配置

1.保证手机和电脑在同一局域网内,并查看电脑的局域网 IP 地址是多少以备用,查看方式可以用命令查看,如 Windows 系统用

ipconfig 命令,Mac 或 Linux 则用命令 ifconfig,看到如下图所示,找到本机在局域网的 IP 地址。

Python使用mitmproxy工具监控手机 下载手机小视频

不同操作系统,可能展示结果不同,在这里我们可以看到红框里我本机的 IP 地址为 192.168.0.108。

2.配置手机代理地址,比如以下用 iphone 手机进行配置,打开设置 -> 无线局域网 -> 点现在连接的网络 -> 点最下面点 HTTP 代

理配置,选择手动后,配置代理地址为我们电脑的 IP地址和 mitmproxy 的监听端口,配置如下图所示:

Python使用mitmproxy工具监控手机 下载手机小视频

3.现在我们就可以让手机通过电脑上网了,不过目前手机 App 都是通过 HTTPS 加密请求,所以我们需要在手机上安装个

mitmproxy 的 HTTPS 证书。接下来我们打开手机浏览器,输入网址:mitm.it,打开如下图所示页面,选择对应手机的操作系统,

下载证书并安装。

Python使用mitmproxy工具监控手机 下载手机小视频

下载页

在这里我点 Apple 的图标下载证书,下载后等待安装:

Python使用mitmproxy工具监控手机 下载手机小视频

Python使用mitmproxy工具监控手机 下载手机小视频

单击上面的安装,可能会出现信任的提示,只要选择信任证书就可以了,下面是安装好的界面如下图:

Python使用mitmproxy工具监控手机 下载手机小视频

好了,配置完成下面我们点开个手机 APP 看到电脑 mitmweb 的页面上,已经出现请求内容了。

Python使用mitmproxy工具监控手机 下载手机小视频

编写下载脚本

好了,现在经过分析拦截的请求,我们开始用 Python 编写代码,通过解析视频的 url 将视频下载到本地。在这里我们先来打印下

数据,新建文件 xiaoshipin.py,然后编写如下代码,实现将已编码的 json 字符串解码为 python 对象:

#xiaoshipin.py
import json
def response(flow):    
url='https://api.amemv.com/aweme/v1/aweme/post/'    
#筛选出以上面url为开头的url    
if flow.request.url.startswith(url):        
text=flow.response.text       
 #将已编码的json字符串解码为python对象        
 data=json.loads(text)        
 print(data)

编辑完后保存,然后执行命令:mitmweb -s xiaoshipin.py,带上这段脚本来运行我们的代理服务,刷新几个视频,会看到如下图所示内容:

Python使用mitmproxy工具监控手机 下载手机小视频

其中就包含了我们需要的下载地址信息,接下来我们只需提取视频的 url ,并且缓存视频到本地就 OK 了。

下面我们就来修改上面的 xiaoshipin.py 的代码,完善下视频下载的功能。

#xiaoshipin.py

#引入包
import json,os
import requests

#只拦截并处理返回请求
def response(flow):    
#请求的 url    
url='https://api.amemv.com/aweme/v1/aweme/post/'    
#筛选出以上面url为开头的url    
if flow.request.url.startswith(url):        
text=flow.response.text        
#将已编码的json字符串解码为python对象        
data=json.loads(text)        
#刚分析看到每一个视频的所有信息        
#都在aweme_list中        
video_url=data['aweme_list']        
#设置下载路径        
path='/Users/xx/shipin'        
#如果文件夹不存在,则新建        
if not os.path.exists(path):            
os.mkdir(path)
        # 循环所有视频 url        
        for each in video_url:            
 #视频描述            
 desc=each['desc']            
 url=each['video']['play_addr']['url_list'][0]           
  # 设置视频名称            
  filename=path+'/'+desc+'.mp4'            
  # 用 request 请求视频流            
  req=requests.get(url=url,verify=False)            
  # 保存视频文件            
  with open(filename,'ab') as f:                
  f.write(req.content)                
  f.flush()                
  print(filename,'下载完毕')

上面我已经把相关代码注释好了,现在我们保存编辑好的代码,然后再次执行命令:mitmweb -s xiaoshipin.py,启动监听服务。

然后打开手机再次下视频,就会看到视频是不是已经都存到本地了。

到此这篇关于Python 下载手机小视频的文章就介绍到这了,更多相关Python 下载手机小视频内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Python 相关文章推荐
python函数缺省值与引用学习笔记分享
Feb 10 Python
python中readline判断文件读取结束的方法
Nov 08 Python
Python实现单词拼写检查
Apr 25 Python
Python环境变量设置方法
Aug 28 Python
Python 实现使用dict 创建二维数据、DataFrame
Apr 13 Python
python脚本之一键移动自定格式文件方法实例
Sep 02 Python
django orm模块中的 is_delete用法
May 20 Python
给ubuntu18安装python3.7的详细教程
Jun 08 Python
Python requests HTTP验证登录实现流程
Nov 05 Python
Python实现PS滤镜中的USM锐化效果
Dec 04 Python
python基于tkinter实现gif录屏功能
May 19 Python
Pyqt5将多个类组合在一个界面显示的完整示例
Sep 04 Python
使用Python通过企业微信应用给企业成员发消息
Python用any()函数检查字符串中的字母以及如何使用all()函数
Apr 14 #Python
python在package下继续嵌套一个package
Apr 14 #Python
Github 使用python对copilot做些简单使用测试
使用Python拟合函数曲线
Apr 14 #Python
Python中生成随机数据安全性、多功能性、用途和速度方面进行比较
python中 .npy文件的读写操作实例
Apr 14 #Python
You might like
php限制上传文件类型并保存上传文件的方法
2015/03/13 PHP
PHP基于SMTP协议实现邮件发送实例代码
2017/04/27 PHP
Div Select挡住的解决办法
2008/08/07 Javascript
jquery DOM操作 基于命令改变页面
2010/05/06 Javascript
javascript 四则运算精度修正函数代码
2010/05/31 Javascript
Wordpress ThickBox 添加“查看原图”效果代码
2010/12/11 Javascript
JavaScript动态调整TextArea高度的代码
2010/12/28 Javascript
移除AngularJS下URL中的#字符的方法
2015/06/19 Javascript
基于jQuery实现的扇形定时器附源码下载
2015/10/20 Javascript
解决WordPress使用CDN后博文无法评论的错误
2015/12/15 Javascript
jquery实现简单的全选和反选功能
2016/01/02 Javascript
javascript每日必学之循环
2016/02/19 Javascript
jQuery文件上传控件 Uploadify 详解
2016/06/20 Javascript
bootstrap中使用google prettify让代码高亮的方法
2016/10/21 Javascript
NodeJs下的测试框架Mocha的简单介绍
2017/02/22 NodeJs
干货!教大家如何选择Vue和React
2017/03/13 Javascript
nodejs用gulp管理前端文件方法
2018/06/24 NodeJs
Vue+ElementUI table实现表格分页
2019/12/14 Javascript
javascript canvas封装动态时钟
2020/09/30 Javascript
[47:08]OG vs INfamous 2019国际邀请赛小组赛 BO2 第一场 8.15
2019/08/17 DOTA
Django + Uwsgi + Nginx 实现生产环境部署的方法
2018/06/20 Python
Python 比较文本相似性的方法(difflib,Levenshtein)
2018/10/15 Python
python监控进程状态,记录重启时间及进程号的实例
2019/07/15 Python
python 实现让字典的value 成为列表
2019/12/16 Python
CSS3 3D位移translate效果实例介绍
2016/05/03 HTML / CSS
HTML5 本地存储实现购物车功能
2017/09/07 HTML / CSS
Delphi CS笔试题
2014/01/04 面试题
护士个人简历自荐信
2013/10/18 职场文书
积极贯彻学习两会精神总结
2014/03/17 职场文书
县级文明单位申报材料
2014/05/23 职场文书
党的群众路线批评与自我批评范文
2014/10/16 职场文书
音乐会主持人开场白
2015/05/28 职场文书
用人单位的规章制度,怎样制定才是有效的?
2019/07/09 职场文书
Linux安装apache服务器的配置过程
2021/11/27 Servers
windows安装 redis 6.2.6最新步骤详解
2022/04/26 Redis
JS前端使用canvas实现扩展物体类和事件派发
2022/08/05 Javascript