python批量下载抖音视频


Posted in Python onJune 17, 2019

本文实例为大家分享了python批量下载抖音视频的具体代码,供大家参考,具体内容如下

知识储备:博主是在Pycharm下进行的
文件夹:dou_ying

python批量下载抖音视频

1、在文件夹doy_ying下新建第一个文件:dou_ying_video_download.py

代码:

# coding=utf-8
"""
@author: jiajiknag
程序功能:批量下载抖音视频
"""
import requests
import bs4
import os
import json
import re
import sys
import time
# 如果一个对象没有实现上下文,我们就不能把它用于with语句。这个时候,可以用closing()来把该对象变为上下文对象。
# closing-将任意对象变为上下文对象,并支持with语句。
from contextlib import closing
# Urllib3是一个功能强大,条理清晰,用于HTTP客户端的Python库
# urllib3.disable_warnings()禁用urllib3警告的方法
requests.packages.urllib3.disable_warnings()
# 创建类Sipder()
class Spider():
 def __init__(self):
  # UA对照表:https://blog.csdn.net/time888/article/details/72822729
  self.headers = {
      # 用户代理:用于浏览器识别的,可以看出自己系统版本,浏览器,浏览器内核等
      'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.146 Safari/537.36'
      }
  # 输出信息-视频信息
  print('[INFO]:Douyin(抖音) App Video downloader...')
  print('[Version]: V1.0')
  print('[Author]: Jiajikang')

 # 创建函数run():外部调用运行
 def run(self):
  # 输入ID地址(爬去某人抖音视频的抖音号)
  user_id = input('Enter the ID:')
  try:
   # 因为抖音号是数字所以使用int()验证是否是数字
   int(user_id)
  # 输入错误时输出except下的语句
  except:
   print('[Error]:ID error...')
   return
  video_names, video_urls, nickname = self._parse_userID(user_id)
  # os.listdir()方法用于返回指定的文件夹包含的文件或文件夹的名字的列表
  if nickname not in os.listdir():
   # os.mkdir() 方法用于以数字权限模式创建目录
   os.mkdir(nickname)
  print('[INFO]:Number of Videos <%s>' % len(video_urls))
  for num in range(len(video_names)):
   # %d是一个占位符,标识一个字符串型的数据, %s也是一个占位符,标识一个字符串型的数据
   print('[INFO]:Parsing <No.%d> <Url:%s>' % (num+1, video_urls[num]))
   temp = video_names[num].replace('\\', '')
   video_name = temp.replace('/', '')
   # 调用函数_downloader()
   self._downloader(video_urls[num], os.path.join(nickname, video_name))
   print('\n')
  print('[INFO]:All Done...')

 # 创建函数_downloader()并含有参数:路径和视频的url-视频下载
 def _downloader(self, video_url, path):
  # 定义size并初始化为0
  size = 0
  # 定义一个变量download_url:利用函数_get_download_url()来获取视频url
  download_url = self._get_download_url(video_url)
  with closing(requests.get(download_url, headers=self.headers, stream=True, verify=False)) as response:
   chunk_size = 1024
   content_size = int(response.headers['content-length'])
   if response.status_code == 200:
    sys.stdout.write('[File Size]: %0.2f MB\n' % (content_size/chunk_size/1024))
    # 使用写入的方式打开,如果该文件已存在则将其覆盖。如果该文件不存在,创建新文件。
    with open(path, 'wb') as f:
     # 遍历获取数据
     for data in response.iter_content(chunk_size=chunk_size):
      # 向文件中写入指定的字符串data
      f.write(data)
      # 计算写入字符串的长度
      size += len(data)
      # flush() 方法是用来刷新缓冲区的,即将缓冲区中的数据立刻写入文件,同时清空缓冲区,不需要是被动的等待输出缓冲区写入。
      f.flush()
      sys.stdout.write('[Progress]: %0.2f%%' % float(size/content_size*100) + '\r')
      sys.stdout.flush()


 # 创建函数_get_download_url()并含有形参video_url:获得视频下载地址
 def _get_download_url(self, video_url):
  # 获取视频的下载地址
  # Requests 可以为 HTTPS 请求验证 SSL 证书,就像 web 浏览器一样。要想检查某个主机的 SSL 证书,你可以使用 verify 参数:
  # 定义变量res用来接收视频地址,verify 仅应用于主机证书
  res = requests.get(url=video_url, verify=False)
  # 将res.text 文件利用'lxml'解析成xml文件,了解lxml--https://blog.csdn.net/tanzuozhev/article/details/50442243
  soup = bs4.BeautifulSoup(res.text, 'lxml')
  # 使用find_all来获取网页中JavaScript中的script的变量;[-1]去除最后一个字符
  script = soup.find_all('script')[-1]
  # 定义变量date=正则表达式\[(.+)]\,[0]可以使其返回一个字典
  video_url_js = re.findall('var data = \[(.+)\];', str(script))[0]
  # 使用loads()下载
  html = json.loads(video_url_js)
  # 返回,使用[0]是返回一个字典
  return html['video']['play_addr']['url_list'][0]


 # 定义函数_parse_userID()且形参user_id;通过user_id获取该用户发布的所有视频
 def _parse_userID(self, user_id):
  # 获取所有视频
  video_names = []
  video_urls = []
  unique_id = ''
  # 当获取的id不是用户的id时:
  while unique_id != user_id:
   # 获取url-下载
   search_url = 'https://api.amemv.com/aweme/v1/discover/search/?keyword={}&count=10&type=1&aid=1128'.format(user_id)
   res = requests.get(url=search_url, verify=False)
   res_dic = json.loads(res.text)
   uid = res_dic['user_list'][0]['user_info']['uid']
   aweme_count = res_dic['user_list'][0]['user_info']['aweme_count']
   nickname = res_dic['user_list'][0]['user_info']['nickname']
   unique_id = res_dic['user_list'][0]['user_info']['unique_id']
  # 用户的url
  user_url = 'https://www.douyin.com/aweme/v1/aweme/post/?user_id={}&max_cursor=0&count={}'.format(uid, aweme_count)
  # 请求获取用户的url
  res = requests.get(url=user_url, verify=False)
  # 下载后去的url转换的文本
  res_dic = json.loads(res.text)
  i = 1
  # 遍历下载的文本
  for each in res_dic['aweme_list']:
   share_desc = each['share_info']['share_desc']
   if '抖音-原创音乐短视频社区' == share_desc:
    video_names.append(str(i) + '.mp4')
    i += 1
   else:
    video_names.append(share_desc + '.mp4')
   video_urls.append(each['share_info']['share_url'])
  return video_names, video_urls, nickname

""" 
if __name__ == '__main__':
 # 创建对象
 sp = Spider()
 sp.run()
"""

温馨提示: 有些库是要自己去下载,一般使用命令在提示符下输入:pip install 自己要下载的库,如下图是博主下载的。

python批量下载抖音视频

2、在文件夹doy_ying下新建第二个文件:run.py

代码:

# coding=utf-8
"""
@author: jiajiknag
程序功能: 测试抖音视频的下载
"""
from dou_ying_video_download import Spider
if __name__ == '__main__':
 # 创建类Spider()对象
 sp = Spider()
 # 运行开始下载
 sp.run()

3、结果

这是我在抖音中随便找的一个发布抖音视频比较少的来测试一下,以及我还下载了自己的抖音

python批量下载抖音视频python批量下载抖音视频

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python内置函数之filter map reduce介绍
Nov 30 Python
Python使用MONGODB入门实例
May 11 Python
Python用模块pytz来转换时区
Aug 19 Python
python同时遍历数组的索引和值的实例
Nov 15 Python
解决使用python print打印函数返回值多一个None的问题
Apr 09 Python
Python使用pdb调试代码的技巧
May 03 Python
Python模拟登入的N种方式(建议收藏)
May 31 Python
python else语句在循环中的运用详解
Jul 06 Python
Python3基于plotly模块保存图片表格
Aug 03 Python
基于Python的接口自动化unittest测试框架和ddt数据驱动详解
Jan 27 Python
提取视频中的音频 Python只需要三行代码!
May 10 Python
python中的3种定义类方法
Nov 27 Python
Python基础学习之类与实例基本用法与注意事项详解
Jun 17 #Python
python文本数据处理学习笔记详解
Jun 17 #Python
python3+PyQt5 实现Rich文本的行编辑方法
Jun 17 #Python
Appium+python自动化之连接模拟器并启动淘宝APP(超详解)
Jun 17 #Python
python3+PyQt5 数据库编程--增删改实例
Jun 17 #Python
python3+PyQt5 创建多线程网络应用-TCP客户端和TCP服务器实例
Jun 17 #Python
python 应用之Pycharm 新建模板默认添加编码格式-作者-时间等信息【推荐】
Jun 17 #Python
You might like
深入php多态的实现详解
2013/06/09 PHP
体育彩票排列三组选三算法分享
2014/03/07 PHP
PHP使用Redis替代文件存储Session的方法
2017/02/15 PHP
escape、encodeURI、encodeURIComponent等方法的区别比较
2006/12/27 Javascript
非阻塞动态加载javascript广告实现代码
2010/11/17 Javascript
Jquery刷新页面背景图片随机变换的实现方法
2013/03/15 Javascript
jquery 提示信息显示后自动消失的具体实现
2013/12/18 Javascript
JS采用绝对定位实现回到顶部效果完整实例
2016/06/20 Javascript
解决ajax不能访问本地文件问题(利用js跨域原理)
2017/01/24 Javascript
微信小程序 中wx.chooseAddress(OBJECT)实例详解
2017/03/31 Javascript
微信小程序上滑加载下拉刷新(onscrollLower)分批加载数据(一)
2017/05/11 Javascript
Three.js实现绘制字体模型示例代码
2017/09/26 Javascript
深入浅析ES6 Class 中的 super 关键字
2017/10/20 Javascript
swiper 自动图片无限轮播实现代码
2018/05/21 Javascript
vue axios整合使用全攻略
2018/05/24 Javascript
十分钟教你上手ES2020新特性
2020/02/12 Javascript
extjs4图表绘制之折线图实现方法分析
2020/03/06 Javascript
[04:23]DOTA2上海特锦赛小组赛第一日 TOP10精彩集锦
2016/02/27 DOTA
Python greenlet实现原理和使用示例
2014/09/24 Python
pygame学习笔记(5):游戏精灵
2015/04/15 Python
在Python的Django框架中生成CSV文件的方法
2015/07/22 Python
python urllib爬取百度云连接的实例代码
2017/06/19 Python
python切片及sys.argv[]用法详解
2018/05/25 Python
Python实现监控键盘鼠标操作示例【基于pyHook与pythoncom模块】
2018/09/04 Python
CentOS下Python3的安装及创建虚拟环境的方法
2018/11/28 Python
Python实现批量修改图片格式和大小的方法【opencv库与PIL库】
2018/12/03 Python
对django xadmin自定义菜单的实例详解
2019/01/03 Python
Django之编辑时根据条件跳转回原页面的方法
2019/08/21 Python
Pytorch 实现focal_loss 多类别和二分类示例
2020/01/14 Python
Python PyQt5模块实现窗口GUI界面代码实例
2020/05/12 Python
Python如何输出百分比
2020/07/31 Python
Python脚本实现Zabbix多行日志监控过程解析
2020/08/26 Python
加拿大领先的冒险和户外零售商:Atmosphere
2017/12/19 全球购物
美国折扣地毯销售网站:Rugs.com
2020/03/27 全球购物
公司新年寄语
2014/04/04 职场文书
刑事法律意见书
2015/06/04 职场文书