Python基于爬虫实现全网搜索并下载音乐


Posted in Python onFebruary 14, 2021

现在写一篇博客总是喜欢先谈需求或者本内容的应用场景,是的,如果写出来的东西没有任何应用价值,确实也没有实际意义。今天的最早的需求是来自于如何免费[白嫖]下载全网优质音乐,我去b站上面搜索到了一个大牛做过的一个歌曲搜素神器,界面是这样的:

Python基于爬虫实现全网搜索并下载音乐

确实很好用的,而且涵盖了互联网上面大多数主流的音乐网站,涉及到的版本也很多,可谓大而全,但是一个技术人的追求远远不会如此,于是我就想去了解其中背后的原理,因为做过网络爬虫的人都知道,爬虫只能爬取某一页或者某些页的网站资源,所以我很好奇它背后是怎么实现的?
笔者一直以来都是做的基于Python3.7版本的网络爬虫,所以本文也是基于此来学习记录的。首先爬取的网站不是对应的音乐网站,而是一个音乐直链搜索,那里汇聚了大多数音频音乐的解析功能,界面如下:

Python基于爬虫实现全网搜索并下载音乐

所以自制一个搜索引擎的思想也很直观了,那就是利用第三方的接口,直接对该服务器发起请求即可,然后将获取的数据进行解析保存。这里以最近比较火的歌曲“白月光与朱砂痣”下载为例:

Python基于爬虫实现全网搜索并下载音乐

解析的结果如上,获取的数据格式是json类型,并且除了要有歌名以外,还要有音乐平台。

源代码实现如下:

import requests
import jsonpath
import os
"""
  1.url
  2.模拟浏览器请求
  3.解析网页源代码
  4.保存数据
"""
def song_download(url,title,author):
  # 创建文件夹
  os.makedirs("music",exist_ok=True)
  path = 'music\{}.mp3'.format(title)
  print('歌曲:{0}-{1},正在下载...'.format(title,author))
  # 下载(这种读写文件的下载方式适合少量文件的下载)
  content = requests.get(url).content
  with open(file = title + author + '.mp3',mode='wb') as f:
    f.write(content)
  print('下载完毕,{0}-{1},请试听'.format(title,author))

def get_music_name():
  """
  搜索歌曲名称
  :return:
  """
  name = input("请输入歌曲名称:")
  print("1.网易云:netease\n2.QQ:qq\n3.酷狗:kugou\n4.酷我:kuwo\n5.百度:baidu\n6.喜马拉雅:ximalaya")
  platfrom = input("输入音乐平台类型:")
  print("-------------------------------------------------------")
  url = 'https://music.liuzhijin.cn/'
  headers = {
    "user-agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36",
    # 判断请求是异步还是同步
    "x-requested-with":"XMLHttpRequest",
  }
  param = {
    "input":name,
    "filter":"name",
    "type":platfrom,
    "page": 1,
  }
  res = requests.post(url=url,data=param,headers=headers)
  json_text = res.json()

  title = jsonpath.jsonpath(json_text,'$..title')
  author = jsonpath.jsonpath(json_text,'$..author')
  url = jsonpath.jsonpath(json_text, '$..url')
  if title:
    songs = list(zip(title,author,url))
    for s in songs:
      print(s[0],s[1],s[2])
    print("-------------------------------------------------------")
    index = int(input("请输入您想下载的歌曲版本:"))
    song_download(url[index],title[index],author[index])
  else:
    print("对不起,暂无搜索结果!")

if __name__ == "__main__":
  get_music_name()

演示一下运行效果:

Python基于爬虫实现全网搜索并下载音乐

然后文件下就会出现对应的歌曲.mp3文件

Python基于爬虫实现全网搜索并下载音乐

并且每次的歌曲检索都是在PyCharm专业版的控制台中进行的,这样的用户体验就非常糟糕,所以针对以上两个问题,我对源代码进行了改进。

# 导入模块
from tkinter import *
import requests
import jsonpath
import os
from urllib.request import urlretrieve

# 2.功能实现
"""
  1.url
  2.模拟浏览器请求
  3.解析网页源代码
  4.保存数据
"""
def song_download(url,title,author):
  # 创建文件夹
  os.makedirs("music",exist_ok=True)
  path = 'music\{}.mp3'.format(title)
  text.insert(END,'歌曲:{0}-{1},正在下载...'.format(title,author))
  # 文本框滑动
  text.see(END)
  # 更新
  text.update()
  # 下载
  urlretrieve(url,path)
  text.insert(END,'下载完毕,{0}-{1},请试听'.format(title,author))
  # 文本框滑动
  text.see(END)
  # 更新
  text.update()

def get_music_name():
  """
  搜索歌曲名称
  :return:
  """
  name = entry.get()
  platfrom = var.get()
  # name = '白月光与朱砂痣'
  url = 'https://music.liuzhijin.cn/'
  headers = {
    "user-agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36",
    # 判断请求是异步还是同步
    "x-requested-with":"XMLHttpRequest",
  }
  param = {
    "input":name,
    "filter":"name",
    "type":platfrom,
    "page": 1,
  }
  res = requests.post(url=url,data=param,headers=headers)
  json_text = res.json()

  title = jsonpath.jsonpath(json_text,'$..title')
  author = jsonpath.jsonpath(json_text,'$..author')
  url = jsonpath.jsonpath(json_text, '$..url')
  print(title,author,url)
  song_download(url[0],title[0],author[0])


# 1.用户界面
# 创建画板
root = Tk()
# 设置窗口标题
root.title('全网音乐下载器')
# 设置窗口大小以及出现的位置
root.geometry('560x450+400+200')
# 标签组件
label = Label(root,text="请输入下载的歌曲:",font=('楷体',20))
# 定位与布局
label.grid(row=0)
# 输入框组件
entry = Entry(root,font=('宋体',20))
entry.grid(row=0,column=1)
# 单选按钮
var = StringVar()
r1 = Radiobutton(root,text='网易云',variable=var,value='netease')
r1.grid(row=1,column=0)
r2 = Radiobutton(root,text='QQ',variable=var,value='qq')
r2.grid(row=1,column=1)
# 列表框
text = Listbox(root,font=('楷体',16),width=50,height=15)
text.grid(row=2,columnspan=2)
# 下载按钮
button1 = Button(root,text='开始下载',font=('楷体',15),command=get_music_name)
button1.grid(row=3,column=0)
button2 = Button(root,text='退出程序',font=('楷体',15),command=root.quit)
button2.grid(row=3,column=1)
# 显示界面
root.mainloop()

我们再来看看效果吧

Python基于爬虫实现全网搜索并下载音乐

这样加上了UI界面和部分代码优化之后,就可以通过.py代码打包成.exe文件发布给用户使用了。

以上就是Python基于爬虫实现全网搜索并下载音乐的详细内容,更多关于python 爬虫下载音乐的资料请关注三水点靠木其它相关文章!

Python 相关文章推荐
Python3安装Pymongo详细步骤
May 26 Python
利用Python查看目录中的文件示例详解
Aug 28 Python
Django实战之用户认证(用户登录与注销)
Jul 16 Python
Python 单元测试(unittest)的使用小结
Nov 14 Python
pygame游戏之旅 游戏中添加显示文字
Nov 20 Python
python pandas库的安装和创建
Jan 10 Python
Python 安装第三方库 pip install 安装慢安装不上的解决办法
Jun 18 Python
Python字符串、列表、元组、字典、集合的补充实例详解
Dec 20 Python
解决Pycharm中恢复被exclude的项目问题(pycharm source root)
Feb 14 Python
python GUI库图形界面开发之PyQt5窗口类QMainWindow详细使用方法
Feb 26 Python
Python应用实现双指数函数及拟合代码实例
Jun 19 Python
python归并排序算法过程实例讲解
Nov 04 Python
Python LMDB库的使用示例
Feb 14 #Python
python 装饰器重要在哪
Feb 14 #Python
python爬虫如何解决图片验证码
Feb 14 #Python
Python实现粒子群算法的示例
Feb 14 #Python
Python中对象的比较操作==和is区别详析
Feb 12 #Python
python绘图模块之利用turtle画图
Feb 12 #Python
Python列表的深复制和浅复制示例详解
Feb 12 #Python
You might like
php中全局变量global的使用演示代码
2011/05/18 PHP
php 网上商城促销设计实例代码
2012/02/17 PHP
Zend Framework入门教程之Zend_Config组件用法详解
2016/12/09 PHP
php+resumablejs实现的分块上传 断点续传功能示例
2017/04/18 PHP
javascript document.images实例
2008/05/27 Javascript
json简单介绍
2008/06/10 Javascript
网页前台通过js非法字符过滤代码(骂人的话等等)
2010/05/26 Javascript
jquery图形密码实现方法
2015/03/11 Javascript
JavaScript仿支付宝6位数字密码输入框
2016/12/29 Javascript
javascript完美实现给定日期返回上月日期的方法
2017/06/15 Javascript
vue.js中created方法作用
2018/03/30 Javascript
原生js封装的ajax方法示例
2018/08/02 Javascript
微信小程序实现底部导航
2018/11/05 Javascript
深入浅出 Vue 系列 -- 数据劫持实现原理
2019/04/23 Javascript
javascript设计模式 ? 单例模式原理与应用实例分析
2020/04/09 Javascript
python数据抓取分析的示例代码(python + mongodb)
2017/12/25 Python
Python使用Scrapy保存控制台信息到文本解析
2017/12/27 Python
Python DataFrame设置/更改列表字段/元素类型的方法
2018/06/09 Python
python实现百度OCR图片识别过程解析
2020/01/17 Python
Python多线程通信queue队列用法实例分析
2020/03/24 Python
PyCharm2020.1.1与Python3.7.7的安装教程图文详解
2020/08/07 Python
python按照list中字典的某key去重的示例代码
2020/10/13 Python
python 获取剪切板内容的两种方法
2020/11/28 Python
JD Sports德国官网:英国领先的运动鞋和运动服饰零售商
2018/02/26 全球购物
英国领先的在线礼品店:Getting Personal
2019/09/24 全球购物
委托与事件是什么关系?为什么要使用委托
2014/04/18 面试题
工程概预算专业毕业生求职信
2013/10/04 职场文书
个人实用简单的自我评价
2013/10/19 职场文书
秋游活动策划方案
2014/02/16 职场文书
班主任班级寄语大全
2014/04/04 职场文书
新年寄语大全
2014/04/12 职场文书
材料成型及控制工程专业求职信
2014/06/19 职场文书
2014年社区宣传工作总结
2014/12/02 职场文书
埃及王子观后感
2015/06/16 职场文书
2016年社区中秋节活动总结
2016/04/05 职场文书
2019请假条的基本格式及范文!
2019/07/05 职场文书