Python基于爬虫实现全网搜索并下载音乐


Posted in Python onFebruary 14, 2021

现在写一篇博客总是喜欢先谈需求或者本内容的应用场景,是的,如果写出来的东西没有任何应用价值,确实也没有实际意义。今天的最早的需求是来自于如何免费[白嫖]下载全网优质音乐,我去b站上面搜索到了一个大牛做过的一个歌曲搜素神器,界面是这样的:

Python基于爬虫实现全网搜索并下载音乐

确实很好用的,而且涵盖了互联网上面大多数主流的音乐网站,涉及到的版本也很多,可谓大而全,但是一个技术人的追求远远不会如此,于是我就想去了解其中背后的原理,因为做过网络爬虫的人都知道,爬虫只能爬取某一页或者某些页的网站资源,所以我很好奇它背后是怎么实现的?
笔者一直以来都是做的基于Python3.7版本的网络爬虫,所以本文也是基于此来学习记录的。首先爬取的网站不是对应的音乐网站,而是一个音乐直链搜索,那里汇聚了大多数音频音乐的解析功能,界面如下:

Python基于爬虫实现全网搜索并下载音乐

所以自制一个搜索引擎的思想也很直观了,那就是利用第三方的接口,直接对该服务器发起请求即可,然后将获取的数据进行解析保存。这里以最近比较火的歌曲“白月光与朱砂痣”下载为例:

Python基于爬虫实现全网搜索并下载音乐

解析的结果如上,获取的数据格式是json类型,并且除了要有歌名以外,还要有音乐平台。

源代码实现如下:

import requests
import jsonpath
import os
"""
  1.url
  2.模拟浏览器请求
  3.解析网页源代码
  4.保存数据
"""
def song_download(url,title,author):
  # 创建文件夹
  os.makedirs("music",exist_ok=True)
  path = 'music\{}.mp3'.format(title)
  print('歌曲:{0}-{1},正在下载...'.format(title,author))
  # 下载(这种读写文件的下载方式适合少量文件的下载)
  content = requests.get(url).content
  with open(file = title + author + '.mp3',mode='wb') as f:
    f.write(content)
  print('下载完毕,{0}-{1},请试听'.format(title,author))

def get_music_name():
  """
  搜索歌曲名称
  :return:
  """
  name = input("请输入歌曲名称:")
  print("1.网易云:netease\n2.QQ:qq\n3.酷狗:kugou\n4.酷我:kuwo\n5.百度:baidu\n6.喜马拉雅:ximalaya")
  platfrom = input("输入音乐平台类型:")
  print("-------------------------------------------------------")
  url = 'https://music.liuzhijin.cn/'
  headers = {
    "user-agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36",
    # 判断请求是异步还是同步
    "x-requested-with":"XMLHttpRequest",
  }
  param = {
    "input":name,
    "filter":"name",
    "type":platfrom,
    "page": 1,
  }
  res = requests.post(url=url,data=param,headers=headers)
  json_text = res.json()

  title = jsonpath.jsonpath(json_text,'$..title')
  author = jsonpath.jsonpath(json_text,'$..author')
  url = jsonpath.jsonpath(json_text, '$..url')
  if title:
    songs = list(zip(title,author,url))
    for s in songs:
      print(s[0],s[1],s[2])
    print("-------------------------------------------------------")
    index = int(input("请输入您想下载的歌曲版本:"))
    song_download(url[index],title[index],author[index])
  else:
    print("对不起,暂无搜索结果!")

if __name__ == "__main__":
  get_music_name()

演示一下运行效果:

Python基于爬虫实现全网搜索并下载音乐

然后文件下就会出现对应的歌曲.mp3文件

Python基于爬虫实现全网搜索并下载音乐

并且每次的歌曲检索都是在PyCharm专业版的控制台中进行的,这样的用户体验就非常糟糕,所以针对以上两个问题,我对源代码进行了改进。

# 导入模块
from tkinter import *
import requests
import jsonpath
import os
from urllib.request import urlretrieve

# 2.功能实现
"""
  1.url
  2.模拟浏览器请求
  3.解析网页源代码
  4.保存数据
"""
def song_download(url,title,author):
  # 创建文件夹
  os.makedirs("music",exist_ok=True)
  path = 'music\{}.mp3'.format(title)
  text.insert(END,'歌曲:{0}-{1},正在下载...'.format(title,author))
  # 文本框滑动
  text.see(END)
  # 更新
  text.update()
  # 下载
  urlretrieve(url,path)
  text.insert(END,'下载完毕,{0}-{1},请试听'.format(title,author))
  # 文本框滑动
  text.see(END)
  # 更新
  text.update()

def get_music_name():
  """
  搜索歌曲名称
  :return:
  """
  name = entry.get()
  platfrom = var.get()
  # name = '白月光与朱砂痣'
  url = 'https://music.liuzhijin.cn/'
  headers = {
    "user-agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36",
    # 判断请求是异步还是同步
    "x-requested-with":"XMLHttpRequest",
  }
  param = {
    "input":name,
    "filter":"name",
    "type":platfrom,
    "page": 1,
  }
  res = requests.post(url=url,data=param,headers=headers)
  json_text = res.json()

  title = jsonpath.jsonpath(json_text,'$..title')
  author = jsonpath.jsonpath(json_text,'$..author')
  url = jsonpath.jsonpath(json_text, '$..url')
  print(title,author,url)
  song_download(url[0],title[0],author[0])


# 1.用户界面
# 创建画板
root = Tk()
# 设置窗口标题
root.title('全网音乐下载器')
# 设置窗口大小以及出现的位置
root.geometry('560x450+400+200')
# 标签组件
label = Label(root,text="请输入下载的歌曲:",font=('楷体',20))
# 定位与布局
label.grid(row=0)
# 输入框组件
entry = Entry(root,font=('宋体',20))
entry.grid(row=0,column=1)
# 单选按钮
var = StringVar()
r1 = Radiobutton(root,text='网易云',variable=var,value='netease')
r1.grid(row=1,column=0)
r2 = Radiobutton(root,text='QQ',variable=var,value='qq')
r2.grid(row=1,column=1)
# 列表框
text = Listbox(root,font=('楷体',16),width=50,height=15)
text.grid(row=2,columnspan=2)
# 下载按钮
button1 = Button(root,text='开始下载',font=('楷体',15),command=get_music_name)
button1.grid(row=3,column=0)
button2 = Button(root,text='退出程序',font=('楷体',15),command=root.quit)
button2.grid(row=3,column=1)
# 显示界面
root.mainloop()

我们再来看看效果吧

Python基于爬虫实现全网搜索并下载音乐

这样加上了UI界面和部分代码优化之后,就可以通过.py代码打包成.exe文件发布给用户使用了。

以上就是Python基于爬虫实现全网搜索并下载音乐的详细内容,更多关于python 爬虫下载音乐的资料请关注三水点靠木其它相关文章!

Python 相关文章推荐
Python随机生成带特殊字符的密码
Mar 02 Python
Python字符串拼接、截取及替换方法总结分析
Apr 13 Python
python定时利用QQ邮件发送天气预报的实例
Nov 17 Python
Python 字符串与二进制串的相互转换示例
Jul 23 Python
python图像处理入门(一)
Apr 04 Python
使用 python pyautogui实现鼠标键盘控制功能
Aug 04 Python
python KNN算法实现鸢尾花数据集分类
Oct 24 Python
基于Python生成个性二维码过程详解
Mar 05 Python
Python基于traceback模块获取异常信息
Jul 23 Python
改变 Python 中线程执行顺序的方法
Sep 24 Python
Python通过fnmatch模块实现文件名匹配
Sep 30 Python
Python Tkinter实例——模拟掷骰子
Oct 24 Python
Python LMDB库的使用示例
Feb 14 #Python
python 装饰器重要在哪
Feb 14 #Python
python爬虫如何解决图片验证码
Feb 14 #Python
Python实现粒子群算法的示例
Feb 14 #Python
Python中对象的比较操作==和is区别详析
Feb 12 #Python
python绘图模块之利用turtle画图
Feb 12 #Python
Python列表的深复制和浅复制示例详解
Feb 12 #Python
You might like
PHP执行速率优化技巧小结
2008/03/15 PHP
使用php+apc实现上传进度条且在IE7下不显示的问题解决方法
2013/04/25 PHP
PHP中的str_repeat函数在JavaScript中的实现
2013/09/16 PHP
ThinkPHP整合datatables实现服务端分页的示例代码
2018/02/10 PHP
asp 取文本框名称代码
2008/12/02 Javascript
JavaScript不使用prototype和new实现继承机制
2014/12/29 Javascript
jquery.mobile 共同布局遇到的问题小结
2015/02/10 Javascript
JavaScript中模拟实现jsonp
2015/06/19 Javascript
JS实现带关闭功能的阿里妈妈网站顶部滑出banner工具条代码
2015/09/17 Javascript
javascript下拉列表菜单的实现方法
2015/11/18 Javascript
原生javascript实现图片无缝滚动效果
2016/02/12 Javascript
JS检测页面中哪个HTML标签触发点击事件的方法
2016/06/17 Javascript
浅谈js和css内联外联注意事项
2016/06/30 Javascript
jQuery实现radio第一次点击选中第二次点击取消功能
2017/05/15 jQuery
Vue利用路由钩子token过期后跳转到登录页的实例
2017/10/26 Javascript
vue 获取视频时长的实例代码
2019/08/20 Javascript
layui form表单提交之后重新加载数据表格的方法
2019/09/11 Javascript
layui+jquery支持IE8的表格分页方法
2019/09/28 jQuery
JS highcharts动态柱状图原理及实现
2020/10/16 Javascript
Python线程中对join方法的运用的教程
2015/04/09 Python
python线程池threadpool使用篇
2018/04/27 Python
Python3.5 Pandas模块之Series用法实例分析
2019/04/23 Python
分析运行中的 Python 进程详细解析
2019/06/22 Python
python实现最小二乘法线性拟合
2019/07/19 Python
使用Python将字符串转换为格式化的日期时间字符串
2019/09/01 Python
Python3 把一个列表按指定数目分成多个列表的方式
2019/12/25 Python
html5手机键盘弹出收起的处理
2020/01/20 HTML / CSS
以下为Windows NT 下的32 位C++程序,请计算sizeof 的值
2016/12/07 面试题
经理秘书找工作求职信
2013/12/19 职场文书
大学生职业生涯规划书参考模板
2014/03/05 职场文书
2014超市收银员工作总结
2014/11/13 职场文书
党员个人承诺书
2015/04/27 职场文书
学校后勤工作总结2015
2015/05/15 职场文书
关于python中模块和重载的问题
2021/11/02 Python
Springboot-cli 开发脚手架,权限认证,附demo演示
2022/04/28 Java/Android
Nginx 502 bad gateway错误解决的九种方案及原因
2022/08/14 Servers