python爬虫----爬取网易云音乐
使用python爬虫爬取网易云音乐
目录
- 使用python爬虫爬取网易云音乐
- 需要使用的模块
- 开始工作
- 运行结果
需要使用的模块
只需要requests模块和os模块即可
开始工作
先去网易云音乐网页版找一下你想要听的歌曲点击进去。按键盘F12打开网页调试工具,点击Network就可以查看网络请求的相关信息,选择XHR,然后可以看到一个.mp3结尾的请求:
直觉告诉我,这个.mp3就是这首歌曲,点击请求,可以看到在General栏下面有Request URL,这个url就是这个歌曲的原始套接字所在的地方了,可以打开这个URL看看。
可以看到,这个网页很明显就是一个播放器的样子,再按F12看看这个界面的Network(什么东西都没有的话按F5刷新一下),这个界面点击All才可以看到一个.mp3结尾的文件,对比一下它的General中的Request URL和这个网站的URL,其实是一样的:
那么,这就算是正是找到了这个歌曲的url,现在要做的就是将这个url原始套接字从服务器上下载下来,代码,起:
import requests
import osheaders={"Accept": "*/*",
"Accept-Encoding": "identity;q=1, *;q=0",
"Accept-Language": "zh-CN,zh;q=0.9",
"Connection": "keep-alive",
"Host": "m10.music.126.net",
"Range": "bytes=0-",
"Referer": "https://m10.music.126.net/20181127170556/ff68375e7e70bb7dcda8fcc6a572951b/ymusic/c7bc/455e/612c/0d891c5408be6d0af16c7fa64945de75.mp3",
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36"
}def download_musics(dir_,arcurl,filename):os.mkdir(os.path.join(dir_,filename))print("正在下载%s" %filename)size=0session=requests.Session()response=session.get(arcurl,headers=headers,stream=True)chunk_size=1025*400content_size=int(response.headers['content-length'])filepath=os.path.join(dir_,filename,filename+'.mp3')print(content_size)if response.status_code==206:with open(filepath,'wb') as file:for data in response.iter_content(chunk_size=chunk_size):file.write(data)size+=len(data)file.flush()print('下载进度:%.2f%%\n'%(float(size/content_size*100)))if size/content_size==1:print("complete download")else:print("连接异常")if __name__=="__main__":dir_="E:\python小爬虫\download_music"#这个网址会不停的变化,旧网址会失效arcurl="https://m10.music.126.net/20181127181327/8a4190b05a43e70fb543ad1b824a21a4/ymusic/c7bc/455e/612c/0d891c5408be6d0af16c7fa64945de75.mp3"filename="popstar"download_musics(dir_,arcurl,filename)
这里需要注意几点:
1、headers的值必须从后面打开的那个网页上的Network找,要么会导致请求的信息不完整。
2、每首歌曲的url是不同的,而且,随着时间的变化,同一首歌曲的url也会发生改变。所以在下载之前一定要再去看一次当前的url是什么。
运行结果
python爬虫----爬取网易云音乐相关推荐
- python网易云_用python爬虫爬取网易云音乐
标签: 使用python爬虫爬取网易云音乐 需要使用的模块 只需要requests模块和os模块即可 开始工作 先去网易云音乐网页版找一下你想要听的歌曲点击进去.按键盘F12打开网页调试工具,点击Ne ...
- python爬虫爬取网易云音乐歌曲_Python网易云音乐爬虫进阶篇
image.png 年前写过一篇爬网易云音乐评论的文章,爬不了多久又回被封,所以爬下来那么点根本做不了什么分析,后面就再改了下,加入了多线程,一次性爬一个歌手最热门50首歌曲的评论,算是进阶版了- 思 ...
- Python爬虫—爬取网易云音乐【热歌榜】歌曲的精彩评论(写入txt文本文件或者MySQL数据库)
最近在学Python爬虫,看了Blibili爬取网易云音乐评论的视频,视频中是将一首歌的评论存入json文件,我在此代码的基础上扩展了三点: 1.爬取热歌榜200首歌曲的精彩评论: ...
- python爬虫爬取网易云音乐下载_Python爬虫实践-网易云音乐!没有版权又如何!照样爬取!...
1.前言 最近,网易的音乐很多听不到了,刚好也看到很多教程,跟进学习了一下,也集大全了吧,本来想优化一下的,但是发现问题还是有点复杂,最后另辟捷径,提供了简单的方法啊! 本文主要参考 python编写 ...
- python爬虫爬取网易云音乐歌曲_如何用爬虫获取网易云音乐歌单中的歌曲?
--------------------------------- 泻药,以我抓取了307835首网易云音乐的歌单歌曲的经验,讲一下这个问题. 喜欢用Github的可以直接看我的项目源码,代码简单.具 ...
- python爬虫-爬取网易云音乐歌曲评论
本文借鉴了@平胸小仙女的知乎回复 https://www.zhihu.com/question/36081767 以及@lyrichu的博客 https://www.cnblogs.com/lyric ...
- python网络爬虫网易云音乐下载_python网络爬虫爬取网易云音乐
#爬取网易云音乐 url="https://music.163.com/discover/toplist" #歌单连接地址 url2 = 'http://music.163.com ...
- python爬取网易云歌单_详解python selenium 爬取网易云音乐歌单名
目标网站: 首先获取第一页的数据,这里关键要切换到iframe里 打印一下 获取剩下的页数,这里在点击下一页之前需要设置一个延迟,不然会报错. 结果: 一共37页,爬取完毕后关闭浏览器 完整代码: u ...
- python 批量爬取网易云音乐,java解密
每天一点点,记录学习 python 批量爬取网易云音乐 网易云音乐,排行榜,右键,显示网页源代码,并不能找到任何一首歌的id,是因为java加密了 随便找一首id为1374061038的歌,在网页源代 ...
最新文章
- 10.matlab中sort , min/max以及ceil 函数
- php 避免xss_PHP防止XSS注入
- SpringBoot报错 org.apache.catalina.LifecycleException: Protocol handler start failed
- jupyter notebook如何打开其他文件夹下的iqynb文件
- Html,css,is,php,mysql的学习顺序是什么?
- 云计算实战系列八(存储管理I)
- 修改tomcat的8080端口
- 深入理解for循环(执行顺序)
- 一文详解Attention机制
- mysql垂直分库_mysql垂直分库,水平分库,垂直分表,水平分表
- Python脚本实现对Linux服务器CPU、内存、磁盘空间以及负载情况的监测
- 查看电脑ip地址、查看手机ip地址、根据域名查看ip地址
- ES已经安装了ik分词器,仍然报错analyzer [ik_max_word] not found for field
- java jsp实现网站访问量的统计
- 移远EC200T模块应用移植
- 忘记Hololens开机密码,重置系统
- 怎么把文字转换成语音?教你几个方法,超级简单
- MATLAB实现手机重力加速度去除
- 使用Python编写简单的小程序、成绩计算器
- 命令行装android idk