各位港版有遇到打开网易云音乐听歌后不会自动熄屏，有办法解决吗

最近在知乎上看到一个话题说使用爬虫技术获取网易云音乐上的歌曲，甚至还包括付费的歌曲哥瞬间心动了，这年头好听的流行音乐或者经典老歌都开始收费了，呮能听不能下载着实很郁闷，现在机会来了于是开始研究爬虫技术，翻阅各种资料最终选择网友们一致认为比较好用的webcollector框架来实现。

那么我的爬虫则只会抓取////域名下日期的.html结尾的链接

• 表示启动爬虫，传入参数5表示抓取5层（深度为5）这个深度为5怎么理解呢，当只添加了一个种子, 抓这个种子链接为第1层, 解析种子链接页面跟据正则过滤想要的链接保存至待抓取记录. 那么第2层就是抓取1层保存的记录并解析保存新记录,依次类推

至此，我们已经对webcollector有了一个大致的了解更深入的理论知识我们就不再往下追究，毕竟高端的东西是需要更恒久的毅力和耐心去不断挖掘的而目前我们只需要掌握简单的应用即可实现一个爬虫。

OK那我们先来分析一下我们此次的需求，我们要使用webcollector爬蟲技术获取网易云音乐全部歌曲我们先来看下一个网易云音乐的歌曲页面链接：/#/album?id=2884361，我们会发现这个链接后面带有参数传不同的id，可以嘚到不同的歌曲所以，这就是一个模版我们可以遍历整个网易云音乐，把其中url与上面类似的网页提取出来就可以得到网易云音乐的所囿歌曲了对吧？

那么第二个问题，我们如何获取音乐的真实地址呢这个通常是要用到抓包工具的，通过抓包工具获取HTTP请求下的头信息从而得到请求的真实路径，我们通过抓包分析得到网易云音乐有一个api接口可以得到歌曲的真实地址，api地址:/api/song/detail我们发现这个接口有几個参数：

• id 传入上面得到的歌曲的id

• // 设置采集规则为所有类型的网页 // 设置爬取URL数量的上限