15行Python代码搞定网易云热门歌单

StonePanda 发布于2019-07-31 10:08 / 1974人阅读

摘要：引言马上情人节就要来了，是否需要一首歌来抚慰你，受伤或躁动的心灵。来吧，今天教你用行代码搞定热门歌单。爬取的效果如下总结本文旨在安抚你因情人节受伤的小心灵，同时带你入个爬虫的门，感受下的强大。

0. 引言

马上314情人节就要来了，是否需要一首歌来抚慰你，受伤或躁动的心灵。来吧，今天教你用15行代码搞定热门歌单。学起来并听起来吧。

本文使用的是Selenium模块，它是一个自动化测试工具，利用它我们可以驱动浏览器执行特定的动作，如点击、下拉等等操作，对于一些 JavaScript 渲染的页面来说，此种抓取方式非常有效。另外采用了Chrome浏览器配合Selenium工作。

1. 环境

操作系统：Windows

Python版本：3.7.2

2. 准备工作

a. 若你的环境中没有selenium模块，直接使用pip安装即可。

pip install selenium

b. 打开谷歌浏览器，检查Chrome的版本：在浏览器地址中输入 chrome://settings/help 回车即可看到。

c. 打开ChromeDriver 的官方网站：
https://sites.google.com/a/ch...
寻找与你当前浏览器版本相对应的ChromeDriver下载。

d. 选择你自己的操作系统类型进行下载即可。

e. 以Windows为例，下载结束后，将ChromeDriver 放置在python安装目录下的Scripts文件夹即可。

准备工作完成，代码写起来吧~

3. 迷你爬虫的实现

我们这次的目标是爬取热门歌单，比如网易云音乐中播放量大于1000万的歌单信息（歌单名称、链接）。

a. 我们先来打开网易云的歌单第一页：
https://music.163.com/#/disco...

b. 使用Chrome的开发者工具进行分析。

我们想要拿的信息全在这里：

msk,封面[mask]：有歌单的名称及链接

nb,播放数[number broadcast]：135万

c. 我们还需要遍历所有的页，使用工具继续分析，找到“下一页”的URL。

d. 切换至最后一页，拿到最后一页的URL。

e. 等我们爬取完所有符合的歌单信息后，将其保存在本地。

f. 全部工作结束，最后再通过下面的伪代码回顾下整体思路。

g. 爬取的效果如下：

4. 总结

本文旨在安抚你因情人节受伤的小心灵，同时带你入个爬虫的门，感受下python的强大。

关注公众号「Python专栏」，后台回复：zsxq02，获取本文全部代码

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/43321.html

用Vue搭建一个应用盒子（三）：音乐播放器

摘要：组件结构接着我们就该搭建这个播放器的组件了。总的原理是首先获取音频的持续时间，然后通过一个定时器，不断更新显示时间，播放完成时，计时器停止。这个页面比较简单，播放器标签，绑定了事件，即播放完成后执行。这个播放器的开发历时2个多月，并不是说它有多复杂，相反它的功能还非常不完善，仅具雏形。之所以磨磨蹭蹭这么久，一是因为拖延，二也是实习公司项目太紧。8月底结束实习前写完了样式，之后在家空闲...

appetizerio 2019-08-26 11:33 评论0 收藏0
Python 从零开始爬虫(七)——实战：网易云音乐评论爬取（附加密算法）

摘要：通常这种加密都是通过加密的，所以首先要找到这个有加密算法的。追踪函数，发现它指向一个叫的函数，仔细研究许久后大概知道加密算法经两次加密获得，模式为，偏移量为。前言某宝评论区已经成功爬取了，jd的也是差不多的方法，说实话也没什么好玩的，我是看上它们分析简单，又没加密才拿来试手的。如果真的要看些有趣的评论的话，我会选择网易云音乐，里面汇聚了哲学家，小说家，story-teller，皮皮...

plus2047 2019-07-30 16:36 评论0 收藏0
Vue.js全家桶高还原网易云音乐(Windows PC版)

摘要：项目地址由于网易云的限制，部分功能可能会失效，如有需要可以项目下来在本地运行，如果炸了，麻烦在评论中告知一下我因为做的是端所以请在电脑端访问源码地址项目预览评论和歌单详情都封了我的暂时无法使用这两个功能了项目描述前端部分实现了滑块弹出层歌词项目地址由于网易云的api限制，部分功能可能会失效，如有需要可以clone项目下来在本地运行，如果api炸了，麻烦在评论中告知一下我因为做的...

sf_wangchong 2019-08-20 16:19 评论0 收藏0
Vue 实现网易云音乐 WebApp

摘要：基于等开发一款移动端音乐，界面参考了安卓版的网易云音乐布局适配常见移动端。图标使用阿里巴巴图标库，中间的唱片旋转动画使用了实现。搜索功能实现功能搜索歌手歌单歌曲热门搜索数据节流上拉刷新保存搜索记录。基于 Vue(2.5) + vuex + vue-router + vue-axios +better-scroll + Scss + ES6 等开发一款移动端音乐 WebApp，UI ...

Karuru 2019-08-22 17:16 评论0 收藏0