利用jupyter爬取网易云音乐华语歌曲信息

最新推荐文章于 2022-08-02 05:55:03 发布
最新推荐文章于 2022-08-02 05:55:03 发布
阅读量1k 收藏 4
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_51322574/article/details/118659063
版权
本文介绍了如何利用Python的selenium库爬取网易云音乐华语歌曲的详细信息，包括歌曲名、歌手、专辑等，并将数据存储到Excel文件中。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1.导selenium包

from selenium import webdriver

2.进入谷歌

browser = webdriver.Chrome()

3.点击事件进入网页

browser.get('https://music.163.com/#/playlist?id=5172410111')

4.browser.switch_to.frame('g_iframe')

5.ul = browser.find_elements_by_id('m-pl-container')

6.li_list = ul[0].find_elements_by_tag_name('li')

7.url_list=[]
for li in li_list:
    a = li.find_element_by_class_name('msk')
    href = a.get_attribute('href')
    url_list.append(href)

8.爬取各个信息

sheetlist=[]
for url in url_list:
    zlist=[]
    browser.get(url)
    browser.switch_to.frame('g_iframe')
    sheetname = browser.find_element_by_class_name('f-ff2').text
    tbody = browser.find_element_by_tag_name('tbody')
    tr = tbody.find_elements_by_tag_name('tr')

最低0.47元/天 解锁文章
糖糖不甜_
关注
python爬取网易云音乐飙升榜音乐,网易云音乐-飙升榜歌曲信息爬取
weixin_35032509的博客
03-26 2352
此方法仅用于学习，请勿他用，造成爬取对象服务器压力【目标】爬取网易云音乐榜单歌曲，返回 ['歌曲名','歌曲id','歌曲链接','榜单排名','歌曲信息(歌词，作词，编曲，歌手)','歌曲时长']image.png给出完整脚本及一些关键点的分析(个人拙见，若理解有误，请予以指正，谢谢)1. 引入需要用到的库，并设置请求头Header及文件存储路径import jsonimport reimpo...
爬虫训练（三）：爬取酷狗音乐
weixin_43916181的博客
04-06 2323
今天趁机一鼓作气，把简单爬虫内容一次学习完毕，最后以爬取酷狗音乐排行榜歌曲作为结束，然后对此次学习做一个整理和总结。而且前两篇有些混乱，这里把内容做一次阶段性总结。 一、安装包 爬虫三大包：requests、lxml、BeautifulSoup，根据自己的python配置情况进行安装，这里不再赘述。 二、爬虫简单尝试——爬取整个网页内容 1.请求头的查找 具体参考文章：爬虫训练：第一次真好~ 2....
<44>python学习笔记——读写csv文件
xiexiecm的博客
04-28 1823
1.爬取的是http://www.xicidaili.com/wn/ 2.需要用的的是www.tmall.com，所以原理是用代理Ip访问www.tmall.com，如果返回状态为200，表示此代理可用，保存起来
【Python实战】爬取网易云音乐用户听歌排行，来制作一张Ta最爱歌手的词云图
u010890916的博客
06-21 8044
前言 大家好，我是Samaritan。 平时写代码的时候，作为云村用户的一员，我当然也是最爱开着网易云音乐（以下简称网易云）。 大家都知道在网易云里你可以查看好友或是任意用户的听歌排行（假使Ta设置全部可见），但是如果想知道Ta喜欢哪些歌手，其中又有哪几个是Ta的最爱呢？很可惜，网易云并没有直接提供信息。 如果不会编程编程，你将怎么做？ 一、网易云和词云 想知道Ta在网易云所有时间喜爱和最爱的歌手，逻辑上讲： 你可以基于Ta的所有时间听歌排行，手动记录他排行中前100首听得最多的歌曲的歌手/音乐人（以下统称
python爬取网易云音乐排行榜数据
weixin_47176703的博客
12-23 8676
python 网易云音乐爬虫 一、selenium 模拟登录 二、排行榜歌曲数据爬取 三、评论翻页爬取
网易云数据分析实战
qq_44760912的博客
12-21 5280
网易云数据分析 字段：title,tag,text,collection,play,songs,comments 导入模块，读取数据 import pandas as pd import numpy as np import matplotlib.pyplot as plt import squarify df = pd.read_excel('D:/Pandas/music_message.xlsx',header=0,names=['title','tag','text','collection','
Python爬虫小白入门经典之爬取网上音乐
zhulin1028的博客
11-03 3万+
Python爬虫小白入门经典之爬取网上音乐 前言：在知识付费的时代，免费听音乐已经成了历史，但是随着时代的发展，技术宅男依旧可以获取免费音乐资源，下面我就来教你如何免费获取网络免费音乐资源。部分方法来源于网络，若侵权请告知删除。 如果你想小白变大神，请学习我给你分享的资料，另外，想要获取Python免费资料，请关注公众号：“zhulin1028”；回复“python1"、“python2”、“python3”，即可免费获取。更有很多面试资料供你获取。 1.需要的Python模块 实现这个过程的主要模块有r
Music_recommendation:此推荐系统类似网易云音乐推荐歌单以及推荐相似歌曲
03-11
音乐推荐系统 语言：python3.5 库：惊喜 平台：jupyter笔记本 描述：此推荐系统类似网易云音乐推荐歌单以及推荐相似歌曲。 1.数据获取 使用爬虫爬取了网易云音乐中80w首歌400w +次收藏的歌单，存储格式为json格式，数据大小为3.59G，格式说明如下： 1）每个歌单的格式 { "result": { "id": 111450065, "status": 0, "commentThreadId": "A_PL_0_111450065", "trackCount": 120, "updateTime": 1460164523907, "commentCount": 227, "ordered": true, "anonimous": fa
webdriver.Chrome参数解释
qq_43577241的博客
02-24 2万+
通过源码看解释 最直接最不讲道理的方式就是看源码，使用之前一定要学会看说明书。 打算使用jupyter演示的，但是jupyter不支持看源码，所以使用Pycharm吧。 from selenium import webdriver Broswer = webdriver.Chrome(executable_path="chromedriver", port=0, ...
python 在网易云搜索歌曲，得到歌曲ID，歌名等信息，可自行下载！
行者刘6
05-13 6792
    import requests,os,json,base64 from scrapy.selector import Selector from binascii import hexlify from Crypto.Cipher import AES class Encrypyed(): '''传入歌曲的ID，加密生成'params'、'encSecKey 返回''' ...
网易云api
qq_31889029的博客
11-24 6898
简单介绍一下它们： 评论 http://music.163.com/api/v1/resource/comments/R_SO_4_{歌曲ID}?limit=20&offset=0这应该是最最最常见的了，毕竟80%的网易云音乐的爬虫/数据分析文章都是关于评论数据~ 使用技巧： limit：返回数据条数(每页获取的数量)，默认为20，可以自行更改 offset：偏移量(翻页)，offset需要是limit的倍数 type：搜索的类型 举例，比如limit设置为10，则第一页，第二页分别.
Python网易云音乐爬虫大数据分析可视化系统——大屏数据可视化开发之路
一直在水些技术小文
08-02 7122
现在比较流行的大数据数据可视化都是大屏，有钱的人会使用阿里云全家桶的DataV或者商业化的大屏解决方案，但是在国内还是小公司比较多，本人50年大数据开发经验，精通数据可视化，曾经处理过百万亿级别的数据，现在就让我带领大家做一个开源的大数据可视化系统吧，爬虫部分我们用python开发好大一棵二叉树黄昏，暮霭漫漫谁在寂寞的遍历树上每一个结点？你从无边的代码中抬起头夜色，瞬间淹没了每一字节春的芬芳夏的清香秋的艳阳冬的晨霜是岁月编译了你的芳华还是，你打包压缩了岁月的流淌？昼夜https。...
Python爬虫实战(一) QQ音乐评论爬取及可视化分析
shine4869的博客
01-16 1万+
说好不哭呢？python爬取5000条QQ音乐评论并进行数据分析 爬虫也快学了一个月了，今天就来分享一下QQ音乐的实战例子吧。以周董的《说好不哭》为例： 首先打开QQ音乐，搜索说好不哭。找到评论区后，使用谷歌浏览器的检查功能，发现评论区的内容是被封装在json中的，如下图所示： 新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如...
Scrapy爬虫+Selenium自动获取cookie爬取网易云音乐个人喜爱歌单
我不是秃头的博客
01-30 7470
此货很干,跟上脚步!!! Cookie cookie是什么东西? 小饼干?能吃吗? 简单来说就是你第一次用账号密码访问服务器 服务器在你本机硬盘上设置一个身份识别的会员卡(cookie) 下次再去访问的时候只要亮一下你的卡片(cookie) 服务器就会知道是你来了,因为你的账号密码等信息已经刻在了会员卡上 需求分析 爬虫要访问一些私人的数据就需要用cookie进行伪装 想要得到cookie就得先登录,爬虫可以通过表单请求将账号密码提交上去 但是在火狐的F12截取到的数据就是, 网易云音乐先将你的账号密码给编
Python采集网易云音乐
Python_sn的博客
10-28 1936
  大家好，我是不温卜火，是一名计算机学院大数据专业大三的学生，昵称来源于成语—不温不火，本意是希望自己性情温和。作为一名互联网行业的小白，博主写博客一方面是为了记录自己的学习过程，另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限，博客中难免会有一些错误出现，有纰漏之处恳请各位大佬不吝赐教！暂时只在csdn这一个平台进行更新，博客主页：https://buwenbuhuo.blog.csdn.net/。 PS：由于现在越来越多的人未经本人同意直接爬取博主本人.
视频教程-Python爬虫视频教程：教你爬取QQ音乐数据（实战处理+数据可视化）-Python
weixin_31170723的博客
05-28 1307
Python爬虫视频教程：教你爬取QQ音乐数据（实战处理+数据可视化） 《P...
selenium匹配不到元素，容易被忽略的问题，iframe的操作
热爱编程并专注于Python
02-20 314
有可能元素或标签被iframe包裹着 解决方法 # 先切换到这个iframe再进行匹配 browser.switch_to.frame('iframe_id') # 无id和name先定位iframe标签,再切换到iframe iframe = driver.find_elements_by_tag_name("iframe")[0] browser.switch_to.frame(iframe) # 之后正常匹配就可以了 browser.find_element_by_id('cardid').sen
selenium之 定位以及切换frame（iframe）
热门推荐
灰蓝
08-13 19万+
很多人在用selenium定位页面元素的时候会遇到定位不到的问题，明明元素就在那儿，用firebug也可以看到，就是定位不到，这种情况很有可能是frame在搞鬼（原因之一，改天专门说说定位不到元素，可能的一些原因及处理办法）。frame标签有frameset、frame、iframe三种，frameset跟其他普通标签没有区别，不会影响到正常的定位，而frame与iframe对selenium定位而
python爬虫获取网易云音乐歌单
Walker_xjh的博客
08-12 4652
代码如下： from bs4 import BeautifulSoup import requests import time headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36' } for i in range(0, 1330, 35): print(i) .
爬取网易云音乐华语女歌手，调用requests库使用get方法发送HTTP请求，设置超时时间为2，使用Xpath解析页面。
最新发布
12-07
爬取网易云音乐华语女歌手的步骤如下： 1. **安装必要的库**：确保你已经安装了`requests`和`lxml`库。如果没有安装，可以使用以下命令进行安装： ```bash pip install requests lxml ``` 2. **导入库**： ```python import requests from lxml import etree ``` 3. **设置请求参数**： ```python url = 'https://music.163.com/discover/artist/cat?id=1001' # 网易云音乐华语女歌手页面 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/112.0.0.0 Safari/537.36' } timeout = 2 # 设置超时时间为2秒 ``` 4. **发送HTTP请求**： ```python response = requests.get(url, headers=headers, timeout=timeout) ``` 5. **解析页面内容**： ```python html = etree.HTML(response.text) artists = html.xpath('//ul[@id="m-artist-box"]/li/div/a/text()') ``` 6. **输出结果**： ```python for artist in artists: print(artist.strip()) ``` 完整的代码如下： ```python import requests from lxml import etree url = 'https://music.163.com/discover/artist/cat?id=1001' # 网易云音乐华语女歌手页面 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/112.0.0.0 Safari/537.36' } timeout = 2 # 设置超时时间为2秒 try: response = requests.get(url, headers=headers, timeout=timeout) response.raise_for_status() # 检查请求是否成功 response.encoding = response.apparent_encoding html = etree.HTML(response.text) artists = html.xpath('//ul[@id="m-artist-box"]/li/div/a/text()') for artist in artists: print(artist.strip()) except requests.RequestException as e: print(f"请求错误: {e}") except etree.XMLSyntaxError as e: print(f"解析错误: {e}") ```
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值