python爬取酷狗音乐top500及歌词_爬取酷狗音乐Top500(示例代码)

最新推荐文章于 2023-08-31 11:04:55 发布
最新推荐文章于 2023-08-31 11:04:55 发布
阅读量1k 收藏 3
点赞数
文章标签： python爬取酷狗音乐top500及歌词
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39562327/article/details/111453208
版权

开发环境：windows环境+python3+requests库(请求)+BeautifulSoup库(解析)

目标:爬取酷狗音乐Top500并保存到txt中

整个案例源代码：

#导入程序需要的库，requests库用于请求获取网页，BeautifulSoup库用于解析网页数据，time库、random库用于随机延时

import requests

from bs4 import BeautifulSoup

import time

import random

from multiprocessing import Pool

#请求头，伪装浏览器，加强爬虫的稳定性

headers = {

‘User-Agent‘:‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.87 Safari/537.36‘

}

#创建一个列表用于接收数据

data_lists = []

#定义爬取数据的函数

def get_info(url):

global time

wb_data = requests.get(url,headers = headers)

soup = BeautifulSoup(wb_data.text,‘lxml‘)

ranks = soup.select(‘span.pc_temp_num ‘)

titles = soup.select(‘div.pc_temp_songlist > ul >

最低0.47元/天 解锁文章
weixin_39562327
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python爬虫之爬取动态页面数据
Mi1k7ea
11-01 3万+
很多网站通常会用到Ajax和动态HTML技术，因而只是使用基于静态页面爬取的方法是行不通的。对于动态网站信息的爬取需要使用另外的一些方法。 先看看如何分辨网站时静态的还是动态的，正常而言含有“查看更多”字样或者打开网站时下拉才会加载内容出来的进本都是动态的，简便的方法就是在浏览器中查看页面相应的内容、当在查看页面源代码时找不到该内容时就可以确定该页面使用了动态技术。 对于动态页面信息的爬取，一
Python爬虫（一）-----酷狗Top500的数据
zhao99888的博客
09-23 2341
python入门
Java爬取并下载酷狗TOP500歌曲
我的博客
04-29 964
下文方法及代码仅供学习使用，不做他用。示例用到了一些库，包括：jsoup、HttpClient、net.sf.json大家可以自行去下载jar包。 1.分析是否能获得TOP500歌单 首先，打开酷狗首页查看酷狗TOP500，说好的500首，怎么就只有22首呢？ 是真的只让看这些还是能找到其余的呢，于是我就看了下这TOP500的链接 https://www.kugou.com/yy/rank/h...
python 播放本地音乐_python播音乐_python放音乐_python本地音乐播放器 - 云+社区 - 腾讯云...
weixin_39646688的博客
11-29 468
广告关闭腾讯云11.11云上盛惠 ，精选热门产品助力上云，云服务器首年88元起，买的越多返的越多，最高返5000元！转自：http:my.oschina.netlenglingxblog183101 下面是播放音乐的实例，只有3句话就行。 pygame.mixer.init() pygame.mixer初始化，用了这个就不要和pygame.init()同时使用，同时使用时无法播放# -*- cod...
python爬去音乐_python爬去音乐
weixin_39753584的博客
11-29 361
广告关闭腾讯云11.11云上盛惠 ，精选热门产品助力上云，云服务器首年88元起，买的越多返的越多，最高返5000元！本文为大家分享了python爬取酷狗音乐排行榜的具体代码，供大家参考，具体内容如下?...entry 输入控件：用于显示简单的文本内容label 标签控件listbox 列表框控件，显示字符串返回给用户text 文本控件，显示多行文本软件目标开发一款音乐下载器通过爬虫获取音乐解析网上...
【python爬虫】5.爬虫实操（歌词爬取）
热门推荐
qq_41308872的博客
08-31 1万+
在这篇文章中，我们探讨了网络及其应用。首先，我们解释了网络是什么以及如何使用它来传输数据和连接世界。然后，我们介绍了XHR（XMLHttpRequest），它是一种用于在Web应用中进行异步数据交换的技术。我们深入研究了XHR的请求过程，包括发送请求和接收响应等步骤。最后，我们探讨了JSON（JavaScript Object Notation）的概念，并提供了解析JSON数据的方法。通过本文，您将对网络、XHR和JSON有更全面的了解。
爬虫【网页构造+第三方库+爬取逻辑示例+正则表达式+xpath+多进程】
zico_a的博客
04-01 690
构造url网页链接常用字符串处理 str.split('.')#不添加默认按空格tab分割'www.baidu.com'-->'www','baidu','com' str.replace('要修改的','要用来替代的') str.strip()#去掉前后端(两侧)空格 '{提取的格式化内容}str'.format('选项')#常用在连接最后的搜索内容'https://www.pexels....
Python-《转载-Github上的python开源项目》
CSDN博客
04-22 4078
Python开源项目，期待大家和我们一起共同维护 github排名榜单https://github.com/trending github搜索榜单：https://github.com/search 说明 以下总结大部分来至于 [TimLiu-Python] (https://github.com/Tim9Liu9/TimLiu-Python) ，欢迎大家查看原版 Feedback 期...
《转载-Github上的python开源项目》
weixin_43564373的博客
11-13 7858
Python开源项目，期待大家和我们一起共同维护 github排名榜单 https://github.com/trending github搜索榜单：https://github.com/search 说明 以下总结大部分来至于 [TimLiu-Python] (https://github.com/Tim9Liu9/TimLiu-Python) ，欢迎大家查看原版 Feedback 期...
Python实现 酷狗音乐网站爬取 代码
06-30
import requests from bs4 import BeautifulSoup import time # from pip._vendor.distro import like headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36' ...
scrapy 爬取酷狗T500音乐
04-25
在本项目中，我们利用Scrapy来爬取酷狗T500音乐平台上的音乐信息，这包括但不限于歌曲名称、歌手、专辑、歌词以及链接等。这些数据对于音乐爱好者或者数据分析者来说具有很高的价值。 首先，我们需要创建一个Scrapy...
python3 实现爬取TOP500的音乐信息并存储到mongoDB数据库中
01-20
爬取TOP500的音乐信息，包括排名情况、歌曲名、歌曲时间。 网页版酷狗不能手动翻页进行下一步的浏览，仔细观察第一页的URL： http://www.kugou.com/yy/rank/home/1-8888.html 这里尝试将1改为2，再进行浏览，恰好是...
利用python爬取豆瓣音乐TOP250的数据----最终结果生成一个music.csv文件
08-24
利用python爬取豆瓣音乐TOP250的数据----最终结果生成一个music.csv文件，里面包含247首歌曲的名称作者发行。如果有按照代码就不会出现空行和乱码的现象。
利用python爬取豆瓣音乐TOP250的数据----爬取的247首歌曲的网址
08-23
需要说明的是，豆瓣页面上第4、5、6页只有24首（不是25首），...不是爬虫代码有问题，是豆瓣页面上就只有247条数据。 通过函数get_music_info()可以获取所有的网页，通过写入TXT文本文档中，可以直观看到有多少内容。
qt练习控件label控件-lineEdit控件样例代码
最新发布
07-30
qt练习控件label控件-lineEdit控件样例代码
【JCR一区级】麻雀搜索算法SSA-CNN-LSTM-Attention故障诊断分类预测【含源码 5689期】.zip
07-30
CSDN海神之光上传的全部代码均可运行，亲测可用，直接替换数据即可，适合小白； 1、代码压缩包内容 主函数：Main .m； 数据； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，可私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开除Main.m的其他m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描博主博客文章底部QQ名片； 4.1 CSDN博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作 智能优化算法-CNN-LSTM-Attention分类系列程序定制或科研合作方向： 4.4.1 遗传算法GA/蚁群算法ACO-CNN-LSTM-Attention分类 4.4.2 粒子群算法PSO/蛙跳算法SFLA-CNN-LSTM-Attention分类 4.4.3 灰狼算法GWO/狼群算法WPA-CNN-LSTM-Attention分类 4.4.4 鲸鱼算法WOA/麻雀算法SSA-CNN-LSTM-Attention分类 4.4.5 萤火虫算法FA/差分算法DE-CNN-LSTM-Attention分类
详解MATLAB Simulink通信系统建模与仿真
07-30
第1 章 MATLAB 基础与通信系统仿真 1.1 MATLAB 简介 1.2 MATLAB 程序设计 1.3 通信系统仿真 第2 章 Simulink 仿真基础 2.1 Simulink 简介 2.2 Simulink 工作环境 2.3 Simulink 仿真的基本方法 2.4 创建自己的模块库 2.5 S-函数的编写 第3 章 通信信号与系统分析 3.1 离散信号和系统 3.2 Fourier 分析 3.3 带通信号的低通等效 3.4 随机信号分析 第4 章 信道 4.1 加性高斯白噪声信道 4.2 多径衰落信道 第5 章 模拟调制 5.1 幅度调制 5.2 角度调制 第6 章 数字基带传输 6.1 概述 6.2 二进制基带信号传输 6.3 基带PAM 信号传输 6.4 带限信道的信号传输 第7 章 数字信号载波传输 7.1 概述 7.2 载波幅度调制（PAM） 7.3 载波相位调制（PSK） 7.4 正交幅度调制（QAM） 7.5 载波频率调制（FSK） 第8 章 信道编码和交织 8.1 概述 8.2 线性分组码
SCI一区】淘金算法GRO-CNN-BiLSTM-Mutilhead-Attention多变量时序预测含源码 5642.zip
07-30
CSDN海神之光上传的全部代码均可运行，亲测可用，直接替换数据即可，适合小白； 1、代码压缩包内容 主函数：Main .m； 数据； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，可私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开除Main.m的其他m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描博主博客文章底部QQ名片； 4.1 CSDN博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作 智能优化算法-CNN-BiLSTM-Mutilhead-Attention回归预测系列程序定制或科研合作方向： 4.4.1 遗传算法GA/蚁群算法ACO-CNN-BiLSTM-Mutilhead-Attention回归预测 4.4.2 粒子群算法PSO/蛙跳算法SFLA-CNN-BiLSTM-Mutilhead-Attention回归预测 4.4.3 灰狼算法GWO/狼群算法WPA-CNN-BiLSTM-Mutilhead-Attention回归预测 4.4.4 鲸鱼算法WOA/麻雀算法SSA-CNN-BiLSTM-Mutilhead-Attention回归预测 4.4.5 萤火虫算法FA/差分算法DE-CNN-BiLSTM-Mutilhead-Attention回归预测
python爬取酷狗音乐top500
06-28
### 回答1： 首先需要确定爬取的目标页面，然后使用Python中的网络爬虫库如Requests和BeautifulSoup来获取网页信息并进行解析。具体步骤包括: 1. 发起HTTP请求获取网页源代码 2. 使用BeautifulSoup解析网页源代码并提取出所需信息 3. 将提取的信息存储到文件或数据库中 需要注意的是，爬取音乐网站的数据可能会违反其网站的条款，请确保爬取的合法性。 ### 回答2： Python可以使用第三方库requests和BeautifulSoup模块来爬取网页信息。 首先，我们需要先安装requests和BeautifulSoup模块。可以在终端中使用以下命令安装： ``` pip install requests pip install BeautifulSoup ``` 接着，我们需要了解酷狗音乐top500的网页结构，可以打开酷狗音乐top500的页面（https://www.kugou.com/yy/rank/home/1-8888.html），在页面右键选择“查看网页源代码”，查看网页结构。 通过观察网页源代码，我们可以发现每个歌曲都被包含在一个li标签中，并且每个li标签都包含了歌曲的名字、演唱者、排名等信息。因此，我们可以通过BeautifulSoup模块来获取每个li标签中的信息。 下面是一个Python程序，可以实现爬取酷狗音乐top500并将歌曲名字、演唱者以及排名信息存储到一个txt文件中： ```python import requests from bs4 import BeautifulSoup url = 'https://www.kugou.com/yy/rank/home/1-8888.html' html = requests.get(url).text soup = BeautifulSoup(html, 'html.parser') # 获取歌曲信息 song_list = [] for li in soup.select('.pc_temp_songlist > ul > li'): rank = li.select('.pc_temp_num')[0].get_text().strip() song_name = li.select('.pc_temp_songname > a')[0].get_text().strip() singer = li.select('.pc_temp_songname > span > a')[0].get_text().strip() song_list.append(rank + ' ' + song_name + ' - ' + singer) # 将歌曲信息写入txt文件 with open('kugou_music_top500.txt', 'w', encoding='utf-8') as f: f.write('\n'.join(song_list)) ``` 代码解释： 1. 使用requests库获取网页的html代码。 2. 使用BeautifulSoup将html代码解析成soup对象。 3. 通过查看网页源代码，找到包含歌曲信息的li标签，并通过select方法获取li标签。 4. 对于每个li标签，通过select方法获取他们的排名、歌曲名字以及演唱者，并存储到song_list列表中。 5. 使用open函数创建一个txt文件，并将song_list列表中的歌曲信息写入txt文件。 最后，运行程序，就可以得到一个包含酷狗音乐top500歌曲的txt文件。 ### 回答3： 要实现Python爬取酷狗音乐Top500，需要进行以下步骤： 1. 分析目标网站并获取URL 首先，我们需要打开浏览器访问 https://www.kugou.com/yy/rank/home/1-8888.html，并找到想要爬取的信息。在这个示例中，我们想要获取酷狗音乐Top500歌曲的信息。我们需要使用开发者工具（Inspect）来查找这些信息的位置。在这个示例中，我们可以在音乐列表下使用开发者工具，找到页面源代码中的歌曲排名信息。 第二步是获取URL。我们需要提取出所有酷狗音乐Top500的URL，以便我们可以访问每个页面上的音乐信息。我们可以使用Python的requests库来获取每个页面。 2. 解析HTML页面 一旦我们访问了每个页面，我们需要解析HTML页面来获取音乐信息。在这个示例中，我们使用Python的BeautifulSoup库来解析HTML。我们可以使用find()函数找到每个页面上的歌曲信息。 3. 存储音乐信息 一旦我们解析了每个HTML页面，我们可以将它们的信息存储在一个CSV文件中。CSV是一种常用的数据存储格式，可以轻松地导入到Excel或其他电子表格程序中。 4. 编写Python脚本 编写Python脚本来实现这个功能。以下是一个代码示例，用于Python实现酷狗音乐Top500爬虫： ``` import requests from bs4 import BeautifulSoup import csv def get_html(url): r = requests.get(url) return r.text def get_data(html): soup = BeautifulSoup(html, 'lxml') songs_list = soup.find('div', class_='pc_temp_songlist').find_all('tr', class_='js_song') for song in songs_list: song_num = song.find('span', class_='pc_temp_num').text.strip() song_name = song.find('a', class_='pc_temp_songname').text.strip() song_singer = song.find('a', class_='pc_temp_singer').text.strip() song_album = song.find('a', class_='pc_temp_album').text.strip() song_time = song.find('span', class_='pc_temp_time').text.strip() print(song_num, song_name, song_singer, song_album, song_time) write_csv(song_num, song_name, song_singer, song_album, song_time) def write_csv(song_num, song_name, song_singer, song_album, song_time): with open('kugou.csv', 'a', newline='', encoding='utf-8') as f: writer = csv.writer(f) writer.writerow((song_num, song_name, song_singer, song_album, song_time)) def main(): url = 'https://www.kugou.com/yy/rank/home/1-8888.html?from=rank' html = get_html(url) get_data(html) if __name__ == '__main__': main() ``` 这个脚本将酷狗音乐Top500的歌曲信息写入CSV文件中。我们使用requests和BeautifulSoup库来访问和解析每个页面，然后使用CSV库将每个歌曲的信息写入文件。 5. 运行脚本 现在，我们可以运行脚本来获取酷狗音乐Top500的歌曲。只需要运行Python解释器，输入脚本名称，然后按回车键即可。在Windows中，你可以运行Python命令提示符并输入“python kugou.py”(名为kugou.py的Python脚本)。在Mac和Linux系统中，你可以在命令终端中输入相同的命令。脚本执行时间将取决于所需的页面数量。完成后，你将获得一个CSV文件，其中包含酷狗音乐Top500的所有歌曲信息。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值