Python爬虫学习记录（1）——Xiami全站播放数

最新推荐文章于 2020-12-06 09:55:21 发布
最新推荐文章于 2020-12-06 09:55:21 发布
阅读量2.6w 收藏 2
点赞数
分类专栏： python 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cwyalpha/article/details/48110727
版权

本博客转移自 hi.baidu.com/cwyalpha

记录了研究生期间从0开始学python的历程。最开始是想听歌，因此去找虾米上播放数比较多的歌，就爬了全站。虾米对爬虫还是比较友好的，大概一晚上能爬完全站的播放数，顺便根据这个做了下精选集。


做成精选集了~

http://www.xiami.com/song/showcollect/id/274726

http://www.xiami.com/song/showcollect/id/7254918

http://www.xiami.com/song/showcollect/id/7254966

http://www.xiami.com/song/showcollect/id/7255006

cwyalpha
关注
专栏目录
Python网络爬虫与信息提取（12）—— 爬虫批量搜索音乐并下载模拟request请求
qq_37668436的博客
05-30 388
前言 之前模拟的是登陆浏览器获取url爬取音乐地址下载，同学改了个模拟request请求的获取下载地址，效果好多了。 代码 import requests import json import sys import re class MusicSpiwer: def __init__(self, music, direction="D://KuGou//"): self.music = music self.direction = direction
python爬虫篇，零基础学爬虫之精华版
Python_sn的博客
01-04 1206
爬虫简介 网络爬虫 爬虫指在使用程序模拟浏览器向服务端发出网络请求，以便获取服务端返回的内容。 但这些内容可能涉及到一些机密信息，所以爬虫领域目前来讲是属于灰色领域，切勿违法犯罪。 很多人学习python，不知道从何学起。 很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。 很多已经做案例的人，却不知道如何去学习更加高深的知识。 那么针对这三类人，我给大家提供一个好的学习平台，免费领取视频教程，电子书籍，以及课程的源代码！??¤QQ群：232030553 爬虫本身作为一门技术没
python学习记录1
zxm425的博客
06-08 432
记：先mark一下，希望自己可以坚持的学习python下去，大学毕业一直在从事运维的工作，快5年了，也不知道自己学了些啥东西，感觉挺自卑的，几乎还是啥都不懂，或者不深入，所以就立帖，开始通过博客这种古老的方式来记录学习的过程和遇到的问题，先从python的学习开始吧。 欢迎大家推荐好的书籍资料，或者多多指点我这个菜鸟，先谢过。 参考的学习资料：a byte of python3
用Python爬取用户虾米音乐的歌单
hustqb的博客
08-05 6664
Python的爬虫非常简单，现在又有成熟的爬虫框架scrapy。现在，我们来用scrapy爬取自己虾米歌单上的歌曲。 通过这篇博客，你将学到： 基本的爬虫设计 模拟登陆 维持登陆状态 Xpath （中的一点皮毛233）。本文默认读者已经通过scrapy官方文档或中文版安装好了，并试过了测试用例。
爬取虾米音乐
qq_22821275的博客
11-23 7554
在网页版的虾米音乐播放器，如何下载音乐。 本次爬虫使用的语言是python3，模块是requests。笔者只是简单的示例，程序中还有许多需要改进的地方。 1、虾米音乐的播放器地址：http://www.xiami.com/play?ids=/song/playlist/id/1774747126#loaded 2、浏览器（笔者使用的是360极速浏览器），右键——审查元素，打开开发者工具。进入
Python爬虫学习记录（3）——用Python获取虾米加心歌曲，并获取MP3下载地址
热门推荐
cwyalpha的博客
08-30 1万+
在第一篇里记录了获取虾米热门歌曲，听了一段时间后，加心了很多歌曲，因此想要批量下载加心过的虾米收藏夹歌曲。 虾米好评歌曲页只保存最近的2000首。。之前star过的3k首歌有1k首都不在了。所以起了备份的念头。 首先获取虾米个人加心歌曲的地址     虾米的个人好评歌曲页在 http://www.xiami.com/space/lib-song/u/2
Python学习总结.pdf
09-29
在文档片段的末尾，“TOP250”，“offer”，“10K”，“Scrapy”，“Xiami”，“MP3”，“mongodb”，“acfun”等词汇表明学习者可能通过一些实践项目来应用他们的Python技能。这些项目可能是爬取和分析网站数据，也...
xiami-downloader:Xiami downloader
06-23
xiami-downloader 本项目已不再维护，xiami相关库最新版本在 由于调用axel，目前仅支持linux系。本人是axel的脑残粉。 curl有windows版本，同理可以将axel换成curl/aria2c下载, 相信使用 Linux 的您一定可以很轻松的...
网络爬虫实践（一）－虾米精选集及歌曲
isobel_G的专栏
04-25 2366
需求1、抓取虾米用户的精选集，及各精选集下的歌曲列表 2、将抓取到的数据存储至文件 思路1、抓取页面内容 2、正则表达式匹配字符串，并返回匹配信息 3、遍历所有页面 具体实现一、抓取页面内容urllib2是接受url请求的模块。导入扩展包后，使用request()方法,给服务器发送Http请求。调用urlopen()方法打开url： url = "http://www.xiami.com
html基于python播放rtsp
12-28
html基于python播放rtsp，利用python的opencv获取视频流，并通过websocket发送给html播放
虾米网音乐爬虫
04-17
虾米网的音乐爬虫，支持单曲下载，整张专辑下载和排行榜热歌一键下载
爬取的虾米网全部专辑列表
10-13
爬取的虾米网全部专辑列表，包括作曲，专辑名称等等
Python 写的 虾米MP3下载器
05-04
用python写的一个下载虾米网上音乐资源的小工具，欢迎大家补充，谢谢！
Python 学习问题记录
丹尼斯丁
03-06 114
文章目录一、字符串连接输出二、语句连行 初学 Python 过程中，看到一些需要记录的点，本文不适合作为学习资料，仅供学习参考 一、字符串连接输出 使用 f"字符串{表达式}字符串{表达式}字符串" 的格式可以定义指定格式的字符串 # 字符串连接输出测试 name = "我是石头人" weight = "100.223112766879" age = 34.09 # 仅python3....
python播放网页视频_python如何播放视频
weixin_39565300的博客
12-06 2815
python如何播放视频？下面给大家介绍两种方法：方法一使用imageio库import pylabimport imageio#视频的绝对路径filename = '/path/to/your/video.mp4'#可以选择解码工具vid = imageio.get_reader(filename, 'ffmpeg')for im in enumerate(vid):#image的类型是mag...
python虾米音乐爬取含下载
越过山丘
01-02 2631
1.首先，了解虾米的一些反爬措施（虾米的反爬已经是很不错的了，但是嘿嘿），了解re，requests，beautifulsoup，selenium自动化脚本等等一系列该有的知识。开始干活 更新（目前虾米在歌曲的id获取上采取了加密措施，因此无法使用，但是通过抓包发现虾米只是在id上进行了加密，其他部分并未做出改变，所以，只需解密歌曲id依然可以下载歌曲。且不要下载我上传的虾米音乐爬取exe，已...
python 爬虫爬去虾米音乐 赵雷歌词
hellodrawing的博客
03-20 1304
#/usr/bin/env python # *-*coding:utf-8 *-* #python 3 爬取赵雷歌词 """ """ from collections import Counter from urllib import request from bs4 import BeautifulSoup as BS import jieba import os
Python爬虫学习记录（2）——LDA处理歌词
cwyalpha的博客
08-30 9747
百度空间关闭了， 本系列文章从 hi.baidu.com/cwyalpha 转移过来 想看看某类歌词里哪些词用的比较多。 1. 歌词及类别从这里来 http://music.baidu.com/tag 带歌词的歌大约有27k 2. 分词用的是jieba in Python 3. 去除停用词，去除单个汉字。切记，一定要去除“爱”字。“爱”比“的”还可怕，不去除的话每个to
用python爬虫做一个音乐歌曲的爬取
最新发布
05-12
好的，以下是一个简单的Python爬虫，可以爬取指定歌手的歌曲信息和下载链接： ```python import requests from bs4 import BeautifulSoup import os # 设置要爬取的歌手 singer = "周杰伦" # 创建目录用于保存歌曲 os.makedirs(singer, exist_ok=True) # 爬取歌曲信息和下载链接 url = "https://www.xiami.com/search?key=" + singer response = requests.get(url) soup = BeautifulSoup(response.text, 'html.parser') song_list = soup.select('.track_list > .item') for song in song_list: title = song.select_one('.song_name > a').text.strip() artist = song.select_one('.singer > a').text.strip() album = song.select_one('.album_name > a').text.strip() download_url = song.select_one('.song_name > a')['href'] print(f"{title} - {artist} - {album} - {download_url}") # 下载歌曲 response = requests.get(download_url) with open(f"{singer}/{title}.mp3", 'wb') as f: f.write(response.content) ``` 以上代码爬取了虾米音乐中指定歌手的歌曲信息和下载链接，并将歌曲保存到本地。请注意，此方式可能违反了虾米音乐的服务协议，仅供学习和研究使用，请勿用于商业用途或非法用途。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值