爬虫第5课-从QQ音乐上爬取周杰伦前5页歌词

最新推荐文章于 2024-05-02 08:16:00 发布

Algh206

最新推荐文章于 2024-05-02 08:16:00 发布

阅读量851

点赞数 1

分类专栏：爬虫精进文章标签： python

本文链接：https://blog.csdn.net/Algh206/article/details/119449742

版权

本文介绍如何使用Python爬虫技术抓取QQ音乐上周杰伦前五页的歌词。首先分析需求，然后通过观察XHR请求的参数变化来编写代码。在代码实现中，需要注意歌词中的换行符" "，需要使用replace()函数移除。

摘要由CSDN通过智能技术生成

第一步：分析问题，明确目标

需求就是把关卡内的代码稍作修改，将周杰伦前五页歌曲的歌词都爬取下来，结果就是全部展示打印出来。

第二步：写代码

Network - XHR-client_search - Headers - Query String Parameters , 观察里面参数的变化
怕你没记住，可以再又偷偷看一下哦，关卡内需要修改的代码：

import requests
url = 'https://c.y.qq.com/base/fcgi-bin/fcg_global_comment_h5.fcg'
# 这是请求歌曲评论的url
headers = {
   
    'origin':'https://y.qq.com',
    # 请求来源，本案例中其实是不需要加这个参数的，只是为了演示
    'referer':'https://y.qq.com/n/yqq/song/004Z8Ihr0JIu5s.html',
    # 请求来源，携带的信息比“origin”更丰富，本案例中其实是不需要加这个参数的，只是为了演示
    'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36',
    # 标记了请求从什么设备，什么浏览器上发出
    }
params = {
   
'g_tk':'5381',
'loginUin':'0',
'hostUin':'0',
'format':'json',
'inCharset':'utf8',
'outCharset':'GB2312',
'notice'