Python的requests爬取酷我音乐的一些坑（报错、友好错误界面、csrf、动态网页）

最新推荐文章于 2023-12-10 13:57:39 发布

python xxxyyyxxxyyy

最新推荐文章于 2023-12-10 13:57:39 发布

阅读量6.5k

点赞数 10

分类专栏： Python # Python爬虫 # python其它文章标签： python request 爬虫

本文链接：https://blog.csdn.net/weixin_52132159/article/details/119055557

版权

问题 1

请添加图片描述

在我用 Python 的 requests 爬取酷我音乐MV信息时报错：

json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)

代码如下：

url = 'https://www.kuwo.cn/api/www/search/searchMvBykeyWord'

headers = {
   
'cookie': '...',
'user-agent': '...',
}

params = {
   'key': '夜曲',
'pn': '1',
'rn': '30',
'httpsStatus': '1'
}

respond = requests.get(url=url, headers=headers, params=params)

print(respond.text)

text = respond.json()

打印出来的HTML内容如下，出现友好错误界面：

<html>

<head><title>403 Forbidden</title></head>

<body>

<center><h1>403 Forbidden<

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

python xxxyyyxxxyyy

关注关注

10
点赞
踩
12

收藏

觉得还不错? 一键收藏
7
评论
Python的requests爬取酷我音乐的一些坑（报错、友好错误界面、csrf、动态网页）

报错：json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)；友好错误界面：a padding to disable MSIE and Chrome friendly error page；请求头出错：{"success":false,"message":"CSRF Token Not Found!","now":"2021-07-23T13:15:45.683Z"}；遇到 javascript 渲染的动态网页，不完整
复制链接

扫一扫