python爬虫登录爱奇艺_python实现爱奇艺登陆密码RSA加密的方法示例详解

前言

通过Python实现对大麦网近期全国演唱会数据进行爬取，通过分析，我们发现大麦网属于Python爬虫策略中“中等型”难度网站，演唱会数据封装在json文件中。因此，我们简单的通过requests、json就可以将数据爬取出来，后期通过pandas进行数据筛选并保存至Excel文件中。

1.目标网站分析

检查一下看xhr中有没有我们需要的数据。

很好，就在xhr中用json封装了数据。

2.构造相应的Request URL

request url中只有一个参数变化，那就是“Page=”这个选项变了，简单了😄，一共6页，直接循环构造了。

for i in range(1,7):

url=f'https://search.damai.cn/searchajax.html?keyword=&cty=&ctl=%E6%BC%94%E5%94%B1%E4%BC%9A&sctl=&tsg=0&st=&et=&order=1&pageSize=30&currPage={i}&tn=&