Scrape Center爬虫平台之spa9案例

背景

Scrape Center 平台是一个练习爬虫比较好的平台,碍于很多有些该平台资料讲解的不够清晰,特此整理;
可收获:1.找出spa9题目 eval混淆中,对获取目标数据有帮助的js代码;2.需要用的spa7 解题方法,在文章最后。

正文

网址: https://spa9.scrape.center/
反爬特点:NBA球星数据网站,数据纯前端渲染,Token 经过加密处理,JavaScript经过eval混淆,适合JavaScript逆向分析。
目标数据:已知球员文本信息,获取base64编码信息
在这里插入图片描述
网站分析
1.访问 调试 网站 https://spa9.scrape.center/ ,搜索,观察到重要信息都在这里
在这里插入图片描述

2.思考 eval里面的数据一定是个字符串;但是我们观察到的是js文件,所以可以尝试将eval里面的内容复制,在控制台打印一下;在这里插入图片描述
上图是复制出来后的打印结果,报错 :Uncaught SyntaxError: Function statements require a function name,需要一个方法名;给此方法赋值为f后,再次运行,得到如下结果,是一个字符串;
在这里插入图片描述
去掉字符串后,放到js环境中进行

在这里插入图片描述
调整格式后如图:
在这里插入图片描述
这便从eval中解放出来了关键代码。这个代码与spa7中的是一致的。
后续按照spa7中进行进行加密及转换城base64的格式的数据就可以了。

spa7中的解析 参考 崔大发表的文章
spa7token加密

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
爬虫登录https://captcha8.scrape.center/的过程可以分为以下几个步骤: 1. 首先需要分析登录页面的HTML代码,找到用户名和密码的输入框以及登录按钮的位置。 2. 使用requests库向登录页面发送POST请求,将用户名和密码作为参数传递给服务器。 3. 服务器会验证用户名和密码的正确性,如果验证通过,会返回一个包含登录凭证的响应。 4. 使用登录凭证向目标页面发送请求,获取需要的数据。 在具体实现中,需要注意以下几点: 1. 需要使用session对象来保持登录状态,否则每次请求都需要重新登录。 2. 需要处理验证码,可以使用第三方库或手动输入验证码的方式。 3. 需要处理登录失败的情况,例如用户名或密码错误等。 以下是一个简单的爬虫登录https://captcha8.scrape.center/的示例代码: ```python import requests def login(): # 创建session对象 session = requests.Session() # 构造登录请求参数 data = { 'username': 'your_username', 'password': 'your_password', 'captcha': 'your_captcha' } # 发送登录请求 response = session.post('https://captcha8.scrape.center/login', data=data) # 检查登录是否成功 if response.status_code == 200 and 'Welcome' in response.text: print('登录成功!') else: print('登录失败!') # 使用登录凭证向目标页面发送请求 response = session.get('https://captcha8.scrape.center/dashboard') print(response.text) if __name__ == '__main__': login() ```

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值