行行查采集案例(AES解密)

54 篇文章 1783 订阅 ¥49.90 ¥99.00
30 篇文章 452 订阅
本文详细介绍了在采集行行查网站数据时遇到的封禁策略及解密逻辑。网站需要微信登录并限制非会员访问,通过多账号及控制请求频率规避封禁。解密过程中发现响应数据经过AES加密,使用ECB模式和Pkcs7填充,密钥为3sd&d24h@$udD2s*。文章提供了解密代码示例。
摘要由CSDN通过智能技术生成

本文案例采集行行查网站的研究报告、城市精选、产业图谱等数据
网站链接:https://www.hanghangcha.com
本文内容仅供技术学习参考,如有侵权请联系作者删除。
在这里插入图片描述


采集风险

该网站需要通过微信扫码并绑定手机号进行登录,而且不开会员只能查看小部分数据。

我搞了10个号,通过小程序拉新开通了会员,采集了一段时间后都被封了。

封禁状态:账号无法进行登录

封禁策略:请求1次/ 2-5秒 ,采集三小时后被封

我感觉和脉脉一样,有专用的风控系统在定时进行爬虫检测,比如12:30,5:30进行大检测,每半小时小型检测。
检测范围:访问频率,访问规律

解决方案:多搞点号,请求频率放慢一点。


解密逻辑

下面进入正文,该网站返回的response都是加了密的。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

考古学家lx(李玺)

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值