二、Cookie反爬虫技术分类
Cookie反爬虫技术分类可以按照服务提供商或其特点来划分:
- 响应式Cookie
这个类别不是特指某一类服务商的Cookie反爬机制,而是指网站通过非数据API先响应给你Cookie,你再拿着这个Cookie去请求数据API
- 阿里系Cookie
阿里巴巴集团旗下的各个网站可能会采用自有的Cookie反爬机制,例如结合阿里云的安全防护体系,在Cookie中嵌入复杂的身份验证信息或者时间戳相关的加密Token,用于识别和阻止非正常访问。这类Cookie往往需要爬虫开发者深入了解其加密算法和校验逻辑才能有效处理。
- 加速乐Cookie
加速乐是提供网络安全加速服务的平台,它在防止恶意爬虫方面有自己独特的Cookie设置方法。
- 瑞数Cookie
瑞数信息技术有限公司提供的一种动态应用安全产品也采用了Cookie反爬手段,其特点是基于动态指纹技术和动态网页保护技术,生成的Cookie可能具有高度随机性和时效性,每次请求都会产生不同的认证信息,加大了爬虫模仿合法用户行为的难度。
- Akamai的Cookie
Akamai是一家提供内容分发网络(CDN)及网络安全解决方案的公司,其服务包括对网站访问进行安全防护,其中Akamai使用一种称为Akamai Cookie加密的技术来增强安全性和保护用户的隐私。Akamai常见的时1.75和2的版本,传递的数据是明文的数据就是1.75,2版本的数据是进行编码。
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里