爬虫瑞数4案例：网上房地产

声明：
该文章为学习使用，严禁用于商业用途和非法用途，违者后果自负，由此产生的一切后果均与作者无关

一、瑞数简介

瑞数动态安全 Botgate（机器人防火墙）以“动态安全”技术为核心，通过动态封装、动态验证、动态混淆、动态令牌等技术对服务器网页底层代码持续动态变换，增加服务器行为的“不可预测性”，实现了从用户端到服务器端的全方位“主动防护”，为各类 Web、HTML5 提供强大的安全保护。

二、瑞数特点

1. 会有多层debugger，可以点击Never pause here过掉debugger
2. 会有多次请求

• 瑞数4、瑞数5有两次相同的请求，瑞数4第一个请求状态码202，瑞数5第一个请求状态412，第一次请求响应的html，会有个script标签外链js加载${}_{t}s=window{[}^{\prime }$_ts’]，外链js代码可以固定，也可以通过对外链js发送请求获取js代码
• 瑞数5.5有两次相同的请求，第一次请求状态码412，响应的html有外链js，此外链js代码可以固定，也可以通过对外链js发送请求获取js代码
• 瑞数6和瑞数5.5编译过程差不多

3. 第一次响应的html，都会包含动态加载的meta标签包含content、两个script标签，

• 瑞数4、瑞数5用第一个script加载包含_ts = window[‘$_ts’]的js文件，第二个script加载一段自执行的js，用于把之前加载的代码处理成可用的js代码，处理后的js字符串，通过call执行，并生成cookie
• 瑞数5.5用第一个script加载包含_ts = window[‘$_ts’]代码，第二个script加载自执行js文件，用于把之前加载的代码处理成可用的js代码，处理后的js字符串，通过call执行，并生成cookie

4. 都会有特有的cookie标识

• 瑞数4：FSSBBIl1UgzbN7N80T，生成值的第一个字符就是代数
• 瑞数5：IdlEqTWW2ERnT，生成值的第一个字符就是代数
• 瑞数5.5：1EzPGwRUoQaWT，生成值的第一个字符就是代数

5. 瑞数会检测当前执行的文件是哪一个，可以使用delete __filename、delete __dirname

三、瑞数4特点

1. 两层debugger，可以点击Never pause here过掉debugger
2. 同一个请求两次
3. 第一次请求失败，状态码是202

• 首先会生成一个js文件：${}_t$