页面校验请求MmEwMD（转载）

最新推荐文章于 2024-07-02 17:37:02 发布
最新推荐文章于 2024-07-02 17:37:02 发布
阅读量3k 收藏 4
点赞数 1
文章标签： python javascript 爬虫 ViewUI
原文链接：http://www.cnblogs.com/Duke-/p/8492187.html
版权
写在前面

本人没有深入钻研过前端技术，JS属于亚文盲水平，这篇分析的目的是分享解决解决问题的思路。

  • 提出假设，证明它或推翻它，如果推翻，就再提出一个新的假设。该走的弯路，一米都不能少
  • 抛开所有不可能的，剩下的，不管多么匪夷所思，那都是事实
  • 坚信JS是纯客户端逻辑，理论上一定可破解，需要的是时间和耐心
  • 凡是不能杀死你的，最终都会让你更强
问题描述

智联招聘企业端登陆，输入验证码后，点击验证按钮，抓包获得以下请求

https://passport.zhaopin.com/chk/verify?callback=jsonpCallback&MmEwMD=12quxKHKjs0Ueapv9t.fUcurtt8lkuPKNW.iigEyOYlrTOxwONa0ImcCQ8gvRZic3MnqU1WUPdIESozanNi1FCB38raqp0l5vVLXlYgSCIWxh6rR.3q0lK304tlBMH49LDm8FUL4hkfboCm_lhWv9qO7coH_FfFRY1fC8xIZ7_NljGkOJvIWaaUFwhGF2SVwN58UkzX6GuABWNvbUzzVVq5Kzj45tS_p4U2fo.re9LOuwPpp99H5bLKIgmNsI_RALV39ujuLsqhbHTJAgCtQeZzOkhMbjJKciuKPp97TkbIpDpGr_ZqTBghcjRgr_gz1CkGCCoUTn24dIPfVB0tTDenbTTuOot.rT_RmTiIsA0zY5ac445PXgJZXaXHxrV_ASY0

问题：如何构建MmEwMD参数？

初步分析

查看智联招聘login页面的相关JS文件，分析query param的构建方法

scripts/chk/captcha.js

从上图中我们可以看到调用JQuery的$.ajax方法来发送请求，发送的url只有 callback 一个query param，并没有看到 MmEwMD 的踪迹，说明不是在zhilian自己的JS文件中加这个参数，猜测是给JQuery加了 prefilter 或者 beforeSend 之类的钩子

构建本地JS Debug环境

  • 通过 wget 抓取html和相关资源文件

    wget --mirror --page-requisites --adjust-extension --no-parent --convert-links --directory-prefix=sousers https://passport.zhaopin.com/org/login

  • 使用python启动simple web server

    python -m SimpleHTTPServer 8081

  • 访问本地login页面

    http://localhost:8081/org/login.html

  • 智联招聘使用的JQuery版本是1.7.1，我们从官网下载非min版本方便debug。下载完成后放到script目录下，然后修改login.html中include script代码

    http://code.jquery.com/jquery-1.7.1.js
Debug JQuery
// Do send the request // This may raise an exception which is actually // handled in jQuery.ajax (so no try/catch here) xhr.send( ( s.hasContent && s.data ) || null );

从 scripts/chk/captcha.js 的 $.ajax 入手一路debug进去，直到上面这行代码，我们inspector xhr对象发现，并没有任何JQuery的钩子，此时，我们怀疑xhr (XMLHttpRequest) 被hook了。

验证方法如下：

在浏览器console中执行以下代码

var xhr = new window.XMLHttpRequest(); xhr.open('POST','/hello',true); xhr.send('abc');

出现了以下请求，说明在当前页面中的xhr肯定被hook了，同时解除对JQuery的怀疑。

POST http://localhost:8081/hello?MmEwMD=1zXMRFfiFy00rBpdSoJ2cJ4EvS6mQ1dvl5jZLrqB…oRVu5t.x8Y3GVQLmqdG.lmuE2snbEk.YHif4rmHwOtKQoTiHpODCa6HikgWg1X2S._aq8rKTLr
分析Login HTML

Login页面的html中有三段非常有趣的代码

第一段代码是：

<meta name="renderer" content="webkit"><meta id="9DhefwqGPrzGxEp9hPaoag" content="{qqqkkGZAkCAGc60cEqNGqD3DD5aef8al4605kUdZ}FH00lxmQZlsYUWYqfYOapWmqyrK0HMVZCsczHJ90Xl1mUHYqzYOqpHmqJrYVhVAAsUfwWmYqV102mqmgDsaJppYakV2QoUGAwKTymDYgwsSNpK2aFV9aopaAtK07pqmQFVqSKlSlwVrEmXq5_s8RWy24CUi0pdmIbVHfKySoNVi3mzq5CJ1489597716416YipgfCWy.0N5u81OO.MzYPhz_sUNCdYZHoc64qqqVqDASVkfQJYZ6Vkm8J20yqqqqqqqqqqqqqqqqKBgyFY2AtnVVvvzAyQm_MlqqqiR9xU82xnVUwUIqc80{BxLZUzp12oHeoyld0p5rxyaOOYIxVTlI6A8eodlHZm_QVjSuSpeRHS9IK1wlE0YUqYiNonVowpZyknf8pmx0Qa0I3sZfoSlvkcJJKa6kpYWRHCVGkl3W8iplVtALfc1VJxa07kPgqEa9Nk10HhAh1CI9DpmpzDfqr0k130qqqr0qqqqqqqqqqqqqqqq">

关键字: 9DhefwqGPrzGxEp9hPaoag

  • 好消息是这套机制不是智联独创的，别的网站也有用。
  • 坏消息是网上的资料非常非常非常稀少

第二段代码是：

<script type="text/javascript" src="/4QbVtADbnLVIc/d.FxJzG50F.js?D9PVtGL=5aef8a"></script> https://passport.zhaopin.com/4QbVtADbnLVIc/d.FxJzG50F.js?D9PVtGL=5aef8a

关键字: FxJzG50F

  • 和上面情形差不多，有别的网站在用，但资料非常稀缺
  • 差不多可以推断出这个JS是用来做混淆的

第三段代码是：

<script type="text/javascript">var _$qk=window,_$rL=top,_$vH,_$vy,_$nX,_$x5,_$an=String.fromCharCode,_$xU=[],_$ch,_$xF,_$nh,_$su,_$oR,_$l7,_$h4,_$xR=_$qk.Error;var _$kO,_$wL,_$wA;var _$gg=1;_$gf();_$qk[_$an(101,118,97,108)] // 内容太多，文章的最后会帖一个完整版 </script>
  • 这段代码的是经过混淆的JS，并且每次请求login页面，拿到的JS内容都会变化，意味每次会随机用于混淆的变量名和函数名，真是太贱了。
  • 接下来我们挑选一个版本，然后解剖下这段JS究竟在做什么

做到这一步，已经产生了一些敬畏之心，既然搜了这么多冷门的关键字，不妨搜一下主角 MmEwMD

关键字: MmEwMD

百度终于比谷歌牛逼了一回，谷歌完全搜不到，百度可以搜到一条论坛信息，时间还挺近的，是有人在论坛上求助咪咕的login请求问题，再一次印证了这东西不是智联原创，但网络上相关资料非常稀少，可能是一个非公开，非开源的东西

分析被混淆过的outer.js

由于代码有500多行，我将完整代码贴在文章最后的附录中，我们称这个js为 outer.js

为了debug这个混淆过的 outer.js 文件，我们需要：

  • 在login.html文件中注释掉这段JS的 <script>...</script>
  • 将format后的JS保存到文件中放到script/outer.js
  • 在login.html中include这个JS文件

准备工作完成后，开始debug这个JS，初步猜想，这个JS中应该有一个callback函数，当点击验证按钮的时候，可以到这个函数中。我们给所有的function的入口出都打上断点，但按下验证按钮后，居然没有一个function被触发，这说明callback函数不在这些function中！

经过逐行跟踪，我们猜测callback function的代码，以及inject hook的代码可能都是运行过程中产生的，然后通过 eval() 或者 window['execScript'] 之类的来动态加载的，最后我们定位到下面这个函数

outer.js line 405~417 function _$tx(_$dq) { if (_$dq === undefined || _$dq === "") return; var _$dL = _$h1[_$k1][_$ls], _$kD; if (!_$jr) _$jr = _$dL.push; if (_$h1[_$o4]) _$kD = _$h1[_$o4](_$dq); else { var _$sD = _$h1[_$bn]; _$kD = _$sD[_$hm](_$h1, _$dq); } if (_$jr !== _$dL.push) _$dL.push = _$jr; return _$kD; }

window["execScript"]动态加载代码

  • _$dq 里面就是被动态加载的代码，接下来我们将debug这段被动态加载的代码。
  • 我们将他保存为 inner.js ，完整代码参见最下面的附录（有2000多行，太长贴不下，分了卷一和卷二）
  • 做到这一步已经有些心力憔悴，因为我们不知道前方会有几层迭代，会不会不停地产生动态代码并且加载
字符串变量替换表

在分析 outer.js 过程中，我们发了一张字符串和混淆变量之间的对应关系表，将下面这段代码执行后，可以得到以下变量定义（完整定义请见附录)，这里定义了 inner.js 用到的所有全局变量，对我们分析2000+行的 inner.js 非常有帮助

...
_$eS = "XMLHttpRequest", _$ml = "send", _$ij = "MmEwMD", ...
outer.js line 52

_$h1[_$w6(101, 118, 97, 108)](_$kw("FSSBBIl1UgzbN7N`use strict`document`localStorage`globalStorage`sessionStorage`indexedDB`mozIndexedDB`webkitIndexedDB`msIndexedDB`name`top`vdFm`unload`prototype`get`call`set`openDatabase`EkcP`windowData`sessionData`globalData`localData`userData`dbData`idbData`tests`function`setItem`getItem`div`userdata_el`addBehavior`style`behavior`url(#default#userdata)`setAttribute`save`load`getAttribute`transaction`executeSql`CREATE TABLE IF NOT EXISTS `EkcP_t`id INTEGER NOT NULL PRIMARY KEY AUTOINCREMENT, `name TEXT NOT NULL, `value TEXT NOT NULL, `UNIQUE (name)`INSERT OR REPLACE INTO `(name, value) `VALUES(?, ?)`SELECT value FROM ` WHERE name=?`rows`length`item`value`open`onerror`onupgradeneeded`target`result`createObjectStore`onsuccess`objectStoreNames`contains`readwrite`objectStore`put`close`vlaue`escape`indexOf`substr`string`split`charAt`substring`unescape`location`host`replace`getElementById`createElement`visibility`hidden`position`absolute`id`body`appendChild`slice`concat`splice`floor`t__`B_`fontList`$b_onBridgeReady`$b_callHandler`$b_setup`$b_platform`android`iframe`display`none`documentElement`cb_`getTime`src`jbscheme://`stringify`jbscheme://queue_has_message`$b_fetchQueue`$b_onNativeResponse`navigator`platform`test`Uint8Array`subarray`lastIndexOf`XMLHttpRequest`send`Microsoft.XMLHTTP`Array`charCodeAt`from`language`browserLanguage`zh-CN`_tCbyRDtiXFzNibfz8bwLXK67X84O5PPj58BL8FVX1uL.4I9XE6LNLoLBNH2fFUb23dbfxd9B_obGFdbPxMvG.v2f4B9X4B9BRUN944bOjVf`alert`apply`GET`href`responseType`arraybuffer`setRequestHeader`X-sOYOcALfiiw`onreadystatechange`readyState`status`response`VBArray`responseBody`toArray`MmEwMD`Math`ceil`JSON`0000`toString`number`null`boolean`object`[object Array]`hasOwnProperty`%20`addEventListener`on`attachEvent`random`assert failed with condition: `assert failed: ` is not same as `acceleration`accelerationIncludingGravity`alpha`beta`gamma`battery`getBattery`then`level`charging`chargingTime`Infinity`$_YWTU`$_cDro`isNaN`keyCode`button`offsetX`offsetY`touches`screenX`screenY`clientX`clientY`userAgent`standalone`$PreUCBrowserClassic,UCBrowserMessageCenter`__firefox__,_firefox_ReaderMode`__mttCreateFrame,mttCumstomJS`__crWeb,__gCrWeb`MicroMessenger`SeMobFillFormTool,SogouMse`Sogou`ApplePaySession`Safari`PointerEvent`MSPointerEvent`msCredentials`webkitPersistentStorage`browser_parameters,item`FaveIconJavaInterface,jesion` OPR/`chrome`runtime`webstore`onautocomplete`PerformanceObserver`PerformanceObserverEntryList`Entity`AnalyserNode`external`AddSearchProvider`dumpAll`MozAppearance`$_ts`DeviceStorage`controllers`UCWebExt,ucweb`qb_bridge,qbbookshelf`dolphin,dolphininfo,dolphinmeta`safari`pushNotification`orientation`callPhantom,_phantom`$hook$,$$logger,$$lsp,$$lsrb`netsparker,__ns`hp_identifier`spi_hooked,mozAnimationStartTime,mozIndexedDB,mozRequestAnimationFrame`Gamepad`c[`a[b](`WebXMLogMsg_UNIQUE_`stack`pop`Object.InjectedScript.evaluate`@debugger`evaluate`setInterval`eval`var a = new Date(); debugger; new Date() - a > 100;`$_ck`_Selenium_IDE_Recorder,_selenium,callSelenium`__driver_evaluate,__webdriver_evaluate,

转载于:https://www.cnblogs.com/Duke-/p/8492187.html

dndw40282
关注
爬虫瑞数4案例：网上房地产
局外人LZ的博客
01-08 2503
瑞数动态安全 Botgate（机器人防火墙）以“动态安全”技术为核心，通过动态封装、动态验证、动态混淆、动态令牌等技术对服务器网页底层代码持续动态变换，增加服务器行为的“不可预测性”，实现了从用户端到服务器端的全方位“主动防护”，为各类 Web、HTML5 提供强大的安全保护。
MmEwMD分析
sergiojune
01-22 7406
今天我们来看看这种反爬混淆，仅仅提供学术交流首先搜一下这个关键字：MmEwMD就不截图了什么也搜不到。调用堆栈看一看，先看第一个重度混淆 断点看看我们发现他是hook了 请求的对象，断...
探秘`wsjs.saic.mmewmd`: 一款高效、灵活的Web服务脚本引擎
gitblog_00073的博客
04-07 932
探秘wsjs.saic.mmewmd: 一款高效、灵活的Web服务脚本引擎 项目地址:https://gitcode.com/rockswang/wsjs.saic.mmewmd 在这个快速发展的互联网时代，Web服务已经成为各种应用程序的核心部分。今天，我们要向大家推荐一个名为wsjs.saic.mmewmd的独特项目，它是一个强大的Web服务脚本引擎，旨在简化和加速你的Web应用开发过程。让我...
智联招聘反爬虫—MmEwMD参数定位
weixin_42156283的博客
08-24 4379
本文仅供学习交流使用，请勿用于商业用途或不正当行为 如果侵犯到贵公司的隐私或权益，请联系我立即删除 1、x-zp-client-id 全局搜索x-zp-client-id很容易定位到是由cookie中来的 2、x_zp_page_request_id 全局搜索发现从window.zpPageRequestId的值中获取, 该值时访问列表页返回的 3、MmEwMD 我们可以编写一个插件来进行hook，插件内容来自IT猫之家：https://www.itmaohome.com/windows-soft/
瑞数4——MmEwMD逆向分析
wstc2689784536的博客
01-06 1701
记录一次对瑞数4MmEwMD生成的分析
某联招聘版某数反反爬— 2. 总体剖析
山东大葱哥
05-14 4452
术语 1. 动态js 在js运行期间，通过字符串拼接等形式生成一段js代码，然后通过eval或Function的方式动态执行 某数的动态js是和页面配套的，ajax请求不会改变动态js F5刷新页面或者浏览器输入网址得方式都会生成新的动态js 动态js和生成他的页面有配套关系，不配套时生成的cookie货Ew参数无效 某数动态js每次改变的仅仅是变量名称，其他逻辑丝毫不变(敲黑板，划重点) 动态js是某数反爬的核心代码，有上万行代码 2. $_ts 某数中仅有的固定名称的变量 是一个全局变量，页面js
SpringBoot使用@Validated校验请求参数
Agger的博客
11-17 4956
SpringBoot使用@Validated校验请求参数 一、前言 在前端传递参数给后台接口的时候，后端会对传递的参数做一个基础校验，以前是手动写if一个个验证，效率极其低，而且还做了很多重复工作。本例没有太对基础和原理讲解，直接上代码，就是要简单粗暴，大家先用起来再说。项目源代码请访问github获取。 github 二、使用步骤 Hibernate Validator在JSR 303校验框架中...
SpringBoot使用@Validated注解做请求参数校验
热门推荐
hrt的博客
04-03 1万+
在controller里面我们一般都要做参数检验，参数输入不正确可能导致数据不合理或者运行异常，本文主要介绍如何使用@Validated注解做请求参数的校验 目录get请求和post请求在controller的类上加上@Validated注解get请求参数校验post请求参数校验结果说明额外内容: 优雅地处理ConstraintViolationException异常GitHub项目 get请...
Java开发微信公众号（二）——开发请求校验程序
zrxJuly
12-10 7035
开发IDE：MyEclipse或Eclipse或IDEA都可以，我现在用的是MyEclipse。 请求校验流程分析上一篇中我们讲了微信开发环境的搭建，下面就来写请求校验程序的开发，目的是是为了验证消息的确来自微信服务器。 开发者提交信息后，微信服务器将发送GET请求到填写的服务器地址URL上，GET请求携带参数如下表所示： 开发者通过检验signature对请求进行校验，若确认此次GET请求来自
23shangbiao商标网站程序
11-29
23shangbiao商标网站程序是一款专门为商标开发的商标程序
嵌套组合请求对象的校验与全局捕捉
最新发布
weixin_44976692的博客
07-02 5万+
和。其中嵌套在中，形成复杂的嵌套组合请求对象。@NotNull(message = "流量客户端Id不能为空") @ApiModelProperty(required = true , value = "流量客户端Id") private Long flowAppId;@NotNull(message = "渠道广告位Id不能为空") @ApiModelProperty(required = true , value = "媒体广告位Id") private Long channelAdId;
某数加密的流程与原理简析
weixin_34343308的博客
02-26 1578
啃了这么长时间，基本上已经把某数的套路摸了个八九不离十，不愧是中国反爬界的集大成者，感觉收获满满，这里就简单记录一下分析成果。注意：某数在不同的网站上有不同的版本，其流程也略有不同，这里的流程不一定适用于其它网站。 工具和资料 之前的文章1 - 记录了之前尝试的其它方法 之前的文章2 - 对加密混淆后的js的一些初步分析 awes...
某数4代cookie生成---1
qq_37438485的博客
05-28 1325
某数与某里一直是反爬界的大山，近万行的混淆代码，着实让人有些头疼。 某数的加密有两个一个是cookie，一个是MmEwMD 参数。我只搞定了cookie参数，4代5代都可以获取成功，具体的方法并没有我在网上参考的这么麻烦。并且，cookie的生成好像并没有用到所谓的canvas，fonts，webrtc指纹，这只是我个人在调试的时候发现的，如有错误，欢迎指出错误。 本期的网站 aHR0cDovL3d3dy5mYW5nZGkuY29tLmNuL2luZGV4Lmh0bWw= 搭建环境生成js 我们先用
Js常用Hook代码（转载备用）
坑翁的博客
11-07 2729
// 严格模式，检查所有错误// document 为要hook的对象 ,属性是cookie// hook set方法也就是赋值的方法，get就是获取的方法// 这样就可以快速给下面这个代码行下断点，从而快速定位设置cookie的代码debugger;// 在此处自动断下console.log('Hook捕获到set-cookie ->',val);}})})();
js逆向之猿人学-反混淆刷题平台第十题
博客
03-26 2018
猿人学-反混淆刷题平台第十题 前言 这题应该是刷题平台中js逆向部分最难的一道题目了，而且它跟著名的某数有关系，做完这题后，你也可以说算是与某数有过接触了，本题需要破解的参数其实就是某数当中的MmEwMD，这里先说一下， 本题不会手把手每一步都讲的那么仔细，但是会带大家走一遍抠码的环节，有坑的地方呢就提及一下，至于有些地方为什么这样，又如何解决还是需要各位自己思考的，毕竟做题本身就是为了提高自己，如果什么都说了，都做了，那就失去了做题的意义了，好了话不多说，下面直接开始分析。 （提示：这题打开开发者工具后会
browser插入数据 db_爬虫：利用selenium采集某某环境网站的空气质量数据
weixin_39688870的博客
12-28 174
前言：在上一篇文章中，我们介绍了在http://PM2.5.in这个网站采集空气质量的数据，本篇文章是对其产生的一些问题的另一种解决方案，提供更加权威的数据采集。技术框架：selenium、json、etree这里的selenium是一种自动化测试的工具，它可以帮助我们模拟浏览器打开网页并获取网页数据，本文之所以选择这种方式进行，是因为以requests方式直接请求无法获取到正确的数据，这个网页的...
Python爬取智联招聘职位信息
小北的博客
03-18 4844
使用工具：谷歌浏览器、pycharm、终极爬取方式 - 无头浏览器
java 自定义切面校验请求头
12-03
以下是Java自定义切面校验请求头的示例： 1. 创建自定义注解 ```java @Target(ElementType.METHOD) @Retention(RetentionPolicy.RUNTIME) public @interface CheckHeader { String value() default ""; } ``` 2....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值