【猿人学WEB题目专解】猿人学第3题

最新推荐文章于 2025-06-05 15:15:03 发布
最新推荐文章于 2025-06-05 15:15:03 发布
阅读量9.8k 收藏 4
点赞数 6
分类专栏： # 猿人学WEB题目专解 文章标签： python 算法 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/user_from_future/article/details/130012387
版权

🌈据说，看我文章时 关注、点赞、收藏 的 帅哥美女们 心情都会不自觉的好起来。

前言：
🧡作者简介：大家好我是 user_from_future ，意思是 “ 来自未来的用户 ” ，寓意着未来的自己一定很棒~
✨个人主页：点我直达，在这里肯定能找到你想要的~
👍专栏介绍：猿人学WEB题目专解 ，提供猿人学WEB题目总计20题的解题思路与方法，如有讲述错误，请不吝赐教。

想看往期历史文章，可以浏览此博文： 历史文章目录，后续所有文章发布都会同步更新此博文~

人生苦短，我用python

猿人学第3题

题目网址

猿人学第3题

题目详情

在这里插入图片描述
让我们计算 出现频率最高 的申请号。

题目思路

这次打开打开开发者工具没有了 无限Debug ，也没有控制台污染了。请求发现没有任何加密，也没有多出来的 cookie 值，只是发现每次请求数据之前都会请求一下 /jssm 这个网址，这题真的那么好爬吗？
我们首先定位一下发送请求的地方：

window.url='/api/match/3';
request = function() {
    var list = {
        "page": window.page,
    };
    $.ajax({
        url: window.url,
        dataType: "json",
        async: false,
        data: list,
        type: "GET",
        beforeSend: function(request) {
            (function() {
                var httpRequest = new XMLHttpRequest();
                var url = '/jssm';
                httpRequest.open('POST', url, false);
                httpRequest.send()
            }
            )()
        },
        success: function(data) {
            let name = ['梦琪', '忆柳', '之桃', 'bai慕青', '问兰', 'du尔岚', '元香', '初夏', '沛菡', '傲珊zhi', '曼文', '乐菱', 'dao痴珊', '恨玉', '惜文', '香寒', '新柔', '语蓉', '海安', '夜蓉', '涵柏', '水桃', '醉蓝', '春儿', '语琴', '从彤', '傲晴', '语兰', '又菱', '碧彤', '元霜', '怜梦', '紫寒', '妙彤', '曼易', '南莲', '紫翠', '雨寒', '易烟', '如萱', '若南', '寻真', '晓亦', '向珊', '慕灵', '以蕊', '寻雁', '映易', '雪柳', '孤岚', '笑霜', '海云', '凝天', '沛珊', '寒云', '冰旋', '宛儿', '绿真', '盼儿', '晓霜', '碧凡', '夏菡', '曼香', '若烟', '半梦', '雅绿', '冰蓝', '灵槐', '平安', '书翠', '翠风', '香巧', '代云', '梦曼', '幼翠', '友巧', '听寒', '梦柏', '醉易', '访旋', '亦玉', '凌萱', '访卉', '怀亦', '笑蓝', '春翠', '靖柏', '夜蕾', '冰夏', '梦松', '书雪', '乐枫', '念薇', '靖雁', '寻春', '恨山', '从寒', '忆香', '觅波', '静曼', '凡旋', '以亦', '念露', '芷蕾', '千兰', '新波', '代真', '新蕾', '雁玉', '冷卉', '紫山', '千琴', '恨天', '傲芙', '盼山', '怀蝶', '冰兰', '山柏', '翠萱', '恨松', '问旋', '从南', '白易', '问筠', '如霜', '半芹', '丹珍', '冰彤', '亦寒', '寒雁', '怜云', '寻文', '乐丹', '翠柔', '谷山', '之瑶', '冰露', '尔珍', '谷雪', '乐萱', '涵菡', '海莲', '傲蕾', '青槐', '冬儿', '易梦', '惜雪', '宛海', '之柔', '夏青', '亦瑶', '妙菡', '春竹', '痴梦', '紫蓝', '晓巧', '幻柏', '元风', '冰枫', '访蕊', '南春', '芷蕊', '凡蕾', '凡柔', '安蕾', '天荷', '含玉', '书兰', '雅琴', '书瑶', '春雁', '从安', '夏槐', '念芹', '怀萍代曼', '幻珊', '谷丝', '秋翠', '白晴', '海露', '代荷', '含玉', '书蕾', '听白', '访琴', '灵雁', '秋春', '雪青', '乐瑶', '含烟', '涵双', '平蝶', '雅蕊', '傲之', '灵薇', '绿春', '含蕾', '从梦', '从蓉', '初丹。听兰', '听蓉', '语芙', '夏彤', '凌瑶', '忆翠', '幻灵', '怜菡', '紫南', '依珊', '妙竹', '访烟', '怜蕾', '映寒', '友绿', '冰萍', '惜霜', '凌香', '芷蕾', '雁卉', '迎梦', '元柏', '代萱', '紫真', '千青', '凌寒', '紫安', '寒安', '怀蕊', '秋荷', '涵雁', '以山', '凡梅', '盼曼', '翠彤', '谷冬', '新巧', '冷安', '千萍', '冰烟', '雅阳', '友绿', '南松', '诗云', '飞风', '寄灵', '书芹', '幼蓉', '以蓝', '笑寒', '忆寒', '秋烟', '芷巧', '水香', '映之', '醉波', '幻莲', '夜山', '芷卉', '向彤', '小玉', '幼南', '凡梦', '尔曼', '念波', '迎松', '青寒', '笑天', '涵蕾', '碧菡', '映秋', '盼烟', '忆山', '以寒', '寒香', '小凡', '代亦', '梦露', '映波', '友蕊', '寄凡', '怜蕾', '雁枫', '水绿', '曼荷', '笑珊', '寒珊', '谷南', '慕儿', '夏岚', '友儿', '小萱', '紫青', '妙菱', '冬寒', '曼柔', '语蝶', '青筠', '夜安', '觅海', '问安', '晓槐', '雅山', '访云', '翠容', '寒凡', '晓绿', '以菱', '冬云', '含玉', '访枫'];
            let com_name = ['元优', '多乾', '巨久', '德祥', '洪仁', '乾富', '隆安', '鑫德', '乾广', '伟复', '耀顺', '同福', '东昌', '洪亚', '盛欣', '元优', '耀佳', '昌益', '欣丰', '乾美', '春信', '贵丰', '东弘', '同富', '飞庆', '万鼎', '隆高', '久协', '德高', '正禄', '如福', '圣耀', '洪昇', '合寿', '宏禄', '如通', '公盈', '春谦', '皇贵', '伟荣', '猿人学', '破釜成', '寒冰射手', '冰冰凉', '凉冰冰', '元优', '多乾', '巨久', '德祥', '洪仁', '乾富', '隆安', '鑫德', '乾广', '伟复', '耀顺', '同福', '东昌', '洪亚', '盛欣', '元优', '耀佳', '昌益', '欣丰', '乾美', '春信', '贵丰', '东弘', '同富', '飞庆', '万鼎', '隆高', '久协', '德高', '正禄', '如福', '圣耀', '洪昇', '合寿', '宏禄', '如通', '公盈', '春谦', '皇贵', '伟荣', '猿人学', '破釜成', '寒冰射手', '冰冰凉', '凉冰冰'];
            data = data.data;
            let html = `<table class="table"><tr><th>申请/注册号</th><th>申请日期</th><th>商标申请人</th><th>申请公司名</th></tr>`;
            let a = `<tr><td class="lwtd0">3472509</td><td class="lwtd0">~申请~</td><td class="lwtd0">马梦启</td><td class="lwtd0">东莞市协和粘胶有限公司</td></tr>`;
            if (window.page) {} else {
                window.page = 1
            }
            let op = 1;
            $.each(data, function(index, val) {
                let dat_year = 2000 + window.page;
                let dat_mou = window.page * 2;
                let dat_day = window.page * 5 + op;
                let dat_result = dat_year + '年' + dat_mou + '月' + dat_day + '日';
                let b = a.replace('3472509', val.value).replace('~申请~', dat_result).replace('马梦启', name[op * window.page]).replace('东莞市协和粘胶有限公司', com_name[op * window.page] + '科技发展公司');
                html += b;
                op += 1
            });
            $('.buwyqrs').text('').append(html + '</table>')
        },
        complete: function() {},
        error: function() {
            alert('数据加载失败，您的网络环境可能不太支持这道题目。请您关闭所有抓包工具后重试。如果还不行请加群反馈问题。您可以在此期间可进行其他题目的尝试');
            alert('您可以扫描二维码加入交流群反馈问题。相遇只为更好~，期待与您的见面');
            $('.page-message').eq(0).addClass('active');
            $('.page-message').removeClass('active');
            window.location.href = "http://match.yuanrenxue.com/list";
        }
    })
}
;
request()

看到这里有个 beforeSend ，就知道这俩请求是顺序请求的，说明这个 /jssm 还是会影响我们的 api 请求的，设置了 cookie ：
在这里插入图片描述
尽管我们的 sessionid 前后好像并没有什么变化，但没有 /jssm 请求，肯定无法正常访问这题的数据 api 请求。
于是我们把我们的基础请求框架放上：

import requests

headers = {
    'cookie': f"sessionid=oq9hvhsahjlotanjvu9mxha0fakbierb",
    'User-Agent': 'yuanrenxue.project'
}

print(requests.post('https://match.yuanrenxue.cn/jssm', headers=headers).headers)

他返回给我们的：{'Server': 'nginx', 'Date': 'Mon, 10 Apr 2023 08:27:39 GMT', 'Content-Type': 'image/jpg', 'Content-Length': '0', 'Connection': 'keep-alive'}
没有 Set-Cookie 请求头，接下来 我们再试试把所有请求头全整上试试：

import requests

headers = {
    'accept': 'application/json, text/javascript, */*; q=0.01',
    'accept-encoding': 'gzip, deflate, br',
    'accept-language': 'zh-CN,zh;q=0.9',
    'cache-control': 'no-cache',
    'cookie': 'Hm_lvt_9bcbda9cbf86757998a2339a0437208e=1680872730; Hm_lvt_c99546cf032aaa5a679230de9a95c7db=1680872730; tk=-5150129943585824243; sessionid=oq9hvhsahjlotanjvu9mxha0fakbierb; Hm_lpvt_9bcbda9cbf86757998a2339a0437208e=1680873632; Hm_lpvt_c99546cf032aaa5a679230de9a95c7db=1680874330',
    'pragma': 'no-cache',
    'referer': 'https://match.yuanrenxue.cn/match/3',
    'sec-ch-ua': '"Chromium";v="110", "Not A(Brand";v="24", "Google Chrome";v="110"',
    'sec-ch-ua-mobile': '?0',
    'sec-ch-ua-platform': '"Windows"',
    'sec-fetch-dest': 'empty',
    'sec-fetch-mode': 'cors',
    'sec-fetch-site': 'same-origin',
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/110.0.0.0 Safari/537.36',
    'x-requested-with': 'XMLHttpRequest'
}
print(requests.post('https://match.yuanrenxue.cn/jssm', headers=headers).headers)

它仍然无情的不给我们返回 Set-Cookie 请求头！
不信了，用抓包软件试试吧，打开我们的 Fiddler 程序，点页数请求一次，看向 Row 标签：
在这里插入图片描述
看到这排列顺序很乱的请求头，把他复制下来试试：

import requests

headers = {
    'Host': 'match.yuanrenxue.cn',
    'Connection': 'keep-alive',
    'Content-Length': '0',
    'sec-ch-ua': '"Chromium";v="110", "Not A(Brand";v="24", "Google Chrome";v="110"',
    'sec-ch-ua-mobile': '?0',
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/110.0.0.0 Safari/537.36',
    'sec-ch-ua-platform': '"Windows"',
    'Accept': '*/*',
    'Origin': 'https://match.yuanrenxue.cn',
    'Sec-Fetch-Site': 'same-origin',
    'Sec-Fetch-Mode': 'cors',
    'Sec-Fetch-Dest': 'empty',
    'Referer': 'https://match.yuanrenxue.cn/match/3',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'zh-CN,zh;q=0.9',
    'cookie': 'Hm_lvt_9bcbda9cbf86757998a2339a0437208e=1680872730; Hm_lvt_c99546cf032aaa5a679230de9a95c7db=1680872730; tk=-5150129943585824243; sessionid=oq9hvhsahjlotanjvu9mxha0fakbierb; Hm_lpvt_9bcbda9cbf86757998a2339a0437208e=1680873632; Hm_lpvt_c99546cf032aaa5a679230de9a95c7db=1680874330',
}
print(requests.post('https://match.yuanrenxue.cn/jssm', headers=headers).headers)

仍然没有给我们返回 Set-Cookie 请求头！
简直头皮发麻啊，稍微 借鉴 了一下百度中的网友，发现 requests 是会自动排序请求头的，不会按设定好的请求头顺序发送，那我们只能用 session 了，还能自动接收 Set-Cookie 请求头，并自动设置更新 cookie 参数：

import requests

session = requests.session()
session.headers = {
    'Host': 'match.yuanrenxue.cn',
    'Connection': 'keep-alive',
    'Content-Length': '0',
    'sec-ch-ua': '"Chromium";v="110", "Not A(Brand";v="24", "Google Chrome";v="110"',
    'sec-ch-ua-mobile': '?0',
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/110.0.0.0 Safari/537.36',
    'sec-ch-ua-platform': '"Windows"',
    'Accept': '*/*',
    'Origin': 'https://match.yuanrenxue.cn',
    'Sec-Fetch-Site': 'same-origin',
    'Sec-Fetch-Mode': 'cors',
    'Sec-Fetch-Dest': 'empty',
    'Referer': 'https://match.yuanrenxue.cn/match/3',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'zh-CN,zh;q=0.9',
    'cookie': 'Hm_lvt_9bcbda9cbf86757998a2339a0437208e=1680872730; Hm_lvt_c99546cf032aaa5a679230de9a95c7db=1680872730; tk=-5150129943585824243; sessionid=oq9hvhsahjlotanjvu9mxha0fakbierb; Hm_lpvt_9bcbda9cbf86757998a2339a0437208e=1680873632; Hm_lpvt_c99546cf032aaa5a679230de9a95c7db=1680874330',
}
print(session.post('https://match.yuanrenxue.cn/jssm').headers)

这次终于出现了我们心心念念的 Set-Cookie 请求头！
不过这么多请求头肯定有多余的，我们来试试，争取找到最少的请求头！
最后成功的从 18 个请求头参数缩减成 6 个请求头参数就能成功访问 /jssm。

import requests

session = requests.session()
session.headers = {
    'Content-Length': '0',
    'Accept': '*/*',
    'Referer': 'https://match.yuanrenxue.cn/match/3',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'zh-CN,zh;q=0.9',
    'Cookie': 'sessionid=oq9hvhsahjlotanjvu9mxha0fakbierb',
}
print(session.post('https://match.yuanrenxue.cn/jssm').headers)

然后把代码补充完整，具体看解题源码。

解题源码

import requests
import jsonpath

session = requests.session()
session.headers = {
    'Content-Length': '0',
    'Accept': '*/*',
    'Referer': 'https://match.yuanrenxue.cn/match/3',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'zh-CN,zh;q=0.9',
    'Cookie': 'sessionid=oq9hvhsahjlotanjvu9mxha0fakbierb',
}

values = []
for index in range(1, 6):
    url = f"https://match.yuanrenxue.com/api/match/3?page={index}"
    session.post('https://match.yuanrenxue.cn/jssm')
    # values.extend([v['value'] for v in session.get(url).json()['data']])
    values.extend(jsonpath.jsonpath(session.get(url).json()['data'], '$..value'))
times = {}
for value in set(values):
    times[value] = values.count(value)
print(max(times, key=lambda t: times[t]))
猿人学web端爬虫攻防大赛赛题解析_第三题：访问逻辑
仙路尽头谁为峰
12-01 1680
基本思路 post 和session差异
【猿人学WEB题目专解】猿人学第5题
热门推荐
user_from_future的博客
04-17 1万+
第五题 js 混淆 乱码增强 - 猿人学
猿人学第十八题(jsvmp)题解
wang785994599的博客
03-22 4827
猿人学第十八题[题解找到请求发送的位置确认参数生成位置加密过程hook 说实话，这种反爬真的是第一次见，而且反爬逻辑还算比较清晰，参数没有被过分的加密处理很容易推算出来，好了，既然都做到第十八题了，其他的废话也不多说，直接进入调试阶段。 找到请求发送的位置 第一页没有加密，跳过，直接看第二页的数据，抓到请求后，点击initiator查看请求发起位置，点进去第一个 代码如图 大眼一看，这里没有任何添加参数什么乱起八糟的逻辑，既然被标记位困难那肯定有他的道理在的，从xmlHttpRequest生成开始，一步
猿人学第17题题解
nickyfox的博客
01-27 1395
猿人学第17题http2.0题解
【猿人学】第一题详细解题步骤（附带源码）
学海无涯
02-20 4760
我们直接把函数拷贝至新建的代码段中执行，然后控制台输出加密逻辑的几个变量，如下。我们在浏览器新建个无痕模式，把上述代码拷贝过来然后执行一下。老规矩，我们先抓包分析下，加密参数如下，没有什么难度。生成的结果是不同的，感兴趣的可以自己测试一下。实现完整的请求流程，完整代码如下，需要的自取。接下来我们先观察下启动器，加密逻辑不可能在。文件中的，排除这个选项后，如下图。填入上述计算的结果即可，如下图。然后再点击下一页，发现断住了。，再结合作者要考察的目标。还原下，还原核心如下。编码的字符串，我们对。
猿人学第三题代码（写2022-5-2）和一点笔记。
cottpaddedC的博客
05-02 903
猿人学第三题代码（写在2022-5-2）和一点笔记。关于request pyton 的一些反爬虫的笔记
【猿人学WEB题目专解】猿人学第1题
user_from_future的博客
04-05 9634
第一题 js混淆源码乱码 - 猿人学
【猿人学WEB题目专解】猿人学第7题
user_from_future的博客
04-23 9190
第七题 动态字体，随风漂移 - 猿人学
【猿人学WEB题目专解】猿人学第17题
user_from_future的博客
05-09 305
天杀的http2.0
【猿人学WEB题目专解】猿人学第15题
user_from_future的博客
05-03 376
备周则意怠 常见则不疑 - 猿人学
YuanRenXue:猿人学Web端爬虫攻防赛第一季 习题练习
05-07
YuanRenXue 猿人学Web端爬虫攻防赛第一季 习题练习
【猿人学WEB题目专解】猿人学第13题
user_from_future的博客
04-30 323
入门级cookie-猿人学
猿人学web端爬虫攻防大赛赛题解析_第十八题：jsvmp-洞察先机
仙路尽头谁为峰
10-27 1412
jsvmp-洞察先机一、前言二、解析过程分析三、代码实现四、参考文献 一、前言 又是很长时间没更博客了，今天终于花时间把最后一题给解决了，至此猿人学赛题的学习基本告一段落，总的来说大部分题对我来说都很有挑战性，而每次解题过程中也会学到点新知识。目前的达到的水准是即使有些完全没思路的加密，看下其他大神分享的解题过程，基本上自己也能摸索着还原出来，虽然距离大佬们还有不小的差距，但相比起挑战习题最初的我来说，还算是有一定进步了。总之也算是完成了猿人学赛题的挑战目标，嗯，废话不多说，进入正题。 二、解析过程分析 首
猿人学题解1-4
YhcCoding的博客
01-15 2964
第一题新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本
NSSCTF [LitCTF 2025]test_your_nc
2401_88087539的博客
06-03 719
pwn新手小白，写完题后整理的一点点思路，有借鉴其他wp，有任何问题各位师傅可以提出，接收批评指正
PAT-乙级JAVA题解(更新中...)
qq_49695680的博客
06-04 732
Java 中实现线程的创建和启动
2301_80215285的博客
06-04 1137
在Java中，创建线程和启动线程是两个关键步骤。必须调用start()而非直接调用run()，因为start()会触发JVM创建新的调用栈并交由操作系统管理，实现真正的异步执行。直接调用run()仅会在当前线程同步执行方法。start()使线程进入可运行状态，符合线程生命周期规范，并能利用多核CPU实现并行计算。正确区分两者对多线程编程至关重要，只有通过start()才能发挥线程的并发优势。
使用C++调用python库
Ring__Rain的博客
06-04 286
1、将A电脑的"D:\Python\Python310"文件夹，直接拷贝到"D:\Python\Python310"；1、先安装python310的安装包；安装到"D:\Python\Python310"注意：记住要在path的前面，前面不能有其他路径的python，后面有无所谓；注意：记住要在path的前面，前面不能有其他路径的python，后面有无所谓；2、 配置系统环境变量；2、配置系统环境变量；如果运行代码报错：则执行下面的操作；
Pydantic，Field和Annotated
最新发布
qq_43499921的博客
06-05 908
Annotated是基础：它是由 Python 核心提供的、用于在类型提示中附加任意元数据的标准机制/容器。它本身不关心元数据是什么，也不执行任何操作。Field是元数据内容: Pydantic (或) 定义的Field对象是一种具体的元数据。它包含了关于字段如何验证、如何设置默认值、如何序列化等的详细配置信息。Pydantic是消费者和执行者: Pydantic 库使用Annotated来发现并提取附加到类型上的Field对象（或其他 Pydantic 特定元数据）。然后，Pydantic解释这些。
猿人学Web端爬虫攻防赛第一季：习题练习详解
资源摘要信息:"本资源是YuanRenXue:猿人学Web端爬虫攻防赛第一季的习题练习资料，内容涉及JavaScript编程语言在Web爬虫开发中的应用，旨在通过实战练习加深对Web端爬虫攻防技术的理解和掌握。Web端爬虫攻防赛为学习...
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值