猿人学第三题

目标地址：第三题 罗生门 - 猿人学

首先抓包看然后看一下启动器，进入到js中：

可以看到在ajax中定义了一个beforeSend，这个不清楚什么意思，直接百度看到是在发送请求前，那这段代码的意思就是在发送页面接口前，先发送一个/jssm的请求，那直接去看这个请求干了什么。

可以看到他在这里设置了一个cookie，那么大概率就是先通过这个jssm接口获取cookie然后再进行获取数据了，

那就直接发包看看能不能获取到

 发现被没有返回cookie，那这就奇怪了啊，我重放能拿到cookie，但是自己发包却不行。

按照请求原理，把请求头拿过来直接用原请求头理论上是没有问题的，但是不知道为什么不好使，终于经过我一系列百度的情况下得知requests的header排序是会按照默认顺序进行排序的而session则不会，那么接下来直接定义session就ok啦

附上源码：

import requests
from collections import Counter
import numpy as np

proxy = {
    "http": "http://127.0.0.1:8888",
    "https": "http://127.0.0.1:8888"
}
value_sum = []
for i in range(1, 6):

    session = requests.session()
    session.headers = {
        'content-length': '0',
        'pragma': 'no-cache',
        'cache-control': 'no-cache',
        'sec-ch-ua': '"Google Chrome";v="113", "Chromium";v="113", "Not-A.Brand";v="24"',
        'sec-ch-ua-mobile': '?0',
        'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36',
        'sec-ch-ua-platform': '"Windows"',
        'accept': '*/*',
        'origin': 'https://match.yuanrenxue.cn',
        'sec-fetch-site': 'same-origin',
        'sec-fetch-mode': 'cors',
        'sec-fetch-dest': 'empty',
        'referer': 'https://match.yuanrenxue.cn/match/3',
        'accept-encoding': 'gzip, deflate, br',
        'accept-language': 'zh-CN,zh;q=0.9',
        'Cookie': 'Hm_lvt_c99546cf032aaa5a679230de9a95c7db=1689909110;Hm_lvt_9bcbda9cbf86757998a2339a0437208e=1689909111;'
                  'Hm_lpvt_9bcbda9cbf86757998a2339a0437208e=1689909111; qpfccr=true; no-alert3=true;'
                  'Hm_lpvt_c99546cf032aaa5a679230de9a95c7db=1689909132;'
    }
    url = "https://match.yuanrenxue.cn/jssm"
    session.request(method='POST', url=url)
    # print(session.cookies.get('sessionid'))
    session.headers['Cookie'] = f"{session.headers['Cookie']} sessionid={session.cookies.get('sessionid')};"
    url = f"https://match.yuanrenxue.cn/api/match/3?page={i}"
    result = session.request(method='GET', url=url)
    if result.json()['state'] == "success":
        print(result.json()['data'])
        value_sum += [v['value'] for v in result.json()['data']]

# 使用Counter计算元素频率
element_counts = Counter(value_sum)

# 使用most_common方法找出频率最高的元素及其频率
most_common_element, frequency = element_counts.most_common(1)[0]
print(value_sum)
print("频率最高的元素是:", most_common_element)
print("它出现的次数是:", frequency)