猿人学第三题代码（写2022-5-2）和一点笔记。

cottpaddedC

已于 2022-05-02 21:41:58 修改

阅读量819

点赞数 3

分类专栏：猿人学爬虫专栏文章标签： python 爬虫

于 2022-05-02 20:07:24 首次发布

本文链接：https://blog.csdn.net/cottpaddedC/article/details/124545634

版权

这篇博客记录了在Python爬虫实践中遇到的一个关于Vary头的问题，探讨了Vary头在HTTP请求和响应中的作用，以及它如何影响缓存判断。作者还提到了Header排序对于请求的影响，指出不同写法可能会导致请求头顺序变化，这可能是反爬策略的一部分。此外，简单介绍了session和cookie的区别，强调理解cookie对于应对反爬的重要性。

摘要由CSDN通过智能技术生成

直接焊代码（这个代码写在2022-5-2）这道题比较简单，就是抓包-推断-完事

import requests
import time
import re


def main():
    header_ = {
   
        'Host': 'match.yuanrenxue.com',
        'Connection': 'keep-alive',
        'Content-Length': '0',
        'Pragma': 'no-cache',
        'Cache-Control': 'no-cache',
        'sec-ch-ua': '"Google Chrome";v="95", "Chromium";v="95", ";Not A Brand";v="99"',
        'sec-ch-ua-mobile': '?0',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/95.0.4638.10 Safari/537.36',
        'sec-ch-ua-platform': '"Windows"',
        'Accept': '*/*',
        'Origin': 'https://match.yuanrenxue.com',
        'Sec-Fetch-Site': 'same-origin',
        'Sec-Fetch-Mode': 'cors',
        'Sec-Fetch-Dest': 'empty',
        'Referer': 'https://match.yuanrenxue.com/match/3'