用requests爬虫拒绝301/302页面的重定向而拿到Location(重定向页面URL)的方法

最新推荐文章于 2024-07-10 08:43:38 发布

Mao_code

最新推荐文章于 2024-07-10 08:43:38 发布

阅读量2.7w

点赞数 2

分类专栏： python爬虫笔记文章标签：爬虫 url

本文链接：https://blog.csdn.net/Mao_code/article/details/54017708

版权

通过设置requests库的allow_redirects参数为False，可以防止301或302重定向，并能从响应头中获取到重定向页面的Location URL。

摘要由CSDN通过智能技术生成

def yunsite():
    'url'
    headers = {
  'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
               'Accept-Encoding': 'gzip, deflate, sdch, br',
               'Accept-Language': 'zh-CN,zh;q=0.8',
               'Connection': 'keep-alive',
               'Host': 'pan.baidu.com',