python爬虫豆瓣影评的爬取cookies实现自动登录账号

最新推荐文章于 2021-07-01 20:12:13 发布

DY_reason

最新推荐文章于 2021-07-01 20:12:13 发布

阅读量1.8k

点赞数

分类专栏： python学习文章标签： python

本文链接：https://blog.csdn.net/weixin_46173586/article/details/107944927

版权

python爬虫豆瓣影评的爬取cookies实现自动登录账号

频繁的登录网页会让豆瓣锁定你的账号……
在这里插入图片描述

网页请求

使用cookies来实现的自动登录账号，这里的cookies因为涉及到账号我屏蔽了，具体的cookies获取方法直接可以让浏览器实现自动登录后，在网页请求信息中自己找到。

def askURL(url):
    head = {
   
        "User-Agent": "Mozilla / 5.0(Windows NT 10.0;WOW64) AppleWebKit / 537.36(KHTML, likeGecko) Chrome / 77.0.3865.90Safari / 537.36"
    }
    cookies ={
   
        "Cookie":' ***********************'
    }
    # request = urllib.request.Request(url, headers=head)
    # html = ""
    # response = urllib.request.urlopen(request)
    # html = response.read().decode("utf-8")
    html = requests.get(url,cookies=cookies,headers=head)
    print("网站返回成功")
    return html.text