python使用request中session登录post方式页面进入豆瓣

十三先生po

于 2021-09-18 17:48:28 发布

阅读量1k

点赞数

分类专栏：爬虫文章标签： python

本文链接：https://blog.csdn.net/weixin_55579895/article/details/120371655

版权

这篇博客介绍了如何利用Python的requests库中的session功能，模拟登录豆瓣网站。通过手动登录获取cookie，并将其应用于爬虫程序，以实现登录状态下的数据抓取。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

对于豆瓣这个登录必须有验证的网址，

post和get没有关联性，按照不同的需求使用不同的连接方式，可以先自己手动登录到豆瓣，然后拷贝登录后的cookie到代码里，爬虫程序就会以登录后的状态抓数据了

import requests
from user_agent import headers

def douban_login():
    login_url = 'https://accounts.douban.com/j/mobile/login/basic'
    url = 'https://www.douban.com/people/221725636/'
    # headers = {
    #     'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3875.400 QQBrowser/10.8.4492.400'
    # }

    # 发送请求
    # 在发送的时候以传参的方式发送cookie
    # cookies = 'bid=CoFnyYaHvxQ; douban-fav-remind=1; __yadk_uid=MGLPA6D5bDkj8JypPNYfwDtVVqUUC1nu; ll="118281"; push_doumail_num=0; __utmv=30149280.22172; gr_user_id=59b923b6-172f-4e68-a7f1-4a2facfb25c7; _ga=GA1.1.843993488.1628860359; _ga_RXNMP372GL=GS1.1.1628860359.1.0.1628860362.0; push_noty_num=0; __g