Python爬虫:browsercookie库获取浏览器cookie

第三方库:browsercookie
可以很轻易的获取浏览器cookie,访问需要需要登录才能查看的页面

pipy主页: https://pypi.org/project/browsercookie/

代码示例


# 获取浏览器cookie

import browsercookie
import requests
from bs4 import BeautifulSoup

# 消除 warning   InsecureRequestWarning
from requests.packages import urllib3
urllib3.disable_warnings()

# 获取cookie,前提是需要浏览器登陆过
chrome_cookie = browsercookie.chrome()
# for cookie in chrome_cookie:
#     print(cookie)

headers = {"User-Agent": "Mozilla/5.0"}

# 获取页面信息
response = requests.get("https://my.csdn.net/",
                cookies=chrome_cookie, headers=headers, verify=False)

# 解析获取的页面
soup = BeautifulSoup(response.text, features="lxml")
person_sign = soup.find(name="dd", attrs={"class", "person-sign"})

# 出去结果
print(person_sign.text)
# 要成为程序员的男人,个人主页:www.pengshiyu.com


评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值