【python | requests | ssl.SSLCertVerificationError】

python 在使用 requests 做数据提取时遇到的问题

是potsman给的代码块

url = "https://xueqiu.com/"

payload = {}
headers = {
    'Cookie': 'acw_tc=2760827b16765517073704477e7a2625d3ad88e8470c9544ba7dcd71b44ab4; u=941676552547638; xq_a_token=72dea7021454f100bc72154931cdd6e0a6eecd76; xq_id_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJSUzI1NiJ9.eyJ1aWQiOi0xLCJpc3MiOiJ1YyIsImV4cCI6MTY3ODY2Njg3MCwiY3RtIjoxNjc2NTUyNDg4Mjc3LCJjaWQiOiJkOWQwbjRBWnVwIn0.NQzt6qfKj10h9f2fZ0B9mLhERHr4Fj8hlH9LLYkA_8XWD8Y8rkQ8AKQ4-KGCRyo5zg5Pmzjm01TGSrKHLy_sbylZwQ5gVRuUj6EFCrmcgd_xsmnP6ZSTShrNOoNYkw3PWwPrnRII03K7eSz0L2txXEhQ1yybaRJN-w55THOVZSbL78Qz6Vz6r-DO3vmSrpS_fzDu7eVYXfYSQy-fs9mRtGzx33cANhrJF2HUhUtEWSaEyqFcyp5gxpFqYo-2nvbsWvNVjE8AtsSf-MB5w-ipx4IfY0lJlZ4fuEfQETQFv2wTFL8QjhZvCWre6Sq8MnhShBgekG6KkfVEGc3ZwO7SZA; xq_r_token=ad070cd3d55cc70f02f135fb52765cfbe11fa994; xqat=72dea7021454f100bc72154931cdd6e0a6eecd76'
}

response = requests.request("GET", url, headers=headers, data=payload)

print(response.text)

问题1

运行之后的结果

403 Forbidden. Your IP Address: 106.75.163.248 .

然后对比postnam以及浏览器上的请求,添加以下请求对即可:

headers = {
            "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0 Safari/537.36"
        }
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
`ssl.SSLCertVerificationError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: self signed certificate (_ssl.c:1131)` 这个问题通常是由于 Pythonssl 模块在进行 HTTPS 请求时无法验证服务器证书导致的。以下是一些解决方法: 1. 使用 verify=False 参数禁用证书验证: ``` import requests response = requests.get('https://example.com', verify=False) ``` 这种方法虽然可以解决问题,但是会降低请求的安全性。 2. 更新本地 SSL 证书: 在 Windows 系统上,可以执行以下命令更新证书: ``` pip install --upgrade certifi ``` 在 macOS 上,可以执行以下命令更新证书: ``` sudo /Applications/Python\ {version}/Install\ Certificates.command ``` 在 Linux 上,可以执行以下命令更新证书: ``` sudo apt-get install ca-certificates ``` 3. 指定证书路径: 可以通过设置环境变量 `REQUESTS_CA_BUNDLE` 或者 `CURL_CA_BUNDLE` 来指定证书路径,这样 ssl 模块就可以找到证书进行验证了。 ``` import os import requests os.environ['REQUESTS_CA_BUNDLE'] = '/path/to/cert.pem' response = requests.get('https://example.com') ``` 4. 添加服务器证书到本地信任列表: 可以通过以下步骤将服务器证书添加到本地信任列表: - 通过浏览器访问 HTTPS 网站,获取证书文件。 - 将证书文件保存到本地。 - 在 Python 程序中使用以下代码: ``` import ssl context = ssl.create_default_context() context.load_verify_locations('/path/to/cert.pem') response = requests.get('https://example.com', verify='/path/to/cert.pem') ``` 以上是一些可能的解决方法,具体方法需要根据实际情况选择。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

是魏毛毛啊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值