Python爬虫 requests教学(四):verify关健字参数

数字证书(俗称ca证书,以下简称ca证书)为实现双方安全通信提供了电子认证。在因特网、公司内部网或外部网中,使用数字证书实现身份识别和电子信息加密。数字证书中含有密钥对(公钥和私钥)所有者的识别信息,通过验证识别信息的真伪实现对证书持有者身份的认证。

Python爬虫、数据分析、网站开发等案例教程视频免费在线观看

https://space.bilibili.com/523606542 

Python学习交流群:1039649593

目前各大网站基本有自己的ca证书,但是不排除有的网站为了节约网站建设开销并没有购买ca证书。又因为requests模块在发送网络请求的时候,默认会验证ca证书。如果当前网站没有ca证书,那么就会报出如下的错误:

 

如果出现上述错误,那么我们可以用verify关键字参数,在请求的时候不验证网站的ca证书

response = requests.get( "url",verify=False)

如果加了verify=False这个关键字参数,使用requests模块发送请求的时候会给你弹出一个警告,警告你当前的请求可能不安全,如下图所示:

 

 

这个警告对于后面的代码逻辑没有影响,有强迫症的可以考虑加入以下代码忽略警告:

import urllib3
urllib3.disable_warnings() 
### Python Requests爬虫函数参数说明 #### 请求头设置 当使用`requests.get()`方法时,可以通过传递一个典给`headers`参数来指定HTTP请求头部信息。这有助于模拟浏览器行为,从而提高抓取的成功率[^1]。 ```python import requests headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36" } response = requests.get('https://example.com', headers=headers) ``` #### URL参数附加 除了直接在URL符串中嵌入查询参数外,还可以利用`params`参数传入一个典作为查询条件的一部分。这种方式更加灵活且易于维护[^2]。 ```python query_params = {'wd': 'python'} response = requests.get('https://www.baidu.com/s', params=query_params) print(response.url) # 输出完整的带有参数的URL地址 ``` #### 控制访问选项 `requests.get()`还接受多个用于控制连接行为的关键参数(`**kwargs`),例如超时时间(timeout),SSL验证(verify)等。这些配置项可以增强程序健壮性和安全性[^4]。 ```python # 设置最大等待时间为5秒,并关闭SSL证书校验 response = requests.get( 'https://insecure.example.com', timeout=5, verify=False # 不推荐生产环境中禁用此安全特性 ) ``` #### 发送不同类型的数据 对于POST请求而言,通常需要向服务器提交表单数据或JSON负载。此时应分别采用`data`或`json`关键参数[^5]。 ```python form_data = {'username': 'test_user', 'password': 'secret'} response_post_form = requests.post('http://example.com/login', data=form_data) json_payload = {'key': 'value'} response_post_json = requests.post('http://api.example.com/resource', json=json_payload) ```
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值