requests爬虫遇到的问题

1. 报错

ValueError: check_hostname requires server_hostname

首先检查梯子,如果有梯子要先关掉

2. 报错×2

AttributeError: 'Response' object has no attribute 'status'

参考网上文章尝试:

① 以管理员身份运行PyCharm→无效

② 改成Python3.8解释器 →已经设置正确,无效

③ 配置文件→已经设置正确,无效 (总结pycharm运行爬虫代码只显示Process finished with exit code 0的解决办法_风飘-小谭谭的博客-CSDN博客

可能是编辑器并非IDE,所以正常运行但无法输出。换成python.exe,可以输出。显示状态为 418

3. 418错误

原因是未添加请求header的useragent,以防止反爬虫识别

chrome浏览器直接输入chrome://version/,可查询UserAgent

后改代码为

import requests
headers = {'User-Agent': '查询结果'}
r = requests.get('查询地址', headers=headers)
r.status_code
r.text

成功

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值