自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 收藏
  • 关注

原创 爬虫返回“系统繁忙,请稍后重试”

在爬取过程中加入time.sleep(5)可以有效缓解这个问题。

2024-09-17 17:21:41 894

原创 使用阿贾克斯请求爬取页面,以及当返回为空时的解决办法

但如果直接这样子发现返回什么值都没有,将这个url粘贴到浏览器上,发现也还是不行,说明不是cookie的影响,仔细对比这时的main文件和之前的main文件,发现之前的main文件中的headers有个Referer。在网络中选择XHR选项,查看捕捉到的文件,这里发现带有main的那个文件就是我们需要的URL。加入Referer后返回值正常。

2024-09-17 13:28:38 564

原创 requests.get()返回状态码为200,但没有返回任何内容的解决方案

之后再用selenium模拟打开浏览器(用requests应该也是可以的),需要下载一个webdriver(这里以edge为例,Chrome或者其他浏览器也是可以的)应该是缺少了cookie导致的,使用cookie进行身份验证。

2024-09-15 10:00:41 2235

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除