Python爬虫| 爬取CSDN博客排行榜数据(Ajax实战)

70 篇文章 259 订阅 ¥39.90 ¥99.00
本文介绍了如何使用Python爬虫抓取CSDN博客的Python类目排行榜数据。通过分析Ajax动态请求,发现关键参数page、pageSize和child_channel,并展示了实现代码,成功获取到目标数据。
摘要由CSDN通过智能技术生成

前言

在爬取csdn博客排行榜之前,我们看到页面的加载形式,相信懂的人一眼就知道是Ajax 动态请求,关于Ajax这里不再细说,可以看小编上一篇关于爬虫Ajax的文章——Python爬虫| Ajax动态解密

这里只针对python类目的数据进行爬取(https://blog.csdn.net/rank/list?type=python)
在这里插入图片描述

爬虫之前的准备工作

下面,直接跟着小编进入主题。用谷歌浏览器打开网页,按F12键打开开发者工具,对页面进行刷新,会出现一堆链接,这个时候就要考验观察力和平时对爬虫项目的经验了。相信有的朋友,可能一眼就看出来了,找到这个信息并点开会找到重要的信息,如下:
在这里插入图片描述
在这里插入图片描述
我们用鼠标将页面继续往下滑,又会出现新的数据信息,仔细观察,有下面三个参数(page,pageSize,child_chan

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

写python的鑫哥

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值