-
用360浏览器测试(同样适用于其他浏览器)
以下面网页获取粉丝数据为例,爬取其他的数据也是一样的方法。
参考网址:https://blog.csdn.net/icekoor?type=blog
-
打开开发人员工具或者按F12
-
第一步:选择网络
-
第二步:选择XHR
-
第三步:没有返回数据是,点击CTRL+R,刷新记录
-
第四步:点击头像,返回数据会更新出get-user-info
-
第五步:预览里可以查看到fansCount:2
-
第六步:返回到标头中,获取对应的网址:https://www.csdn.net/community/toolbar-api/v1/get-user-info(该信息需要登录才能看到,所以仅供参考)
-
第七步:直接再浏览器中输入上述的网址,即可获得json格式的数据;
-
第八步:json格式数据,可以利用菜鸟工具解析,方便后续抓取数据;
// JOSN是一种轻量级的数据交换格式,遵循一下规则:
// 1.并列的数据之间用逗号(,)分隔
// 2.映射用冒号(:)表示
// 3.并列数据的集合(数组)用方括号([])表示
// 4.映射的集合(对象)用大括号({})表示