八爪鱼-自定义模式采集数据

使用工具:八爪鱼客户端

在八爪鱼客户端中可以使用自定义模式灵活配置采集任务

首先需要确定目标网址和采集需求

以公开数据房地产信息平台为例，首先需要挖掘出目标网址，然后去采集全部"房源"搜索结果的数据(八爪鱼工具采集)

---

目录

一 挖掘目标网址

1.进入目标网址查看

2.挖掘目标数据的真实网址

二 设置采集流程

1.粘贴网址并开始设置采集流程

2.设置数据目标对象

三 生成采集设置

四 设置翻页和滚动操作

五 启动采集

六 导出数据

七 采集数据的展示

---

一 挖掘目标网址

1.进入目标网址查看

①输入目标网址：http://zjj.sz.gov.cn:8004/(以深圳市房地产信息平台为例)

②点击"房源库"按钮，出现对应的"标题栏"

③点击标题栏下的"一手预售房源"按钮，即可出现目标数据

如下图所示：

2.挖掘目标数据的真实网址

①首先按F12进入开发者界面

②然后通过点击"一手房预售房源"按钮，进入到数据详情面板

③点击所出现的"index.aspx"文件，并选取复制真正的数据URL链接：http://zjj.sz.gov.cn/ris/bol/szfdc/index.aspx

---

二 设置采集流程