使用工具:八爪鱼客户端
在八爪鱼客户端中可以使用自定义模式灵活配置采集任务
首先需要确定目标网址和采集需求
以公开数据房地产信息平台为例,首先需要挖掘出目标网址,然后去采集全部"房源"搜索结果的数据(八爪鱼工具采集)
目录
一 挖掘目标网址
1.进入目标网址查看
①输入目标网址:http://zjj.sz.gov.cn:8004/(以深圳市房地产信息平台为例)
②点击"房源库"按钮,出现对应的"标题栏"
③点击标题栏下的"一手预售房源"按钮,即可出现目标数据
如下图所示:
2.挖掘目标数据的真实网址
①首先按F12进入开发者界面
②然后通过点击"一手房预售房源"按钮,进入到数据详情面板
③点击所出现的"index.aspx"文件,并选取复制真正的数据URL链接:http://zjj.sz.gov.cn/ris/bol/szfdc/index.aspx