Kapow
法海爱捉虫
大虫在哪里呀,长虫在哪里,虫虫在法海滴禅杖和盆钵里!
展开
-
Kapow_01 Web数据采集安装及配置
一、环境要求开发机兼服务器操作系统:win7sp1 X64 旗舰版,win10 X64 企业版,win2012R2 标准版(最新补丁版)内存:8G 或以上硬盘:50G 左右(足够存放文件即可)客户端用于开发 DevicesAutomation 机器人,如只学习 web 开发不需要此电脑)配置:操作系统跟开发机的相同,内存 4G 或以上二、软件安装点击Kapow_10.3.0.7_...原创 2019-09-24 16:12:18 · 873 阅读 · 6 评论 -
Kapow_02 Web数据采集项目创建
一、需求获取深圳二手房成交记录页面地址:https://sz.centanet.com/chengjiao/g1/1.抓取所有交易记录数据(包括楼盘名称,户型,房源情况,面积,成交时间,成交价,单价,经纪人)2.将抓取到的数据写入到本地数据库3.发布机器人到后台4.创建 Schedule 调度机器人,每天上午 8 点运行二、操作实施2.1 新增Project↓↓↓↓↓↓输入项目...原创 2019-09-24 16:48:16 · 381 阅读 · 0 评论 -
Kapow_03 Web数据采集选择抓取区域,添加For循环
上章节Kapow_02 Web数据采集项目创建已介绍项目创建。这章节将介绍事务创建一、增加LoadPage1.1 右键,点击 Insert Step Before,点击 Action Step↓↓↓↓↓↓1.2 选中 Unnamed 节点,修改右边的 Action 为 LoadPage↓↓↓↓↓↓1.3 输入URL地址↓↓↓↓↓↓二、选择抓取区域,添加For循环2.1 选择抓取...原创 2019-09-24 17:10:18 · 329 阅读 · 1 评论 -
Kapow_04 Web数据采集新增属性类型
接着上章节Kapow_03 Web数据采集选择抓取区域,添加For循环一、新建Type,用于存放数据1.1 点击 Types 文件夹,右键选择Type↓↓↓↓↓↓1.2 输入Type名称,点击Finish ↓↓↓↓↓↓二、增加抓取数据属性信息2.1 点击 “+”增加数据属性信息2.2 填写属性信息我们要抓取信息 楼盘名称,户型,房源情况,面积,成交时间,成交价,单价,经纪人...原创 2019-09-24 17:33:58 · 288 阅读 · 0 评论 -
Kapow_05 Web数据采集抓取数据属性及配置本地数据库
接着上章节:Kapow_04 Web数据采集新增属性类型一、抓取数据到对应类型属性在所抓取区域中,选中值,如单击选中“楼盘名称”属性的第1个值,点击右键,点击对应类型中的“楼盘名称” ↓↓↓↓↓↓成功后,会生成一个Extract的步骤。↓↓↓↓↓↓按上面步骤,依次增加户型,房源情况,面积,成交时间,成交价,单价,经纪人。↓↓↓↓↓↓.二、配置本地数据库2.1 增加Action S...原创 2019-09-25 09:36:43 · 372 阅读 · 1 评论 -
Kapow_06 Web数据采集Debug执行机器人
接着上章节:Kapow_05 Web数据采集抓取数据属性及配置本地数据库一、Debug执行机器人抓取数据切换到Debug面板,点击运行按钮,即可抓取相关数据。↓↓↓↓↓↓二、Web后台查看抓取数据点击 Management Console(localhost),右键,点击 Open。↓↓↓↓↓↓弹出浏览器界面,可看到抓取的数据已保存至数据库。↓↓↓↓↓↓三、发布机器人到Web后台...原创 2019-09-25 09:56:44 · 332 阅读 · 0 评论 -
Kapow_Web数据采集步骤
学习了解Kapow_Web数据采集步骤的童鞋,建议按以下目录依次调阅。。。1.1 安装及配置1.2 项目创建1.3 选择抓取区域,添加For循环1.4 新增属性类型1.5 抓取数据属性及配置本地数据库1.6 Debug执行机器人...原创 2019-09-25 10:07:35 · 1035 阅读 · 0 评论