快速搭建iServer大数据分布式空间分析服务

一、环境说明

本文档采用单机部署,分析数据则采用共享目录的方式进行,其中8090端口iServer为主节点

  • 单机部署
    1. 启动2个iServer,端口分别为8090(默认),8091,关闭端口分别为8015(默认),8016
      (修改端口在iServer安装目录下/conf/server.xml,修改8090启动端口,8015关闭端口)
    2. 准备一份需要分析的数据,可以参考产品包中自带的范例
      (范例数据iServer安装目录下/samples/data/ProcessingData)

二、部署流程

  1. 主节点(8090)开启Spark集群,自身加入集群并开启分布式服务
  2. 子节点(8091)加入主节点Spark集群
  3. 所有节点拷贝数据(单机部署数据仅存放主节点即可)
  4. 主节点使用分布式分析服务进行分析

三、详细步骤

  1. 启动主节点iServer,开启集群。
    在这里插入图片描述

  2. 启动主节点iServer,在iServer中通过集群-》加入集群-》添加报告器并保存的方式加入集群,服务地址使用主节点的ip和端口,如:http://192.168.15.136:8090/iserver/services/cluster。
    在这里插入图片描述

  3. 开启分布式分析服务。
    在这里插入图片描述

  4. 访问http://IP:8080/ 查看Spark集群节点情况,当前状态下有一个节点。
    在这里插入图片描述

  5. 主节点iServer注册数据
    [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-WgP63lF4-1575251945613)(http://owdkmc7i2.bkt.clouddn.com/9.png)]
    在这里插入图片描述
    注意:如下图所示,当看到有?号时,需要指定CSV的XY列
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

  6. 启动子节点iServer,通过集群-》加入集群-》添加报告器填写主节点ip地址,保存加入集群在这里插入图片描述

  7. 子节点数据拷贝(由于是单机部署数据路径相同,这一步可略过,若是多机集群,则需将数据拷贝到每个子节点,且数据存放路径需与主节点一致)。

  8. 访问http://IP:8080/ 查看Spark集群节点情况,当前状态下有两个节点。
    在这里插入图片描述
    9.访问主节点iServer 进入大数据分析页面(http://IP:8090/iserver/services)
    [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-rTTTFqfJ-1575251945614)(http://owdkmc7i2.bkt.clouddn.com/14.png)]
    一直往里面点,当看到如下界面时,可以看到当前版本所支持的大数据分析操作!在这里插入图片描述

  9. 此次我们使用aggregatePoints(点聚合分析)功能,填写相关参数
    在这里插入图片描述
    在这里插入图片描述
    最终会弹出如下分析成功页面,点击使用JS方式浏览,即可可视化查看分析结果内容
    在这里插入图片描述
    在这里插入图片描述

四、注意事项

  1. 多节点分析,需将数据拷贝到每个子节点,且数据存放路径与主节点一致。
  2. 分析时,可以查看8080端口查看Spark集群情况,当任务写到Completed时,表明执行成功。
  3. 创建分析任务选项卡如果为灰色,则表明未登录或登陆超时失效,需要重新登陆。
  4. 如果运行时间过长,可以查看http://IP:4040/地址查看当前执行进度
    [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-SzaDqDJG-1575251945616)(http://owdkmc7i2.bkt.clouddn.com/运行时.png)]
  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 3
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值