大数据集群部署前考虑的几个问题:
数据量
存储能力
计算能力
内存处理
主要组件 hdfs yarn(ha最重要)
最小集群从6台起步,选择两台为nn和rs服务节点
存储能力计算: 数据量*3/3*4
slave 节点硬件选择:
中配:
master节点硬件选择:
软件的选择
大数据集群部署前考虑的几个问题:
数据量
存储能力
计算能力
内存处理
主要组件 hdfs yarn(ha最重要)
最小集群从6台起步,选择两台为nn和rs服务节点
存储能力计算: 数据量*3/3*4
slave 节点硬件选择:
中配:
master节点硬件选择:
软件的选择