大数据集群部署

大数据集群部署前考虑的几个问题:

数据量

存储能力

计算能力

内存处理

主要组件 hdfs yarn(ha最重要)

最小集群从6台起步,选择两台为nn和rs服务节点


存储能力计算:   数据量*3/3*4


slave 节点硬件选择:

 中配:


master节点硬件选择:


软件的选择





阅读更多
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/wjandy0211/article/details/78516038
个人分类: 大数据架构
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

加入CSDN,享受更精准的内容推荐,与500万程序员共同成长!
关闭
关闭