搭建Hadoop集群,一个月6T的数量需要几台服务器
配置几个namenode,几个datanode,namenode和datanode怎么部署,内存与硬盘大小。
最好是两个做成HA
关于硬盘:
6T的数据容量,看你副本数量设置是多少,一般默认为3,那么仅这些就需要18T硬盘,稍微大一点20T吧;这仅仅是HDFS存储;(这里我说的是一个月的,你数据保存几个月,就乘几倍)
如果你集群上面要跑计算,MR计算出来的数据要保
原创
2017-12-08 14:03:58 ·
5218 阅读 ·
0 评论