hadoop
ZereChen
我就是我
展开
-
Hadoop分布式集群搭建
HADOOP集群具体来说包含两个:HDFS 集群和YARN 集群,两者逻辑上分离但物理集群。 一个HDFS集群是由一个NameNode和若干个DataNode组成的。其中NameNode作为主服务器,管理文件系统的命名空间和客户端对文件系统的访问操作;集群中的DataNode管理存储的数据。 YARN集群主要负责海量数据运算时的资源调度,集群中角色主要有 ResourceManager/原创 2017-10-01 12:57:18 · 404 阅读 · 0 评论 -
IDEA向hadoop集群提交作业
1. 说明本地环境:Intellij IDEA15.0.2 、jdk-7u65-windows-x64.exe、hadoop-2.6.1.tar.gz集群环境及其配置详情请见:http://blog.csdn.net/qq_28039433/article/details/78147172本文原先是根据http://blog.csdn.net/uq_jin/article/details/52原创 2017-10-02 12:58:29 · 1868 阅读 · 0 评论