![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 84
爱喝水的绿萝
这个作者很懒,什么都没留下…
展开
-
Hadoop入门(一)
一、Hadoop的组成1. HDFSHadoop分布式文件系统 海量数据的存储 NameNode 集群中的主节点,用来管理元数据(文件属性信息) DataNode 集群中的从节点,用来管理文件块 SecondaryNameNode 集群中的辅助节点,用于NameNode的存储优化和数据恢复 2. YARN分布式资源(cpu、内存等计算资源)调度服务 ResourceManager 集群中的主节点,用于接收客户都提交的任务,并将任务分发给NodeManager原创 2021-11-16 10:05:19 · 185 阅读 · 0 评论 -
Hadoop入门(二)
四、集群启动/停止方法1、各个模块分开启动/停止(1)整体启动/停止HDFSstart-dfs.sh/stop-dfs.sh(2)整体启动/停止YARNstart-yarn.sh/stop-yarn.sh2、各个服务逐一启动/停止(1)分别启动/停止HDFS组件hdfs --daemon start/stop namenode/datanode/secondarynamenode(2)启动/停止YARNyarn --daemon start/stop reso原创 2021-11-19 09:47:36 · 237 阅读 · 0 评论