weixin_40474941的博客

启动cloudera-scm-agent报错：Error getting directory attributes for /opt/cloudera-manager/cm-5.16.1/log/cloudera-scm-agent

用 CM 安装 CDH 集群时，配置安装 YARN 时报错。之后成功安装 YARN。

Hadoop 是一个开源的分布式计算和存储框架，它的作用非常简单，就是在多计算机集群环境中营造一个统一而稳定的存储和计算环境，并能为其他分布式应用服务提供平台支持，相当于在某种程度上将多台计算机组织成了一台计算机。Hadoop 框架最根本的原理就是利用大量的计算机同时运算来加快大量数据的处理速度。Hadoop 集群可运行于一般的商用服务器上，具有高容错、高可靠性、高扩展性等特点。适合一次写入，多次读取的场景，不适合频繁修改文件及大量的小文件和低延时的数据访问。本文将对Hadoop 的三大核心组件进行介绍

@[TOC]一、安装配置虚拟机（1）安装1个master和2个slave节点VMware及CentOS安装步骤参考：https://blog.csdn.net/m0_50519965/article/details/116175873按照以上步骤安装好虚拟机之后会遇到一下几个问题：1.在CM上安装主节点parcel的时候提示磁盘空间不足，因此建议master节点的磁盘空间增加到40G或60G，我的配置是内存磁盘master8G60Gslaver1\slaver22