大数据物流项目中CM的安装与运用_cm大数据服务器启动

提供虚拟机【node2.itcast.cn】解压后，导入VMWare 软件中，启动虚拟机即可（选择我已移动该虚拟机）

• 1）、启动之前，设置node2.itcast.cn内存：4GB或者6GB或者8GB即可
• 2）、第一次启动虚拟机时，很慢很慢很慢，由于启动所有服务（CM安装CDH服务），时间5分钟以上
  • 浏览器登录：http://node2.itcast.cn:7180/cmf/，admin/admin
  • 将所有服务关闭：各个框架服务和CMS服务，而且CMS服务永远给关闭
• 3）、测试时，需要什么服务，启动什么服务，不要全部启动（耗内存，耗性能，没有任何意义）

架构原理：CM如何安装CDH框架，原理架构是什么？？？？？

• 1）、CM安装CDH集群时，架构属于主从分布式架构（Master/Slaves）

  • 主节点（老大）：CMS（ClouderaManagerServer），在一台机器上运行
  • 从节点（小弟）：安装服务（Cloudera Agent），所有大数据集群机器

  此时大数据集群机器，被CM管理，监控到基本信息（磁盘IO、网络IO和CPU与内存使用等等)

• 2）、Cloudera 将所有大数据框架放在某个目录，打成包：parcel

  • 首先parcel包，存储在CMServer主机的目录：/opt/cloudera/parcel-repo

• 3）、CMServer服务，将parcel包，分发给所有大数据集群机器：Cloudera Agent

  • 当所有集群机器下载parcel包以后，解压：/opt/cloudera/parcels

  • 每个框架安装目录：/opt/cloudera/parcels/CDH/lib/框架名称

  • 进入Kafka软件安装目录：/opt/cloudera/parcels/CDH/lib/kafka

下图表示使用CM安装CDH架构原理图，多多理解。

大数据服务器之CDH框架安装细节

当使用CM安装CDH集群以后，可以通过CM界面UI，管理整个集群服务和查看监控运行状态。

• 第一、框架用户，实际项目中按照大数据各个框架时，不建议使用root用户，创建普通用户。

​ 使用CM安装CDH集群时，针对每个框架（比如，HDFS、MAPREDUCE、YARN等）创建用户，不可以被用于登录操作系统。以框架名称创建用户，所有用户名为框架名称。

1. 第一点：linux系统：/etc/passwd

2. 第二点：启动服务，所使使用用户

• 第二、服务配置

​ 使用CM安装CDH组件时，配置分为2类：

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

.csdn.net/topics/618545628)**

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！