CDH5部署三部曲之一：准备工作，java电商项目面试话术

第一篇：《准备工作》，即CDH集群中每一台机器都要做的操作；

第二篇：《部署和设置》，本章完成CDH集群部署和启动；

第三篇：《问题总结》，列出实战中遇到的问题及解决办法；

系列文章链接

1. 《CDH5部署三部曲之一：准备工作》

2. 《CDH5部署三部曲之二：部署和设置》

3. 《CDH5部署三部曲之三：问题总结》

版本信息

1. CentOS：7.6.1810

2. Python： 2.7.5（操作系统自带）

3. CM包：cloudera-manager-centos7-cm5.7.2_x86_64.tar.gz

服务器规划

本次搭建的CDH集群一共用到三台机器，一台master，另外两台是agent：

| 主机名 | IP地址 | 内存 | 身份 |

| — | — | — | — |

| master | 192.168.133.152 | 双核4G内存 | 管理节点 |

| worker1 | 192.168.133.153 | 双核8G内存 | 任务节点 |

| worker2 | 192.168.133.154 | 双核16G内存 | 任务节点 |

文件下载

1. cm下载地址：http://archive.cloudera.com/cm5/cm/5/ ，找到自己需要的cm包下载，本次实战用的是cloudera-manager-centos7-cm5.7.2_x86_64.tar.gz，如下图红框：

2. parcel下载地址：http://archive.cloudera.com/cdh5/parcels ，本次实战用到的是CDH-5.7.2-1.cdh5.7.2.p0.18-el7.parcel，请下载下图红框中的三个文件，注意一共要下载三个文件：

所有机器都要做的相同操作

以下操作需要master、worker1、worker2各自做一遍：

1. 本次实战在所有机器上的操作，都使用root账号；

2. 确保所有机器都可以用SSH工具远程登录；

3. 安装时间同步工具：

yum install -y ntpdate

4. 时间同步：

ntpdate cn.ntp.org.cn

5. 关闭和禁用防火墙：

systemctl stop firewalld && systemctl disable firewalld

6. 关闭SELINUX：打开文件/etc/selinux/config，找到SELINUX=xxx那一行，改为SELINUX=disabled，如下图红框：

7. 关闭swap：打开文件/etc/fstab，找到带有swap的那一行，注释掉，如下图红框：

8. 重启电脑；

9. 新建文件夹/usr/lib/jvm

10. 安装JDK，我这里下载的是jdk-8u191-linux-x64.tar.gz，解压后是个名为jdk1.8.0_191的文件夹，将此文件夹放在/usr/lib/jvm目录下；

11. 打开文件/etc/profile，在尾部增加以下内容：

export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_191

export JRE_HOME=${JAVA_HOME}/jre

export CLASSPATH=.:$JAV{A}_{H}OME/lib:${JRE_HOME}/lib

export PATH=$JAV{A}_{H}OME/bin:$PATH

12. 使配置生效：

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Java工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Java开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Java开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024b （备注Java）

《MySql面试专题》

《MySql性能优化的21个最佳实践》

《MySQL高级知识笔记》

文中展示的资料包括：**《MySql思维导图》《MySql核心笔记》《MySql调优笔记》《MySql面试专题》《MySql性能优化的21个最佳实践》《MySq高级知识笔记》**如下图

关注我，点赞本文给更多有需要的人

一个人可以走的很快，但一群人才能走的更远。如果你从事以下工作或对以下感兴趣，欢迎戳这里加入程序员的圈子，让我们一起学习成长！

AI人工智能、Android移动开发、AIGC大模型、C C#、Go语言、Java、Linux运维、云计算、MySQL、PMP、网络安全、Python爬虫、UE5、UI设计、Unity3D、Web前端开发、产品经理、车载开发、大数据、鸿蒙、计算机网络、嵌入式物联网、软件测试、数据结构与算法、音视频开发、Flutter、IOS开发、PHP开发、.NET、安卓逆向、云计算

304bb5a486d4c3ab8389e65ecb71ac0)

AI人工智能、Android移动开发、AIGC大模型、C C#、Go语言、Java、Linux运维、云计算、MySQL、PMP、网络安全、Python爬虫、UE5、UI设计、Unity3D、Web前端开发、产品经理、车载开发、大数据、鸿蒙、计算机网络、嵌入式物联网、软件测试、数据结构与算法、音视频开发、Flutter、IOS开发、PHP开发、.NET、安卓逆向、云计算