Hadoop 2.6.5 集群搭建(基于Mac os 11.1)

Hadoop 2.6.5 集群搭建(基于Mac os 11.1)

背景

1. 之前博客都是研究时环境,hadoop,spark等版本都比较新
2. 本文基于对生产环境还原,使用较低的2.6.5版本(实际生产中一般不会使用较新的开源版本,而是使用经过验证的稳定的版本如hadoop, spark的 2.x 系列的版本)

步骤

1. mac os 11.1
2. jdk 1.8(mac os上安装),
3. linux(centos 7) 上安装open jdk的1.8版本

yum install -y  java-1.8.0-openjdk-devel

注意这个可以解决无jps功能问题

4. final shell (国产免费的xshell和securecrt 替代者)
5. centos7,随便去哪个国内镜像上下载皆可(拷贝链接后,使用迅雷下载会有惊喜哦)
   

安装centos和mac 上使用vmware的教程,可以参考这位老兄的博客:https://blog.csdn.net/myuhua/article/details/81215209

6. hadoop 2.6.5安装

可以参考这位老兄博客:https://blog.csdn.net/t1anyuan/article/details/78492386

7. 本文主要是用来做一下简短记录,今日份搭建集群踩坑记录