hadoop集群搭建

---

背景

使用虚拟机，搭建Hadoop集群
环境：

1. 宿主机Windows10，virtualBox 6.1.8
2. 四台Ubuntu 16.0.4 虚拟机

主要参考这三篇文章
https://www.cnblogs.com/qingyunzong/p/8496127.html#_label4_4
https://blog.csdn.net/qq_35246620/article/details/88576800
https://github.com/heibaiying/BigData-Notes/blob/master/notes/installation/Hadoop%E9%9B%86%E7%BE%A4%E7%8E%AF%E5%A2%83%E6%90%AD%E5%BB%BA.md

---

一、操作步骤

二、技巧、排坑

1. 虚拟机先安装一个，配置好apt源（中科大或清华）并更新，安装中文输入法（fcitx-pinyin），装好java，然后复制成四个虚拟机。参考：虚拟机安装&初始化，虚拟机复制
2. java安装，apt安装openjdk即可，然后设置JAVA_HOME，参考：ubuntu设置JAVA_HOME，ubuntu查看java安装目录
3. SSH免密后依然需要输入密码，可能是文件夹的权限不对，参考：SSH免密后依然需要输入密码
4. ubuntu下vi上下左右方向键出现字母backspace键不能删除字符
   
5. hadoop下载地址：https://hadoop.apache.org/releases.html
6. datanode无法启动，删除tmp文件夹并重新格式化，参考：https://stackoverflow.com/questions/11889261/datanode-process-not-running-in-hadoop