背景
使用虚拟机,搭建Hadoop集群
环境:
- 宿主机Windows10,virtualBox 6.1.8
- 四台Ubuntu 16.0.4 虚拟机
主要参考这三篇文章
https://www.cnblogs.com/qingyunzong/p/8496127.html#_label4_4
https://blog.csdn.net/qq_35246620/article/details/88576800
https://github.com/heibaiying/BigData-Notes/blob/master/notes/installation/Hadoop%E9%9B%86%E7%BE%A4%E7%8E%AF%E5%A2%83%E6%90%AD%E5%BB%BA.md
一、操作步骤
二、技巧、排坑
- 虚拟机先安装一个,配置好apt源(中科大或清华)并更新,安装中文输入法(fcitx-pinyin),装好java,然后复制成四个虚拟机。参考:虚拟机安装&初始化,虚拟机复制
- java安装,apt安装openjdk即可,然后设置JAVA_HOME,参考:ubuntu设置JAVA_HOME,ubuntu查看java安装目录
- SSH免密后依然需要输入密码,可能是文件夹的权限不对,参考:SSH免密后依然需要输入密码
- ubuntu下vi上下左右方向键出现字母backspace键不能删除字符
- hadoop下载地址:https://hadoop.apache.org/releases.html
- datanode无法启动,删除tmp文件夹并重新格式化,参考:https://stackoverflow.com/questions/11889261/datanode-process-not-running-in-hadoop