Hadoop单节点配置
配置Hadoop之前;
下载解压的目录在home/opt/hadoop/latest/下面这样方便管理也方便做版本控制
mkdir -p /home/opt/hadoop/latest/
tar -zxvf hadoop-xxx.tar.gz -C /home/opt/hadoop/latest/
- linux系统安装JDK
先运行 Java -version
看一下是不是1.8系列的,是就vans了,没什么好说的,这个版本的java我最喜欢
如果没有Java则需要重新装java了哈。
- SSH免密
因为hadoop为分布式框架,涉及多节点协调工作,配置这个更为方便,不配置的话,就算单节点运行也会让你总是输入密码,不配麻烦点也能跑
$ ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
实验一下,ssh yourhost 看是否不需要输入密码,如果成功免密配置成功,失败的话可以找找教程看看有啥解决方法。
ps:解压hadoop之后则需要进行环境变量的配置
hadoop 就像一个独立的文件系统,目录设置的很科学,配置文件都落在etc/hadoop里面