乌班图安装hadoop安装运行中遇到的问题

乌班图安装hadoop安装运行中遇到的问题

1 1 在Oracle VM VirtualBox安装ubantu集群式时每次重启hadoop02和hadoop03的IP地址都会改变

解决：在同一个局域网下进行集群安装（在校园网内进行安装就仍在校园网内完成安装），并且确认每一个节点的网络连接方式为桥接（Bridge）模式。若以上方法无法解决，则可通过命令修改各个节点上虚拟机的IP地址。

2 节点间ping连接超时

输入sudo vim /etc/hosts查看映射关系是否正确

3 开启集群后输入jps缺少进程

查看5个配置文件：slaves、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml
是否与图中所示完全一致，若无法解决则可查看任务日志

4 在复制虚拟机时，要选择为每个虚拟机生成MAC地址。

不选择为每个虚拟机生成MAC地址的话，会导致ip地址相同，也会导致我们换一个网络连接，ip地址就会更换的问题。例如连接校园网时和连接寝室网时。

5 网上的教程我们不能直接照抄，要修改文件名和地址。

安装Flume时，我们需要配置jdk的路径。
export JAVA_HOME=/hadoop/hadoop/jvm/java-8-openjdk-amd64
但我们的jdk的路径是： /hadoop/hadoop/jvm/jdk1.7.0_79
那么我们需要将代码改为：export JAVA_HOME=/hadoop/hadoop/jvm/jdk1.7.0_79

6运行任务报错时 试试用sudo添加管理者权限

7 集群启动时，要将所有的节点全部打开，如果只开一个Master节点，可能会导致NameNode无法正常启动。