hadoop 开启防火墙_Hadoop搭建与常见问题解决方案

前言###

先说一下当前环境：Ubuntu18.04 jdk1.8 Hadoop选用-2.6.0-cdh5.15.1 用户名：supershuai-VirtualBox

Hadoop的下载地址：http://archive.cloudera.com/cdh5/cdh/5/ hoodp-native下载对应的版本http://dl.bintray.com/sequenceiq/sequenceiq-bin/hadoop-native-64-2.*.0.tar

在安装Hadoop之前，首先要安装好Java环境，配置好全局变量，这里说一下我的所有环境变量都是在/etc/profile中配置的，如果你是使用的其它版本linux则在其它版本环境变量文件中进行配置(如centos7中的~/.bash_profile文件)。

其次你要做的是确保ssh服务能够正常启动，并进一步设置ssh的免密登录，主要是为了解决每次启动Hadoop时频繁的输入密码验证的操作。ssh免密操作：

执行：ssh-keygen -t rsa

执行：cd ~/.ssh

执行：ll 对文件夹内容进行查看，此时会发现私钥与公钥文件，接下来就是把公钥写入 authorized_keys文件中

执行：cat id_rda_pub >> authorized_keys

执行：sudo chmod 600 authorized_keys

设置以后可以使用 ssh localhost 查看下是否已经可以免密远程连接

Hadoop安装与设置###

首先将下载的压缩包使用tar命令进行解压到本地安装目录，目录自行设定。

配置hadoop—env.sh文件(安装目录下的