搭建伪分布式集群:
1.ssh无密登录
a.在家目录下创建.ssh文件夹,修改文件夹权限为700
$>mkdir ~/.ssh
$>chmod 700 ~/.ssh
b.生成公钥
$>ssh-keygen -t rsa -P '' -f ~/.ssh
c.将公钥添加至认证库,修改authorized_keys的权限为600
$>cat ~/.ssh/id_rsa.pub >> authorized_keys
$>chmod 600 ~/.ssh/authorized_keys
d.验证无密登录自己是否成功
$>ssh localhost
2.安装jdk
a.准备工作:把jdk的**.tar.gz压缩包放在~/soft文件夹下.
确保系统中没有安装jdk,可以用rpm -qa|grep jdk查看,
如果有,先将jdk卸载(rpm -e --nodeps jdk**)。
b.解压jdk
$>tar -zxf jdk-8u171-linux-x64.tar.gz
c.创建jdk的软连接
$>ln -s jdk1.8.0_171/ jdk
d.配置环境变量 ~/.bash_profile
$>vim ~/.bash_profile
添加:
# jdk install
export JAVA_HOME=/home/hadoop/soft/jdk
export PATH=$PATH:$JAVA_HOME/bin
e.使配置文件生效
$>source ~/.bash_profile
f.验证java是否配置成功
$>java -version
$>javac -version
3.安装hadoop
a.准备工作,将hadoop的tar.gz压缩文件放在~/soft文件夹下
b.解压hadoop,创建软连接
$>tar -zxf hadoop-2.7.3.tar.gz
$>ln -s hadoop-2.7.3/ hadoop
c.配置hadoop的环境变量
$>vim ~/.bash_profile
添加:
# hadoop install
1.ssh无密登录
a.在家目录下创建.ssh文件夹,修改文件夹权限为700
$>mkdir ~/.ssh
$>chmod 700 ~/.ssh
b.生成公钥
$>ssh-keygen -t rsa -P '' -f ~/.ssh
c.将公钥添加至认证库,修改authorized_keys的权限为600
$>cat ~/.ssh/id_rsa.pub >> authorized_keys
$>chmod 600 ~/.ssh/authorized_keys
d.验证无密登录自己是否成功
$>ssh localhost
2.安装jdk
a.准备工作:把jdk的**.tar.gz压缩包放在~/soft文件夹下.
确保系统中没有安装jdk,可以用rpm -qa|grep jdk查看,
如果有,先将jdk卸载(rpm -e --nodeps jdk**)。
b.解压jdk
$>tar -zxf jdk-8u171-linux-x64.tar.gz
c.创建jdk的软连接
$>ln -s jdk1.8.0_171/ jdk
d.配置环境变量 ~/.bash_profile
$>vim ~/.bash_profile
添加:
# jdk install
export JAVA_HOME=/home/hadoop/soft/jdk
export PATH=$PATH:$JAVA_HOME/bin
e.使配置文件生效
$>source ~/.bash_profile
f.验证java是否配置成功
$>java -version
$>javac -version
3.安装hadoop
a.准备工作,将hadoop的tar.gz压缩文件放在~/soft文件夹下
b.解压hadoop,创建软连接
$>tar -zxf hadoop-2.7.3.tar.gz
$>ln -s hadoop-2.7.3/ hadoop
c.配置hadoop的环境变量
$>vim ~/.bash_profile
添加:
# hadoop install