Hadoop的伪分布式安装和配置
一、实验目的
1、理解Hadoop伪分布式的安装过程;
2、学会JDK的安装和SSH免密码配置;
3、学会Hadoop的伪分布式安装和配置。
二、实验内容
在linux平台中安装Hadoop,包括JDK安装、SSH免密码配置和伪分布式安装。
三、实验过程
1、Java JDK安装过程
(1) 对JDK解压缩,命令:tar –zxvf /simple/soft/jdk_1.7.4.79 -C /simple
(2) 配置环境变量
修改文件 命令:vim ~/.bashrc
在打开的文件中添加如下内容:
(3) 环境变量生效
查看是否成功 命令:java -version
2、SSH免密码登录配置
(1) 创建一对密钥,命令:ssh-keygen
(2)将密钥加入授权 ,命令cat ./id_rsa.pub >> ./authorized_keys
3、安装hadoop
(1)解压缩hadoop,命令:tar -zxvf Hadoop-2.4.1.tar.gz -C /usr/local
(2)修改目录名称为hadoop 命令:sudo mv ./Hadoop-2.4.1/ ./hadoop
(3)查看版本信息
命令:./bin/Hadoop version
(4)修改 core-site.xml 命令:vim core-site.xml
添加如下内容
(5)修改hdfs-site.xml文件 命令:vim hdfs-site.xml 添加如下内容:
(6)在cd/usr/local/hadoop目录下格式化 命令:./bin/hdfs namenode -format
(7)启动HDFS 命令:./sbin/start-dfs.sh
输入jps查看进程,成功后如下图所示: