Ubuntu14.10下配置Hadoop流程总结

版权所有CNIC_2014，转载请保留原文地址

特此说明：本流程针对课程大作业而写的文档，帮助同学们果断跳过配置的过程

所用版本：jdk1.7.0_67 hadoop 0.20.203 有需要的同学email我

如有问题也请email我，随时改正错误

一、查看系统版本

输入指令$uname a 查看系统为64 or 32位.

此处图略

二、创建Hadoop用户组:

2.1 进入自己的用户终端 eg. -->biantao  输入指令： sudo addgroup hadoop

2.2 为hadoop群组添加用户 比如Hadoop 输入指令：sudo adduser -ingroup hadoop hadoop

2.3 为hadoop用户添加管理员权限  可在图形界面更改（具体文件暂忘，以后添加）

2.4 安装oracle jdk 切换到Hadoop 用户下的/usr/local路径下，输入指令：tar -zxvf jdk版本（相应版本 此处对应32位系统，64位请自行准备jdk）

2.5 为jdk文档重命名为Java,相关指令sudo mv jdk版本 java 并输入指令sudo vi /etc/profile 修改环境变量

2.6 验证Java 是否安装成功 输入指令 java -version

2.7 安装ssh 输入指令 sudo apt-get install ssh openssh-server

2.8 ssh 无密码验证 输入指令 ssh-keygen -t rsa -P ""

2.9 实现无密码登陆 具体指令见图

三、安装hadoop

3.1解压并安装hadoop 此处版本为0.20.203（此版本资料较多，对于课程学习来说足够，故采用） 安装在/usr/local下

3.2 为解压后的文件起别名并赋予只读权限 指令见图

3.3进入 /hadoop/conf 修改hadoop-env.sh 此处指令：sudo vi hadoop-env.sh 找到下图中JAVA_HOME的位置，去掉注释符#，并修改相应java路径（本次为/usr/local/java/jdk1.7.0_67）

3.4 配置hdfs-site.xml 指令：sudo vi hdfs-site.xml

3.5 配置 mapred-site.xml 指令：sudo vi mapred-site.xml

3.6配置core-site.xml （图片待补充，抱歉）

3.7启动hadoop 进入/usr/local/hadoop/bin目录 输入指令：hadoop namenode -format（第一次时使用即可）启动指令：start-all.sh

3.8查看进程 指令jps

3.9登陆http://localhost:50030 出现下图 成功