Hadoop 2.6.0的安装与配置

最新推荐文章于 2024-08-30 10:52:31 发布

caiandyong

最新推荐文章于 2024-08-30 10:52:31 发布

阅读量8k

点赞数

分类专栏： hadoop 文章标签： hadoop2.6.0 Hadoop 2.6.0的安装与配置

本文链接：https://blog.csdn.net/caiandyong/article/details/42815221

版权

本文档详细介绍了在Ubuntu 14.10虚拟机中安装Hadoop 2.6.0的步骤，包括上传安装包、安装SSH、安装JDK、解压Hadoop、配置Hadoop环境（core-site.xml, hdfs-site.xml, mapred-site.xml, yarn-site.xml）以及启动、检查和关闭Hadoop服务。最后，提供了通过Web浏览器查看NameNode和ResourceManager状态的方法。" 128040813,10036605,无监督学习深入解析：K-均值聚类算法,"['无监督学习', '聚类算法', 'K-means']

摘要由CSDN通过智能技术生成

系统：Ubuntu 14.10，其部署在VMware workstation 11.0.0上

JDK：jdk-7u25-linux-i586.tar.gz

Hadoop:hadoop-2.6.0.tar.gz（下载地址：http://mirror.bit.edu.cn/apache/hadoop/common/）

Step1：上传安装包

在windows系统预先下载安装包，这里要用到jdk-7u25-linux-i586.tar.gz和Hadoop:hadoop-2.6.0.tar.gz两个包，在/home/caiyong/下面新建setup文件夹，使用Xshell上传jdk-7u25-linux-i586.tar.gz和Hadoop:hadoop-2.6.0.tar.gz到/home/caiyong/setup/目录下面。上传结果如下图所示：

Step2：安装SSH

在命令行执行如下命令：

sudo apt-get install ssh
ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

然后验证安装是否成功：

命令行输入：

ssh -V

出现的内容如下图，则说明安装成功

命令行输入：

ssh localhost

显示内容如下图，则说明使用ssh免密钥成功登录到了localhost。

Step3：安装JDK

（1）解压JDK安装包

将JDK安装包解压到/usr/java目录下，命令行输入：

tar  -zxvf  jdk-7u25-linux-i586.tar.gz  -C /usr/java

（2）配置环境变量

在/etc/profile文件中添加下面的内容：

export JAVA_HOME=/usr/java/jdk
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

命令行输入：

source   /etc/profile

使配置生效。
（3）设置新安装的JDK为默认的JDK

命令行输入如下命令：
sudo update-alternatives --install /usr/bin/java java /usr/java/jdk/bin/java 300
sudo update-alternatives --install /usr/bin/javac javac /usr/java/jdk/bin/javac 300
sudo update-alternatives --config java

（4）验证JDK

命令行输入如下命令：