hadoop ubantu环境搭建_Ubuntu16.04+hadoop2.7.3环境搭建

最近开始学习大数据相关的知识，最著名的就是开源的hadoop平台了。这里记录一下目前最新版的hadoop在Ubuntu系统下的搭建过程。搭建过程中发现一篇十分清晰全面的搭建文章，本文删减了一些不重要的内容，细化了一些内容。可以点击此处查看：原文。

1.JDK的安装

hadoop是使用Java开发的一个大数据平台，自然少不了Java运行环境的安装了，当然使用hadoop不一定需要java语言，hadoop的开发支持很多种语言。

Java运行环境的安装详见另一篇文章，这里就不叙述了：Ubuntu16.04安装JDK。

2.配置SSH及免密码登陆

hadoop需要使用SSH的方式登陆，linux下需要安装SSH。客户端已经安装好了，只需要安装服务端就可以了：

sudo apt-get install openssh-server

测试登陆本机 ssh localhost  输入yes就应该可以登录了。但是每次输入比较繁琐，如果是集群那就是灾难了，所以要配置成免密码登陆的方式。

一共有三步：

1.生成公钥私钥 ssh -keygen -t rsa，将在~/.ssh文件夹下生成文件id_rsa：私钥，id_rsa.pub：公钥

2.导入公钥到认证文件，更改权限：

1)导入本机：cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

2)导入服务器：

首先将公钥复制到服务器：

scp ~/.ssh/id_rsa.pub xxx@host:/home/xxx/id_rsa.p