Mac大数据环境搭建
一、Hadoop
1、 验证ssh
在安装hadoop 之前先确认已经安装好 jdk 和配置ssh
开启mac远程登录功能,且将当前用户加入允许的用户列表中
避免使用hadoop命令时,多次输入密码:
ssh-keygen -t rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
##验证ssh
ssh localhost
2、下载安装包
hadoop 下载地址:
http://archive.apache.org/dist/hadoop/common/
根据自己需要的版本下载即可,我安装的版本是hadoop-2.6.1.tar.gz.
将下载好的安装包进行解压:
tar -zxvf hadoop-2.6.1.tar.gz ~/opt/softwa re
解压后的文件夹的全部目录:
3、修改配置文件
配置 hadoop-env.sh
在hadoop 安装目录下 :cd /etc/hadoop
在hadoop-env.sh 配置里添加:
export JAVA_HOME=/Library