hadoop 环境搭建

hadoop 环境搭建

环境配置的基本步骤

安装配置 jdk

安装配置 ssh 免密登录 (sudo apt-get install openssh-server)

安装配置hadoop(环境变量)

分发到其他节点

名称节点格式化

正常启动检查节点信息 (jps)

hadoop 环境搭建

文章连接 http://dblab.xmu.edu.cn/blog/tag/hadoop/

注意点：

​ ssh 免密登录一定要在前配置

​ 配置hadoop 时刻灵活配置 hadoop 所在位置不要局限与 /usr/local,

​ hdfs 存储数据的位置也可灵活配置，不要局限于博客内容

​ 主机的配置也要灵活符合你自己在 linux 中的配置

​ 配置文件的灵活使用 /etc/profile 和 ~/bashrc

补充点

修改Linux 主机名

sudo vim /etc/hostname

修改 ip 与 主机映射

sudo vim /etc/hosts

/etc/profile 与 ~/.bashrc 的区别

/etc/profile (系统环境变量)与 ~/.bashrc(用户环境变量)