Hadoop环境的搭建（WordCount）

linux系统安装hadoop环境

安装hadoop

首先需要通过xftp文件传输将hadoop的.tar.gz（hadoop-3.1.3.tar.gz）文件传输到linux的/opt/software的目录下面

解压hadoop-3.1.3.tar.gz文件到/opt/module这个目录下

[tedu@hadoop105 software]$ tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/

解压成功后会在/opt/module 目录下面看到以下信息


hadoop提供的命令不生效 原因是没有去配置hadoop对应的环境变量

配置hadoop的环境变量

配置三个
hadoop的家
path 对应的是hadoop家下面的/bin
path 对应的是hadoop家下面的/sbin

[tedu@hadoop105 profile.d]$ sudo vim /etc/profile.d/my_env.sh 

将以下命令输入进去

#HADOOP
export HADOOP_HOME=/opt/module/hadoop-3.1.3
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

配置成功后保存退出

:wq!

使配置文件立即生效

[tedu@hadoop105 profile.d]$ source /etc/profile

就可以测试hadoop的命令
查看hadoop的版本信息

hadoop version