打开moba创建连接服务
在/opt创建两个文件夹:software、module
software是放软件的解压包
module是放软件解压后的文件夹
切换到software下
cd /opt/software
解压jdk、Hadoop到module文件夹中
tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/
tar -zxvf hadoop-3.1.3.tar.gz -C/opt/module
配置jdk、Hadoop环境变量
vi /etc/profile
在里边添加
配置完之后生效一下
source /etc/profile
hadoop的本地部署
首先要有包含内容的文件
在/opt下创建目录test
mkdir test
在/opt/test目录下创建input目录跟output目录
mkdir input
mkdir output
在/opt/test/input目录下创建包含内容的文件
vi color
用Hadoop去执行这个文件
切换到/opt/module/hadoop-3.1.3/share/dadoop/mapreduce目录下
执行文件:
hadoop jar hadoop-mapreduce-examples-3.1.3.jar wordcount /opt/test/input
/ /opt/test/output/count/txt
查看结果
cd /opt/test/output/count.txt
cat part-r-00000