Hadoop安装步骤

最新推荐文章于 2023-02-15 00:37:02 发布

Sonny船长

最新推荐文章于 2023-02-15 00:37:02 发布

阅读量620

点赞数

分类专栏：大数据文章标签：大数据

本文链接：https://blog.csdn.net/Tony6666_/article/details/109704610

版权

大数据专栏收录该内容

6 篇文章 0 订阅

订阅专栏

本文详细指导了在Ubuntu环境下，如何一步步完成Hadoop的安装，包括Java配置和环境变量设置，以及通过WordCount案例实战Hadoop MapReduce。从apt更新、Java安装，到hadoop源码包解压、配置PATH和执行基本命令，最后演示了如何执行WordCount并查看结果。

摘要由CSDN通过智能技术生成

厦门大学数据库Hadoop安装教程
1、初始化

//更新apt
sudo apt-get update
//安装vim
sudo apt-get install vim

2、Java安装与环境变量配置
在这里插入图片描述

3、Hadoop安装

首先将hadoop安装包复制到 /usr/local 目录下：
cp /cgsrc/hadoop-2.7.1.tar.gz /usr/local/

切换到/usr/local目录下，对安装包进行解压：
cd /usr/local
tar -zxvf hadoop-2.7.1.tar.gz
rm -f hadoop-2.7.1.tar.gz

解压得到名为hadoop-2.7.1的目录，将其重命名为 hadoop：
mv hadoop-2.7.1/ hadoop

之后就可以配置PATH变量了，使我们可以在任何目录下使用hadoop指令。
首先打开 ~/.bashrc 文件：
vim ~/.bashrc
然后在该文件最末加入下面一行内容：
export PATH=$PATH:/usr/local/hadoop/bin:/usr/local/hadoop/sbin
保存后执行 source ~/.bashrc 使配置生效。

之后执行如下命令查看hadoop版本：
hadoop version

//检查安装
cd /usr/local/hadoop
./bin/hadoop version

在这里插入图片描述

4、运行案例WordCount

 //新建路径
sonny@IdeaPad-S210:/usr/local/hadoop$ mkdir wcinput
//新建文件后在文件中输入内容 "hadoop yarn hadoop mapreduce atguigu atguigu" :wq保存退出			
sonny@IdeaPad-S210:/usr/local/hadoop$ touch wcinput/wc.input
//执行jar命令 
sonny@IdeaPad-S210:/usr/local/hadoop$ bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount wcinput wcoutput
//执行命令查看统计结果 
sonny@IdeaPad-S210:/usr/local/hadoop$ cat wcoutput/part-r-00000