【Linux环境下安装配置JDK和HADOOP】

目录

前言

一、什么是hadoop？

二、JDK和HADOOP环境变量配置

1.利用xshell等工具把jdk和hadoop的压缩包放到指定目录下：

2.新建新用户，并设置密码

3.在新用户下建立以下的目录：

4.把root用户下的压缩包复制到新用户的software里

5.解压jdk和hadoop的压缩包

6.在root用户下配置java和hadoop的环境变量

7.建立hadoop和jdk的软连接

8.设置core-site.xml:

格式化：

启动：

在hadoop中新建user文件夹：

hadoop下新建input：

运行提供的一些示例

将输出文件从分布式文件系统复制到本地文件系统并检查它们：

完成后，通过以下方式停止守护程序：

---

---

前言

        工欲善其事，必先利其器，对于刚学数仓的人来说，安装配置hadoop是比较困难的，今天给大家来一期关于在Linux的环境下安装hadoop和jdk。

---

提示：以下是本篇文章正文内容，下面案例可供参考

一、什么是hadoop？

        hadoop是由Apche基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统，其中重要的主键为HDFS。它具有高容错性的特点，并且它提供高吞吐量来访问应用程序的数据，适合那些有着超大数据集的应用程序。

二、JDK和HADOOP环境变量配置

1.利用xshell等工具把jdk和hadoop的压缩包放到指定目录下：

路径如下：/home/root/software(其中software是自建的一个目录):

mkdir software      --在root用户下建立

2.新建新用户，并设置密码

代码如下：

useradd yourname       --新建新用户

passwd  youname        --设置密码

3.在新用户下建立以下的目录：

代码如下：

mkdir sourcecode software app log lib tmp shell   --建立文件夹   

--sourcecode:放源代码
--software放压缩包
--app放解压好的文件
--log放日志
--tmp临时文件
--shell放shell脚本

4.把root用户下的压缩包复制到新用户的software里

代码如下：

cp hadoop文件 /home/用户名/software/      --复制到software目录

cp jdk文件 /home/用户名/software/          --复制到software目录

5.解压jdk和hadoop的压缩包

tar -xzvf hadoop文件 -C ../app/          --在新用户下的software文件下，把hadoop文件解压到上层目录APP里

tar -xzvf jdk文件 -C ../app/          --在root用户（权限不足可能）下的software文件下，把jdk文件解压到上层目录APP里