hadoop单节点安装教程

该文详细介绍了Hadoop的安装过程,包括下载安装包、配置环境变量、修改core-site.xml、hdfs-site.xml和hadoop-env.sh等配置文件,设置NameNode地址、HDFS副本数量以及启动HDFS。最后提到了后续将安装Hive。
摘要由CSDN通过智能技术生成

1.下载安装包

https://hadoop.apache.org/
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
下载好hadoop的安装包
在这里插入图片描述

2.配置环境

2.1 配置目录

创建一个目录
> mkdir /root/hadoop
文件上传至这个目录
> tar -zxvf hadoop-3.3.4.tar.gz

在这里插入图片描述

2.2 配置java hadoop环境变量

vim /etc/profile

在这里插入图片描述

source /etc/profile

接着输入java hadoop验证。图示只验证了hadoop
在这里插入图片描述

2.3 修改配置文件

cd /hadoop/hadoop-3.3.4/etc/hadoop/

2.3.1 修改文件

> vim core-site.xml

在 configuration标签中中加入如下内容

<!-- 指定HDFS中NameNode的地址,其中hadoop101:要替换成你的主机 -->
	<property>
        <name>fs.defaultFS</name>
        <value>hdfs://linux.bcc-bdbl.com:9000</value>
    </property>

<!-- 指定Hadoop运行时产生文件的存储目录 -->
    <property>
         <name>hadoop.tmp.dir</name>
         <value>/hadoop/tmp</value>
    </property>

2.3.2 修改文件

> vim hdfs-site.xml 

在 configuration标签中中加入如下内容

<!-- 指定HDFS副本的数量 -->
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>

2.3.3 修改文件

> vim hadoop-env.sh

输入 / JAVA_HOME 搜索
在这里插入图片描述
在此处添加配置

2.3.4 修改文件

> vim workers 

修改为 【本机名字】 和hostname一致

3.启动

3.1 格式化namenode

进入目录/hadoop/hadoop-3.3.4

执行

> hdfs  namenode -format

启动

> sbin/start-dfs.sh 

使用jps命令查看
在这里插入图片描述

后续安装hive,待补充

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值