window10安装Hadoop3.1.3

本文详细介绍了如何在Windows 10上安装Hadoop 3.1.3,包括所需工具、安装步骤、配置文件修改以及验证安装成功的全过程。特别提醒,需使用JDK8,避免版本不兼容问题。安装成功后,通过运行特定命令和访问相关URL可检查Hadoop是否正常运行。
摘要由CSDN通过智能技术生成

最近做实验需要在Linux系统安装Hadoop,由于我之前就想在window上安装,所以借此机会先在window上安装再在Linux安装。

个人比较喜欢安装比较新的东西,所以选择Hadoop3.1.3

准备工具 :
1、jdk8,这里不要用其他jdk了,会出现一些其他问题的,我用jdk11有些包就找不到,好像jdk9都不行
2、Hadoop3.1.3,官网下载,也可以下载其他的3.0以上的版本,3.0以下的版本安装有些不太一样,下载地址Hadoop3.1.3
3、Hadoop3.1.3在window运行的工具winutils,下载地址winutils

注意:winutils有与之对应的Hadoop,如果是3.0以下的可能不行,尽量找相对应的版本吧

Hadoop安装:

jdk的安装不用说了,能够想到安装Hadoop的哪个不是安装jdk的,只要安装的是jdk8的就行

Hadoop的安装和jdk的安装是一致的

1、系统变量中建立HADOOP_HOME变量,然后赋值你的安装路径
在这里插入图片描述

2、在path变量中添加Hadoop的bin
在这里插入图片描述
3、控制台输入hadoop version,输入版本就说明安装成功
在这里插入图片描述

修改配置文件:

配置之前先创建一些文件夹
在这里插入图片描述
然后在data文件夹下面再创建两个文件夹
在这里插入图片描述

需要配置的文件 在安装路径的etc文件夹下面
在这里插入图片描述

1、hadoop-env.cmd文件:如果你的jdk路径中没有空格,那么这个可以不用修改,如果包含了空格,比如:
这里以安装目录为C:\Program Files\Java\jdk1.8.0_181为例,因为Program Files中存在空格,若是直接使用会出现错误,可以下面两种方式之一进行处理:
只需要用PROGRA~1 代替Program Files,即改为C:\PROGRA~1\Java\jdk1.8.0_18
或是使用双引号改为 “C:\Program Files”\Java\jdk1.8.0_181
在这里插入图片描述

2、core-site.xml文件:添加一下代码

<configuration>
	<property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:
评论 10
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值