win10下安装高版本hadoop 3.1.2

本文详细记录了在Win10系统下安装Hadoop 3.1.2的过程,包括环境配置、JDK1.8的安装、Hadoop的下载、解压与环境变量设置,以及遇到的类找不到错误和TimelineCollectorManager问题的解决方案。通过替换特定版本的winutils文件和调整配置文件,最终成功启动Hadoop集群。
摘要由CSDN通过智能技术生成

前言 因为需要所以尝试在本地win10上安装hadoop,在官网选择了较高的hadoop版本(想着高版本可能有什么新特性,就是这里开始给自己挖了坑),对着网上的博客一顿操作,发现节点一直启动不成功。想着可能是自己配置错误的问题,尝试了几遍后,发现还是不行,于是想到可能是版本过高的问题,于是跑去下了一个较低的版本。本着不放弃的原则,在下载低版本的过程中继续折腾,终于解决问题。

一、安装环境

win10 64位
hadoop3.1.2
jdk1.8

二、安装JDK1.8

直接给上jdk安装教程,这里不再赘述 https://blog.csdn.net/houwanle/article/details/81773832。
这里需要注意的如果jdk版本过高可能会带来问题,在linux中,用的jdk12导致resourceManager一直启动不起来, 报类找不到的错误:, java.lang.NoClassDefFoundError: javax/activation/DataSource。win10不知会不会有同样的问题

三、安装hadoop
3.1官网下载hadoop

https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.1.2/hadoop-3.1.2-src.tar.gz

3.2解压,配置环境变量

将下载下来的安装包解压,将解压目录添加环境变量中,如下图,这里是直接在解压在F盘目录下:
安装包解压后的路径
添加系统变量,并在PATH添加路径:

评论 9
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值