2024年最全Windows11安装hadoop-3

最新推荐文章于 2024-07-01 09:21:58 发布
最新推荐文章于 2024-07-01 09:21:58 发布
阅读量439 收藏 4
点赞数 5
分类专栏： 程序员 文章标签： hadoop 大数据 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_84181326/article/details/138404972
版权
本文详细介绍了如何在Windows11系统中安装Hadoop 3.3.0，包括下载hadoop-3.3.0 tar.gz文件并解压，替换winutils，设置环境变量，修改配置文件，格式化目录以及创建数据目录等关键步骤。
摘要由CSDN通过智能技术生成

二、安装Hadoop

1. 下载hadoop-3.3.0

进入下载页面

https://archive.apache.org/dist/hadoop/common/hadoop-3.3.0/

选择hadoop-3.3.0.tar.gz下载

https://archive.apache.org/dist/hadoop/common/hadoop-3.3.0/hadoop-3.3.0.tar.gz

解压到C:\hadoop-3.3.0目录，形成C:\hadoop-3.3.0\bin这种目录层次

2. 下载winutils替换hadoop-3.3.0\bin目录

下载winutils

https://github.com/s911415/apache-hadoop-3.1.0-winutils

将其中bin目录替换到C:\hadoop-3.3.0\下的bin目录

3. 设置环境变量

最低0.47元/天 解锁文章
2401_84181326
关注
专栏目录
Hadoop 3.x 安装
qq_43631091的博客
09-09 222
开始安装 安装Hadoop3.0和之前的安装Hadoop集群差别不大,Hadoop3.x和Hadoop2.x的区别大家可以看下这篇文章https://blog.csdn.net/c36qUCnS2zuqF6/article/details/82111579 前期环境配置不多写.前面的文章中写过太多了. 本文直接从配置Hadoop开始,hadoop-3.1.3和jdk1.8.0_191都放在/usr/local/src下 系统说明 操作环境 主机名 IP地址 jdk hadoop版本 cen
Hadoop-3.3.0 安装
m0_54883970的博客
08-16 608
如果服务器再次启动，也需要进行这步，否则启动可能会失败）dfs.replication 配置的是 HDFS存储时的备份数据（datanode的备份），因为我们刚开始测试，只有一个结点比较好，股设置为1.在 /usr/hadoop/ 目录下，建立 tmp、hdfs/name、hdfs/data 目录。Hadoop 安装地址：/usr/local/hadoop/hadoop-3.3.0。下载地址：http://hadoop.apache.org/查看是否启动成功，有结果就成功了。...
Hadoop集群软件下载链接
最新发布
qq_36922376的博客
07-01 233
Hadoop大数据集群软件链接
Hadoop3的安装
master_zhao的博客
03-25 1971
【安装】Hadoop3的安装。
Hadoop3.0稳定版的安装部署
热门推荐
大数据星球-浪尖
12-15 1万+
号外：本公众号改名为Spark学习技巧了。 Apache Hadoop 3.0.0在前一个主要发行版本（hadoop-2.x）中包含了许多重要的增强功能。 这个版本通常是可用的（GA），api稳定性和质量已经到了可以再生成中使用的步骤。 一 概览 1，java8是必须 所有hadoop 的jar都是利用java8的运行时版本进行编译的。依然在使用java7或者更低版本
Hadoop3.0集群安装知识
about云
01-06 748
问题导读1.本文是如何定义master的？2.如何配置hadoop守护进程环境？3.配置Hadoop守护进程需要哪些配置文件？4.yarn-site配置文件，主要配置哪两个进程？5.mapred-site.xml配置文件，配置哪些内容？6.hadoop如何配置监测NodeManagers的健康状况？7.hadoop3.0slaves做了什么更改？8.如何单独启动DataNode？9.访问hadoo
hadoop 3.3.1 安装笔记
m0_60311330的博客
07-24 2085
年初参加了华为的大数据全栈成长计划，包括java，mysql，hadoop，spark，算是大数据小白更新认知体系。 计划地址：https://bbs.huaweicloud.com/forum/thread-90396-1-1.html 今天重新搭一下hadoop集群，记录一下搭建过程。 主要记录搭建步骤，报错信息之类的另外再讨论。 万变不离其宗（年初搭建使用centos6.5，hadoop2.7.2），各工具版本如下： centos7.9，hadoop3.3.1，vmware14，xshell7，jdk
Hadoop的核心--HDFS
weixin_43908779的博客
03-21 377
Hadoop 1、 Hadoop的介绍 Hadoop最早起源于Nutch。Nutch的设计目标是构建一个大型的全网搜索引擎，包括网页抓取、索引、查询等功能，但随着抓取网页数量的增加，遇到了严重的可扩展性问题——如何解决数十亿网页的存储和索引问题。 2003年、2004年谷歌发表的两篇论文为该问题提供了可行的解决方案。 ——分布式文件系统（GFS），可用于处理海量网页的存储 ——分布式计算框架M...
2024年【Hadoop大数据技术】——HDFS分布式文件系统（学习笔记(2)，BTAJ面试有关散列（哈希）表的面试题详解
2401_84181403的博客
05-05 843
练习题：客户端上传文件的时候哪项是正确的？（多选）A、数据经过 NameNode 传递给 DataNodeB、客户端端将文件切分为多个Block，依次上传C、客户端只上传数据到一台 DataNode，然后由 NameNode 负责 Block 复制工作D、客户端发起文件上传请求，通过RPC与NameNode建立通讯。答案：BD。
windows版hadoop
03-05
这个是windows版的hadoop，亲测win10没问题，网上的很多都用不了
Windows系统Hadoop包
08-26
该压缩包是在官方包的基础上进行修改的,将Windows运行hadoop所需配置文件和部分插件已经导入,电脑只需安装64位java环境,修改hadoop-env.cmd配置即可使用
hadoop3.2.1 各组件安装教程
12-24
hadoop3.2.1 各组件安装教程
hadoop-3.0.1下载（hadoop-3）
09-15
此文件是txt文件，里面包含hadoop-3.0.1的百度云下载连接，由于源文件有将近700M，压缩之后还是有300M，上传不了，所以以百度网盘的形式上传。
2024年大数据最新eclipse配置mapreduce全教程
2401_84181340的博客
05-02 54
去官网下载Hadoop的安装包，在windows上解压src的也要下载，上面的链接提供了2.6.5的，需要更高版本自行下载下载好压缩包，在windows上解压，并新建一个hadoop-lib的文件夹将下载好的plugin包，放在你的eclipse的plugin目录下（我放在plugin没有效果，放着dropins，就可以了）**
Hadoop3.3.3集群安装
FLY的博客
06-07 1884
大数据 hadoop集群 hadoop3 hadoop3.3.3
Hadoop 3.X 安装
X-man
06-12 665
第一步 准备环境 准备安装环境。jdk1.8，hadoop3.X版 ， apt安装ssh ， apt安装pdsh 第二步 安装jdk 1. 解压jdk 2. 执行命令： update-alternatives --install /usr/bin/java java /usr/local/jdk1.8.0_201/bin/jav...
Hadoop3 全分布式安装
黄三清的博客
04-08 1822
准备工作： 4台节点服务器 1.1.1 JDK安装&配置好 参考JDK安装文章 1.1.2 4个节点服务器配置相互免密登录 参考配置免密登录文章 下载Hadoop 下载地址 开发环境 Linux平台: Centos6.5 JDK版本：1.8( jdk-8u201-linux-x64【下载地址】) Hadoop 3.1.2 下载地址 1. 解压安装包到/opt目录下...
Windows环境下安装Hadoop-2.8.3全攻略
- HADOOP_HOME 指向Hadoop的安装路径，例如：D:\tools\hadoop-2.8.3\bin - JAVA_HOME 指向Java JDK的安装路径，例如：/home/hadoopusr/tools/jdk1.8.0_121 - PATH 添加Hadoop bin目录，JAVA_HOME的bin目录和jre/bin...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值