Windows安装Hadoop指北

最新推荐文章于 2024-11-05 13:40:31 发布
最新推荐文章于 2024-11-05 13:40:31 发布
阅读量1.7k 收藏
点赞数
分类专栏： 配套知识点 文章标签： Windows Hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_32731075/article/details/124376172
版权
这篇博客分享了在Windows上安装Hadoop过程中遇到的常见问题及解决方法，包括选择正确的winutils，处理hadoop.dll版本冲突，解决权限问题以及缺失jar包的处理。尽管遇到了启动问题，但部分服务已能正常使用。
摘要由CSDN通过智能技术生成

Windows安装Hadoop指北

  • 网上有教程，不详说，说几个坑点
  • 注意选择正确的winutils
  • 如果数据节点起不来可尝试更换hadoop.dll的版本
  • hadoop.dll除了需要在hadoop/bin目录下有，还要复制到c:\windows\system32目录下
  • 如果提示有一个jar包少了在share包下找到复制到指定目录就好了
  • 如果几点管理器起不来，提示权限太高了，俺也没招，因为俺也起不来，这个垃圾权限还改不了，想来要改哪儿的配置或者代码才可以，不过这时候有一些服务已经是可以访问的了
Iwanturoot
关注
专栏目录
移动云产品工作记录
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
02-02 3480
背景 记录移动云相关理解和记录 初认识 1、移动云全家桶 2、云主机 云主机是一种按需获取的云端服务器，为您提供高可靠、弹性扩展的计算资源服务，您可以根据需求选择不同规格的CPU、内存、操作系统、硬盘和网络来创建您的云主机。云主机从订购到开通使用仅需数分钟时间。云主机服务可用性达到99.95%，云主机备份数据以多副本形式保存，数据可靠性可达99.9999999%。 规格： vCPU / 内存比为1:1、1:2、1:4、1:8，从“1核2G”到“80核1280G”；采用2.3GHz主频的Intel
CSDN前1000名博主
热门推荐
无知人生，记录点滴
05-26 8万+
博主 简介 stpeace 排名：1 原创：2166 粉丝：7180 积分：181660 等级：10stpeace的专栏中国本博客供大家交流，欢迎各抒己见。博文中的内容禁止用 yuanmeng001 排名：2 原创：5286 粉丝：10660 积分：170616 等级：10袁萌专栏无穷小微积分倡导者–北大教授null老师 yjclsx 排名：3 原创：162...
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件(bin目录)
11-20
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件 拷贝到bin目录下覆盖。
windows 安装Hadoop
weixin_51770444的博客
03-17 1932
windows安装Hadoop 下载 下载安装hadoopd,下载相应的版本，解压到电脑的相应目录 下载网址：https://gitee.com/fulsun/winutils-1/tree/master 配置环境变量 变量值为hadoop所在的目录: 环境变量path加入HADOOP_HOME: 将Hadoop文件目录下的bin文件夹中的hadoop.dll文件复制到C:\window\System32目录下 到目前window安装Hadoop完成，引入Hadoop jar
在windows系统上安装Hadoop
阳哥的博客
08-14 1万+
Hadoop都是在Linux上安装、配置、操作的，那么Hadoop可以在Windows上安装、运行吗？ 答：我们知道Hadoop官网只提供了Hadoop的tar.gz安装包，显然是属于Linux系统的。但其实Windows系统也可以安装Hadoop，如果想在Windows上安装，我们将linux上的tar.gz这个安装包解压缩一下就可以了。（使用软件7-zip） 一、Windows上安装hadoop步骤 第一步 将linux上的tar.gz安装包解压缩 需要解压缩两...
大数据之Hadoop简介及环境搭建
qq_42409495的博客
11-14 844
第1章 大数据概论 1.1 大数据概念 大数据（Big Data）：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 主要解决，海量数据的存储和海量数据的分析计算问题。 按顺序给出数据存储单位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。 1Byte = 8bit 1K = 1024Byte 1MB = 1024K 1G = 1024M 1T
hadoop最新稳定版本使用建议
sunjinjuan的博客
01-22 1万+
hadoop最新稳定版本使用建议 Apache Hadoop Apache版本衍化比较快，我给大家介绍一下过程 ApacheHadoop版本分为两代，我们将第一代Hadoop称为Hadoop 1.0，第二代Hadoop称为Hadoop 2.0。第一代Hadoop包含三个大版本，分别是0.20.x，0.21.x和0.22.x，其中，0.20.x最后演化成1....
大数据运维 (一) Hadoop完全分布式环境搭建
大数据指北
09-12 554
文章目录一、准备工作1.1 安装VMware并设置网络1.2.安装centos虚拟机(这里就不详细说了，网上太多了)1.3 虚拟机配置（三台虚拟机同理） 一、准备工作 1.1 安装VMware并设置网络 下载vmvare软件，配置NAT网络模式。NAT是网络地址转换，是在宿主机和虚拟机之间增加一个地址转换服务，负责外部和虚拟机之间的通讯转接和IP转换。 1.2.安装centos虚拟机(这里就不详细说了，网上太多了) 安装完后克隆虚拟机，产生三台虚拟机共集群使用。 三台虚拟机的ip： 192.168.23
【未完待续...】【安装环境安装】【bbenz】【必装软件】环境安装指北【mark】
The_Love_Juice的博客
11-05 153
新开发机安装指北
windows10上配置pyspark工作环境
进击的强强
10-09 1万+
在windows10使用spark进行编程环境搭建
Windows Kerberos客户端配置并访问CDH
大数据指北
01-04 4531
https://forum.huawei.com/enterprise/zh/thread-337775.html 最近被安排做java本地访问带认证的CDH集群，网上查了各种博客，试了各种方法都无法登录上。最终发现是端口问题，因为kdc默认端口是88，所以必须给88端口为UDP协议   使用API访问开启安全Kerberos的Hdfs hadoop集群(cdh集群)在开启kerberos安...
hadoop的安装-----伪分布式
qa962839575的专栏
01-13 2602
1.hadoop的伪分布安装 1.1 设置ip地址 执行命令 service network restart 验证: ifconfig 1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables status 1.3 关闭防火墙的自动运行 执行命令 chkconfig iptables off 验证: chkconfig -
基于Hadoop平台的网络流量分析系统的设计与实现.docx
09-07
基于Hadoop平台的网络流量分析系统在Windows系统和Hadoop平台相结合的环境下进行了开发实现。该环境可以充分利用Hadoop平台的优势，高效地处理和分析大量网络流量数据。同时，Windows系统提供了一个友好的用户界面，...
AI 工程师职业指南
GitChat
04-12 3288
内容简介 从年初起，几家国际大厂的开发者大会，无论是微软 Build、Facebook F8还是稍后的 Google I/O，莫不把“ AI 优先”的大旗扯上云霄。 如果这一波 AI 大潮只是空喊几句口号，空提几个战略，空有几家炙手可热的创业公司，那当然成不了什么大气候。但风浪之下，我们看到的却是，Google 一线的各大业务纷纷改用深度学习，落伍移动时代的微软则已拉起一支近万人的 AI 队伍。而...
yolov5s nnie.zip
11-26
yolov5s nnieyolov5-nnieyolov5s nnieYOLOv5 pytorch -> onnx -> caffe -> .wk 1、模型是yolov5s,将focus层替换成stride为2的卷积层。reshape和permute层也做了调整。具体的修改过程可以参考这个大佬的文章https://blog.csdn.net/tangshopping/article/details/1100386052、模型是在hi3559av100上跑的，mapper版本是1.2。3、用法mkdir buildcd buildcmake -DCMAKE_TOOLCHAIN_FILE=../hi3559.toolchain.cmake ..make -j4./yolo_nnie参考https://blog.csdn.net/tangshopping/article/details/110038605watermelooon/nnie_yolohttps://github.com/ultralytics/yolov5https://githu
基于uni-app+uview-ui开发的校园云打印系统微信小程序项目源码+文档说明
11-26
基于uni-app+uview-ui开发的校园云打印系统微信小程序项目源码+文档说明，本资源中的源码都是经过本地编译过可运行的，评审分达到98分，资源项目的难度比较适中，内容都是经过助教老师审定过的能够满足学习、毕业设计、期末大作业和课程设计使用需求，如果有需要的话可以放心下载使用。 基于uni-app+uview-ui开发的校园云打印系统微信小程序项目源码+文档说明，本基于uni-app+uview-ui开发的校园云打印系统微信小程序项目源码+文档说明资源中的源码都是经过本地编译过可运行的，评审分达到98分，基于uni-app+uview-ui开发的校园云打印系统微信小程序项目源码+文档说明资源项目的难度比较适中，内容都是经过助教老师审定过的能够满足学习、毕业设计、期末大作业和课程设计使用需求，如果有需要的话可以放心下载使用。 本资源中的源码都是经过本地编译过可运行的，评审分达到98分，资源项目的难度比较适中，内容都是经过助教老师审定过的能够满足学习、毕业设计、期末大作业和课程设计使用需求，如果有需要的话可以放心下载使用。本资源中的源码都是经过本地编译过可运行的，评审分达到98分
使用Java写的一个简易的贪吃蛇小游戏.zip
11-26
使用Java写的一个简易的贪吃蛇小游戏.zip数据
计算机网络概述.docx
11-26
计算机网络概述概念：网络把主机连接起来，而互联网是把多种不同的网络连接起来，因此互联网是网络的网络。计算机网络主要包括三个部分：计算机（包括客户端、服务器）网络设备（路由器、交换机、防火墙等）传输介质（有线和无线） ISP 互联网服务提供商ISP可以从互联网管理机构获得许多IP地址，同时拥有通信线路以及路由器等联网设备，个人或机构向ISP缴纳一定的费用就可以接入互联网。 目前的互联网是一种多层次ISP结构，ISP根据覆盖面积的大小分为主干ISP、地区ISP和本地ISP。互联网交换点IXP允许两个ISP直接相连而不用经过第三个ISP。 主机之间的通信方式 1、客户-服务器（C/S） 客户即是服务请求方，服务器是服务提供方。2、对等（P2P） 不区分客户和服务器 时延总时延=发送时延+传播时延+处理时延+排队时延计算机网络体系结构OSI：应用层、表示层、会话层、传输层、网络层、数据链路层、物理层五层协议：应用层、运输层、网络层、数据链路层、物理层TCP/IP：应用层、运输层、网际层、网络接口层 带通调制 模拟信号是连续的信号，数字信号是离散的信号。带通调制把数字信号转换为模拟信号。数据
数学建模学习资料 姜启源数学模型课件 M06 稳定性模型 共46页.pptx
最新发布
11-26
数学建模学习资料 姜启源数学模型课件 M06 稳定性模型 共46页.pptx
全方位技术源码集合：毕设、课设、项目实训利器
4. 操作系统：指各种操作系统层面的知识，包括但不限于Linux、Windows、macOS等，以及与之相关的系统编程和开发。 5. 人工智能：涵盖机器学习、深度学习、自然语言处理等技术，常用Python语言实现算法模型。 6. ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值