hadoop2.10.1与Hbase 2.3.3在windows的搭建

本文详细介绍了如何在Windows上搭建Hadoop 2.10.1和HBase 2.3.3的单机环境。包括安装JDK、配置Hadoop环境变量、修改配置文件,以及启动HDFS和HBase。遇到的问题如JDK版本兼容性、配置文件错误等,文中也提供了相应的解决方案。
摘要由CSDN通过智能技术生成

因为要做一些HBase 相关的功能测试,需要再本地搭建HBase单机环境,下午准备花个把小时搭建一下单机环境,发现竟然花费了几个小时,虽然网上有很多教程和资料,有一些文件非常不靠谱,导致走了很多弯路。这里总结一遍比较完整的安装指南,给需要在windows下搭建HBase测试环境的朋友们节约一些时间。废话少说,直接写操作步骤吧:
1一.安装jdk
安装jdk和配置环境变量不在细说了。
jdk 版本建议1.8的,因为尝试过1.10的版本,Hbase启动时会报NoClassDefFoundError:org/slf4j/LoggerFactory错误,因为HBase引入的slf4j的版本低的原因,不兼容。
二.Hadoop安装包(官网下载)
1.hadoop下载 地址:http://www.apache.org/dyn/closer.cgi/hadoop/common
2.原版的Hadoop不支持Windows系统,我们需要修改一些配置方便在Windows上运行,
需要下载hadooponwindows-master.zip文件,https://pan.baidu.com/s/1uKJM1Zu90DWQaybhkhFleA
提取码:4hoj
复制解压开的bin文件和etc文件到hadoop-2.7.3文件中,并替换原有的bin和etc文件
3.配置环境变量,新建HADOOP_HOME,配置路径,然后将%HADOOP_HOME%\bin添加到Path中。
在这里插入图片描述
4、新建data(下面建俩子文件夹namenode和datanode)和tmp目录,
在这里插入图片描述
5、修改启动类 hadoop-env.cmd文件
在解压的Hadoop文件,E:\hadoop\etc\hadoop路径下,主要修改JAVA_HOME的路径

@rem The java implementation to use.  Required.
@rem set JAVA_HOME=%JAVA_HOME%
set JAVA_HOME=E:\Java\jdk1.8.0_221

(注意:如果jdk路径中有“Program Files”,则将Program Files改为 PROGRA~1,否则会报错)
6、修改配置文件(core-site.xml,hdfs-site.xml,mapred-site.xml,yarn-site.xml)
(1)core-site.xml

<configuration>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/E:/hadoop/workplace/tmp</value>
    </property>
    <property>
        <name>dfs.name.dir</name>
        <value>/E:/hadoop/workplace/name</value>
    </property>
    <property>
        <name>fs.default.name</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

(2

  • 3
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值