hbase由于zookeeper的data配置错误导致linux系统定期删除data文件而出现noNode异常

最新推荐文章于 2024-03-19 20:47:44 发布
最新推荐文章于 2024-03-19 20:47:44 发布
阅读量239 收藏
点赞数
文章标签： hbase 数据库 大数据 zookeeper Powered by 金山文档
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wangjing1228/article/details/129762725
版权

hadoop/zookeeper/hbase三件套搭建好后，hbase总是不定期的出现noNode错误提醒，无法使用，在zookeeper里删除/hbase节点后重启就好了。

ERROR: KeeperErrorCode = NoNode for /hbase/master

后来在某教程中发现是因为zooKeeper的配置中，data节点配置在了系统的/tmp目录下，而这个目录linux会定时清理，所以找不到节点了。

相关配置：

zooKeeper/conf/zoo.conf

把dataDir放在zooKeeper的安装目录下即可，data或者tmp都可以，只要不被意外删除。

dataDir=/opt/zookeeper/data
dataDir=/opt/zookeeper/tmp

wangjing1228
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
hadoop，spark，hbase，zookeeper，kafka配置文件
10-12
hadoop，spark，hbase，zookeeper，kafka配置文件。 例如： <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <!-- Licensed under the Apache License, Version 2.0 (the "License"); you may not use this file except in compliance with the License. You may obtain a copy of the License at http://www.apache.org/licenses/LICENSE-2.0 Unless required by applicable law or agreed to in writing, software distributed under the License is distributed on an "AS IS" BASIS, WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. See the License for the specific language governing permissions and limitations under the License. See accompanying LICENSE file. --> <!-- Put site-specific property overrides in this file. --> <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://master:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>file:/home/bigData/bigdata/hadoop/tmp</value> </property> </configuration>
Linux环境Hadoop2.6+Hbase1.2集群安装部署
03-01
Spark分布式集群搭建
ERROR: KeeperErrorCode = NoNode for /hbase/master
最新发布
Oz_Mood的博客
03-19 3091
错误 "ERROR: KeeperErrorCode = NoNode for /hbase/master" 通常发生在使用HBase时，这个错误表明在ZooKeeper中没有找到HBase Master节点的相关条目。
java-hbase-phoenix:通过Phoenix访问HBase
05-18
通过Phoenix和Java访问HBase 该存储库是有关如何通过Phoenix和Java访问HBase并执行CRUD操作的简单示例。 由于我在HBase的设置上使用伪分布式模式，因此需要hadoop和zookeeper。 如果您的HBase设置是独立的，则不需要安装和设置该堆栈 先决条件 1. 2. 3. 4. 5. 6. 运行项目的步骤 伪分布式模式 1. /hadoop-3.1.0/sbin/start-dfs.sh 2. /hadoop-3.1.0/sbin/start-yarn.sh 3. /zookeeper-3.4.12/bin/zkServer.sh启动 4. /hbase-2.0.0/bin/start-hbase.sh 5. /phoenix-5.0.0-alpha-hbase-2.0-bin/bin/queryserver.py sta
fancyChuan#bigdata-hub#配置hbase与hive集成1
07-25
0. 重新编译依赖包编译过程参考：- Hive整合Hbase详解删除软链接的命令修改hive-site.xml的配置主要修改zookeeper的配置项，以便能够
HBase 提示：ERROR: KeeperErrorCode = NoNode for /hbase/master
zhouzhiwengang的专栏
07-04 1万+
环境配置： Hadoop-3.0.3 HBase-2.1.0 ZooKeeper-3.4.12 问题说明： #切换至HBase-2.1.0 的安装目录下的bin文件夹 cd /usr/local/hadoop/hbase-2.1.0/bin #启动HBase-2.1.0 服务 start-hbase.sh #启动HBase-2.1.0 的shell 命令窗口，执行如下指令 hbas...
zookeeper删除、复制目录
02-22
实现 zookeeper 的目录删除和复制，复制可以在不同实例之间进行，实现了简单的查询和更新~ 之前传了一个有个label写错了 删不了 重新传一个
【ZooKeeper Notes 9】ZooKeepr日志清理
weixin_34051201的博客
07-16 250
    转载请用注明：@ni掌柜 nileader@gmail.com在使用zookeeper过程中，我们知道，会有dataDir和dataLogDir两个目录，分别用于snapshot和事务日志的输出（默认情况下只有dataDir目录，snapshot和事务日志都保存在这个目录中，关于这两个目录的详细说明，请看《ZooKeeper管理员指南》）。      正常运行过程中，ZK会不断地把快照数...
zookeeper报错:NoNodeException: KeeperErrorCode
qq_38461773的博客
07-21 1156
zookeeper报错:NoNodeException: KeeperErrorCode = NoNode for /consumes/xxx/xxx Node does not exist 登录到zookeeper服务器，查看node信息，如果不存在，看为什么不存在？ ./zkCli.sh -server localhost:2181 create /consumers/xxx/xxx test zk操作命令： ls /consumers/xxx/xxx get /consum...
zookeeper报错:NoNodeException: KeeperErrorCode = NoNode for /XXX Node does not exist
热门推荐
进击的Coder菜鸟
01-30 3万+
本地调试项目时，启动本地zookeeper： 命令：./zkServer.sh start 然后启动项目报如下错误： 分析得知是缺失Node节点。 解决方案： 1. 通过ssh客户端的zk客户端命令连接zk服务端 命令：./zkCli.sh -server localhost:2181，连接zookeeper服务端 2. 创建/master数据Node节点 命令：cr...
zookeeper复制目录删除目录
02-12
实现了zookeeper节点的目录复制和删除，节点的创建、值更新 凑合能用 自己测试嫌手工复制麻烦又找不到现成的自己写了个 竟然不能免费~那就最低分拿去
大数据框架思维导图（Hadoop，Hbase, Zookeeper选举 非zookeeper知识点）
04-13
该资源内有三个xmind脑图文件，分别为Hadoop，hbase ，以及分布式协调zookeeper选举的基础知识内容。该脑图内容并不是非常详细，而是大体罗列了这三个技术的框架，适合初学者以及将要面试，复习的同学。通过脑图，...
解决Hbase — For usage try ‘help “xxx“‘问题
m0_53867640的博客
04-10 3383
在安装hbase的时候,一开始由于配置原因导致并未成功运行 经常会爆 (ERROR: KeeperErrorCode = NoNode for /hbase/master) 的错误，上网查看后发现是hbase-site.xml 与hbase-env.sh 的配置问题以下先给出hbase的相关配置 hbase-site.xml <configuration> <property> <name>hbase.rootdir</name> ...
hbase启动报错NoNode for /hbase/master等各种错误咋整？
G55331337547的博客
01-09 1021
我在配置伪分布式的hbase时（使用自带的zookeeper），启动hbase shell后报错NoNode for /hbase/master，查看日志文件发现报错Master exiting、Master is initializing尝试了网上的各种办法，包括：①修改hbase-site.xml中的和hadoop配置目录下core-site.xml中的端口号一致②设置时间同步，各种修改hbase-site.xml③重新格式化hadoop，删除hdfs中的hbase目录都不可以！！！
HBase报错
weixin_64489886的博客
07-05 1473
在学习HBase过程中，考试期间使用 查询命名空间，突然就报错 考试中无法查阅资料，结果自己瞎鼓捣直接把HBase整坏了，重新解压安装包，修改配置文件也无济于事，在多次查看日志文件报错后，最终在将要放弃之际发现了hdfs.DFSClient: Failed to close file 解决办法_宇宙李的博客-CSDN博客，一顿操作，问题完美解决，感谢大哥，也希望能帮到有需要的同仁附一下代码块：1.在hbase目录下，执行以下语句 2.然后重新执行你所需要执行的命令 3.Master is i
hbase用shell命令新建表报错ERROR: KeeperErrorCode = NoNode for /hbase/master
Ps_hello的博客
12-21 1623
首先jps命令查看当前运行的内容有没有HMaster,如果没有，开启一下hbase,稍微等一会儿，再看一下HMaster,如果仍和下图一样没有，就基本找到问题了。这两个配置文件都是要完全一样的，包括端口和主机名，当这两者不一样时，就会出现HMaster过一会儿不见了，或者题目中的报错。修改好后，重新启动hbase,再用shell新建表就不会报错了。,不一致，要改成一致的主机名。有的是端口不一致，一个。这个方法解决了我的问题，分享出来。本人这里主机名一个是。，自行检查改正即可。
zookeeper文件删除脚本
cloudfin的博客
04-02 3071
脚本适用于linux服务器各种场景下的文件清理，这里以zk为例，其他场景类似。 清理逻辑：当某磁盘空间使用率高于70%的时候，保留目标目录下50个最新文件，删除其他文件。 #!/bin/bash #设置保留个数 retainSnapCount=50 retainLogCount=50 #获取磁盘使用率 usePercent=$(df -h /mydir/ | grep "/mydir" | awk '{print $5}' | awk -F'%' '{print $1}') #获取目标目录
java zookeeper 删除目录_Zookeeper节点增删改查与集群搭建（笔记）
weixin_29116603的博客
02-24 3918
1、上传文件目录说明上传的文件一般放在 /home/下安装文件一般在 /usr/local/下2.安装zookeeper2.1将zookeeper-3.4.11.tar.gz拷贝到/home/下2.2解压、重命名、移动tar -xvzf zookeeper-3.4.11.tar.gzmv zookeeper-3.4.11.tar.gz zookeepermv zookeeper /usr/loc...
hbase出现KeeperErrorCode = NoNode for /hbase/master错误是什么意思，要怎么解决
11-30
"HBase出现KeeperErrorCode = NoNode for /hbase/master"错误表示HBase的ZooKeeper无法找到HMaster节点。这可能是由于HMaster节点未启动或已崩溃，或者ZooKeeper中的数据已损坏导致的。要解决此问题，可以尝试以下步骤： 1.检查HMaster是否正在运行，可以使用jps命令查看进程列表。 2.如果HMaster未运行，请尝试重新启动HBase。 3.如果HMaster已经运行但仍然出现此错误，请检查ZooKeeper中的数据是否已损坏。可以尝试清除ZooKeeper数据并重新启动Hadoop和HBase。 具体步骤如下： 1.停止Hadoop和HBase。 2.删除ZooKeeper数据目录，可以在hbase-site.xml中查找"zookeeper.znode.parent"属性来确定数据目录的位置。 3.修改conf下的zoo.cfg文件，将data属性更改为/tmp路径。 4.重新启动Hadoop和HBase。 以下是具体的命令： ```shell # 停止Hadoop和HBase stop-all.sh # 删除ZooKeeper数据目录 rm -rf /path/to/zookeeper/data # 修改zoo.cfg文件 vi /path/to/zookeeper/conf/zoo.cfg # 将data属性更改为/tmp路径 # 重新启动Hadoop和HBase start-all.sh ```

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值