hadoop | clusterid不一致 | Unable to load native-hadoop library for your platform

最新推荐文章于 2024-05-10 14:33:56 发布
最新推荐文章于 2024-05-10 14:33:56 发布
阅读量1.2k 收藏 3
点赞数
分类专栏： hdfs 文章标签： hadoop hdfs
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/stone_fall/article/details/106312152
版权

文章目录

错误一览

执行命令sqlline.py master:2181出错

20/05/24 10:11:05 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
20/05/24 10:11:39 WARN client.ConnectionImplementation: Retrieve cluster id failed

解决方案

  • 检查一下库，似乎没有问题
hadoop chunknative -a

在这里插入图片描述

  • jps检查一下。（我是单点集群）
jps

在这里插入图片描述
datanode没启动

  • 查看日志
    查看日志，发现是clusterid不一致导致的（重新格式化namenode过，导致clusterid发生变化）
  • 查看clusterid
cat /home/hadoop/hadoop-3.1.2/datanode/current/VERSION
cat /home/hadoop/hadoop-3.1.2/namenode/current/VERSION

更改ID成一致后重启即可。

stone_fall
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
IntelliJ IDEA编写maven搭建的spark程序读取hbase数据
Wingkin的博客
12-17 2817
IntelliJ IDEA编写maven搭建的spark程序的详细步骤在上篇文章中已经介绍了，感兴趣的可以去看一下：Intellij IDEA编写Spark应用程序超详细步骤（IDEA+Maven+Scala） 搭建的步骤是一样的，主要是pom文件和代码的不同。 1.项目结构 2.pom文件 <properties> <spark.version>2.1.0</spark.version> <scala.version>2.1
HBASE 安装后 hbase shell 启动失败问题
reylee的博客
11-10 1万+
1， 安装HBASE，　并且启动成功 [root@MASTER opt]# jps 21920 SecondaryNameNode 2273 HMaster 21441 NameNode 5490 ResourceManager 1844 QuorumPeerMain 2501 HRegionServer 21653 DataNode 3532 Jps 22236 No
es集群启动报错节点UUID不一致
最新发布
m0_56525972的博客
05-10 539
修改完配置文件之后，一定要把之前的data目录和logs文件夹删掉。如果是之前单机启动过，cp出来的节点。再mkdir logs。
ES集群的两节点cluster UUID不同
Lyncai的专栏
09-08 3951
问题： [2021-09-08T10:38:59,081][WARN ][o.e.c.c.Coordinator ] [ES101] received cluster state from {ES102}{ucX4ZoDlRCC7K5rb8nQNbw}{szS9UWQ5Qa6rxJf-0bhObg}{10.1.100.43}{10.1.100.43:9301}{cdfhilmrstw}{ml.machine_memory=67411681280, ml.max_open_jobs=512,...
由于格式(format)多次namenode造成的集群id(ClusterID)不一致问题
JohnnyChu的博客
10-23 5764
高可用集群（ha集群）,有两个namenode，一个active状态，一个standby状态。               1，当配置好第一个namenode后，第一次启动第一台namenode：hadoop-daemon.sh start namenode               2，第一次格式化namenode会产生集群ID(ClusterID)：hdfs namenode -forma...
Apache Atlas部署FAQ
fan_yi_bo的博客
05-21 3052
Apache Atlas部署FAQAtlas部署问题Atlas启动报错(zookeeper启动失败导致)1.问题描述2.原因定位3.解决方法Atlas启动报错(solr启动失败导致)1.问题描述2.原因定位3.解决方法Atlas启动报错(HBase中没有Column)1.问题描述2.原因定位3.解决方法Atlas import-hive.sh报错1.问题描述2.原因定位3.解决方法 Atlas部署问题 Atlas启动报错(zookeeper启动失败导致) 通过Atlas内嵌HBase和Solr启动Atlas
Phoenix中sqlline.py启动遇到的常见错误
m0_47489229的博客
06-16 1970
Phoenix中sqlline.py启动遇到的常见错误
Hbase<踩过的坑--使用intellij idea调用JavaAPI创建预分区>
Gpwner的博客
05-17 4836
本集群 基于：VMware Workstation12 ProSecureCRT 7.3Xftp 5CentOS-7-x86_64-Everything-1611.isohadoop-2.8.0.tar.gzjdk-8u121-linux-x64.tar.gz下面是我在使用Intellij IDEA调用JavaAPI创建预分区的时候遇到的问题，写下来，备忘 1.Pom.xml <?xml ve
Apache Atlas 2.0.0 CDH环境部署问题及解决
x_iaoa_o的博客
11-23 2222
Apache Atlas部署FAQ Atlas部署问题 Atlas启动报错(zookeeper启动失败导致) 1.问题描述 2.原因定位 3.解决方法 Atlas启动报错(solr启动失败导致) 1.问题描述 2.原因定位 3.解决方法 Atlas启动报错(HBase中没有Column) 1.问题描述 2.原因定位 3.解决方法 Atlas import-hive.sh报错 1.问题描述 2.原因定位 3.解决方法 Atlas部署问题 Atlas启动报错(zookeeper启动失败导致) 通过Atlas内嵌
Hadoop与HBase中遇到的问题
热门推荐
我和我追逐的梦~~~
05-09 2万+
1. Hadoop中遇到的问题 以前所遇到的问题由于没有记录,所以忘了  (1)NameNode没有启动成功, 是由于你对HDFS多次格式化,导致datanode中与namenode中的VERSION文件中的namespaceID不一致(对于NameNode节点,该文件位于hdfs-site配置文件中dfs.name.dir参数所指定的路径下的current文件夹中, 对于DataNode节点
Could not retrieve cluster information. CLUSTER NODES returned with error.
Flyer的后花园
03-15 1万+
org.springframework.data.redis.ClusterStateFailureException:  Could not retrieve cluster information. CLUSTER NODES returned with error. - 10.166.15.36:7001 failed: Hostname must not be empty or null....
HBase shell 启动出错 org.apache.zookeeper.KeeperException$ConnectionLossException: KeeperErrorCode = Con
付哥的技术课堂
05-18 2万+
一般发生在长期使用hbase，后面再安装之后直接使用hbase shell 想要进入hbase界面，却没有启动start-hbase.sh而导致的。 [root@master local]# hbase shell SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:fi
JanusGraph单机部署
weixin_39347555的博客
09-17 782
一、安装包下载 下载地址：https://github.com/JanusGraph/janusgraph/releases/ 选择对应Hbase版本下载（公司Hbase版本1.4.11，我选择了0.3.3版本） 注：高版本客户端连接低版本Hbase会报错，报错会详细再说 二、上传至服务器 上传到要部署服务的机器 三、文件解压 mkdir /opt/janusgraph/ mv ~/wangtianyu03/janusgraph-0.3.3.tar.gz ../opt/janusgraph/ cd /o
HBase启动错误client.ConnectionManager$HConnectionImplementation的解决办法
大数据挖掘SparkExpert的博客
10-05 2万+
有时候，HBase因为在写入过程中直接强行中断之后，再次重启过程中，会经常出现一些异常信息。其中标题这个错误也是经常碰到的一个。 具体报的错误如下： 2016-09-28 14:08:16,448 ERROR [main]client.ConnectionManager$HConnectionImplementation: The node /hbase is not inZo
Hbase的java API遇到的问题以及解决方法
phper111的博客
09-14 6211
简介 　　随着Hbase版本的更新，有一些依赖包也要随着更新，今天碰到一个依赖包引用顺序的问题！源码如下，在windows端直接运行出错，但以jar包的方式放到集群上可以运行！错误提示也会在下面粘贴出来。 运行源码： package com.iie.Hbase_demo; import org.apache.hadoop.conf.Configuration; import or
phoenix Unable to load native-hadoop library for your platform
06-08
您好，这个错误通常是由于缺少 Hadoop 本机库或者 Hadoop 本机库与您当前的系统不兼容引起的。以下是解决此问题的一些可能方法： 1. 安装 Hadoop 本机库。您可以在 Hadoop 的官方网站上下载适用于您的系统的 Hadoop...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值