执行start-dfs.sh后，datenode没有启动

最新推荐文章于 2024-07-28 16:45:11 发布
最新推荐文章于 2024-07-28 16:45:11 发布
阅读量637 收藏 1
点赞数
文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/want_to_fly_/article/details/133495888
版权

        一般来说，没有其他报错的话，基本上就是因为

        hadoop namenode -format  格式化多次导致的

        多次格式化会导致主节点namenode的clusterID会重新生成，而从节点datanode的clusterID 保持不变。我只是虚拟机搞得大数据，所以简单做法就是

（1）找到 hdfs-site.xml文件

        （2）找到NameNode元数据的存储位置还有从节点DataNode的数据存储目录，然后直接删除 data,然后重新创建 data里面的 nn和 dn,然后重新设置一下权限。

（3）重新格式化就可以成功启动datenode.

want_to_fly_
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
问题:sbin/start-dfs.sh 启动不了zookeeper,zkfc和datenode
N8062288的博客
09-23 3533
问题一:zookeeper服务启动成功，但是就不显示端口号，未运行，配置也正确，就是不知道什么原因 运行zookeeperd后显示启动成功： JMX enabled by default Using config: /data/programfiles/zookeeper-3.4.5/bin/../conf/zoo.cfg Starting zookeeper ... STARTED 但用zk...
start-cluster.bat（windows安装flink所需批处理文件）
08-15
start-cluster.bat（windows安装flink所需批处理文件）
执行start-dfs.sh后，datenode没有启动的解决办法
john_deng2的博客
09-28 875
执行start-dfs.sh后，datenode没有启动，很大一部分原因是因为在第一次格式化dfs后，启动并使用了hadoop，后来又重新执行了格式化命令（hdfs namenode -format)，这时主节点namenode的clusterID会重新生成，而从节点datanode的clusterID 保持不变导致的。 解决方案（一）： 在hdfs-site.xml文件下找到这两个文件路径，打...
多次重新初始化hadoop namenode -format后，DataNode或NameNode没有启动_hadoop多次格式化namenode
2401_84181501的博客
05-11 543
多次重新初始化hadoop namenode -format后，DataNode或NameNode没有启动。当我们不小心多次初始化，会导致启动hadoop集群时，主节点DataNode或NameNode无法启动。其本质是清理和做一些准备工作，因为此时的HDFS在物理上还是存在的。在搭建完hadoop集群后，需要对主节点进行初始化（格式化）示例：$hadoop_home/etc/hadoop/在重新初始化（格式化）前，
【Hadoop】执行start-dfs.sh启动hadoop集群时，datenode没有启动怎么办
m0_60511809的博客
12-15 2339
执行start-dfs.sh后，datenode没有启动，很大一部分原因是因为在第一次格式化dfs后又重新执行了格式化命令（hdfs namenode -format)，这时主节点namenode的clusterID会重新生成，而从节点datanode的clusterID 保持不变。打开name目录中current下面的VERSION文件，然后用这个clusterID替换掉datanode节点上的data/current/VERSION里的clusterID。
二、执行sbin/start-dfs.sh后，datenode没有启动
花言简
04-28 4507
可能hadoop没有正常关闭，然后电脑虚拟机挂起了，重新启动时，发现datanode没有启动；查看datanode的日志：报错说，namenode clusterID和datanode clusterID不相容。主节点和从节点（个人只安装了一个从节点）的hadoop安装目录下，$ vim etc/hadoop/hdfs-site.xml查看namenode和datanode的目录：主节点和从节点分...
彷徨 | 执行start-dfs.sh后，namenode正常启动 , datenode没有启动
彷徨的博客
08-17 2423
解决启动集群后namenode正常显示,datanode却没启动的问题 启动Hadoop2.8.3集群后，遇到namenode启动 , 但是datanode进程没启动，查看日志发现如下报错： java.io.IOException: Incompatible clusterIDs in /home/casliyang/hadoop2/hadoop-2.2.0/metadata/data: na...
hadoop集群启动（start-all.sh/start-dfs.sh），datanode无法启动/子节点机器jps无法显示datanode，解决方向：
littlefly00034的博客
05-18 1526
注意检查日志信息，英文又不是读不懂，基本可以明确问题方向！ 1. 在网络配置没有问题，没有报错，master结点jps能够正常启动，且有datanode显示，但是子节点未成为datanode start-all.sh或是start-dfs.sh，会产生简单的日志信息： $机器地址(此处应该为master)$，starting namenode...... $机器地址(此处应为slave机器名称)$，starting datanode...... ...... 注意观察$机器地址$是否为指定sla
大数据-执行start-dfs.sh后，datenode没有启动
changhenshui1990的博客
07-18 800
查看日志如下：　　 2014-06-18 20:34:59,622 FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool (Datanode Uuid unassigned) service to localhost/127.0.0.1:9
执行start-dfs.sh，datenode没有启动
weixin_30896825的博客
11-03 117
FATAL org.apache.Hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool(Datanode Uuid unassigned) service to localhost/127.0.0.1:9000 Java.io.IOException: Incompatible...
jupyter-start-stop.sh
02-21
用途：linux上启动关闭jupyter...此处安装在root用户下，需要使用root用户启动，若是普通用户去掉jupyter-start-stop.sh中的“--allow-root”即可 使用方法：第一次执行表示启动jupyter，第二次执行表示关闭jupyter。
start-ehs.sh
12-30
start-ehs.sh
start-zookeeper.sh
05-24
开启、关闭zookeeper集群的脚本，把主机名改为自己的主机名即可 开启命令：start-zookeeper.sh start
linux-set-start.rar_linux 开机启动
07-14
`daemon-reload`命令更新systemd的内存中的配置，`enable`命令将服务设置为开机启动，`start`命令立即启动服务。 在旧的init系统中，服务启动配置通常在`/etc/rc.d/init.d`目录下，以shell脚本形式存在，并通过`...
分布式系统常见软件架构模式
Ben的专栏
07-25 975
简而言之，有效管理数据和通信流对于构建健壮且可扩展的分布式系统至关重要。对等、API 网关、发布-订阅、请求-响应、事件溯源、ETL、批处理、流处理和编排等架构模式提供了有价值的解决方案，以应对系统设计和实现中的各种挑战。通过理解这些软件架构和分布式系统模式及其各自的优势和权衡，架构师和开发人员可以做出明智的决策，设计出满足其应用程序和用户不断变化的需求的系统。
消息队列-rabbitmq（生产者.消费者. 消息.可靠性）
最新发布
2202_75352238的博客
07-28 523
在我们 生产者发送消息到交换机的时候，假如 我们发送到交换机 ，但是 队列没有收到消息，会返回ack，发送到交换机，然后发送到队列，消费者没有接收到消息返回ack，但是发送到交换机失败，会返回nack。死信交换机 ，都是假如一个定时消息过期了，或者发送延迟消息我们直接把该消息传递到我们绑定的死信交换机中，跟上文 消息发送失败了返回rejct之后，消息发送到err交换机是两种不同的策略。当一条消息发送失败的时候，消费者重新尝试消费消息，达到我们重试的次数之后，消费者返回reject，mq直接删除消息。
江苏科技大学24计算机考研数据速览，有专硕复试线大幅下降67分！
m0_72717598的博客
07-23 527
江苏科技大学（Jiangsu University of Science and Technology），坐落在江苏省镇江市，是江苏省重点建设高校，江苏省人民政府与中国船舶集团有限公司共建高校，国家国防科技工业局与江苏省人民政府共建高校 ，教育部卓越工程师教育培养计划高校，教育部本科教学工作水平评估优秀学校，江苏省高水平大学建设高峰计划B类建设高校，中国船舶与海洋工程产业知识产权联盟、江苏船舶与海洋类高校协同发展联盟牵头单位。其中，研究生新生学业奖学金特等奖3万，一等奖1.2万，二等奖0.8万；
Kafka知识总结（选举机制+控制器+幂等性）
月伴飞鱼
07-27 920
其他Broker启动时也会在Zookeeper中创建临时节点，但是发现节点已经存在，所以它们会收到一个异常，意识到控制器已经存在，那么就会在Zookeeper中创建Watch对象，便于它们收到控制器变更的通知。他只能保证单分区上的幂等性，即一个幂等性Producer只能够保证某个topic的一个分区上不出现重复消息，无法实现多分区的幂等。控制器上保存了最全的集群元数据信息，其他所有 Broker 会定期接收控制器发来的元数据更新请求，从而更新其内存中的缓存数据。目前，当有新 Broker 启动后，它会在。
start-dfs.sh -bash: /usr/sbin/start-dfs.sh: 权限不够
03-26
start-dfs.sh是一个脚本文件，用于启动Hadoop分布式文件系统（HDFS）。根据你提供的错误信息，看起来你没有足够的权限来执行该脚本。 要解决这个问题，你可以尝试以下几种方法： 1. 使用sudo命令来提升权限，例如：...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值