Hadoop DataNode启动失败

最新推荐文章于 2023-07-03 22:41:28 发布
最新推荐文章于 2023-07-03 22:41:28 发布
阅读量784 收藏
点赞数
分类专栏： picture
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhouliyang1990/article/details/16847309
版权

通过分析启动日志后发现fs.data.dir参数设置的目录权限必需为755，要不启动datanode节点启动就会因为权限检测错误而自动关闭。

我之前一直设置成chmod 777 不行，要chmod 755就可以了。。这个要在Linux的文件权限那里设置。

$ chmod 755 -R  /home/hndxzly/hbase/hadoop-1.0.3/hdfs/data 


zjuzly
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ShuffleError: error in shuffle in fetcher FileNotFoundException QuasiMonteCarlo
混沌人的博客
01-02 883
核心错误信息： Error: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#1 at org.apache.hadoop.mapreduce.task.reduce.Shuffle.run(Shuffle.java:134) at org.apache.hado...
CDH 安装hadoop Datanode启动失败
mthinking
04-26 1019
启动WARN 晚上11点09:05.570分 WARN NativeCodeLoader Unable to load native-hadoop library for your platform… using builtin-java classes where applicable 晚上11点09:05.892分 WARN EventStorePublisherWithRetry Fai...
hadoop datanode启动失败
qq_34441527的博客
03-08 532
org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block pool (Datanode Uuid unassigned) service to zhanglingyun/127.0.0.1:9000. Exiting. hadoop datanode 启动出错 FA
【Hadoop】Datanode启动失败
Vici__
03-12 394
启动hadoop后，用jps命令查看，始终没有DataNode。 解决办法： 首先关闭hadoop hadoop@vici-PC:/usr/local/hadoop$ ./sbin/stop-all.sh 进入tmp这个文件下（看好路径） hadoop@vici-PC:/usr/local/hadoop$ cd ./tmp 删除dfs hadoop@vici-PC:/us...
Hadoop datanode启动失败：Hadoop安装目录权限的问题
07-29
### Hadoop Datanode启动失败：Hadoop安装目录权限问题详解 #### 一、问题背景与现象 在部署Hadoop集群的过程中，用户可能会遇到Datanode启动失败的情况。这一问题通常表现为，在尝试启动Hadoop集群时，Datanode...
Hadoop datanode重新加载失败无法启动解决.docx
09-26
Hadoop datanode重新加载失败无法启动解决 本文将详细讲解Hadoop datanode重新加载失败无法启动解决的知识点，主要包括datanode加载失败的原因、解决方法和步骤。 知识点1: datanode加载失败的原因 datanode加载...
hadoop datanode 启动失败，没有任何报错的解决
Testing - So easy and so not easy ~
11-25 2551
datanode的log日志仅有如下信息，没有报错，但是进程没有起来：2013-11-25 09:57:01,466 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: STARTUP_MSG: /************************************************************ STARTUP_MSG:
hadoop datanode启动不了
最新发布
10-09
对于hadoop datanode启动不了的问题，有一些常见的原因和解决方法可以尝试。请按照以下步骤进行排查： 1. 确认Hadoop配置文件的正确性：检查`hdfs-site.xml`和`core-site.xml`文件中的配置是否正确，特别是`dfs....
hadoop datanode无法启动
help_child的博客
02-05 2028
datanode无法启动报错问题及解决方法
Hadoop 2.7.2 HA datanode 启动失败处理
Arthur Guo 的专栏
06-04 1597
Hadoop 再次执行 -format namenode之后，clusterID会出现NN和DN不同步。
【大数据基础】启动hadoop服务时datanode节点启动失败
Best_T的博客
04-04 2083
【错误描述】 启动hadoop后，没有datanode节点 【原因分析】 多次格式化namenode造成namenode与datanode的不同 【解决方案】 1.stop-all.sh 停止hadoop 2.删除/export/data/hadoop/tmp下所有内容 （文件路径可能会不同） 3.hadoop namenode -format 重新格式化namenode节点 4.start-all.sh 重新启动hadoop ...
Hadoop启动的时候，发现Datanode启动不了，解决办法
learn_tech的博客
12-19 2052
转载地址：https://blog.csdn.net/cc1949/article/details/78467673                    https://www.cnblogs.com/kxdblog/p/4034255.html 解决方法： （1）现象： # jps 看不到DataNode （2）可能原因： datanode的clusterID 和 namenod...
Hadoop：DataNode启动失败：Initialization failed for Block pool
初
07-03 2108
​在启动Hadoop集群后，发现原本应该是启动三台机子的数据节点，结果只有一台node2成功启动，另外两台（node1、node3）并没有启动，如下两图所示： 问题描述： ​确认配置信息没问题后，查看Hadoop下hdfs目录中的DataNode日志（配置文件中指定，比如笔者安装Hadoop所在路径为/export/server/hadoop/logs/hdfs），DataNode的日志文件为： cat该文件发现： 问题分析： 由于前一次启动Hadoop集群时，对node2这台机器上的Hadoop的
【HDFS问题】datanode启动失败的问题
ITRS范亚平
07-23 3209
场景1：故障目录容忍度大于等于数据目录数 报错：Invalid volume failure config value:1原因：dfs.datanode.data.dir只配了一个目录，但dfs.datanode.failed.volumes.tolerated配的是1；即只有一个目录，还允许一个目录不可用。解决：将dfs.datanode.failed.volumes.tolerated配置为0，或增加数据目录数。 后记： dfs.datanode.failed.volumes.tolerated
DataNode启动失败解决
最长的电影
03-25 355
DataNode启动失败解决   第一步:查看日志   打开DataNode上的hadoop日志  在hadoop/logs下 查看类似于 hadoop-root-datanode-node3.log   查看错误    在日志中会看到 类似于这样的错误 Incompatible clusterIDs in /usr/hadoop/tmp/dfs/data:  nameno...
Hadoop DataNode不能启动，不能全部启动
LakerPauGasol的博客
03-06 3163
可以查看一下{hadoop文件路径}/etc/hadoop/slaves这个文件，这个文件是集群里所有DataNode的主机名，如果缺少某一个主机名，不能全部启动，将全部要启动datanode的主机名加入即可。目前有三台主机，配置如下：在hadoop102主机上执行启动脚本（自定义脚本或者start-dfs.sh或者start-all.sh）,datanode节点不能正常启动。解决方案：删除hadoop配置文件core-site.xml中指定的缓存数据路径中的数据，然后进行格式化操作。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值