【甘道夫】info could only be replicated to 0 nodes, instead of 1

最新推荐文章于 2023-08-25 11:36:12 发布
最新推荐文章于 2023-08-25 11:36:12 发布
阅读量879 收藏
点赞数
分类专栏： 异常解决
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010967382/article/details/25367619
版权
今天为了学习Mahout，部署了一个单机模式的Hadoop-1.2.1

过程中logs/hadoop-casliyang-namenode-singlehadoop.log明显报错如下：
2014-04-15 15:44:03,124 INFO org.apache.hadoop.ipc.Server: IPC Server handler 2 on 9000, call addBlock(/tmp/hadoop-casliyang/mapred/system/jobtracker.info, DFSClient_NONMAPREDUCE_1400027111_1, null) from 192.168.0.80:48613: error: java.io.IOException: File /tmp/hadoop-casliyang/mapred/system/jobtracker.info could only be replicated to 0 nodes, instead of 1

网上各种招都不好使，网上总结得比较全的文章是：http://blog.csdn.net/blueheart20/article/details/21100423

然后发现在 logs/hadoop-casliyang-datanode-singlehadoop.log中没有报错，但是有这样一条警告：
2014-04-15 14:48:22,871 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory in dfs.data.dir: Incorrect permission for /home/casliyang/hadoop/hadoop_data1, expected: rwxr-xr-x, while actual: rwxrwxr-x

把hadoop_data1的权限修改为rwxr-xr-x即可正常启动。

经验总结：以后遇到错误时，不单单在log中搜索关键字error，还要搜索warn！
Gandalf_lee
关注
专栏目录
甘道夫，一种用于安全部署的端到端分析服务 Gandalf, an end-to-end analytics service for safe deployment
qq_24336773的博客
12-04 2890
微软的Gandalf没有采用单独的组件日志分别分析每个部署的方法，而是采用自顶向下的方法来全面评估部署的影响。 Gandalf持续检测来自基础设施的监控数据，包括服务级别日志、性能计数器和流程级别事件。该系统将实时决策引擎与批处理引擎相结合，实时引擎监测部署前后一个小时的时间窗口，以检测紧急问题； 批处理引擎分析系统30天内的状况，以检测更复杂、潜在的问题。当检测到系统异常时，Gandalf会使用相关性分析确定它是否是由部署引起。 如果发现部署不正确，它会评估部署的影响范围（如受影响的集群数量、节点、客户数
从0到1学搜索：搜索引擎的基本技术逻辑（一）
@甘道夫@的专栏
02-13 4779
最近在做搜索相关的项目。虽然谷歌和百度用了不知道多少年了，但此前可以说在搜索技术上是纯小白。于是最近恶补了一些相关知识。好久没有从零开始接触一个全新领域了，虽然有点焦头烂额，但过程中越来越感到乐趣。边学边随便写点笔记备忘，梳理搜索的技术逻辑。 （1）爬虫 从最基本的搜索行为开始。搜索需要满足的，是用户输入一个关键字，得到与之相关的信息。那么，首先要有一个信息池。如果没有任何信息
异常处理 could only be replicated to 0 nodes, instead of 1
04-17
NULL 博文链接：https://xq0804200134.iteye.com/blog/1814655
Hive job,抛错could only be replicated to 0 nodes instead of minReplication(=1)
crazy_stone0002的博客
10-13 494
场景: hive执行一条sql语句,然后map,reduce做完了,写数据over了 hive> select dday.full_day, sum(quantity_ordered) from fact_or...
运行时候报异常could only be replicated to 0 nodes instead of minReplication (=1). There are 2 datanode(s) r
大JAVA解决方案
12-16 2683
运行时候报异常could only be replicated to 0 nodes instead of minReplication (=1). There are 2 datanode(s) running and no node(s) are excluded in this operation. 运行时候报异常could only be replicated to 0 nodes in...
解决could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s)
06-30 5030
解决flume+hadoop的问题，把flume启动之后出现以下错误。2018-06-30 08:01:10,979 (Thread-13) [WARN - org.apache.hadoop.hdfs.DFSOutputStream$DataStreamer.run(DFSOutputStream.java:663)] DataStreamer Exception org.apache.hado...
从0到1学搜索：搜索引擎的基本技术逻辑（二）
@甘道夫@的专栏
05-12 1685
（3）速度 这其实是一个普遍性问题。没有一种软件产品不希望自己越快越好。更何况是数十亿人每天都在使用的搜索引擎了。提升速度主要有三个方面： 第一，硬件发展。拜摩尔定律所赐，即使其他不做任何优化，每十八个月，同样售价的硬件设备的计算速度会翻一倍。互联网行业从诞生之日起就在摩尔定律的福泽之下，可谓幸运。更何况一些更先进的计算平台一直在理论界蓄势待发，譬如量子计算。 第二，
adb shell input 分析（1）
@甘道夫@的专栏
12-12 1979
adb shell input的功能 adb shell input可以通过adb命令行发送input事件。包含keyevent和text两种。 keyevent 对于安卓API KeyEvent定义的健值均可支持 https://developer.android.com/reference/android/view/KeyEvent 健值举例： KEYCODE_0 Added i...
gandalf:甘道夫试跑者
06-27
"甘道夫：甘道夫试跑者"是一款在Shell环境下使用的工具，旨在帮助开发者更加有趣地进行测试。它的设计灵感可能来源于《指环王》中的智者甘道夫，以此角色的名字为软件命名，增加了趣味性和文化色彩。在开发过程中，...
Hadoop上传文件报错：could only be replicated to 0 nodes instead of minReplication (=1).
旧城以西的博客
09-21 1816
这里写自定义目录标题问题原因解决方法 问题 Hadoop上传文件报错详情 could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s) running and no node(s) are excluded in this operation 原因 一般是多次格式化namenode造成的 解决方法 查看Hadoop datanode.log信息 可见namenode cluste
could only be replicated to 0 nodes instead of minReplication (=1)
The Big Data Way
11-18 688
一、出现这个错误，先看看DN是不是正常启动并与NN通信，使用如下命令：   sudo -u hdfs hadoop dfsadmin -report   二、如果DN已经正常启动，则要hdfs-site.xml文件dfs.replication配置是否大于DN数量， 三、如果问题还没有解决，则要检查iptables（开放DN 50010和NN 8020端口）是否正常。     ...
报错 could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s)
最新发布
gs80140的专栏
08-25 511
由于启动hadoop, 有时使用root用户启动了, 再换成hadoop启动就失败了, 要固定hadoop用户启动。解决方案: 除了检查防火墙状态 iptables -L -n 以外, 检查 DataNode 是不是真的没有起来。将有问题的目录重置为hadoop用户:组 即可。我的情况就是datanode没有启来。
could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s) running
Levin的专栏
11-22 3313
主机报错： [hadoop@Master files]$ hdfs dfs -put file3.txt /input 16/11/22 19:17:45 WARN hdfs.DFSClient: DataStreamer Exception org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /input/fil
flink 报错 File xxxx could only be replicated to 0 nodes instead of minReplication (=1)
wppwpp1的专栏
04-16 697
1，flink on yarn的模式提交任务时，一直提交数据节点不可用，报错如下 2020-03-26 12:36:07,248 ERROR org.apache.flink.yarn.YarnResourceManager - Could not start TaskManager in container container_e28_15759701...
could only be replicated to 0 nodes instead of minReplication (=1). There are 1 datanode(s) running
qq_45494908的博客
01-11 4669
Hadoop-3.2.2 API IDEA中使用Java 向hdfs 写入文件时出现如下错误： could only be replicated to 0 nodes instead of minReplication (=1). There are 1 datanode(s) running
could only be replicated to 0 nodes instead of minReplication (=1). There are 1 datanode(s) running
悟能的师兄的专栏
07-03 8381
Hadoop Java API 开发操作时hdfs 时出现如下错误：先翻译一把：could only be replicated to 0 nodes instead of minReplication (=1).  There are 1 datanode(s) running只能复制到0个节点，而不是minReplication（=1）。有一个datanode（s）运行就是说：多个nodeda...
The argument type 'String' can't be assigned to the parameter type 'Source'. (Documentation)
07-14
String audioPath = 'path/to/audio/file.mp3'; var uri = Uri.parse(audioPath); await audioPlayer.play(uri.toString()); } ``` 在这个示例中，我们使用了`Uri.parse()`方法将音频路径转换为Uri对象，并使用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值