org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block: BP-1421546975-192.168.216.200-

最新推荐文章于 2023-03-08 11:55:00 发布
最新推荐文章于 2023-03-08 11:55:00 发布
阅读量9.8k 收藏 3
点赞数 4
分类专栏： Error 文章标签： 报错
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43716164/article/details/91895906
版权

这个错误就是NN与DN失联了，我的报错是在下载HDFS上的文件时报的错
在这里插入图片描述
在这里插入图片描述
我的解决办法是 停掉集群
在这里插入图片描述
重新启动
在这里插入图片描述
再次执行命令 正常
在这里插入图片描述

我这个一个是伪集群，如果全分布式的话有的结点DN起不来，那么就需要将所有结点下的/var/abc文件夹干掉，并重新 hdfs namenode -format 格式化

倪檬
关注
  • 4
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
专栏目录
Root cause: BlockMissingException【查看修复HDFS中丢失的块】ORG.APACHE.HADOOP.HDFS.BLOCKMISSINGEXCEPTION: COULD
萌兔兔MMQ！！
09-14 662
首先得好看有多少损坏的文件，其中需要使用Hadoop的fsck命令： 以下是官方解释 用法： hadoop fsck //路径 以上将会展示该路径下所有受损的文件 最后用-delete 可以清除掉所有受损的文件
hadoop-3.1.3.tar.gz.gz
01-12
hadoop-3.1.3.tar.gz.gz
Java-org.apache.hadoop
06-02
Java-org.apache.hadoop，Java-org.apache.hadoop，Java-org.apache.hadoop
hadoop-3.1.1.3.1.4.0-315.tar.gz
10-11
ambari-2.7.5 编译过程中四个大包下载很慢，所以需要提前下载，包含：hbase-2.0.2.3.1.4.0-315-bin.tar.gz ，hadoop-3.1.1.3.1.4.0-315.tar.gz ， grafana-6.4.2.linux-amd64.tar.gz ，phoenix-5.0.0.3.1.4.0-315.tar.gz
hadoop-2.6.0.tar.gz.mds
02-11
hadoop-2.6.0.tar.gz.mds,hadoop的安装包，版本为2.6.0，适应操作系统为Linux。
外网无法访问HDFS org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block
01-09
1、遇到问题 今天使用自己的电脑，使用外网操作阿里云服务器上的HDFS。 报错  org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block 2、百度结果 参考 https://blog.csdn.net/xiaozhaoshigedasb/article/details/88999595  防火墙记得关掉； 查看DataNode是否启动； 有些数据块是损坏了，可以命令查看 阿里云防火墙已经关闭了 使用 jps 查看本地本地 datanode 启动没问题 使用 hadoop fsck /weblog/log.
hadoop集群：关于Could not obtain block:报错问题
m0_46301437的博客
10-26 9810
hadoop集群：关于Could not obtain block:报错问题 在访问hdfs时，遇到了上述问题， 属于是节点问题： 然后依次查看，防火墙是否关闭，DataNode是否启动，数据块是否损坏： 检查得知问题是其二，然后在命令行对应主机重启hadoop-deamon start datanode, jps查看是已经启动了的， 再试试执行代码是否报错， 同样问题， 还有DataNode经常会自动挂掉， … 去web端看一下(主机：9870) 在LIVE NODE中发现其他节点没有真正启动起来 好了
关于unbuntu启动hadoop时报错org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block的解决方案
weixin_53019598的博客
03-08 1740
仅记录，新手有误轻喷。
[解决方案]org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block
weixin_45212094的博客
04-14 5424
[解决方案]org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block...报错情况查看受损block有可能当前路径下的受损block不止一个删除损坏的block 报错情况 Caused by: java.io.IOException: org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block: xxxxxxxxxxxxxxxxxxxx file=/p
记一次本机使用 Java API 读取虚拟机 HDFS 文件出错：Could not obtain block…
Simon的博客
12-14 4491
记一次本机使用 Java API 读取虚拟机 HDFS 文件出错：Could not obtain block… 背景 虚拟机安装 Hadoop 3.1.3，并运行了 HDFS。 使用本机 Java API 读取文件出错，在虚拟机中正常。 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-fzUj8BKs-1639462803170)(file:///Users/simonmao/Library/Mobile%20Documents/comappleCloudDocs/Cra
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
01-07
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster报错明细问题解决后记 报错明细 IDEA SpringBoot集成hadoop运行环境，，本地启动项目，GET请求接口触发远程提交MapReduce任务至生产集群报错： Failing this attempt.Diagnostics: [2020-02-17 00:44:42.444]Exception from container-launch. Container id: container_
Android程序报错程序包org.apache.http不存在问题的解决方法
09-02
主要介绍了Android程序报错"程序包org.apache.http不存在——Android 6.0已经不支持HttpClient" 问题的解决方法，感兴趣的小伙伴们可以参考一下
hadoop-2.7.3.tar.gz.zip
06-07
Apache Hadoop是一款支持数据密集型分布式应用程序并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。Hadoop是根据谷歌公司发表的MapReduce和Google文件系统的论文自行实现而成。所有的Hadoop模块都有一个基本假设，即硬件故障是常见情况，应该由框架自动处理。
hadoop-hdfs-2.7.2.jar
11-13
有时候需要查看修改或者回复hdfs的默认配置，在这个jar包里面，可以把hadoop-default.xml拿出来
后端开发是一个涉及广泛技术和工具的领域.docx
04-30
后端开发是一个涉及广泛技术和工具的领域，这些资源对于构建健壮、可扩展和高效的Web应用程序至关重要。以下是对后端开发资源的简要介绍： 首先，掌握一门或多门编程语言是后端开发的基础。Java、Python和Node.js是其中最受欢迎的几种。Java以其跨平台性和丰富的库而著名，Python则因其简洁的语法和广泛的应用领域而备受欢迎。Node.js则通过其基于JavaScript的单线程异步I/O模型，为Web开发提供了高性能的解决方案。 其次，数据库技术是后端开发中不可或缺的一部分。关系型数据库（如MySQL、PostgreSQL）和非关系型数据库（如MongoDB、Redis）各有其特点和应用场景。关系型数据库适合存储结构化数据，而非关系型数据库则更适合处理大量非结构化数据。 此外，Web开发框架也是后端开发的重要资源。例如，Express是一个基于Node.js的Web应用开发框架，它提供了丰富的API和中间件支持，使得开发人员能够快速地构建Web应用程序。Django则是一个用Python编写的Web应用框架，它采用了MVC的软件设计模式，使得代码结构更加清晰和易于维护。
华为数字化转型实践28个精华问答glkm.pptx
04-30
华为数字化转型实践28个精华问答glkm.pptx
新员工入职培训全流程资料包gl.zip
04-30
新员工入职培训全流程资料包（100+个文件） 1入职流程指引 万科新职员入职通知书 万科新职员入职引导手册 新进员工跟进管理表 新员工入职报到工作单(文职) 新员工入职报到流程 新员工入职流程表 新员工入职手续办理流程(工厂 新员工入职手续清单 新员工入职须知 新员工入职训流程 新员工入职引导表(导师用) 2 入职工具表格 3 培训方案计划 4培训管理流程 5培训教材课件 6 培训效果检测 7 员工管理制度 8 劳动合同协议 9 新员工培训PPT模板(28套)
三菱PLC通讯程序实例
04-30
FX5U PLC作为主、从站的通讯方式程序实例，以及包含详细说明文件...
技术需求报告-集行波测距与故障录波功能于一体的电网综合故障分析系统.docx
最新发布
04-30
技术需求报告-集行波测距与故障录波功能于一体的电网综合故障分析系统.docx
org.apache.hadoop.hdfs.blockmissingexception: could not obtain block
04-30
org.apache.hadoop.hdfs.blockmissingexception: could not obtain block 是 Hadoop 中一个常见的错误信息。它通常出现在 Hadoop 分布式文件系统中，表示尝试读取一个未正确写入或丢失的数据块，而无法获取该数据块...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值