CDH安装HDFS报错：RPC response exceeds maximum data length

最新推荐文章于 2024-04-28 18:44:27 发布
最新推荐文章于 2024-04-28 18:44:27 发布
阅读量9k 收藏
点赞数
分类专栏： Linux hadoop 文章标签： hadoop hdfs hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qiuye2014/article/details/90516668
版权 
INFO retry.RetryInvocationHandler: java.io.IOException: Failed on local exception: org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data length; Host Details : local host is: "slaver2/10.5.24.149"; destination host is: "slaver1":9000; , while invoking ClientNamenodeProtocolTranslatorPB.getFileInfo over slaver1/10.5.24.148:9000 after 1 failover attempts. Trying to failover after sleeping for 997ms.

由于本人之前创建过hadoop账户单独安装过hdfs，又在root账户下使用CDH方式安装HDFS，在hadoop账户切换root账户时，使用的是`su` 命令，导致把hadoop的环境变量携带到root下导致以上问题，改为`su -` 切换root即可解决以上问题

 

qiuye2014
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CDH 安装 大数据组件 报错
01-07
使用CDH来安装大数据组件的时候，当安装到YARN、Hbase、Spark的时候报错，主要原因是YARN、Hbase、Spark在HDFS里面没有权限去创建文件 Spark SecurityManager: authentication disabled; ui acls disabled; users with view permissions : Set(spark); groups with view permissions: Set(); users with modify permissions: Set(spark) ;group with modify permissions:
RPC response exceeds maximum data length & Cannot assign requested address & java.net.UnknownH
weixin_43681796的博客
07-31 4786
场景：在使用flume的时候报错 问题： 20/06/20 09:09:37 ERROR hdfs.HDFSEventSink: process failed java.lang.IllegalArgumentException: java.net.UnknownHostException: Project at org.apache.hadoop.security.SecurityUtil.buildTokenService(SecurityUtil.java:445) at
ansible-hdfs:使用 Hadoop 2.5.0、CDH 5.3 安装 HDFS 的 Ansible 角色
06-20
HDFS Ansible 手册 这包含使用 Hadoop 2.5.0 和 CDH 5.3 在高可用性模式下安装 HDFS 的角色。 这些角色最初基于此处找到的剧本： : 。 这些剧本经过测试可以在 Ubuntu 14.04 Precise 上运行。 但如果需要在 RHEL 上安装，请将apt替换为yum 。
【kettle集成cdh6.1】hadoop file output浏览目录报错：java.lang.NoClassDefFoundError: com/ctc/wstx/io/SystemId
01-07
【kettle集成cdh6.1】外部数据源读写hdfs若干错前言环境报错问题分析解决办法后记 前言 最近试着上手了一下kettle，搭建过程很简单，就是下载个包解压一下，但是在配置数据源的过程中着实踩了不少坑，这里记录一下。 环境 这里介绍一下几个组件的版本 kettle: 8.0 CDH: 6.1.0 HADOOP: 3.0.0 MYSQL: 5.5.62 报错 在此之前，我已经从CDH HDFS管理页面将所需要的core-site.xml、hdfs-site.xml等文件下载并放置至相应的插件位置，又从HADOOP在里将hadoop-client-3.0.0-cdh6.1.0.jar、h
org.apache.hadoop.ipc.Client: Retrying connect to server
03-26
NULL 博文链接：https://ouyida3.iteye.com/blog/1144326
spark调用集群上文件报错:RPC response exceeds maximum data length
liuandefeng的专栏
05-15 2232
23/05/15 17:05:35 INFO SparkContext: Created broadcast 0 from textFile at CreateRddDemo2.scala:24Exception in thread "main" org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data length at org.apache.hadoop.ipc.Client$IpcStreams.readRe
Failed on local exception: org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data len
weixin_45955039的博客
07-10 7794
Failed on local exception: org.apache.hadoop.ipc.RpcException: RPC response exceeds maximum data length; Host Details : local host is: "node04/192.168.56.104"; destination host is: "node01":9870; 遇到这个错误是创建语句中创建hdfs的路径报错 create function youmeng.finderrorco
HDFS上传文件出错： Permission denied: user=user, access=WRITE, inode="/test":hdfs:supergroup:drwxr-xr-x
a20140724的专栏
08-16 815
问题描述： 在将本地文件上传到HDFS时出错。上传的代码如下： public static void writeToHdfs() throws Exception{ //String hdfsPath = "hdfs://master:8020/test1/test.txt";//hdfs位置 String localPath = "D:\\test.txt...
org.apache.hadoop.ipc.RpcException:RPC response exceeds maximum data length
qq_41387313的博客
05-18 5635
记录一次粗心的，以前就碰到过。 服务器是阿里云的。linux配置内网，本地外网。 然后读取文件的时候用idea,读取时应该去掉端口号。 希望对各位有用。
【Spark】六、org.apache.hadoop.security.AccessControlException
01-09
Exception in thread main org.apache.hadoop.security.AccessControlException: Permission denied: user=L.MOON, access=WRITE, inode=/user/lsy/result1/_temporary/0:lsy:supergroup:drwxr-xr-x Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.AccessControlException): Permission
CDH集群大数据hadoop报错解决办法及思路整理-绝对干货
12-22
CDH集群大数据hadoop报错解决办法及思路整理，主要解决大数据在运行过程中所遇到的问题，相关解决办法都是实践验证过。
ansible-hdfs:用于安装 Cloudera HDFS 的 Ansible 角色
06-10
角色变量hdfs_version - HDFS 版本hdfs_cloudera_distribution - Cloudera 发行版（默认： cdh5.4 ） hdfs_conf_dir - HDFS 的配置目录（默认： /etc/hadoop/conf ） hdfs_namenode - 确定节点是否为 HDFS NameNode ...
Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版思维导图第五次作业 第五章 Scala基础与编程
qq_64684039的博客
04-28 2193
1. 面向对象：Scala是一种完全面向对象的语言。其每一种数据类型都是一个对象，这使得它具有非常统一的模型。2. 函数式编程：Scala同时支持函数式编程，它拥有高阶函数、闭包、不可变数据结构、递归等函数式编程的关键特性。3. 扩展性：Scala的语法非常灵活，允许开发者自定义运算符和语法糖。也支持模式匹配、类型推断和匿名函数等高级特性，这些都为编写简洁、高效的代码提供了可能。此外，Scala的语法允许在单个文件中定义类、对象、函数等，使得代码组织更加灵活。
C# wpf 实现任意控件（包括窗口）更多调整大小功能
codeofcc的博客
01-15 2785
上一章我们已经实现了任意控件统一的拖动调整功能，能够方便的给任意控件设置拖动调整大小。开发过程中发现还是有些功能可以继续拓展的，比如cs代码触发拖动、自定义模板、交叉拖动、限制拖动范围等功能。有功能实现起来不算太容易，却很有实用价值。
hbase MultiRowRangeFilter的原理、作用和实例
linweidong的专栏
04-26 381
是HBase中的一个过滤器，用于在扫描操作中过滤多个行键范围。
如何在docker上面使用hbase shell
linweidong的专栏
04-26 616
在新公司上班，hbase是cdh6.3.2安装在docker上面，如何直接在shell上面使用hbase shell是访问不到的。
node-v10.22.0-darwin-x64.tar.xz
最新发布
05-03
Node.js，简称Node，是一个开源且跨平台的JavaScript运行时环境，它允许在浏览器外运行JavaScript代码。Node.js于2009年由Ryan Dahl创立，旨在创建高性能的Web服务器和网络应用程序。它基于Google Chrome的V8 JavaScript引擎，可以在Windows、Linux、Unix、Mac OS X等操作系统上运行。 Node.js的特点之一是事件驱动和非阻塞I/O模型，这使得它非常适合处理大量并发连接，从而在构建实时应用程序如在线游戏、聊天应用以及实时通讯服务时表现卓越。此外，Node.js使用了模块化的架构，通过npm（Node package manager，Node包管理器）,社区成员可以共享和复用代码，极大地促进了Node.js生态系统的发展和扩张。 Node.js不仅用于服务器端开发。随着技术的发展，它也被用于构建工具链、开发桌面应用程序、物联网设备等。Node.js能够处理文件系统、操作数据库、处理网络请求等，因此，开发者可以用JavaScript编写全栈应用程序，这一点大大提高了开发效率和便捷性。 在实践中，许多大型企业和组织已经采用Node.js作为其Web应用程序的开发平台，如Netflix、PayPal和Walmart等。它们利用Node.js提高了应用性能，简化了开发流程，并且能更快地响应市场需求。
基于JAVA的物流管理系统的源码设计与实现.zip
05-03
毕业设计-->物流管理系统的设计与实现（Java版本） 采用Struts2+hibernate+Oracle10g+Tomcat 涉及车辆管理，配送点管理，运输方式管理，订单管理，员工管理，用户管理，部门管理，权限管理，角色管理等基础管理功能。
cdh安装oozie报错Command Install Oozie ShareLib is not currently available for execution.
06-10
在CDH中安装Oozie时，如果执行命令`sudo -u oozie oozie admin -sharelibupdate`时出现错误消息“Command Install Oozie ShareLib is not currently available for execution”，那么可能是因为Oozie Server没有运行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值