Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object

最新推荐文章于 2023-10-26 16:58:21 发布
最新推荐文章于 2023-10-26 16:58:21 发布
阅读量743 收藏 1
点赞数 2
文章标签： java hive spark
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_45688530/article/details/121717389
版权

在进行spark与hive互联的时候出现的，启动spark-shell没有任何问题，但是启动hive，查询表和库，就出现这个错误，查看了配置文件，没发现有什么问题，百度下，有人出现了这种问题，是hadoop的配置文件有问题

就是图片上的lzo压缩有问题，hive支持lzo压缩，但是spark不支持 所以就有问题了

只要把hadoop的配置文件 core-site.xml中的lzo压缩注掉就行。具体我的步骤如下

1.错误演示

hive查询报错

 

 spark查询正常

 原因是有lzo压缩

 

 现在把lzo压缩去掉

我的路径是 

 

关闭hive 重新启动就恢复了

 

 

qq_45688530
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
Failed with exception java.io.IOException....FileFormatException: Malforme... Invalid postscript.
Top5软件工程硕士，先后在京东、字节从事多年Java后端开发、实时和离线大数据开发
09-03 1857
Hive相关的问题。 .txt数据文件导入后再查询报这个错，说明表不是text格式，需要把表修改成text格式后，导入再查询即正确。
Redis exception； nested exception is io.lettuce.core.RedisException: java.io.IOException: 你的主机中的软件中止
隔壁老瓦的专栏
12-17 1万+
Redis exception; nested exception is io.lettuce.core.RedisException: java.io.IOException: 你的主机中的软件中止了一个已建立的连接。 修改sshd_config vim /etc/ssh/sshd_config ClientAliveInterval 600 ClientAliveCountMax 10 重启 service sshd restart 程序运行就不报错了 ...
FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeExcepti
01-07
错误详情 FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 解决方法 简单粗暴：在hvie-site.xml中关闭版本验证 hive.metastore.schema.verification false 目前这种方法只是强制性的关闭了hive的版本验
hive脚本出现Error: java.lang.RuntimeException: Error in configuring object和Caused by: java.lang.IndexOut...
weixin_33738555的博客
06-12 3254
是在reduce阶段报的错误，详细错误信息是 朱传豪 19:04:48 Diagnostic Messages for this Task: Error: java.lang.RuntimeException: Error in configuring object at org.apache.hadoop.util.ReflectionUtils.setJobConf(Refle...
解决Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object
qq_40772429的博客
08-05 1830
很多天没用hive了,今天启动的时候就报一个:Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object 根据错误信息描述,应该是配置文件的问题,可以查看hadoop的四大配置文件 发现是在core.site.xml文件中配置了lzo压缩,删除后即可解决问题,保存后分发至集群各机器,重启集群即可. ...
hive1.2.1版本装载数据报错Error: java.lang.RuntimeException: Error in configuring object
qq_57096334的博客
10-26 375
解决方法：向hive命令行中添加hive-hcatalog-core-1.2.1.jar包。从日志看是缺少了包二导致的。
sqoop报错：Error: java.io.IOException: SQLException in nextKeyValue
xxl0769的博客
12-22 937
Error: java.io.IOException: SQLException in nextKeyValue at org.apache.sqoop.mapreduce.db.DBRecordReader.nextKeyValue(DBRecordReader.java:277) at org.apache.hadoop.mapred.MapTask$NewTrackingRecordReader.nextKeyValue(MapTask.java:568) at org.apache.hadoop.m
java.io.IOException: java.lang.ClassCastException: Cannot cast org.springframework.web.SpringServlet
Jobs1127的博客
08-06 2175
java.io.IOException: java.lang.ClassCastException: Cannot cast org.springframework.web.SpringServlet 这个异常，一般是项目里引入了如下依赖： <dependency> <groupId>javax.servlet</groupId> <ar...
caused by java.io.io_springboot运行出错，Caused by: java.io.IOException
weixin_42261068的博客
02-25 2539
springboot 运行启动，能够正常启动并且运行，但是一开始就在控制台输出如此错误：不知道原因何在？？java.io.IOException: 浣犵殑涓绘満涓殑杞欢涓浜嗕竴涓凡寤虹珛鐨勮繛鎺ャ��而且这个提示的中文还乱码？如何解决org.apache.catalina.connector.ClientAbortException: java.io.IOException: 浣犵殑涓绘...
Hive 报错 java.lang.RuntimeException: Error in configuring object
訾尤的博客
02-02 2155
查看日志后发现错误原因： Hive的依赖库中缺少lzo的jar包。 解决办法： 把lzo的jar包放到${HIVE_HOME}/lib目录下。 cphadoop-lzo-0.4.20.jar${HIVE_HOME}/lib 再次执行HiveSQL，发现错误已经解决。 ...
hive相关错误:java.lang.RuntimeException: Error in configuring object
HAHA的专栏
03-27 5656
hive相关错误:java.lang.RuntimeException: Error in configuring object     今天在hive中运行了select count(1) from track_log where date='20150828' and hour='19' ;这条命令，却出现了如下的错误。      感觉很难受啊，上面说配置的问题产生
nutch java.lang.RuntimeException: Error in configuring object错误解决
笔记
02-19 843
右键工程properties, 切换到"Libraries"选择"Add Class Folder..." 按钮，从列表中选择"conf". 将 conf加入到classpath中。
报错Failed with exception java.io.IOException:java.io.IOException: Malformed ORC file ....
qq_43368947的博客
07-06 1819
问题描述 在用 sqoop 拉取 mysql 中的数据到 hive 的 ods 层的时候，报错以下内容 原因在于 在hive中创建表格的时候,格式是ORC，而在导入数据的时候,文本文件却非ORC格式的。 ORC格式是列式存储的表，不能直接从本地文件导入数据，只有当数据源表也是ORC格式存储时，才可以直接加载，否则会出现上述报错。 解决方案 1.将ORC格式的表删除换成textfile存储格式的表即可。 2.先创建一个以textfile格式的临时表先将源文件数据加载到该表，然后再从textfile表中i
hive命令出现问题Failed with exception Java.io.IOException:java.lang.IllegalArgumentException: java.NET.UR
weibin_6388的专栏
09-07 5705
hive命令出现问题Failed with exception Java.io.IOException:java.lang.IllegalArgumentException: java.NET.URI 标签： hive 2017-05-25 00:32 321人阅读 评论(0) 收藏 举报  分类： 大数据（3）  hive（1）  版权声明：本文为博
Plugins: directory not found: plugins java.lang.RuntimeException: Error in confi
aa346359669的博客
01-08 2086
Plugins: directory not found: plugins java.lang.RuntimeException: Error in configuring object 在nutch-site.xml中添加: [code="java"] plugin.folders apache-nutch-1.6\src\plugin [/code] ...
java.io.IOException: open failed: ENOENT (No such file or directory)
HeAiMing
07-18 2327
1、  权限     2、创建文件 File newFile=new File(newPath); File parentFile = newFile.getParentFile(); if(!parentFile.exists()){ parentFile.mkdirs(); } f(!newFile.exists()){ newFile.createNewFile();
java.lang.RuntimeException: java.io.IOException: invalid constant type: 15
热门推荐
毛竹
08-23 6万+
jar包之间不兼容问题有时候简直要将人坑出翔，有时候的问题就是很奇怪，还找不到问题出在哪，好吧我应该注意下我的言行。这次的这个错误就困扰了我很久 Exception in thread "main" org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'sysUserServ
java.io.IOException: write failed: EPIPE (Broken pipe)
最新发布
06-05
java.io.IOException: write failed: EPIPE (Broken pipe)是Java程序中常见的一个异常，通常发生在使用流进行数据读写的时候。这个异常表示数据写入失败，可能是由于目标文件已经关闭或者是网络连接中断等原因导致的...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

qq_45688530

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值