Presto:Unable to create input format org.apache.hadoop.mapred.TextInputFormat

最新推荐文章于 2024-04-27 14:21:08 发布
最新推荐文章于 2024-04-27 14:21:08 发布
阅读量1k 收藏
点赞数 1
文章标签： hadoop apache 大数据 hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42533287/article/details/126764174
版权

presto ：Unable to create input format org.apache.hadoop.mapred.TextInputFormat

场景：presto部署完成，prestoServer正常启动，使用presto cli 命令行查询表数据报错 Unable to create input format org.apache.hadoop.mapred.TextInputFormat
解决：

  1. 登录presto 可视化页面查看具体报错，发现为缺少lzo包
  2. find /opt/module/hadoop/ -name hadoop-lzo-0.4.20.jar 查找lzo包位置
  3. cp hadoop-lzo-0.4.20.jar /opt/module/presto/plugin/hive-hadoop2/
  4. 分发 hadoop-lzo-0.4.20.jar 到所有pesto 节点
  5. 重启presto 解决问题
_Ordinary丶
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
presto-server-0.223.tar.gz
01-19
presto-server-0.223.tar.gz
解决Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
想练武，就得下功夫
05-23 6920
老大让启动一下hive，结果报错了，想办法解决，经过不懈努力，终于搞定了 hive> show databases; FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient hive> 出现这个问题的原因： 在 hive-site.xml文件中配置了三个参数所引起的 hive.tx
运行hadoop自己提供的示例时，提示input文件夹不存在的解决方案
spspxl的博客
05-26 4308
当运行hadoop单击版时，提示org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/usr/local 错误，多数原因是自己所在的用户组对该文件夹没有读写权限，解决办法是利用chgrp、和chown 命令，改变该文件夹所在用户组，和拥有者即可。
hive中使用lzo
wisgood的专栏
04-08 5077
1，创建表的时候指定为lzo格式 CREATE EXTERNAL TABLE foo (      columnA string,      columnB string ) PARTITIONED BY (date string) ROW FORMAT DELIMITED FIELDS TERMINATED BY "\t" STORED AS INPUTFORMAT "c
解决hadoop报- Unable to initialize MapOutputCollector org.apache.hadoop.mapred.MapTask$MapOutputBuffer
weixin_43205308的博客
03-31 315
2023-03-31 16:21:27,122 WARN [org.apache.hadoop.mapred.MapTask] - Unable to initialize MapOutputCollector org.apache.hadoop.mapred.MapTask$MapOutputBuffer java.lang.NullPointerException at org.apache.hadoop.mapred.MapTask$MapOutputBuffer.init(MapTask.j
presto本地开发，访问Hive报错：Unable to create input format org.apache.hadoop.mapred.TextInputFormat
lucyLee的博客
04-22 3974
1. 序言 出于工作需要，使用mac + IntelliJ IDEA，搭建了一个可以访问Hive的本地开发环境 执行查询时报错： Query 20220422_084012_00000_34axr failed: Unable to create input format org.apache.hadoop.mapred.TextInputFormat 查看日志，具体的报错信息如下： com.facebook.presto.spi.PrestoException: Unable to crea
presto 查询hive facebook.presto.spi.PrestoException: ....hadoop.mapred.TextInputFormat
06-15 968
om.facebook.presto.spi.PrestoException: Unable to create input format org.apache.hadoop.mapred.TextInputFormat at com.facebook.presto.hive.HiveUtil.getInputFormat(HiveUtil.java:331) at com.facebook.presto.hive.StoragePartitionLoader.loadPartition(Storage
Presto的坑记录
北京小辉
09-15 4612
问题1 Java版本: Unrecognized VM option 'ExitOnOutOfMemoryError' Did you mean 'OnOutOfMemoryError=<value>'? Error: Could not create the Java Virtual Machine. Error: A fatal exception has occurred. Program will exit. 回答： Presto requires Java 8 Update 151
Presto：Unable to create input format com.hadoop.mapred.DeprecatedLzoTextInputFormat错误解析
qq_32656561的博客
06-05 2730
我的hive中的ods层表是这样存储的： drop table if exists ods_ipqc_online_tmp; create external table ods_ipqc_online_tmp ( `MACH_ID` string COMMENT '机台id', `MACH_IP` decimal(16, 2) COMMENT '机台ip', `IPQC_ONLINEID` string COMMENT 'IPQC在线ID', `CRE
Presto执行SQL报错TextInputFormat
m0_60565154的博客
07-04 95
Presto执行SQL报错TextInputFormat解决方法
presto0.166概述
02-24
计划，优化的ORC和ParquetReader等presto不太支持存储过程，支持部分标准sqlpresto的查询速度比hive快5-10倍上面讲述了presto是什么，查询速度，现在来看看presto适合干什么适合：PB级海量数据复杂分析，交互式SQL...
presto-cli-0.191-executable.jar
02-23
presto集成到hdp需要下载的包，亲测，已集成成功，并正常使用。
Presto-The-Definitive-Guide.rar
02-25
Presto-The-Definitive-Guide.rar
Presto大数据查询引擎 v0.245
12-28
为您提供Presto大数据查询引擎下载，Presto是用于大数据的分布式SQL查询引擎。环境要求：Mac OS X或LinuxJava 8 Update 151或更高版本（8u151 +），64位。支持Oracle JDK和OpenJDK。Maven 3.3.9+（用于建筑）Python ...
Hadoop之路---伪分布式环境搭建
kuyecsl的博客
04-26 575
hadoop更适合在liunx环境下运行，会节省后期很多麻烦，而用虚拟器就太占主机内存了，因此后面我们将把hadoop安装到wsl后进行学习,后续学习的环境是Ubuntu-16.04 （千万强调，有的命令一定要加sudo!千万强调，有的命令一定要加sudo!千万强调，有的命令一定要加sudo!
《HCIP-openEuler实验指导手册》1.5 Apache持久化连接配置
xzzteach的博客
04-26 411
【代码】《HCIP-openEuler实验指导手册》1.5 Apache持久化连接配置。
WEB服务的配置与使用 Apache HTTPD
weixin_55731208的博客
04-23 1565
服务端：服务器将发送由状态代码和可选的响应正文组成的。状态代码指示请求是否成功，如果不成功，则指示存在哪种错误情况。这告诉客户端应该如何处理响应。客户端：客户端（例如，Web 浏览器）使用指定的协议连接到服务器（例如，您的Apache HTTP 服务器），并使用URL路径发出资源一般来说，最常见的web客户端就是浏览器。HTTP协议Web客户端和服务器之间的交互用的是一个基于文本的应用级协议，叫做，超文本传输协议）。HTTP。
web server apache tomcat11-25-Advanced IO and Tomcat
最新发布
04-27 752
整理这个官方翻译的系列，原因是网上大部分的 tomcat 版本比较旧，此版本为 v11 最新的版本。重要提示：使用这些功能需要使用HTTP连接器。AJP连接器不支持它们。
web server apache tomcat11-18-clusting 集群
04-24 471
整理这个官方翻译的系列，原因是网上大部分的 tomcat 版本比较旧，此版本为 v11 最新的版本。使用会话持久性，并将会话保存到共享文件系统（PersistenceManager + FileStore）使用会话持久性，并将会话保存到共享数据库（PersistenceManager + JDBCStore）使用内存复制，使用随 Tomcat 一起提供的 SimpleTcpCluster（lib/catalina-tribes.jar + lib/catalina-ha.jar）
java.io.NotSerializableException: io.prestosql.jdbc.PrestoArray
07-14
这个错误通常发生在尝试将不可序列化的对象传输或存储时。根据错误消息中提到的类`io.prestosql.jdbc.PrestoArray`，它是Presto JDBC驱动程序中的一个类，可能无法序列化。 如果你正在尝试将`PrestoArray`对象传递给其他地方，例如通过网络或存储在文件中，你需要考虑将其转换为可序列化的形式。一种可能的解决方法是将其转换为一个可序列化的数据结构（如数组或列表），然后再进行传输或存储。 具体的解决方法可能取决于你的使用情景和代码实现细节，建议查看相关文档或检查你的代码以了解更多信息。如果你需要进一步的帮助，请提供更多上下文或代码示例，以便我可以给出更具体的建议。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值