CouldNot read schema from last compaction, no compaction commits found on path HoodieTableMetaClient

最新推荐文章于 2023-07-05 22:38:39 发布
最新推荐文章于 2023-07-05 22:38:39 发布
阅读量1k 收藏
点赞数
分类专栏： 大数据 hudi 文章标签： hadoop big data flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43680345/article/details/120865419
版权
在尝试使用Flink SQL将数据插入Hudi时遇到错误：'NoSuchElementException: No value present in Option'。这可能由于Hudi在HDFS上的表已被修改或格式改变。解决方法是删除HDFS上对应表并重新创建指定目录。确保Flink配置与Hudi表结构匹配以避免此类问题。
摘要由CSDN通过智能技术生成

flink-sql 写入hudi，出现报错：Caused by: java.util.NoSuchElementException: No value present in Option


在这里插入图片描述

flink sql -hudi
flink插入hudi报错，原因是因为hudi对应的hdfs表被修改，或被修改为其他格式，需要在对应的hdfs目录下，找到该flink对应的表，然后删除，并重新创建指定目录。

越菜越爱玩啊
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Flink1.14 源码报错Could not transfer artifact io.confluent:kafka-schema-registry-client from/to maven地址
打工日常
11-29 1903
Flink1.14 源码报错Could not transfer artifact io.confluent:kafka-schema-registry-client from/to maven地址 解决办法： 1.删除maven本地仓库中的以 lastUpdated 结尾的文件 2.然后将maven的配置文件中的仓库镜像改为阿里云或者其他国内进行地址，重新import一下 ...
ImportError: cannot import name ‘SQLDatabaseChain‘ from ‘langchain‘解决方案
weixin_43178406的博客
08-22 6万+
本文主要介绍了ImportError: cannot import name ‘SQLDatabaseChain’ from 'langchain’解决方案，希望能对学习langchain的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案 2.1 解决方案一 2.2 解决方案二
IDEA内整合Hudi报错
Such_Devotion 的博客
07-05 219
本次在IntelliJ中使用Flink-SQL 从Kafka 队列中读取数据保存到Hudi表。
Flink常见报错
lightupworld的博客
04-26 633
Flink常见报错1.任务在运行时开启CheckPoint配置 1.任务在运行时开启CheckPoint配置 报错 java.lang.Exception: Exception while creating StreamOperatorStateContext. at org.apache.flink.streaming.api.operators.StreamTaskStateInitializerImpl.streamOperatorStateContext(StreamTaskStat
解决java.util.NoSuchElementException: No value present 异常问题
纵横的博客
04-26 5万+
问题描述 代码如下 Comparator<User> userComparator = Comparator.comparing(User::getCreateT); String recentUserServer = users.stream().max(userComparator).get().getServer(); 源码分析 也就是当get的调用主体查询不到、为空时，就...
Optional乱用Empty之No value present
weixin_34192732的博客
10-09 528
前言 看到好多文章都是推荐采用Optinal的，而经常我遇到问题的时候就想：如果设计成optional的话就不会忽略这种NullPointException错误了。然而，optional并不是想用就随便用的。今天花了10分钟追踪一个bug，根源就是optional滥用。 问题描述 API返回失败，没有描述原因。看着蛋疼，因为公开的API不方便返回错误详情。于是查log，发现错误日志的messag...
java.util.NoSuchElementException原因分析以及解决方法
热门推荐
WU2629409421perfect的博客
11-09 7万+
java输入流报错： Exception in thread "main" java.util.NoSuchElementException at java.base/java.util.Scanner.throwFor(Unknown Source) at java.base/java.util.Scanner.next(Unknown Source) at java.base/java....
Flink + Hudi demo 环境
ChengYanan的博客
09-26 1442
版本 flink 版本： Flink 1.12.5 Scala版本：2.12 Hudi版本：0.9.0 将hudi-flink-bundle_2.12-0.9.0.jar放入flink的lib目录下。
SpringBoot项目中使用Spring-data-jpa启动时报错Could not fetch the SequenceInformation from the database
u012958250的博客
04-16 5485
在写一个简单的SpringBatch项目时出现了如下报错： 2021-04-16 09:03:17.085 ERROR 26864 --- [ main] o.h.e.j.e.internal.JdbcEnvironmentImpl : Could not fetch the SequenceInformation from the database java.sql.SQLException: 数字溢出 at oracle.jdbc.driver.NumberCommo...
MONGODB-CR: AuthenticationFailed UserNotFound Could not find user...报错解决方法
小葱的博客
09-19 5814
在应用使用账号密码登录认证MongoDB时，观察MongoDB日志会出现下面报错： 2018-08-16T14:46:38.242+0800 [conn16484] Failed to authenticate testbj2@search with mechanism MONGODB-CR: AuthenticationFailed UserNotFound Could not find us...
Spring Boot学习总结（28）—— springboot连接postgresql 指定模式Schema
科技D人生
07-28 7857
springboot 连接 postgresql 指定模式Schema 一般的连接方式，我们创建数据库之后，在public 的Schema（模式）下建表，这时使用连接方式 jdbc:postgresql://localhost:5432/postgresql1、在这种连接方式下，默认连接使用的是postgresql数据库的public 模式 2、在业务场景中有时允许多个用户使用一个数据库并且不会互相干扰。这时需要在使用同一个数据库新建其他模式进行连接。这时在springboot的数据源jdbc配置时注意
Hibernate查找数据报NoSuchElementException: No value present错误解决办法
凌风少年z
11-20 1万+
比如我查询： //查询id为1的用户 TUser tUser = tUserMapper.findById(1).get(); 就会报错 java.util.NoSuchElementException: No value present 意思很明确，就是没有找到值，但是自己的数据库里明明就是有这个值的，原因可能如下： 没有正确修改配置文件：我的是在yml文件 这里需要把ddl-auto修改成update，如果你是create的话 ，代表每次都要重新建立表，查询的时候你当然找不到之前的数据，就会报这个
Java NoSuchElementException: No value present 问题解决
旭东怪的博客
01-25 1万+
问题描述： java.util.NoSuchElementException: No value 问题分析： 1、使用jpa查询的时候，如果查询不到数据，就会返回这个错误。 解决办法：先判断查询是否有数据。 Optional<User> optional = userDao.findOne(user); return optional.isPresent() ? optional.get(): null; ...
Hive:当insertinto表的时候报Could not read schema from the hive metastore because it is corrupted
Joseph25的博客
09-16 1233
//报错信息 Exception in thread "main" org.apache.spark.sql.AnalysisException: The format of the existing table db_src.parquet_test is `HiveFileFormat`. It doesn't match the specified format `ParquetFileFormat`.; //解决办法 ALTER TABLE parquet_test SET TBLPROPERTI.
java.util.NoSuchElementException: No value present 错误解决
qq_26777045的博客
06-25 6821
今天在写志愿插入时，要先判断志愿表中是否有该学生的志愿条目，测试时出现java.util.NoSuchElementException: No value present错误 代码如下 Expectation expectationById = expectationDao.findById(expectation.getStudentId()).get(); if(expectationById != null){ log.info("志愿已存在.
springboot java.util.NoSuchElementException: No value present 异常处理
五山口老法师
12-04 2万+
当通过jpa通过id查询时，使用 findById(id).get()，当id不存在当，也就是数据库没有对应当id数据时，就回报上面当异常 后来查看源码，发现： public T get() { if (value == null) { throw new NoSuchElementException("No value present"); } ...
CentOS7伪分布式下 hive安装过程中遇到的问题及解决办法
BIT_SKY的博客
10-24 8208
hive 安装容易出现的错误及其解决办法
Flink CDC + Hudi + Hive + Presto构建实时数据湖最佳实践
Focus on Lakehouse
11-23 5993
1. 测试过程环境版本说明Flink1.13.1Scala2.11CDH6.2.0Hadoop3.0.0Hive2.1.1Hudi0.10(master)PrestoDB0.256Mysq...
schema not found
最新发布
05-16
Schema not found是指在数据库中找不到所需的数据模式或表。通常出现在查询或操作数据库时，因为数据库中没有与所需数据模式或表相匹配的信息，导致无法找到所需的数据。这可能是因为表或模式未被正确创建，或者已被...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值