Flink InvalidTypesException: The return type of function could not be determined automatically...

最新推荐文章于 2024-03-08 21:32:38 发布
最新推荐文章于 2024-03-08 21:32:38 发布
阅读量1.7k 收藏
点赞数
文章标签： flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/HZH_aj/article/details/106823787
版权

Flink InvalidTypesException: The return type of function could not be determined automatically...

初学Flink时遇到的小问题，后发现其实挺常见的，但还是稍作记录。

在WordCount的示例代码中有如下代码：

public static final class Tokenizer implements FlatMapFunction<String, Tuple2<String, Integer>> {
   
    @Override
    public void flatMap(String value, Collector<Tuple2<String, Integer>> out) {
   
        // normalize and split the line
        String[] tokens = value
最低0.47元/天 解锁文章
HZH_aj
关注
org.apache.flink.api.common.functions.InvalidTypesException: The return type of function ‘main(Batch
CSDN 精品推荐
09-19 298
使用Flink写一个批处理程序，然后提交运行出现了 `Exception in thread "main" org.apache.flink.api.common.functions.InvalidTypesException: The return type of function 'main(BatchWordCount.java:28)' could not be determined automatically, due to type erasure. You can give type info
【Flink】The return type of function ‘Custom Source‘ could not be determined automatically
一杯咖啡半杯糖的博客
08-02 874
The return type of function ‘Custom Source‘ could not be determined automatically
Flink报错：The return type of function ‘main‘ could not be determined autommatically
YongDaiMe的博客
09-24 956
代码如下： public class KeyedStreamExample { public static void main(String[] args) throws Exception { StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); env.setParallelism(1); DataStream<Senso
The return type of function ‘Custom Source‘ could not be determined automatically, due to type erasu
weixin_44904163的博客
04-16 2588
问题描述 Flink 在使用 自定义一个 Source 时，抛出错误 解决办法 在自定义 Source时， 需要指定泛型
Apache Flink: Return type of function could not be determined automatically due to type erasure
qq_34608620的博客
10-16 711
Apache Flink: Return type of function could not be determined automaticallydue to type erasure 解决方案：https://yangyichao-mango.github.io/2019/10/15/apache-flink-study-4-datastream-api/#%E5%8F%AF%E8%83...
【已解决 Flink Java API问题】The return type of function ‘xxx‘ could not be determined automatically
Aspirin's Nest
12-08 1957
Flink Java API不像Scala API可以随便写lambda表达式，写完以后需要使用returns方法显式指定返回值类型，否则会报下面错误，大概意思就是说Java的lambda表达式不能提供足够的类型信息，需要指定返回值类型。不推荐使用lambda表达式而是使用匿名类。 log4j:WARN No appenders could be found for logger (org.apache.flink.api.java.ClosureCleaner). log4j:WARN Please
The return type of function ‘main(WordCountToObject.java:28)‘ could not be determined automatically,
qingmuchuan_er的博客
11-20 1528
java使用lamda表达式，出现类型无法自动识别到报一下异常 在这Exception in thread "main" org.apache.flink.api.common.functions.InvalidTypesException: The return type of function 'main(XXX.java:28)' could not be determined automatically, due to type erasure. You can give type informat
Flink使用lambda表达式报错：InvalidTypesException：could not be determined automatically, due to type erasure.
Aimo_哈撒的博客
11-26 3213
在写Flink程序的时候（以最简单的WordCount案例为例），有时会使用Lambda表达式来简化，如下边程序中的flatMap算子和Map算子处，都是用了Lambda表达式来简写： public static void main(String[] args) throws Exception { StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
【Flink】 InvalidTypesException: The generic type parameters of ‘List‘ are missing. In many cases
一杯咖啡半杯糖的博客
11-11 616
Caused by: org.apache.flink.api.common.functions.InvalidTypesException: The generic type parameters of 'List' are missing. In many cases lambda methods don't provide enough information for automatic type extraction when Java generics are involved. An easy
org.apache.flink.api.common.functions.InvalidTypesException
weixin_41608066的博客
03-26 3604
Caused by: org.apache.flink.api.common.functions.InvalidTypesException: The generic type parameters of 'Collector' are missing. It seems that your compiler has not stored them into the .class file. ...
使用Java的lambda编程flink报错，Caused by: org.apache.flink.api.common.functions.InvalidTypesException:
RUIMENG061511332的博客
06-13 5834
楼主在使用Java的lambda表达式，进行flink编程时报错，如下： Caused by: org.apache.flink.api.common.functions.InvalidTypesException: The generic type parameters of 'Collector' are missing Exception in thread "main" org.apa...
Flink-Java报错之org.apache.flink.api.common.functions.InvalidTypesException
最新发布
BugEveryday的博客
03-08 622
An easy workaround is to use an (anonymous) class instead that implements the 'org.apache.flink.api.common.functions.FlatMapFunction' interface. Otherwise the type has to be specified explicitly using type information.可以搜索这个报错，有很多文章提到了解决方法，并给出了示例代码。
flink中使用java 8 lambda编程报错：Caused by: org.apache.flink.api.common.functions.InvalidTypesException
木子李的博客
04-14 4565
报错信息如下： org.apache.flink.api.common.functions.InvalidTypesException: The return type of function 'main(KeyStateDemo.java:23)' could not be determined automatically, due to type erasure. You can give...
Timeout of 60000ms expired before the position for partition could be determined踩坑flink消费kafka2.3.0
RUIMENG061511332的博客
07-04 9230
flink消费kafka2.3.0，时报错，分区分配的不对 Kafka Client Timeout of 60000ms expired before the position for partition could be determined 在网上找了一波，没找到原因，后面，误打误撞，发现，是因为，kafka的配置文件，server.properties,使用了主机名作为配置，在server.properties中添加 host.name=192.168.0.30 （当前所在服务器的i.
Flink程序启动报错could not be determined automatically
zggpdd的博客
08-16 733
could not be determined automatically 通过idea中的报错可以定位到错误位置 修改为如下的方式即可，根据你的返回值来定的，不要写和我一样的哦！！！
flink实战--开发中常见的错误与问题
热门推荐
阿华田的博客
12-19 2万+
常见错误集 1.Checkpoint失败：Checkpoint expired before completing env.enableCheckpointing(1000L) val checkpointConf = env.getCheckpointConfig checkpointConf.setMinPauseBetweenCheckp...
Flink之Java lambda表达式
踏雪无痕
06-02 1239
一.简介 Java 8引入了一些新的语言功能，旨在更快，更清晰地编码。它具有最重要的功能，即所谓的“ Lambda表达式”，为函数式编程打开了大门。Lambda表达式允许以直接方式实现和传递函数，而无需声明其他（匿名）类。 注意： Flink支持对Java API的所有运算符使用lambda表达式，但是，每当lambda表达式使用Java泛型时，都需要显式声明类型信息。 二.范例与限制 下面的示例说明如何实现一个简单的内联map()函数，该函数使用lambda表达式对输入进行平方。函数的输入i和输出参数的类
flink中使用lambda表达式
huan的学习记录
11-17 4708
flink中使用lambda表达式1、使用lambda的一个示例2、使用上面这种写法通常或得到如下错误3、解决方案4、建议5、完整代码 在java8中有一种新的语法糖，即lambda表达式，在flink中，支持对所有的java api提供了 lambda的支持，但是存在一些限制，此处举一个例子，来说明如何在flink中使用lambda表达式，以及出错后如何处理。 参考链接：https://ci.a...
flink整合java,Flink for Java demo，使用 lambda 表达式报错
weixin_42665255的博客
03-11 307
public class WordCountA {public static void main(String[] args) throws Exception {ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment();String path = "xxx/hello.txt";DataSet inputD...
Exception in thread "main" org.apache.flink.api.common.functions.InvalidTypesException: The return type of function 'main(WindowedMaxScore.java:33)' could not be determined automatically, due to type erasure. You can give type information hints by using the returns(...) method on the result of the transformation call, or by letting your function implement the 'ResultTypeQueryable' interface.
05-25
这个错误是由于Flink无法自动推断函数的返回类型所导致的。这通常是由于Java的类型擦除机制造成的。 要解决这个问题，你可以在Flink的Transformation调用后面使用returns方法来指定函数的返回类型。例如： ``` DataStream<Tuple2<String, Integer>> result = input .keyBy(0) .timeWindow(Time.seconds(10)) .max(1) .returns(Types.TUPLE(Types.STRING, Types.INT)); ``` 在这里，我们使用了Flink的Types类来指定返回类型为Tuple2<String, Integer>。 另外一种解决方法是让你的函数实现ResultTypeQueryable接口，并在实现的getProducedType方法中指定返回类型。例如： ``` public class MyFunction implements MapFunction<String, Tuple2<String, Integer>>, ResultTypeQueryable<Tuple2<String, Integer>> { @Override public Tuple2<String, Integer> map(String value) throws Exception { // ... } @Override public TypeInformation<Tuple2<String, Integer>> getProducedType() { return Types.TUPLE(Types.STRING, Types.INT); } } ``` 这里，我们实现了MapFunction和ResultTypeQueryable接口，然后在getProducedType方法中指定了返回类型为Tuple2<String, Integer>。 希望这可以帮助你解决问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值