java stream TerminalOp和sink

最新推荐文章于 2023-10-11 20:41:30 发布
最新推荐文章于 2023-10-11 20:41:30 发布
阅读量281 收藏
点赞数
分类专栏： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fei33423/article/details/114535856
版权

TerminalOp​( ReduceOp , ForEachOp 等)

方法: evaluateParallel , evaluateSequential

   英文翻译: compute calculate evaluate 的区别? 

 

sink

   通过terminalOp(实现类是ReduceOp,ForEachOp,同时也是AccumulatingSink子类)的makeSink接口生成ReducingSink内部类 [其中ReduceOp和ReducingSink都是AccumulatingSink子类,为啥要托管给ReducingSink内部类]

 

附录: java stream 原理 

Flink的sink实战之一：初探，java面试常问题
m0_63174475的博客
11-04 322
[]( )从一段实例代码开始 下面是个简单的flink应用代码，红框中的print方法就是sink操作： 下图是官方给出的sink方式，都是DataStream类的API，直接调用即可实现sink，刚才代码中的print就是其中一个： 接下来看看上图中API的源码，先看print方法，在DataStream.java中，如下，实际上是调用了addSink方法，入参是PrintSinkFunction： 另一个常用API是writeAsText，源码如下，调用了writeUsingOutp
Java8 Stream源码精讲（四）：一文说透四种终止操作
xhbzl的博客
09-04 1036
本文先解释了Stream调用过程中，终止操作是所声明的lambda表达式的触发时机，讲解了中间操作调用时的链表封装和终止操作的调用流程。依据是否完整遍历Stream元素，将终止操作划分为非短路操作和短路操作，通过带领大家阅读源码，深入分析了ForEachOp、ReduceOp、MatchOp和FindOp四种终止操作的实现原理，以及每一个终止操作方法是如何实现的。本篇文章是本系列的第四章，相信大家完整阅读之后，对Stream的整体工作流程和原理有了更深入的理解。
java8 stream的创建方法，中间方法，terminal方法
enthan809882的博客
01-12 620
1、Stream的使用场景。 Java8中有两大最为重要的改变。第一个是 Lambda 表达式；另外一 个则是 Stream API(java.util.stream.*)。 Stream 是 Java8 中处理集合的关键抽象概念，它可以指定你希望对 集合进行的操作，可以执行非常复杂的查找、过滤和映射数据等操作。 使用Stream API 对集合数据进行操作，就类似于使用 SQL 执行的数 据库查...
Java-Sink接口源码分析以及继承关系
li_xunhuan的博客
08-25 1054
idea继承图例说明： 实线箭头是指继承关系 虚线箭头是指接口实现关系 绿色代表接口 蓝色代表接口以及抽象类  Sink继承于Consumer，实际上就是比Consumer接口多了几个方法：begin、end、cancellationRequested ofDouble/ChainedDouble/ChainedReference都是Sink接口的内部接口，理解它们三者的继承关系对于理解...
java里的stream,Java中的Stream
weixin_30831529的博客
03-16 117
Stream操作分类中间操作中间操作只对操作进行了记录，即只会返回一个流，不会进行计算操作。中间操作可以分为有状态和无状态两种情况：有状态：元素的处理必需要拿到前面所有的元素才能够进行下去。无状态：元素的处理不会受到前面元素的影响。终结操作终结操作会进行计算操作。终结操作又可以分为短路操作和非短路操作。前者是指遇到某些符合条件的元素就可以得到最终值。后者是指必须取得所有元素元素后才能得到最终值。S...
java8 Stream流水线实现分析
天然卷的博客
07-03 2142
java8的Stream流水线，用起来很爽，但是他是怎么做到的呢。 Stream流水线记录用户的每一步操作步骤(map,filter等)，当用户调用结束操作(Collect,reduce 等)时将用户之前记录的操作一并执行调。这里就有几个问题要解决了 如何记录用户操作 如何将用户操作串联起来 如何触发整个任务获取结果 记录串联用户操作 首先查看类图 查看源码我们可以看到 list.stream().map(x->x+“123”).filter(x->x.startsWith(“test”)
Java8 Stream源码精讲（一）：从一个简单的例子入手
m0_67698950的博客
07-15 521
/pipeline链表的头结点//前一个节点//下一个节点//节点的深度//源Spliterator//同sourceSpliterator//pipeline是否已经被连接或者消费//pipeline上是否有有状态的操作//是否是并行流复制代码pipeline链表的头结点，如果当前节点就是头节点，那么将指向自己。链表的上一个节点。nextStage链表的下一个节点。depthhttpshttpshttpshttpshttpshttps。...
Java 8 Stream流底层原理
Welcome to Force-Oneself's Blog
05-15 2644
Java Stream 新特性 ​ Java 8（又称为jdk1.8）是Java语言开发的一个主要版本。Oracle公司于2014年3月18日发布的Java 8，它支持函数式编程，新的JavaScript引擎，新的日期API，新的Stream API等。 lambda表达式 ​ lambda的表达式的语法格式如下： (parameters) -> expression 或 (parameters) -> { expression; } ​ 以下是lambda表达式的重要特征： 可选
Stream同步执行的设计逻辑：Pipeline-Terminal-Sink
dream.zhou
05-01 600
Pipeline 管道或流水线，设计类似双向链表，ReferencePipeline主要实现了Stream接口，Stream是暴露给用户的接口。AbstractPipeline主要实现了BaseStream接口。它们的继承关系如图： ReferencePipeline实现类有三种：Head-链表头、StatelessOp-无状态操作、StatefullOp-有状态操作。无状态操作和有状态操作都属于中间操作，Head是stream操作创建的第一个Stream，记录了数据...
Java8中的Stream流
Mr_Yao
11-23 1258
A sequence of elements supporting sequential and parallel aggregate operations
Stream 03
mmlz00的博客
01-10 147
Stream Pipelines 前面我们已经学会如何使用Stream API，用起来真的很爽，但简洁的方法下面似乎隐藏着无尽的秘密，如此强大的API是如何实现的呢？比如Pipeline是怎么执行的，每次方法调用都会导致一次迭代吗？自动并行又是怎么做到的，线程个数是多少？本节我们学习Stream流水线的原理，这是Stream实现的关键所在。 首先回顾一下容器执行Lambda表达式的方式，以Ar...
java Stream 初探（一）
sinat_33472737的博客
06-07 350
一、概述 支持顺序和并行聚合操作的元素序列。为了执行计算，流操作被组合成一个流管道。 流管道由源（可能是数组、集合、生成器函数、I/O 通道等）、零个或多个中间操作（将流转换为另一个流，例如filter(Predicate) ) 和终止操作（产生结果或副作用，例如count()或forEach(Consumer) ）。 流是懒惰的； 对源数据的计算只在终止操作启动时进行，源元素只在需要时被消费。 多数数据流操作都接受一些lambda表达式参数，函数式接口用来指定操作的具体行 为。这些操作的大多数必须是无
Java Stream原理
sinat_38705282的博客
03-20 3708
文章目录一、简介二、原理2.1 如何保存操作？2.2 如何形成流？2.3 如何执行？参考 一、简介 流操作可以分为中间操作和结束操作。 中间操作分为：无状态操作(map、fliter、skip等等)和有状态操作(需要得到所有元素才能进行，例如limit、sorted、distinct) 结束操作分为：短路操作(遇到符合条件的元素就终止，如findFirst、anyMatch、findAny)和非短路操作(需要得到所有元素才能进行，如collect、max、count、forEach等) Stream的实
java8串行流源码解析
sinat_31058811的博客
04-10 240
举个简单的例子： List<String> list = Arrays.asList("www", "chen", "chenwanbing", "com"); list.stream().map(String::toUpperCase).filter(s -> s.length() == 3).sorted().collect(Collectors.toList()); ...
Java Stream 底层原理
KDLin‘s Blog
11-13 5099
Stream API 你可能没意识到Java对函数式编程的重视程度，看看Java 8加入函数式编程扩充多少功能就清楚了。Java 8之所以费这么大功夫引入函数式编程，原因有二： 代码简洁函数式编程写出的代码简洁且意图明确，使用_stream_接口让你从此告别_for_循环。 多核友好，Java函数式编程使得编写并行程序从未如此简单，你需要的全部就是调用一下parallel()方法。 ​ 对_stream_的操作分为为两类，中间操作(intermediate operations)和结束操作(ter
java stream流(深入理解)
最新发布
lin85253788的博客
10-11 384
Spliterator 定义了一些方法，如 tryAdvance、forEachRemaining、trySplit 等，用于实现数据的遍历和分割。返回自身：Stream 中的中间方法一般都会返回一个新的 Stream 对象，这个新的 Stream 对象可以继续调用其他方法。TerminalSink 是 Stream 流的终止操作的实现，它接收 Stream 中的元素并生成最终的结果。这些方法的特点是，调用完方法之后，其结果就不再是Stream流了，所以不支持链式编程。Java Stream 的定义位于。
Java8 Stream.parallel底层用的是哪个线程池?
tjouyang的博客
05-16 1024
调用stream最终循环的时候都会走AbstractPipeline的这个方法 final <R> R evaluate(TerminalOp<E_OUT, R> terminalOp) { assert getOutputShape() == terminalOp.inputShape(); if (linkedOrConsumed)...
原来你是这样的 Stream —— 浅析 Java Stream 实现原理
杏仁技术站
10-18 2672
作者 | 任旭东    杏仁后端攻城狮，关注服务端技术和敏捷开发。Stream 为什么会出现？Stream 出现之前，遍历一个集合最传统的做法大概是用 Iterator，...
java 实现将 sink 多张表
06-10
env.execute("Flink MySQL Sink Example"); } } ``` 在这个示例中，我们首先设置了JDBC连接器所需的参数，然后创建了一个自定义的JDBCOutputFormat，该输出格式可以将数据写入MySQL中的多个表中。 接下来，我们...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值