Flink
Flink学习小结
willyan2007
这个作者很懒,什么都没留下…
展开
-
Flink三:EventTime与WaterMark生成记录
import java.text.SimpleDateFormat import org.apache.flink.streaming.api.TimeCharacteristic import org.apache.flink.streaming.api.functions.AssignerWithPeriodicWatermarks import org.apache.flink.stre...原创 2020-01-15 11:30:38 · 510 阅读 · 0 评论 -
Flink二:IngestionTime与ProcessingTime
IngestionTime进入Flink系统的时间; ProcessingTime Flink算子操作的时间。 有个程序描述下它们的差异: //订单对象(userid、消费总额total) case class Order(userid: Long, total: Long) case class OrderSummary(startTime: String, endTime: Strin...原创 2020-01-13 23:53:15 · 2486 阅读 · 2 评论 -
Flink一:初识Flinlk,并与Spark做对比!
初识Flink,flink stream是无边界的数据,咱们用一个例子,对比下Flink与Spark的差异。 Flink是基于的,且Event是独立的,操作、算子都是基于当个的Event的; Spark是基于RDD的,操作、算子都是基于集合实现的,这是Spark与Flink最本质的差别。 1:Spark WordCount例子 import org.apache.spark.{Spark...原创 2020-01-13 22:25:01 · 386 阅读 · 0 评论