![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink
西安人走哪都要吃泡馍
这个作者很懒,什么都没留下…
展开
-
Flink四大基石--------------Time(Event Time).未完待续
Time时间分类EventTime(事件发生时间):事件发生的时间,例如:点击网站上的某个链接的时间,每一条日志都会记录自己的生成时间如果以EventTime为基准来定义时间窗口那将形成EventTimeWindow,要求消息本身就应该携带EventTimeIngestionTime(数据被Flink的Source加载的时间):数据进入Flink的时间,如某个Flink节点的source operator接收到数据的时间,例如:某个source消费到kafka中的数据如果以IngesingtTim原创 2020-05-26 00:47:38 · 667 阅读 · 0 评论 -
Flink给mysql表中插入数据代码详解
package Streaming.MYSQLimport java.sql.{Connection, DriverManager, PreparedStatement}import org.apache.flink.configuration.Configurationimport org.apache.flink.streaming.api.functions.sink.{RichSinkFunction, SinkFunction}import org.apache.flink.strea原创 2020-05-22 00:01:52 · 472 阅读 · 0 评论 -
spark,flink算子全家桶详解,
1. map和mapPartition将DataSet中的每一个元素转换为另外一个元素示例使用map操作,将以下数据转换为一个scala的样例类。“1,张三”, “2,李四”, “3,王五”, “4,赵六”注意map和mapPartition的效果是一样的,但如果在map的函数中,需要访问一些外部存储,如:访问mysql数据库,需要打开连接, 此时效率较低。而使用mapPartition可以有效减少连接数,提高效率参考代码import org.apache.flink.api.s原创 2020-05-21 21:26:55 · 611 阅读 · 0 评论