flink
magina_lil
java开发
展开
-
Flink1.9的sql-client初探
安装flink1.9 start-cluster编写test-env.yaml (一定注意格式和缩进! 对照https://github.com/apache/flink/blob/release-1.9/flink-table/flink-sql-client/src/test/resources/test-sql-client-defaults.yaml 自己调整或者直接覆盖)...原创 2019-12-20 14:12:54 · 1167 阅读 · 0 评论 -
IDEA安装scala环境
clone flink 1.6 执行报错.显示没有scala jar下载scala sdk 引用到项目中,发现一直去C盘的用户目录下去找jar包. 卸载IDEA中的scala插件,重新安装失败.应该是没有C盘的操作权限.修改IDEA的缓存文件配置IDEA的缓存文件夹.IntelliJIdea2017.1,存放着IDEA的破解密码,各个项目的缓存,默认是在C盘的用户目录下,目前有1.5G大...原创 2019-12-19 11:26:43 · 399 阅读 · 0 评论 -
Flink Streaming函数操作
max与maxBy的区别。min与minBy同理maxBy:对比某字段返回最大的一条记录,如果这条记录有N个字段,会全部返回max:比某字段仅返回此字段,这条记录的吉他字段不返回interval join 该操作需要制定event time在给定的周期内,按照指定的key对两个keyedStream进行join操作,把符合条件的两个event弄到一起进行操作例如:把一定时...原创 2019-11-18 15:51:42 · 355 阅读 · 1 评论 -
flink dataStream API
类型 描述 dataStream.global(); 全部发往第一个task dataStream.broadcast(); 广播,复制发送到每一个task,注意数据量 dataStream.forward(); 上下游并发度一样时...原创 2019-09-11 09:43:48 · 318 阅读 · 1 评论