flink
bug搬运攻城狮
当你的才华还撑不起你的野心时,你就应该静下心来学习
展开
-
kafka-flink-hbase
前言flink现在是越来越火了,我最近也有在看flink官网,上周五一个朋友叫我写个flink读取kafka,还有读取mysql,本人比较苦逼,没有实验集群,样例是写出来了,能不能成事,你们用自己的集群测试一下flink-1.6.2kafka-0.10Maven pom.xml <!--hadoop--> <dependency> ...原创 2018-11-26 17:34:34 · 2267 阅读 · 1 评论 -
Flink流处理之迭代案例
前言我们在学习flink时一般都离不开flink官网,而我们通常都要先学会“Example”,Apche的开源项目一般都会有这个目录,今天就说一下flink的Example中的流处理的迭代官网流处理的迭代地址对于流处理(DataStream),Flink相同提供了对迭代的支持。这一节我们主要来分析流处理中的迭代,我们将会看到流处理中的迭代相较于批处理有类似之处。但差异也是十分之明显。...原创 2019-01-14 13:41:04 · 672 阅读 · 2 评论 -
Flink Stream Windows Join
前言从文章标题看出这是个窗口的join讲解文章,我们还是从官网的例子说起Windows Join窗口连接连接两个共享公共密钥并位于同一窗口中的流的元素。可以使用窗口分配器定义这些窗口,并对来自两个流的元素进行评估。然后将来自双方的元素传递给用户定义的,JoinFunction或者FlatJoinFunction用户可以发出满足连接条件的结果。一般用法可概括如下:stream.join(...原创 2019-01-15 11:25:53 · 1028 阅读 · 0 评论 -
Flink Tumbling Windows Join
前言前面说了官网的实例其实就是Inner JoinWindows Join Example 下面就开始说说Tumbling Windows Join翻滚窗口连接官网翻译Tumbling Window Join当执行翻滚窗口连接时,具有公共密钥和公共翻滚窗口的所有元素以成对组合的形式连接并传递给JoinFunction或FlatJoinFunction。因为它的行为类似于内连接,所以不会发...原创 2019-01-15 13:23:03 · 801 阅读 · 0 评论 -
Mac 上搭建 Flink 1.7.2 环境并构建运行简单程序入门
准备工作1、安装查看 Java 的版本号,推荐使用 Java 8。2.安装 brew/usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"上面方法失败的话请执行如下操作在浏览器上进入上面的网站地址,将里面的内容复制到自己新建一个 “instal...原创 2019-02-28 15:50:38 · 1986 阅读 · 0 评论