- 博客(4)
- 资源 (12)
- 收藏
- 关注
原创 flink实战--双流join之原理解析
JOIN简介 谈flink双流JOIN之前,我们先谈一下大家最熟悉的mysql表join,我们知道表join有如下几种,具体区别就不在介绍了。那么流的join和表的join有什么区别呢?本文我们介绍一下。CROSS JOIN - 交叉连接,计算笛卡儿积;INNER JOIN - 内连接,返回满足条件的记录;OUTER JOINLEFT - 返回左表所有行,右表不存...
2019-03-26 17:07:14 9078 14
原创 yarn监控--获取任务的状态信息
简介 生产环境大多数任务都会提交到yarn上去运行,所有如何获取任务在yarn上的状态以及信息,非常重要。如果能获取任务在yarn上的状态和信息,那么我们就能及时发现任务出现的问题。我们可以通过java或者python去获取yarn任务的信息。java版第一步:把yarn-site.xml文件导入到监控系统(meavn工程)的resources文件下第二步:添加...
2019-03-26 16:20:04 11114 2
原创 flink实战--自定义source
Data Source简介 数据的来源是flink程序从中读取输入的地方。我们可以使用StreamExecutionEnvironment.addSource(sourceFunction)将源添加到程序中。flink附带大量预先实现好的各种读取数据源的函数,其余的需求需要我们通过为非并行源去实SourceFunction接口或者为并行源实现ParallelSource...
2019-03-21 22:02:44 4395
原创 flink实战--核心概念解析和应用
简介 在flink原理解析中https://blog.csdn.net/aA518189/article/details/82908993,我们把flink的概念以及原理整体介绍了一遍,接下来这篇文章会具体的解析每个原理的具体实现和使用方式。1.流对齐(align) 首先谈到流对齐,那一定是多流处理。那对齐的是什么呢?其实对齐的是检查点中的Barri...
2019-03-05 20:25:23 1652 1
flink-connector-jdbc_2.11-1.11.2.jar
2021-02-24
flink需要的jersey-core和jersey-client
2019-03-01
基于SSM框架开发的共享单车管理系统
2018-06-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人