![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink
With__Sunshine
这个作者很懒,什么都没留下…
展开
-
阿里巴巴为什么选择Apache Flink?
阿里妹导读:伴随着海量增长的数据,数字化时代的未来感扑面而至。不论是结绳记事的小数据时代,还是我们正在经历的大数据时代,计算的边界正在被无限拓宽,而数据的价值再也难以被计算。时下,谈及大数据,不得不提到热门的下一代大数据计算引擎Apache Flink(以下简称Flink)。本文将结合Flink的前世今生,从业务角度出发,向大家娓娓道来:为什么阿里选择了Flink? 本文主要整理自阿里...转载 2019-03-21 11:28:52 · 156 阅读 · 0 评论 -
Flink程序打包 maven配置(scala版本)
https://blog.csdn.net/Mathieu66/article/details/83582482转载 2019-07-20 19:49:56 · 1627 阅读 · 0 评论 -
[Flink]Flink三种运行模式安装部署以及实现WordCount
https://blog.csdn.net/qq_26502245/article/details/93718072转载 2019-07-18 14:14:22 · 696 阅读 · 0 评论 -
Flink
https://www.jianshu.com/p/00543aa08c07 flink中文文档-快速开始 安装部署 v1.4 https://blog.csdn.net/xu470438000/article/details/79491533转载 2019-07-04 13:49:40 · 302 阅读 · 0 评论 -
Flink on Yarn的两种模式及HA
Flink on Yarn模式安装部署要做的其实不多,正常的步骤:1、上传二进制包 ===》2、解压缩 ===》 3、更改文件名称 ===》 4、配置环境变量。首先看下面这张图(来自于徐葳大神),Flink on yarn的job运行模式大致分为两类: 内存集中管理模式:在Yarn中初始化一个Flink集群,开辟指定的资源,之后我们提交的Flink Jon都在这个Flink yarn-sess...转载 2019-03-29 13:47:22 · 449 阅读 · 0 评论 -
Flink1.7.2安装部署的几种方式
在安装Flink之前,需要对安装环境进行检查。本文是建立在Hadoop、Zookeeper等常规大数据软件都已经安装成功的前体下,由于在时间环境中,常常需要Hadoop的组件配合Flink,因此我们在官网下载安装包时,需要找到对应Hadoop版本的Flink安装包以及系统中Scala的版本,我使用的版本是Hadoop2.8.5+scala2.11.12。scala安装不多做赘述,只需修改一下环境变...转载 2019-03-29 13:43:40 · 671 阅读 · 0 评论 -
Flink on Yarn HA模式部署
1. 配置yarn最大重试次数yarn-site.xml: <property> <name>yarn.resourcemanager.am.max-attempts</name> <value>4</value> </property> 2. 配置Yarn重试次数 [root@hadoop2 flink-...转载 2019-03-29 17:51:37 · 486 阅读 · 0 评论 -
Flink 基本工作原理
Flink是新的stream计算引擎,用java实现。既可以处理stream data也可以处理batch data,可以同时兼顾Spark以及Spark streaming的功能,与Spark不同的是,Flink本质上只有stream的概念,batch被认为是special stream。Flink在运行中主要有三个组件组成,JobClient,JobManager 和 TaskMa...转载 2019-03-21 14:09:44 · 401 阅读 · 0 评论 -
Flink 案例整合
1.概述 Flink 1.1.0 版本已经在官方发布了,官方博客于 2016-08-08 更新了 Flink 1.1.0 的变动。在这 Flink 版本的发布,添加了 SQL 语法这一特性。这对于业务场景复杂,依赖于 SQL 来分析统计数据,算得上是一个不错的福利。加上之前有同学和朋友邮件中提到,Flink 官方给的示例运行有困难,能否整合一下 Flink 的案例。笔者通过本篇博客来解答一下...转载 2019-03-21 11:33:15 · 987 阅读 · 0 评论 -
Flink简介、集群搭建、IDEA环境
一.Flink的引入 https://www.cnblogs.com/frankdeng/p/9400622.html Flink(二)CentOS7.5搭建Flink1.6.1分布式集群 https://www.cnblogs.com/frankdeng/p/9400627.html Flink(三)Flink开发IDEA环境搭建与测试 https://www.cnblogs.com...转载 2019-07-21 17:58:01 · 302 阅读 · 0 评论