![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink
文章平均质量分 92
catch that elf
一辈子很短,努力的做好两件事就好;第一件事是热爱生活,好好的去爱身边的人;第二件事是努力学习,在工作中取得不一样的成绩,实现自己的价值,而不是仅仅为了赚钱;
展开
-
Flink服务的HA配置
文章目录Standalone 模式HA配置HAFlink On Yarn 模式HA默认情况下,每个 Flink 集群只有一个 JobManager,这将导致单点故障(SPOF),如果这个 JobManager 挂了,则不能提交新的任务,并且运行中的程序也会失败。使用JobManager HA,集群可以从 JobManager 故障中恢复,从而避免单点故障。用户可以在Standalone 或 Flink on Yarn 集群模式下配置 Flink 集群 HA(高可用性)。Flink 的HA需要Zookee原创 2020-08-24 19:36:59 · 2242 阅读 · 0 评论 -
Flink on Yarn 部署Session-Cluster和Per-Job-Cluster
文章目录原理介绍Flink on Yarn模式部署启动Session-Clusterm模式Per-Job-Cluster模式Flink on Yarn 模式的原理是依靠 YARN 来调度 Flink 任务,目前在企业中使用较多。这种模式的好处是可以充分利用集群资源,提高集群机器的利用率,并且只需要 1 套 Hadoop集群,就可以执行 MapReduce 、Spark和Flink 任务,操作非常方便,运维方面也很轻松。Flink on Yarn 模式需要依赖 Hadoop 集群,并且Hadoop 的版本需原创 2020-08-21 18:17:22 · 12359 阅读 · 4 评论 -
Flink Standalone集群安装和部署
文章目录Flink架构介绍基本架构安装部署文件准备及部署规划上传文件到服务器并解压修改配置文件分发安装文件到其他服务器启动集群访问webUIFlink架构介绍Flink 的安装和部署主要分为本地(单机)模式和集群模式,其中本地模式只需直接解压就可以使用,不以修改任何参数,一般在做一些简单测试的时候使用。本地模式在我们的课程里面不再赘述。集群模式包含:Standalone。Flink on Yarn。Mesos。Docker。Kubernetes。AWS。Goole Compute Engi原创 2020-08-20 15:34:37 · 1374 阅读 · 0 评论 -
Flink介绍、特点及和与其他大数据框架对比
文章目录Flink 是什么Flink定义有界流和无界流有状态的计算架构为什么要用Flink应用场景特点和优势流式计算框架对比Flink 是什么在数据量激增的时代,各种业务场景都有大量的业务数据产生,对于这些不断产生的数据应该如何进行有效的处理,成为当下大多数公司所面临的问题。目前比较流行的大数据处理引擎 Apache Spark,基本上已经取代了 MapReduce 成为当前大数据处理的标准。但对实时数据处理来说,Apache Spark 的 Spark-Streaming 还有性能改进的空间。Spar原创 2020-08-19 23:54:42 · 1610 阅读 · 0 评论