flink
文章平均质量分 79
Going_sky
让代码照进你的梦想.
展开
-
Flink的安装及案例
Flink的安装介绍 Flink有如下目录 进入到conf 进入conf配置文件目录下,主要配置文件维flinkp-conf.yaml和slaves配置flink-conf.yaml解析如下: - jobmanager.rpc.address: localhost1 –jobManager 的IP地址 - jobmanager.rpc.port: 6123 –jobM...原创 2018-03-08 17:27:29 · 4692 阅读 · 0 评论 -
新代大数据计算框架Apache Flink
大数据计算框架的发展 最近几年,出现了很多热门的开源社区,其中注明的Hadoop Storm,以及很热门的Spark, 它们有着各自专注的应用场景.Spar掀开了内存计算的先河,也以内为基础,赢得了内存计算的飞速发展.Spark的火热或多或少的掩盖了其他分布式计算的系统的身影.就像Flink.在这里把计算引擎分为几代.首先第一代无疑是Hadoop承载的MapReduce,它将计算分为两个阶段...原创 2018-02-17 15:12:23 · 524 阅读 · 0 评论 -
Flink 应用篇
Apache Flink是一个用于对无界和有界数据流进行有状态计算的框架。Flink在不同的抽象级别提供多个API,并为常见用例提供专用库。流媒体应用程序的构建块 可以由流处理框架构建和执行应用程序类型由框架控制流,状态和时间的程度来定义.流 流是流处理的基本方面.Flink可以处理任何类型的流有界和无界流:流可以有界或者无界,及固定大小写的数据集,Flink具有处理无界流的复...原创 2018-07-31 15:26:06 · 3100 阅读 · 0 评论 -
Flink DataStream API编程
DataStream APIFlink 的DataStream程序四实现数据流转换的常规程序(例如L过滤, 更新状态,定义窗口,聚合).最初从各种源(例如,消息队列,套接字流,文件)创建数据流。结果通过接收器返回,接收器可以例如将数据写入文件或标准输出(例如命令行终端)。Flink程序可以在各种环境中运行,独立运行或嵌入其他程序中。执行可以在本地JVM中执行,也可以在许多计算机的集群上执行。...原创 2018-08-06 18:26:14 · 2195 阅读 · 1 评论