flink
给dongcc换成百威
百威IT技术交流,企鹅942277506,课程视频https://www.bilibili.com/video/BV1Ep4y1i7yn/
展开
-
第六章:基于Flink、Kafka实现海量数据的实时处理
实时分析Kafka简介他是一个MQ,作用:削峰平谷ActiveQM(6k)、RabbitMQ(1.2w) 适用与业务系统(对事务要求极高)ZeroMQ(25-50w)、Kafka(25-50w) 适用于大数据(对速度和吞吐量要求高,海量数据中,数据可能丢失,但对结果影响微乎其微)Kafka为发布/订阅模式。Kafka已经成为大数据业界主流。Flink简介Apache Flink是一个框架和分布式处理引擎,用于对无界和有界数据流进行有状态计算。Flink设计为在所有...原创 2020-05-23 12:24:54 · 6810 阅读 · 1 评论 -
(二)Flink从入门到项目实战——Flink入门程序
目录Flink环境准备开发工具及环境要求Maven依赖坐标Flink入门程序Flink批处理Flink流式处理总结开发过程Flink环境准备开发工具及环境要求IDE最好使用IntelliJ IDEA (eclipse存在插件不兼容的风险)唯一的要求是使用 Maven 3.0.4 和安装 Java 8.x(或更高版本)。Maven依赖坐标<...原创 2020-02-04 10:38:59 · 1548 阅读 · 3 评论 -
(一)Flink从入门到项目实战——Flink介绍——董长春
重要说明该文将根据本人学习进度不断更新,计划分章节仔细介绍,随着对知识的不断学习,我将会对前边的内容进行优化,以保证技术描述的准确,以及与官方版本同步。Flink介绍Apache Flink 是一个海量数据计算框架和分布式处理引擎,用于在无边界和有边界数据流(离线、流式)上进行有状态的计算。Flink 能在所有常见集群环境中运行,并能以内存速度和任意规模进行计算。那么如何来理解有边...原创 2020-02-04 10:15:32 · 2844 阅读 · 1 评论