![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
左岸天涯
这个作者很懒,什么都没留下…
展开
-
kafka+flink集成实例
kafka+flink集成1.目的1.1 Flink简介Apache Flink是一个面向数据流处理和批量数据处理的可分布式的开源计算框架,它基于同一个Flink流式执行模型(streaming execution model),能够支持流处理和批处理两种应用类型。flink特性支持批处理和数据流程序处理优雅流畅的支持java和scala api同时支持高吞吐量和低延迟支持事件处理...原创 2019-03-16 11:37:58 · 7000 阅读 · 5 评论 -
windows下kafka的搭建及配置
windows单机环境下kafka的搭建及配置1、kafka简介1.1 介绍1.2 使用场景1.3 详细介绍2、环境3、安装3.1 JDK安装3.2 Zookeeper安装3.3 Kafka安装4、运行测试4.1 创建主题4.2 创建生产者4.3 创建消费者5、补充1、kafka简介1.1 介绍 Kafka 是一个消息系统,原本开发自 LinkedIn,用作 LinkedIn 的活动流...原创 2019-03-11 12:36:21 · 801 阅读 · 0 评论 -
Flink 读取 Kafka 消息并批量写入到 MySQL实例
aaaa原创 2019-03-16 16:15:55 · 4937 阅读 · 0 评论 -
使用 Apache Flink 开发实时 ETL
Apache Flink 是大数据领域又一新兴框架。它与 Spark 的不同之处在于,它是使用流式处理来模拟批量处理的,因此能够提供亚秒级的、符合 Exactly-once 语义的实时处理能力。Flink 的使用场景之一是构建实时的数据通道,在不同的存储之间搬运和转换数据。本文将介绍如何使用 Flink 开发实时 ETL 程序,并介绍 Flink 是如何保证其 Exactly-once 语义的。...转载 2019-03-18 09:49:40 · 1985 阅读 · 0 评论