flink
废物点心777
这个作者很懒,什么都没留下…
展开
-
【spark】spark streaming 和flume、kafka整合
文章目录一、Spark Streaming整合flumePoll方式Push方式二、Spark Streaming整合kafkaKafkaUtils.createDstreamKafkaUtils.createDirectStreamStreamingContext.getOrCreate一、Spark Streaming整合flumeflume作为日志实时采集的框架,可以与SparkStre...原创 2020-04-29 17:05:00 · 618 阅读 · 0 评论 -
【flink】flink集群的搭建
一、Flink支持多种安装模式。local(本地)——单机模式,一般不使用standalone——独立模式,Flink自带集群,开发测试环境使用yarn——计算资源统一由Hadoop YARN管理,生产环境测试二、Standalone模式步骤解压flink压缩包到指定目录配置flink配置slaves节点分发flink到各个节点启动集群提交WordCount程序测试查...原创 2020-04-29 15:39:37 · 458 阅读 · 0 评论 -
【flink】flink基本原理介绍 和 与其他流处理工具比较
文章目录一、Flink简介二、Flink、Spark和Storm对比三、Flink原理流处理和批处理的差别Flink执行原理四、如何选择实时框架六、Flink架构七、Flink基本组件八、Flink应用场景分析一、Flink简介Apache Flink是一个开源的分布式、高性能、高可用的流处理框架。主要有Java代码实现,支持scala和java API。支持实时流(stream)处理和...原创 2020-04-29 15:25:04 · 340 阅读 · 0 评论