flink
文章平均质量分 77
大数据学习
happycao123
公众号【今夜写代码】 个人主页https://codehappycao.github.io/codetonight/
展开
-
Flink 02 | 英雄莫问出处 Flink丰富多彩的数据源
除了基本数据源外Flink 内置了许多数据源连接器:如Kafka Source、Elasticsearch Source等等,以满足不同的业务场景,比如Kafka 数据源.build();这是一个基础的数据源接口,用于定义非并行数据源或并行度为 1的数据源run(SourceContextctx) throws Exception:在这个方法中实现数据的生成逻辑,并通过 ctx.collect 发送数据。cancel():用于停止数据源的生成操作。当作业取消或出现异常时会调用此方法。原创 2024-09-26 19:38:33 · 538 阅读 · 0 评论 -
大数据 flink 01 | 从零环境搭建 简单Demo 运行
Flink是一个开源的流处理和批处理框架,它能够处理无界和有界的数据流,具有高吞吐量、低延迟和容错性等特点实时数据处理、数据分析、机器学习、事件驱动等。流处理是一种针对实时数据流进行连续处理的技术。它的数据通常是无界,数据以持续不断的流的形式到达。批处理是一种将大量数据集合在一起进行统一处理的技术。在批处理中,首先要收集存储数据,批处理通常用于处理历史数据或离线数据。原创 2024-09-25 20:17:03 · 380 阅读 · 0 评论