![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink
文章平均质量分 74
~chun
---------------------------------------------
展开
-
About-Flink
About-Flink原创 2022-01-28 13:43:54 · 1801 阅读 · 0 评论 -
FinkX的使用
FinkX的使用一、FlinkX的提交模式1.1 、Local模式运行任务1.2、 Standalone模式运行1.3、 以Yarn Session模式运行任务一、FlinkX的提交模式1.1 、Local模式运行任务/opt/install/xflink-1.8bin/flinkx \ -mode local \ -job /opt/install/xflink-1.8/job/stream.JSON \ -pluginRoot /opt/install/xflink-1.8/plugins原创 2021-09-02 00:24:45 · 327 阅读 · 0 评论 -
Flink_DataStream
Flink_DataStream一、基本算子的使用2.1、Map2.2、FlatMap2.3 Filter2.4 KeyBy2.5 Reduce一、基本算子的使用2.1、MapMap[DataStream -> DataStream]调用用户定义的MapFunction对DataStream数据进行处理,形成新的DataStream其中数据格式可能会发生变化,常用作对数据集内数据的清洗和转换。 DataStream<Integer> dataStream = //...原创 2021-07-15 00:15:58 · 826 阅读 · 0 评论 -
Flink_sql
Flink_Sql一、指定查询 DataStream->Table二、执行查询一、指定查询 DataStream->TableStreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();StreamTableEnvironment tableEnv = StreamTableEnvironment.create(env);// 从外部来源摄取 DataStreamDataS原创 2021-07-14 23:08:53 · 74 阅读 · 0 评论 -
Flink架构简介
基本环境的搭建一、DataSource1.1 集合source2、文件source3、接收socket4、自定义source5、Kafka作为数据源一、DataSource Flink 使用 StreamExecutionEnvironment.getExecutionEnvironment创建流处理的执行环境 Flink 使用 StreamExecutionEnvironment.addSource(source) 来为你的程序添加数据来源。 Flink 已经提供了若干实现好了的 source原创 2021-07-09 09:42:27 · 199 阅读 · 0 评论 -
Flink_java
Flink_java一、source1.1、List1.2、 source from file1.3、source from kafka1.4、自定义source一、source1.1、Listimport com.tan.flink.bean.SensorReading;import org.apache.flink.streaming.api.datastream.DataStream;import org.apache.flink.streaming.api.environment.Stre原创 2021-07-10 21:42:10 · 630 阅读 · 2 评论 -
Flink_Sink
Flink_Sink一、Sink hbase1.1 主体类1.2、获取环境对象1.3、自定义 sink 入hbase1.4 雪花模型生成 rowkey工具类# 1.5 检查数据一、Sink hbase1.1 主体类package com.nfdw;import com.nfdw.entity.Employees;import com.nfdw.sink.MyHBaseSinkFunction;import com.nfdw.utils.*;import org.apache.flink.a原创 2021-07-14 21:59:17 · 82 阅读 · 0 评论