Flink
文章平均质量分 67
实时计算引擎
Ayub
喜欢学习,喜欢交流分享大数据技术。
展开
-
Flink大数据实时标签实时ETL --04mysql广播和kafka流合并
1、mysql广播和kafka流合并主要应用于实时流关联广播. 主要应该与实时流关联mysql上规则增加关联性.2、代码package com.funcimport com.bean.BuriedPointDetailBeanimport org.apache.flink.api.common.state.MapStateDescriptorimport org.apache.flink.streaming.api.functions.co.BroadcastProcessFunction原创 2023-04-24 20:15:05 · 684 阅读 · 0 评论 -
Flink大数据实时标签实时ETL --03加载规则类 (source Mysql)
Flink实时标签,实时ETL,生产实时代码原创 2022-05-21 16:40:54 · 2154 阅读 · 1 评论 -
Flink大数据实时标签实时ETL -- 主类代码介绍2
Flink实时标签,实时ETL,生产实时代码原创 2022-04-03 21:45:37 · 3913 阅读 · 1 评论 -
Flink大数据实时标签实时ETL -- 项目介绍1
Flink实时标签,实时ETL原创 2022-03-26 13:45:07 · 5379 阅读 · 1 评论 -
FlinkSQL Scala版本的自定义UDF —— 03
我们在处理数据的时候经常会出现一些。常用函数无法满足的函数。本案例的实践效果是:对传入字段变为url。 如传入:hao123返回:http://www.hao123.com源数据csv文件:hao123,2,1baidu,2,11、自定义UDF/UDAF/UDTF函数的步骤(1)继承函数ScalarFunction(2)覆写eval方法(3)注册函数registerFunct...原创 2020-04-19 15:39:29 · 1054 阅读 · 0 评论 -
Flink1.8消费Kafka的Nginx数据统计——02
import org.apache.flink.streaming.api.datastream.DataStreamSinkimport org.apache.flink.streaming.api.scala.StreamExecutionEnvironmentimport org.apache.flink.table.api.{Table, TableEnvironment, Types...原创 2020-04-18 17:36:44 · 611 阅读 · 0 评论 -
Flink1.8消费Kafka的数据(Demo)——01
本demo为Flink 1.8消费kafka的demo 。不多说直接上代码。1、POM.XML<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchem...原创 2020-04-13 17:30:45 · 635 阅读 · 0 评论