大数据
睡梦狮_旺
科技的初衷只是为了让生活变得更加美好,仅此而已!
展开
-
flink源码剖析之->入口类Clifronted
flink Clifrontend入口类解析原创 2022-11-28 13:16:23 · 393 阅读 · 0 评论 -
sparkSQL执行计划
sparkSql执行逻辑流图原创 2022-10-08 17:26:39 · 1208 阅读 · 0 评论 -
apache系列源码下载地址
大数据组件源码下载地址原创 2022-08-18 11:35:58 · 438 阅读 · 0 评论 -
spark过滤数据根据事件进行属性解密
需求背景:需要对事件过滤,对符合要求的数据进行解密处理代码实现package com.sensordata.zxjt.hispro;import com.alibaba.fastjson.JSON;import com.alibaba.fastjson.JSONObject;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.j原创 2022-03-24 10:37:08 · 2705 阅读 · 0 评论 -
flink实时将不同事件发送到不同topic
需求背景:接入kafka 事件分区数据sink到按照项目名创建的topic里代码实现:package cn.sensorsdata.dev;import com.alibaba.fastjson.JSON;import com.alibaba.fastjson.JSONObject;import cn.sensorsdata.utils.GetPropertiesUtils;import org.apache.flink.api.common.functions.FilterF原创 2022-03-24 10:27:16 · 3390 阅读 · 0 评论 -
spark-streaming
初次创建内容后补原创 2021-08-25 15:22:03 · 92 阅读 · 0 评论