- 博客(3)
- 收藏
- 关注
RSS订阅原创 Flink-connector-redis支持设置key的ttl改进
1、概述 Flink默认提供了很多开箱即用的连接器，比如与Kafka、RabbitMQ、HDFS、ElasticSearch等对接的连接器。还有一些不那么常用的连接器则由Apache Bahir项目（官网很简陋，见这里）来提供，其中就包含Redis Sink。 2、flink-cnnector-redis使用 需求1：通过flink实时处理结果保存到redis中，这里可以引入 flink-cnnector-redis的pom依赖实现 目前maven源中只提供了下面的这种依赖，通过引入该依赖，可以实现对
2021-01-03 17:08:19
1256
原创 SparkStreaming第二课
1、前期准备 掌握上一节SparkStreaming入门知识 2、内容概要 sparkStreaming的checkpoint机制 sparkStreaming的容错机制 sparkStreaming整合sparksql sparkStreaming整合kafka sparkStreaming调优 3、课程目标 掌握sparkStreaming如何容错 掌握sparkStreaming整合kafka 掌握sparkStreaming调优 4、知识要点 1. Checkpoint 1.1 Chec
2020-12-03 14:37:29
359
原创 SparkStreaming第一课
前期准备： 搭建好hadoop和spark集群 掌握SparkCore知识 掌握SparkSQL知识 准备好IDEA开发环境 内容概要 本次课是SparkStreaming的第一次课，主要讲解SparkStreaming的运行原理，常用算子的使用。 课程目标 掌握SparkStreaming运行原理 掌握SparkStreaming基本算子使用 知识要点 1、SparkStreaming简介 SparkStreaming是对于Spark核心API的拓展，从而支持对于实时数据流的可拓展，高吞吐量和容
2020-12-01 10:25:29
251
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人