spark
Carpemmm
这个作者很懒,什么都没留下…
展开
-
SparkStreaming第一课
前期准备: 搭建好hadoop和spark集群 掌握SparkCore知识 掌握SparkSQL知识 准备好IDEA开发环境 内容概要 本次课是SparkStreaming的第一次课,主要讲解SparkStreaming的运行原理,常用算子的使用。 课程目标 掌握SparkStreaming运行原理 掌握SparkStreaming基本算子使用 知识要点 1、SparkStreaming简介 SparkStreaming是对于Spark核心API的拓展,从而支持对于实时数据流的可拓展,高吞吐量和容原创 2020-12-01 10:25:29 · 270 阅读 · 0 评论 -
SparkStreaming第二课
1、前期准备 掌握上一节SparkStreaming入门知识 2、内容概要 sparkStreaming的checkpoint机制 sparkStreaming的容错机制 sparkStreaming整合sparksql sparkStreaming整合kafka sparkStreaming调优 3、课程目标 掌握sparkStreaming如何容错 掌握sparkStreaming整合kafka 掌握sparkStreaming调优 4、知识要点 1. Checkpoint 1.1 Chec原创 2020-12-03 14:37:29 · 378 阅读 · 0 评论