玩转大数据之Spark入门到实战—376人已学习
课程介绍
1.以Spark2.2版本讲解; 2.全程剖析官网,杜绝读PPT,动手操作; 3.讲解Spark在企业中的生产实战,迅速提升。
课程收益
全面涵盖了Spark生态系统的概述及其编程模型,深入内核的研究,Spark on Yarn,Spark Streaming流式计算原理与实践,Spark SQL,Spark的多语言编程以及SparkR的原理和运行。不仅面向项目开发人员,甚至对于研究Spark的学员,此部分都是非常有学习指引。
讲师介绍
余思隽更多讲师课程
大数据架构师,负责海量日志数据处理等方面的技术研究与管理工作。参与过上海移动、山东移动大数据平台开发建设,负责Hive、Spark、Storm、HBase、ES等的研发和落地。
课程大纲
第1章:Spark Core之Spark概述
1.01-Spark课程概述 10:55
2.02-Spark产生背景 21:57
3.03-Spark概述及特点 36:32
4.04-Spark版本介绍及选择参考依据 4:13
5.05-如何学习Spark 10:56
6.06-Spark Survey 13:39
第2章:Spark Core之Spark源码下载及编译
1.01-上次课回顾 6:35
2.02-JDK&Maven&Scala&Git软件安装 20:32
3.03-Spark源码编译详解 53:50
第3章:Spark Core之RDD深入讲解
1.01-上次课回顾 9:42
2.02-什么是RDD 26:30
3.03-RDD五大特性详解 12:44
4.04-RDD五大特性在源码中的体现 11:54
5.05-图解RDD 7:51
第4章:Spark Core之SparkContext详解
1.01-上次课回顾 4:40
2.02-SparkContext&SparkConf详解 16:47
3.03-使用IDEA构建Spark应用程序 13:18
4.04-spark-shell参数使用深度详解 24:51
第5章:Spark Core之RDD创建
1.01-上次课回顾 4:23
2.02-RDD创建方式一 19:02
3.03-RDD创建方式二 12:14
4.04-RDD创建注意事项 13:53
第6章:Spark Core之RDD操作
1.01-上次课回顾 4:05
2.02-从宏观角度看RDD Operations 17:10
3.03-RDD map算子详解 16:37
4.04-RDD filter结合map算子详解 9:23
5.05-RDD mapValues算子详解 7:09
6.06-RDD常用action算子详解 12:38
第7章:Spark Core之RDD操作续
1.01-上次课回顾 7:01
2.02-RDD常用算子再次试验 7:26
3.03-RDD中join的使用深度详解 17:04
4.04-使用Spark Core使用词频统计详细剖析 11:55
5.05-RDD中subtract&intersection&cartesian使用详解 10:08
第8章:Spark Core之IDEA开发Spark应用程序
1.01-上次课回顾 3:55
2.02-IDEA整合Maven搭建Spark应用开发环境 15:09
3.03-词频统计案例开发及上传jar包到服务器并准备测试数据 9:38
4.04-提交Spark应用程序运行 8:30
5.05-词频统计案例迭代之输出结果到HDFS 5:59
6.06-词频统计案例迭代之处理多个输入文件 3:15
7.07-词频统计案例迭代之输入文件规则匹配 3:24
8.08-带排序的词频统计案例开发及运行过程深度剖析 8:17
9.09-带排序的词频统计案例spark-shell快速测试 6:37
第9章:Spark Core之IDEA开发Spark应用程序续
1.02-求用户访问量的TopN的Hive实现以及Spark Core实现过程分析 15:19
2.03-求用户访问量的TopN的Spark Core实现 10:51
3.04-求平均年龄的Spark Core实现 14:52
4.06-本次课总结 1:49
第10章:Spark Core之Spark调优
1.01-上次课回顾 2:34
2.02-Spark内存优化之内存占用 24:28
3.03-Spark内存优化之数据结构 10:50
第11章:Spark SQL
1.01-上次课回顾 4:42
2.02-为什么需要SQL 17:23
3.03-SQL on Hadoop框架介绍 27:37
4.04-Spark SQL是什么及误解强调 8:48
5.05-Spark SQL概述及入口点SparkSession介绍 9:45
6.06-Spark SQL整合Hive操作详解及性能对比 27:49
7.07-Spark SQL架构及架构流程深度测试详解 10:40
8.08-外部数据源 59:39
第12章:Spark Streaming
1.01-初识Spark Streaming 14:07
2.02-Spark Streaming概述 14:53
3.03-Spark Streaming在Spark生态中的位置 8:35
4.04-Spark Streaming应用案例 6:44
5.05-Spark Streaming案例入门 8:31
大家可以点击【查看详情】查看我的课程
若泽大数据--玩转大数据之Spark入门到实战--专题视频课程
最新推荐文章于 2020-11-16 21:03:34 发布