Spark Streaming实时流处理项目实战-视频下载

Spark Streaming实时流处理项目实战视频下载

课程介绍:

本课程从实时数据产生和流向的各个环节出发,通过集成主流的分布式日志收集框架Flume、分布式消息队列Kafka、分布式列式数据库HBase、

及当前非常火爆的Spark Streaming打造实时流处理项目实战,让你掌握实时处理的整套处理流程,达到大数据中级研发工程师的水平!

视频不需要解压密码,保存到自己网盘下载后直接可看。是笔者自己买的分享给大家。

基于Flume+Kafka+Spark Streaming打造企业大数据流处理平台

  1. 流行框架打造通用平台,直接应用于企业项目
  2. 处理流程剖析
  3. 日志产生器
  4. 使用Flume采集日志
  5. 将Flume收集到的数据输出到Kafka
  6. Spark Streaming消费Kafka的数据进行统计
  7. Spark Streaming如何高效的读写数据到Hbase
  8. 本地测试和生产环境使用的拓展
  9. Java开发Spark要点拓展


原理+场景,让你真正明白Spark Streaming

全面了解Spark Streaming的特性及场景应用,完成各个不同维度的统计分析

1、日志收集框架Flume

  • Flume架构及核心组件
  • Flume&JDK环境部署
  • Flume实战案例

2、分布式消息队列Kafka

  • Kafka架构及核心概念 / Zookeeper安装
  • Kafka单、多broker部署及使用
  • Kafka Producer Java API编程
  • Kafka Consumer Java API编程

3、逐步学习Streaming

1.入门

  • Spark Streaming概述及应用场景
  • Spark Streaming集成Spark生态系统使用
  • 从词频统计功能着手入门Spark Streaming
  • Spark Streaming工作原理(粗/细粒度)

2.核心

  • StreamingContext/Dstream
  • Input DStreams和Receivers
  • Transformation和Output Operations
  • Spark Streaming处理socket/文件系统数据

3.进阶

  • updateStateByKey算子的使用
  • 统计结果写入到MySQL数据库
  • 窗口函数的使用、黑名单过滤
  • Spark Streaming整合Spark SQL操作

课程目录

视频来自慕课网,绝对真实有效!!!

网盘链接:链接:
提取码:d4j7 

链接如果失效可以私信我更新哦!!!!!!

 

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

怒上王者

你的鼓励是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值