扫码下载「CSDN程序员学院APP」,1000+技术好课免费看
APP订阅课程,领取优惠,最少立减5元 ↓↓↓
订阅后:请点击此处观看视频课程
视频教程-爱奇艺实时流处理项目实战 (Spark Streaming)-Spark
学习有效期:永久观看
学习时长:322分钟
学习计划:6天
难度:高
「口碑讲师带队学习,让你的问题不过夜」
讲师姓名:张长志
CTO/CIO/技术副总裁/总工程师
讲师介绍:张长志技术全才、擅长领域:区块链、大数据、Java等。10余年软件研发及企业培训经验,曾为多家大型企业提供企业内训如中石化,中国联通,中国移动等知名企业。拥有丰富的企业应用软件开发经验、深厚的软件架构设计理论基础及实践能力。项目开发历程:基于大数据技术推荐系统 ,医疗保险大数据分析与统计推断,H5跨平台APP,携程酒店APP,Go语言实现Storm和ZK类似框架。
☛点击立即跟老师学习☚
「你将学到什么?」
本课程以爱奇艺视频实时数据产生和流向的各个环节出发,通过集成主流的分布式日志收集框架Flume、分布式消息队列Kafka、分布式列式数据库HBase、及当前最火爆的Spark Streaming打造实时流处理项目实战,一套代码让你掌握实时处理的整套处理流程,快速进去企业实战!配套资料-答疑专属答疑群 购买课程后加入qq群 951117762 (备注订单号后四位)
「课程学习目录」
1. 00-爱奇艺实时统计的一个概述 |
2.01-生成环境中日志产生的一个描述 |
3.02-项目使用的技术点以及开发对应的流程顺序 |
4.03-互联网访问日志概述 |
5.04-日志的真实数据介绍并且讲解对应的栏目的log样式 |
6.05-脚本生成Log日志方式上 |
7.05-脚本生成Log日志方式下 |
8.06通过linux自带的定时器定时生成日志 |
9.07-启动和配置flum kafka |
10.08-开发环境搭建 |
11.09-flume和kafka和SparkStreaming联通和测试 |
12.10-数据库的介绍和选择 |
13.11-启动hdfs和zk和hbase并且创建hbase表 |
14.12-写一个操作Hbase的工具类操作HBase增加 |
15.13-项目时间工具的实现 |
16.14-根据条件对产生的实时流做数据清洗并且封装成类 |
17.15-项目中的DAO操作Hbae的增加和查询并且可以分批保存和测试 |
18.16-保存手机的数据累加到Hbase中 |
19.17-功能二的DAO增和查询的实现 |
20.18-功能二处理业务逻辑保存到hbase数据库里面 |
21.19-项目运行在真实的生成环境上面 |
22.20-项目中spark脚本的编写和运行 |
23.21-数据可视化只为什么要可视化 |
24.22-数据可视化之web页面的搭建 |
25.23-数据可视化之第一个springboot应用程序 |
26.24-数据可视化之echart的介绍和使用范围 |
27.25-数据可视化之springboot创建web应用并返回html页面 |
28.26-数据可视化之springboot继承echart的页面 |
29.27-数据可视化之springboot替换成生成中的饼图 |
30.28-数据可视化之HBase数据访问的工具类开发 |
31.29-数据可视化之DAO数据访问层开发 |
32.30-数据可视化之展示层页面逻辑处理 |
33.31-数据可视化之ajax请求数据页面展示 |
34.32-数据可视化代码运行在生成服务器中 |
35.33-项目在服务器上面运行流程与过程 |
「7项超值权益,保障学习质量」
- 大咖讲解
技术专家系统讲解传授编程思路与实战。
- 答疑服务
专属社群随时沟通与讲师答疑,扫清学习障碍,自学编程不再难。
- 课程资料+课件
超实用资料,覆盖核心知识,关键编程技能,方便练习巩固。(部分讲师考虑到版权问题,暂未上传附件,敬请谅解)
- 常用开发实战
企业常见开发实战案例,带你掌握Python在工作中的不同运用场景。
- 大牛技术大会视频
2019Python开发者大会视频免费观看,送你一个近距离感受互联网大佬的机会。
- APP+PC随时随地学习
满足不同场景,开发编程语言系统学习需求,不受空间、地域限制。
「什么样的技术人适合学习?」
- 想进入互联网技术行业,但是面对多门编程语言不知如何选择,0基础的你
- 掌握开发、编程技术单一、冷门,迫切希望能够转型的你
- 想进入大厂,但是编程经验不够丰富,没有竞争力,程序员找工作难。
「悉心打造精品好课,6天学到大牛3年项目经验」
【完善的技术体系】
技术成长循序渐进,帮助用户轻松掌握
掌握Spark知识,扎实编码能力
【清晰的课程脉络】
浓缩大牛多年经验,全方位构建出系统化的技术知识脉络,同时注重实战操作。
【仿佛在大厂实习般的课程设计】
课程内容全面提升技术能力,系统学习大厂技术方法论,可复用在日后工作中。
「你可以收获什么?」
1.一套代码让你掌握实时处理的整套处理流
2.企业级标准授课,配有文档和笔记
3.能让学员掌握大数据技术的综合应用