课程目录:
第一天:
01.传统广告回顾
02.几个问题思考
03.广告的表现形式
04.名词解释
05.DSP原理图
06.DSP业务流程
07.DMP项目背景
08.DMP业务流程----重要
09.日志格式介绍
10.需求一日志转parquet文件
第二天:
01.工程包的创建
02.日志转parquet文件实现方式一----StructType
03.日志转换成parquet文件格式实现方式二---自定义类
04.统计各省市的数据量分布情况----结果输出成json
05.统计各省市的数据量分布情况----结果输出到mysql中
06.统计各省市的数据量分布情况----使用Spark算子的方式实现
07.地域分布需求
第三天:
00.Ambari介绍及项目打包上传
00.集群运行Job观察01
00.集群运行Job观察02
01.地域报表实现---Spark SQL
02.地域报表实现---Spark Core实现01
03.地域报表实现---Spark Core实现02
03.地域报表实现---读取原始日志文件
04.媒体报表需求
05.媒体报表实现---broadcast
06.媒体报表实现---改造---字典存入到redis
07.媒体报表实现---改造---将redis作为字典库
08.代码托管到git
第四天:
01.git创建分支--合并
2019最新大数据24期实战项目全套9天(附源码)
最新推荐文章于 2024-05-14 01:09:59 发布
本课程涵盖大数据实战项目,从第一天的DSP业务流程和DMP项目到第九天的实时项目处理,包括日志转换、Spark SQL应用、标签系统建立、Redis集成、Echarts展示等,全面讲解大数据处理各个环节。
摘要由CSDN通过智能技术生成