大数据学习路线

大数据学习路线

大数据基础部分：

Linux操作系统
MySQL数据库
Kettle数据预处理
Apache Superset
可视化开发
电商运营指标分析

java语言编程
编程基础
面向对象
常用类
集合操作
IO操作
Java基础增强

大数据技术要点学习：

hadoop技术栈
Linnux操作系统高级
大数据基础和硬件介绍
Zookeeper
HDFS
MapReduce
YARN
Hive

大数据进阶：

项目一
（在线教育）
1、还原大型在线教育的大
数据平台。
2、建立企业数据仓库，统
一企业数据中心，把分散的业务
数据集中存储和处理。
3、项目从需求调研、设
计、版本控制、研发、测试到
落地上线，涵盖了项目的完整
工序。
4、挖掘分析海量用户行为数
据，定制多维数据集合，形成数据
集市，供各个场景主题使用

后端数据微服务接口开发
Spring
Spring Boot
Spring Cloud
Spring Cloud搜索案例

NoSQL存储
Redis存储
HBase存储
ELK

Flink技术栈
Kafka
Flink流式计算
Flink批处理
Flink Core
Flink SQL
Flink综合案例

项目二
（证券、物联网）
1、实时监控证券市场
的每日业务交易，实现对证
券市场交易数据的统计分析
2、搭建监察预警体
系，包括：预警规则管理，
实时预警，历史预警，监察
历史数据分析等
3、股市行情交易数据
实时采集、实时数据分析、
多维分析，即席查询，实时
大屏监控展示

Spark技术栈
Scala语言
Spark core
Spark sql
Spark Streaming
Structure streaming

项目三
（物流、
电信任选其一）
1、基于一家大型物流
公司研发的智慧物流大数据
平台，日订单上千万
2、围绕订单、运输、
仓储、搬运装卸、包装以及
流通加工等物流环节中涉及
的数据信息等
3、提高运输以及配送
效率、减少物流成本、更有
效地满足客户服务要求，并
针对数据分析结果，提出具
有中观指导意义的解决方案

项目四（
电商、
票务任选其一）
1、分析来自全品类
B2B2C电商系统，以电商
核心流程为主线进行数据
分析，支撑运营
2、建立基于用户的
全面分析体系，从多个维
度建立基于用户的运营体
系
3、实时分析用户访
问流量、订单、店铺等运
营指标