1 大数据部门业务流程分析
产品人员提需求(统计总用户数、日活跃用户数、回流用户数等) ====> 数据部门搭建数据平台、分析数据指标 ====> 数据可视化(报表展示、邮件发送、大屏展示等)
2 大数据部门组织结构
大数据部门组织结构,适用于大中型企业:
2.1 平台组:Hadoop、Flume、Kafka、Hbase、Spark等框架平台搭建,集群性能监控,集群性能调优
2.2 数据仓库组:ETL工程师-数据清洗,Hive工程师-数据分析数据仓库建模
2.3 数据挖掘组:算法工程师,推荐系统工程师,用户画像工程师
2.4 报表开发组:JavaEE工程师