spark项目实战:电商分析平台之项目概述
目录
- 项目概述
- 程序架构分析
- 需求解析
- 初始代码和完成代码存放在github上面
1. 项目概述
- 在访问电商网站时,我们的一些访问行为会产生相应的埋点日志(例如点击、搜索、下单、购买等),这些埋点日志会被发送给电商的后台服务器,大数据部门会根据这些埋点日志中的数据分析用户的访问行为,并得出一系列的统计指标,借助这些统计指标指导电商平台中的商品推荐、广告推送和网站优化等工作。
- 上报到服务器数据采集、过滤、存储、分析、可视化这一完整流程,电商平台通过对海量用户行为数据的的埋点日志数据会经过分析,可以对用户建立精准的用户画像,同时,对于用户行为的分析,也可以帮助电商网站找到网站的优化思路,从而在海量用户数据的基础上对网站进行改进和完善。
2. 程序架构分析
- 日志采集框架
3. 需求解析
- 离线数据解析
对应数据形式
4. 初始代码和完成代码存放在github上面
初始代码: https://github.com/githubIMrLi/spark-commerce_basic
完整代码:https://github.com/githubIMrLi/spark-commerce