1 大数据导论与Linux安装

大数据导论与Linux安装

&导论

一、企业数据分析方向

①原因分析：分析过去的数据 ，面向历史（离线）

②现状分析：分析当下的数据 （实时）

③预测分析：结合数据预测未来 （机器学习）

以上三个方向正好对应大数据中的离线分析、实时分析、机器学习

实时分析又叫流式处理。实时和离线最大的区别在于：从数据产生到数据分析到应用的时间间隔不同。离线是天级，T+1、T+7。实时可细分到秒级

二、数据分析步骤

①明确分析目的和思路

使分析框架体系化，比如先分析什么，后分析什么， 流程具有逻辑， 保证分析维度完整，需要数据分析方法论进行支撑。

数据分析方法论是一些营销管理类相关理论，比如用户行为理论、PEST分析法（eg:分析公司业绩为什么下滑）、 5W2H分析法等

②数据收集

一、数据从无到有： 埋点收集用户行为数据

二、数据搬运： 比如采集数据库数据到数