大数据分析方法项目实战（一）---认识数据分析

数据分析

1.概念

       是指用适当的统计方法对手机来的大量第一手资料和第二手资料进行分析，提取有用信息并形成结论，对数据加以详细的研究和概括总结的过程。

2.目的与意义

       在于把隐没在一大批看起来杂乱无章的数据中的信息集中、萃取和提炼出来，以找出所研究对象的内在规律。

3.功能

• 简单的数学运算
• 统计
• 快速傅里叶变换
• 平滑和滤波
• 基线与峰值分析

在统计学领域中，划分为描述性统计分析、探索性数据分析以及验证性数据分析。

探索性数据分析：侧重于发现新的特征。

验证性数据分析：侧重于已有假设的证实或伪证。

4.应用场景

1. 基于客户行为分析的产品推荐
2. 基于客户的评价的产品设计
3. 基于数据分析的广告投放
4. 基于社区热点的趋势预测和病毒式营销
5. 基于数据分析的产品定价

5.数据分析指标

1. 总体概览指标
2. 对比性指标
3. 集中趋势指标

使用平均指标表示集中趋势，其中，平均指标一般分为数值上的平均和位置上的平均

数值平均：平均数分为普通平均数和加权平均数两种。

                   普通平均数：由于所有的平均数都是1，因此权重都是1

                   加权平均数：由于不同数值 权重不同，因此在计算时，不同数值要乘以不同权重。

位置平均：通常用众数和中位数表示。

      4.离散程度指标（通常使用极差衡量数据的宽度，使用方差和标准差衡量数据的分散性）

      5.相关性指标（-1~1，系数绝对值越大，相关系越强）

      6.相关关系与因果关系

6.数据分析分类

1.根据分析目的不同，分为

• 描述性分析
• 诊断性分析
• 预测性分析
• 指令性分析

描述性分析：根据现有数据进行直接分析

诊断性分析：分析下一个阶段，为什么会发生，在此分析的基础上获取更多的核心数据

预测性分析：在不确定性的环境下进行预测分析能够为决定提供支持

指令性分析：基于以上三种分析，主要分析：发生了什么，为什么发生，可能发生什么。通常不会单独使用，而是在以上三种使用完成后才会使用