大数据技术与应用1-基础概念

1.大数据时代

    随着科技发展，IT领域迎来三次信息化浪潮，标志分别为个人计算机、互联网、物联网以及云计算和大数据。信息科技为大数据时代提供技术支撑，包括有存储技术的发展、CPU处理能力的大幅提升、网络带宽的不断增加；数据产生方式的变革促成大数据时代的来临，由运营式系统阶段->用户原创内容阶段->感知式系统阶段；

2.大数据概念

    “大数据”不仅仅是数据的大量化，而是包含快速化、多样化和价值化等多重属性，即4V（VOLUME、VELOCITY、VARIETY、VALUE）。由结构化和非结构化的数据量倍速增长，从数据生成到消耗，时间窗口非常小可用于决策的时间非常少，由此产生1秒定律。

3.大数据的影响

    思维方面，完全颠覆传统的思维方式：全样而非抽样（存储和计算技术的成熟）、效率而非精确（样例更丰富）、相关而非因果（仅需关注数据的关联性不必追究其因果）

4.大数据关键技术

数据采集