Chapter1 大数据概述

1.1 大数据时代

1.1.1第三次信息化浪潮

2010年前后，以云计算、大数据、物联网的首发为标志迎来第三次信息化浪潮。

IT发展史历经的信息化浪潮如下：

1.1.2 大数据时代的到来需要技术支撑

主要表现为：

1. 存储设备容量不断增加
2. CPU处理能力大幅提升
3. 网络带宽不断增加

1.1.3 数据产生方式的变革促进大数据时代到来

第一阶段：运营式系统阶段。实例：购物记录。数据仅由运营系统生成。
第二阶段：用户原创内容阶段。实例：微信。每个网民都成为自媒体，可以向网络发送信息。但到此为止还不足以促进大数据时代到来。
第三阶段：感知式系统阶段。物联网(IoT)的大规模普及，实现了万物互联。物联网底层是感知层，比如摄像头、传感器，这些设备时刻生成大量数据，物联网的兴起促使了大数据时代到来。

1.1.4 大数据的发展历程

1.2 大数据的概念和影响

1.2.1大数据的4V特性

4V特性指velocity、variety、value、volume。

(1)数据量大：
大数据摩尔定律（根据IDC作出的估测，数据一直都在以每年50%的速度增长，也就是说每两年就增长一倍）。
人类在最近两年产生的数据量相当于之前产生的全部数据量。

(2)数据类型繁多：
大数据是由结构化和非结构化数据组成：

• 结构化数据存储在关系型数据库中，只占10%。