对大数据的认识

⼀、⼤数据是“⽆法任意时间内⽤常规软件⼯具对其内容进⾏抓取、管理和处理的⼤量⽽复杂的数据集合”。Gartner认为⼤数据是“需要新处理模式才能具有更强的决策⼒、洞察发现⼒和流程优化能⼒的海量、⾼增长率和多样化的信息资产”。“⼤数据”的要义是尽可能地收集众多可以相互叠加补充的信息，据以完成对“未来”的预测。这些数据可能有些混乱，甚⾄会出现纰漏，但数据量的“多“和时间的“即刻”可以弥补数据质量的瑕疵，“⼤数据”将以品的速应“预测””的答案，指引⼈们迅速采取⾏动。
⼆、⼤数据具备以下4个特点：
1.是数据量巨⼤。例如，⼈类⽣产的所有印刷材料的数据量仅为200PB。典型个⼈计算机硬盘的容量为TB量级，⽽⼀些⼤企业的数据量已经接近EB量级。
2.是数据类型多样。现在的数据类型不仅是⽂本形式，更多的是图⽚、视频、⾳频、地理位置信息等多类型的数据，个性化数据占绝对多数。
3.是处理速度快。数据处理遵循“1秒定律”，可从各种类型的数据中快速获得⾼价值的信息。
第 3 页
4.是价值密度低。以视频为例，⼀⼩时的视频，在不间断的测试过程中，可能有⽤的数据仅仅只有⼀两秒。
三、⼤数据的发展趋势：
1.⼤数据从概念化⾛向价值化
2. ⼤数据安全与隐私越来越重要
3.⼤数据分析与可视化成为热点
4 .数据的商品化和数据共享的联盟化
5.深度学习与⼤数据性能成为⽀撑性的技术
第 4 页
6.数据科学的兴起
7.⼤数据产业成为⼀种战略性产业
8.⼤数据⽣态环境逐步完善
9.⼤数据处理架构的多样化模式并存