大数据基本概述

---

一、大数据是什么？

随着云时代的来临，大数据（Big data）也吸引了越来越多的关注。大数据通常用来形容一个公司创造的大量非结构化数据和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。

大数据就是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产；是“未来的新石油”。

大数据带来的变革

• 更多：带来更多的是信息，因为不是随机样本而是全部的数据；
• 更好：不是因果关系而是相关关系；
• 更杂：不是精准性而是混杂性。

二、大数据的特征和结构

1、特征

• 容量：数据的大小决定所考虑的数据价值和潜在的信息；
• 种类：数据类型的多样性；
• 速度：指获得数据的速度；
• 价值密度低：合理运用大数据，以低成本创造高价值；
• 复杂性：数据量巨大，来源多渠道；
• 真实性：数据的质量；
• 可变性：妨碍了处理和有效地管理数据的过程。

2、大数据的结构

大数据包括结构化、半结构化和非结构化的数据，其中非结构化数据越来越成为数据的主要部分。

3、大数据的三个层面

• 理论：特征定义、价值探讨、现在和未来、大数据隐私；
• 技术：云计算、分布式处理平台、存储技术、感知技术；
• 实践：互联网的大数据、政府的大数据、企业的大数据、个人的大数据。

4、大数据带来的改变

• 优化：各级政府、主管部门、上市公司、企业集团、外资公司都将基于大数据分析平台优化其决策；
• 革命：大数据分析能力逐渐加强，传统市场研究行业、证券研究所、产业链咨询机构将逐渐消失；
• 颠覆：银行都将基于企业大数据平台开展银行直销业务，同时按照产业链金融服务事业部模式开展业务；
• 改变：因大数据系统的出现，所有依赖信息不对称盈利的业务都将消失。

三、大数据时代的机遇和挑战

1、机遇

• 大数据技术促进国家和社会发展
• 大数据蓝海成为企业竞争的新焦点
• 大数据时代呼唤创新型人才

2、挑战

• 大数据技术的运用仍有困难
• 大数据给信息安全带来新挑战