文/范昭赋 华为弹性计算云Marketing部主任工程师
大数据时代来了
有人说现在是个信息大爆炸的时代,其实用“爆炸”来形容当今信息时代的特征是不确切的,“爆炸”不仅意味着多(多的容器装不下了),还意味着无法控制和毁灭。我们当然不能让信息“爆炸”,而要为我们所用,化危机为财富。
信息的载体是数据,新摩尔定律表明,每18个月所产生的数据相当于有史以来产生的数据的总和,也就是说每一年半,数据就翻番。移动互联网、物联网等成为海量数据的催化剂,传统的数据处理技术已渐渐对海量数据无能为力,如果不想让海量暴增的数据失控,我们就需要对其进行“治理”,治理包括管理、开发、利用,要从大数据中挖掘出有价值的东西,为人类创造更多的智慧,这就是所谓的“大数据技术”,其核心就是要让大数据“慧”说话(说出有智慧的话)。
大数据技术是一个笼统的概念,它包括了海量数据的分布式存储技术、面向海量数据查询和分析的并行计算技术、各种海量数据的挖掘算法、行业海量数据建模、各种使得大数据价值变现的应用,以及承载海量数据的硬件基础设施等。大数据技术构成了一个完整的信息生态链,将各行各业更紧密地联系起来,“开放”、“融合”、“创新”成为大数据时代出现频率最高的词汇。
如今,大数据技术已经