大数据是什么?
首先提一个问题:“大数据"是一项专门的技术吗?有的人可能会以为大数据是一项专门的技术,其实不是。“大数据"这三个字只是一门市场语言(Marketing Language),其背后是硬件、数据库、操作系统、I-ladoop等一系列技术的综合应用。
大数据简史
大数据(Big Data)现在可以说是人尽皆知,其实真正回溯起来,其是由SGI的首席科学家 JohnR.Masey于1998年在USENIX大会上首次提出的。他在其发表的一篇名为 Big Data and the Next Wave of Infrastress 的论文中首次提出这个词,用来描述数据爆炸的现象。估计他当时未必能想到十几年后Big Data能这么火。
如果追溯大数据的概念,则是阿尔文·托夫勒(Alvin Toffler)于1980年在《第三次浪潮》一书中预言了信息时代的到来会带来数据爆发,所以科学家很早就预见到了大数据。大数据的历史由来已久,但是技术需要持续积累,才能由量变到质变。
对于工业界来说,不得不提Google在2003一2006年公布的关于GFS、MapReduce和BigTable 的三篇技术论文,正是这三篇论文奠定了大数据发展的基石。Hadoop之父—Doug cuttingo正是参考论文,后来才实现了当前鼎射大名的Hadoop,而Hadoop的诞生极大地促进了大数据技术的蓬勃发展。
当然,这里特别要指出,Hadoop并不等同于大数据,