数据大时代

数据大时代

李敬球 2011/12/4

人类世界，有很多个“时代”。如原始社会时代、奴隶主时代、封建帝国时代、资本主义、社会主义时代。拿器物来说，石器时代、铜器铁器时代、蒸汽时代、电气时代、信息时代。信息时代是我们目前所处的时代。在这个时代，信息（也是数据）极大膨胀和爆炸，因此诞生了“数据大时代”。

数据大时代，电子化数据（信息）极度膨胀，世间万物都能在电子数据中找到踪迹，抽象的再加工的、虚拟的数据大量产生，人类进入了一个被数据、信息包围的时代。人类的生产、工作、生活、学习、娱乐、政治、科技研究。样样离不开计算机、离不开电子化数据信息。人成为了数据人、信息人。人消耗数据、生产数据，产生数据垃圾，制造数据问题。在这个时代，数据的处理、加工、生产、流通、管理成为了数据人必不可少的一部分。是生活，也是工作，更是娱乐。数据是人的一部分，人也是数据的一部分。

可以说，人类在这个“数据大时代”，任何行为、任何事物、任何人类信息都被数据化、电子化了。云计算、云存储是应对数据大膨胀而提出的数据存储、管理、计算所提出的优化的解决方案。而物联网则是将人类行为、物品行为信息收集起来，存放在网络中的一种终端解决方案。不管是哪一个解决方案，都是将人类世界信息化、数据化、电子化进行到底的解决方案！

我们回顾历史，我们会发现：原始社会，数据不过是猎物独特的粪便、气味、踪迹，人类就是依赖于这些非常稀少的不稳定的数据找到了食物。随时时代的流转，人类进入了文字时代，不管是记录在龟甲上的甲骨文，还是手抄在羊皮上的西文，人类进入了数据的“石器时代”。后来，中国的造纸技术、印刷技术传入西方、走向世界。数据的“铜器、铁器”时代到来，人类信息量再膨胀，因此诞生了中国的华夏文化，以及造就西方的文化兴旺时代。工业革命之后，数据在新闻媒体中得到初步膨胀，人类世界极度繁华，此阶段也遭受了两次世界大战的摧残，但数据的膨胀依然在加速。为了应对德国的复杂密码，一种新的数据处理机器诞生了，那就是电子计算机。电子计算机的诞生，使得数据的计算处理能力自动化了。人类进入了数据的“电器化时代”。之后，数据的自动化处理，诞生了软件行业，PC时代，互联网时代。最重要的是互联网时代和电脑进入千家万户。互联网的发明与美国军方有关，而PC的流行离不开苹果公司的乔布斯，微软的比尔盖茨。互联网的出现，人类真正进入了“信息化大时代”。在这个时代，人类的数据大量进入电子计算机网络，人类的工作、生活、娱乐、商业数据都在这里得到进一步的管理、优化、重新利用。

数据的流转、加工、流通、再生产、复合利用。在互联网时代得到初步的发展。随着互联网时代的发展，数据不仅仅是满足于给予人们信息分享、信息发现、信息管理了。这时候，随着更多的人类世界的行为信息、档案信息、物品信息的加入。虚拟网络越来越多现实的数据映象（如大众点评网、58同城、google地图、去哪儿网、团购网站、facebook、电子商务网站淘宝）。此时人类世界有多大，信息世界、数据虚拟世界就有多大。互联网不仅仅是人类进入虚拟世界的桥梁，也是人与人、人与物体、人与人类现实世界的桥梁。此时，数据极大膨胀，人类初步进入了“数据大时代”。这个时代的典型特征就是，数据与现实世界一样大！人类与互联网互联影响，现实与虚拟相互融合，现实中有虚拟的数据、虚拟的世界，虚拟的世界中有着现实的世界的影子。

在这个“数据大时代”。凡是你所见的，都能在网上找到。凡是你所想的，也都能在互联网上有所体现。凡是与人相关的所有事物，网上都能找到相关的信息。人类世界的所有信息越来越多的存放于电子世界中，甚至于某一天，通过这些与现实相连的网络（互联网、物联网等），人类可以通过操纵数据、影响改变数据，进而影响改变着现实世界。目前中国网民最崇拜的一句话：围观改变世界。就可以看出互联网对现实世界的影响了。

数据大时代的特征：

一、数据极多。大到需要云存储、云计算解决方案来加以优化存储管理、数据计算处理。

一家公司是否成功的标志是，是否拥有了大量的数据。如现在成功的公司，没有哪一家不拥有着大量的数据。数据库公司oracle生产数据库，管理着大量公司、个人的数据。微软公司，生产的操作系统，管理着大量的个人文档、公司文档数据。上面还跑着占有着领先数量的大量软件（生态圈）。腾讯公司，所研发的Qq软件，每天都诞生着大量的用户离不开的即时聊天数据。百度公司，将中国几乎所有的互联网网页都索引起来，供用户检索查阅。58同城，将所有的同城相关的数据都索引起来，供需要的人检索。淘宝公司，将大量的商品数据存储起来，供消费都检索购买。

近期，这些公司都将进入了云存储、云计算领域。以为用户提供更加卓越的数据存储管理、计算。

二、数据包含领域广。包含从生产、消费、工作、学习、生活、政治所有领域的数据。这些数据产生非常迅速、不断推陈出新。

如twitter有着大量的用户即时的工作、学习、生活政治相关的数据。淘宝拥有着大量的消费数据。一些公司、工厂拥有着大量的内部的局域的工作生产数据。这些是人类现实世界必不可缺少的一部分。为人类现实世界的一部分。

三、数据影响范围大。数据不仅仅是供人查阅分享，更多的是进一步影响了人们的生活、工作、学习娱乐环境等。

现在的学习研究，很多情况下传统书籍没有的知识，在网上都能找到（维基百科）。很多销售部已经采用了即时的销售管理软件SAAS，这些软件可以方便地共享销售信息，为销售做好管理。娱乐如游戏等，提供了现实游戏中不一样的体验。

未来的物联网，对于商业领域、工业界的影响更为巨大。如商业的物流网络的建立，工业的机器监控管理。到那时，工人每天只需要面对着几台监控电脑，可以监控着整个工厂所有机器的运转情况。甚至在家中，也可以通过这些物联网络来管理机器，维护机器。

四、数据化、信息化将席卷整个人类世界。将任何的现实世界的东西数据化，信息化。

不管是家里的电器，还是公司的电脑、空调、冰箱，或者是物流公司的物流分发机器，甚至是国家政要的讲话实时上传互联网。这最终的效果是：人类世界自动化、电子化、数据信----信息化。

我们可以展开联想。也许未来的城市，是一座虚拟的城市。上面会有很多虚拟的集市（B2C、B2B网站），会有很多歌厅舞厅（虚拟现实—微软的体感设备kinect预示这一刻的到来），会有很多公众聊天室，私人集会场所（如腾讯QQ的多人语音）。会有很多公众行政议政中心（电子论坛bbs未来或许将参政议政、又如twitter）。有很多的折扣一条街，如团购网站。有很多的拍卖中心，如淘宝、拍拍。有很多电子学校（如虚拟化远程会议：远程教育）…..

下面，我们展望数据大时代对人类世界的影响。

一、更加和平的人类世界，我们进入了一个没有战争的年代。

人们更喜欢在虚拟世界中解决问题（如打下战争游戏，那就很爽了。真正打仗会流血死亡的，没有人会喜欢的）。

二、更加民主，更加自由。像twitter、微博的出现，我们真正进入了一个人人议政，社会高度开放透明的时代。腐败、决策不透明将永远面临着高压。

三、知识产权更加重要。人人产生数据，但最终获利的将是那些制造了有价值的数据的人、更好地帮助人们管理数据、运维数据的人。

四、更多的IT巨头产生，人类所有的信息几乎都为之所掌握。人们的隐私面临空前挑战。人们的一举一动将无时无刻不被虚拟世界所掌握。

五、更强大的IT公司。这些公司拥有着富可敌国的财富。拥有着无以复加的政治、生活、娱乐影响力。有着大量的虚拟公民（如微软、google、苹果已经突显这类能力）。而物联网，云计算的出现，虚拟的帝国将诞生。

六、人类世界无国界。只有IT公司领土之分。现实中的政治划分的国土，越来越不重要。而随着对数据的掌握的范围、广度。出现了网络公民聚集的世界性虚拟国度（如facebook）。随着电子人的越来越多，虚拟国度的公民将越来越多。最后强大到现实国家的影响力还不如虚拟国度。

七、越来越多的虚拟社团的出现，虚拟社会与现实社团互有重合。不管是Qq群，还是twitter，还是各类论坛。虚拟社区或者虚拟组织的出现将成为必然。而随着现实世界信息化数据化的更高的深度、更宽的广度，虚拟与现实团队将有所交融。

八、更加大的经济团体。电子商务的出现，使得以电子数据为基础的商务活动极度繁华。最终出现了更加强大的数据化、信息化经济团体组织（如淘宝、阿里巴巴）。

九、人们有着多重身份，多重角色将更加突出。游戏中有游戏角色，工作中有着多种工作角色，家庭活动中也有着多重数据化角色。

十、人们的工作将更加抽象化、数据化。人们在数据大时代的分工，更加细密。固定的工作岗位、工作场所将变得越来越少见。随处办公，随时办公将成为可能。

十一、人们的选择范围更加广泛。网络提供给人们的生活、学习、娱乐选择更加丰富而且富于个性化。

十二、数据化大时代，我们每个人都是民工。生产着数据、消耗着数据、产生数据垃圾。

十三、黑客的影响力将更加广泛。

十四、伟大的IT工程师，伟大的数据工程师，伟大的产品经理，将是未来数据大时代的中坚，决定性影响力量。

十五、IT行业成为一个世界最大的行业。

我们从数据的角度出现，研究世界

我们来看看有意思的数据人。我们如何制造数据，如何消费数据，如何制造数据问题的。

制造数据，如在Qq发聊天信息，在facebook上分享链接，在BBs上发表帖子，在博客发表日志，在twitter上发表感想，即是生产数据。我们看到了好友的聊天信息，看记者记录的新闻，即是消费数据。我们制造垃圾信息：如发表无意义的回帖“顶”、胡乱编造网上个人档案信息、设计混乱不堪虚拟信息众多的个人网页。

数据人，意味着我们的消费行为习惯，交友习惯，音乐喜好、电影偏好、小说偏好都是可以被网络所记录下来的。如果单放在一个网站中，就可以提炼出有着于一个人的档案信息。----社会工程学。甚至可以推测出，这个人的性别年龄，出身背景、学历情况等等信息。

数据人，很多情况下可以帮助我们创建一个现实世界的映象。如大众点评网，58同城这些真实性较高的网站。大众点评网，将收集用户对商家、商品的点评信息。汇总起来，而供其他网友参考。形成一个现实世界的评价数据库。又如google地图，通过对网友标记的真实性遴选，google甚至知道一些国家的军事基地的确切位置。因此有些比较保守的国家限制了网友使用ugc的google地图。

数据世界，现实世界的另一重世界。未来的物联网的出现，将极大非常数据世界的拓充。IBM公司，甚至设想了所谓的智慧城市，并且以此作为了他们的商业解决方案，在世界各国推广他们的智慧城市的解决方案。其实这一切，不过是将现实世界，装入世界中。将现实世界的东西虚拟化、数据化、电子化（物联网）。

我们将看到，数据上的机器智能也将诞生，如google在研制的智能自动驾驶汽车。这个汽车的特点是会自动GPS定位，并将参考google地图所到线路图，由智能芯片、智能外设及时获取外界实时数据，然后综合分析，以进行自动的路线选择、车辆避让。从而真正的让电子计算机来自动驾驶汽车。从这里我们看到，这是一个完全的自动驾驶解决方案。依赖于GPS系统、GOOGLE地图系统、芯片及机器人视觉系统。是一个完全的数据化、电子化、信息化解决方案。

随着网页索引市场的成熟，我们现在进入了图片阅读、索引时代。百度、google都将在这一方面投入巨资，进行了所谓的图片识别、图片索引研究。或许某一天，我们所有人的图片数据都会被某个大型公司所持有。到时，所谓的人脸智能识别，是不是更加强大了呢？当某一个偏僻街头发生了抢劫案，而正好有一个隐蔽的摄像头拍下了头像。此时，犯案嫌疑人是谁、社会Id是什么，不过是电脑瞬间匹配的事情。

我们甚至可以拿数据作为一个观察维度，来观察一些公司是如何获得成功的。

微软公司，将软件变成了可以交易的数据、知识产权。他获得了巨大的气盛。将他们的软件拷贝到了世界上数上亿计的机器上。GOOGLE公司将互联网的网页以统一的方法索引起来，为用户提供了简单的检索接口，极大地方便了用户检索目标网页。Facebook为多达10亿的真实世界的公民，建立了社交数据档案。方便了用户进行社交信息存储管理。淘宝网、阿里巴巴，将商品交易数据存储起来、检索起来，为商家用户提供了一个商品信息交易平台。大众点评网、58同城，为本地化商家建立起推介网页。苹果的IPHONE的成功，不过是提供了一个移动软件（数据）交易平台---苹果电子商店，而他们的手机则是这上面所有应用、数据的基础平台。

数据大时代，最重要是提供一些简单有效的方法，为数据生产、流通、分享、交易、管理、运营、维护提供方便。未来，成功只有一个标准。哪此产品能更好地管理、生产、维护着大量的用户数据，这些产品的对应公司就能获得巨大的成功！

云计算解决方案的提出，是为了应对数据大时代面临的存储、管理、维护用户大数据的困难性，而提出的一种虚拟化存储、管理、计算方案。而物联网解决方案的提出，则是为了加快将现实世界更好电子化、数据化---也就是我们常说的信息化。

恰当地理解和应用这些解决方案，将有助于我们提出一些个性较强、定制化较强的解决方案。从而在未来的产品竞争中立于不败之地。