“大数据”时代的喜与忧

　　对于大多数人来说，“大数据”是一个陌生术语，但它的威力已无所不在：信用卡公司追踪客户信息，能迅速发现资金异动，并向持卡人发出警示；能源公司利用气象数据分析，可以轻松选定安装风轮机的理想地点……

　　牛津大学教授维克多·梅耶-舍恩伯格在其新书《大数据》中说，这是一场“革命”，将对各行各业带来深刻影响，甚至改变人们的思维方式，但这同时也引发“数据暴政”的担忧。

　　商业：提供“精准预测”

　　在一些公司、实验室和政府机构，“数据”被捧为21世纪新型“石油”或“黄金”。一些统计学家、物理学家和所谓的数据科学家从中获利丰厚，他们服务于大数据应用程序开发公司，“蓝色彼岸”便是其中之一。

　　“蓝色彼岸”成立于5年前，目前有85名员工。经理尤韦·魏斯介绍，公司利用自行开发的软件，分析超市刷卡记录、天气资讯、学校放假信息和交通报告等数据，为客户提供“精准预测”。

　　例如，“蓝色彼岸”发现，某些日子里，一家超市的牛奶、巧克力棒和苹果的销量大幅上升，而这一时间恰好与附近一家青年旅社里一群学生的到来相吻合。于是，公司搜集邻近各州学校放假安排等资讯，利用软件计算出某一特定时间可能到来的学生人数。

　　再如，“蓝色彼岸”发现，如果遇到周三为节假日，其前后几天小孩不用上学，因此对面包片的需求量减少，“蓝色彼岸”的存货预订系统会自动做出相应调节。

　　此外，“蓝色彼岸”帮助dm连锁药店计算最合理的员工人数，并为每家分店提供销售预测报告。

　　德国邮购业巨头奥托集团说，自从使用“蓝色彼岸”的软件，销售预测准确度提高20%到40%。集团准备把该软件应用推广到旗下运动品牌SportScheck，并收购“蓝色彼岸”50%股权。

　　“大数据正在重塑整个经济，我们只是处于起步阶段。”魏斯说。

　　医疗：开启个性化治疗

　　位于柏林巴伯尔斯贝格地区的哈索·普拉特纳研究所(H PI)可能成为数以百万计癌症患者的希望。研究所二楼的计算机房常年保持低温，以免价值150万欧元的处理器过热。普通计算机只有1个处理器，但那里的每台计算机有40个处理器，运算速度是传统计算机的1000倍，甚至更快。

　　普拉特纳是全球最大的企业管理和系统化商务解决方案供应商“思爱普”(SA P)的创始人，也是H PI的赞助人。他介绍说，H PI的汉娜数据库技术始于一个名叫“Sanssouci D B”的项目，由8个大学生创立，曾获得创新大奖，如今已成为“内存储处理”的代名词。

　　H PI负责人、数学家克里斯托弗·迈内尔认为，该技术不仅有广泛的商业前景，而且为癌症治疗提供机遇，“我们正站在个性化医疗的门槛上”。

　　迈内尔说，每一种肿瘤都不尽相同，这意味着同样的治疗方法对不同人会产生不同效果。目前，为了给患者制定有针对性的治疗方案，需花费数月破译其基因组。但在H PI“超级大脑”的帮助下，破译基因组只需要短短数秒。

　　此外，H PI的电脑可以从公共基因库中精选所有信息，为每一个患者寻找到最合适他症状的治疗方案。“目前，这种搜索配对过程还需花费数月时间。”迈内尔说。

　　安全：抓贼反恐斗黑客

　　在美国加州圣克鲁斯市一个地下车库，一名小偷正在撬车，却被几米开外正在一辆车里吃午餐的警察逮了个正着。这名警察并非碰巧出现在那里，而是根据一个计算机软件的推荐在此守株待兔。

　　过去两年里，这座城市的警察换班时，都会根据长官和软件发出的指示外出巡逻。该软件输入了警方所有数据，不断更新，用于计算何时何地可能发生夜盗、抢劫、偷车等犯罪行为，其中2/3切实发生了。

　　这一软件由计算机专家乔治·莫勒和人类学家杰弗里·布兰廷汉姆联合编写，参照了预测地震余震的程序模式。圣克鲁斯警察局副局长史蒂夫·克拉克2011年得知这一创意，三人共同开展测试。他们把圣克鲁斯市8年来的犯罪记录输入程序，再加上其他潜在相关数据，比如天气状况、公园资讯和公交线路等。

　　“起初，很多人持怀疑态度，包括我自己，”克拉克说，“但数据本身证明其确实有效。”据他介绍，使用犯罪预测系统一年后，夜盗案件减少11%，盗车案件减少8%，破案率大幅提升56%。

　　军队和情报机构也非常重视数据分析。比如，在搜寻本·拉丹的过程中，“大数据”就发挥了重要作用，正是数据库分析让调查人员把目光聚焦在巴基斯坦的阿伯塔巴德。

　　Splunk是情报界和军方炙手可热的软件供应商。不久前，在科技记者评出的全球最具创意的公司中，Splunk名列第5，而谷歌仅列第11位。全球超过90个国家的政府、机构、企业在使用Splunk的应用软件，包括美国五角大楼和国土安全部。

　　Splunk产品部高级副总裁圭多·施罗德说：“安全领域是‘大数据’应用增长最快的领域之一。”除对付犯罪和恐怖主义外，Splunk的软件还能查明黑客攻击等网络犯罪。

　　警惕“数据暴政”

　　个性化服务是“大数据”应用程序魅力所在。比如，如果有人在“脸谱”上表示“喜欢”某款牛仔裤，当他下次进入该店铺时，就可能收到店主给他发送的同品牌牛仔裤的打折信息。这看起来对零售商和消费者都有好处，但主张保护数据隐私的人却认为，“大数据”理念其实与“专制独裁”没有区别。

　　为消除人们顾虑，许多公司强调他们收集、储存、分析数据都是“匿名”的，但事实上可能并非如此。在线期刊《科学报道》近期一项研究显示，每个人有自己的行动模式，95%的人可能被识别。普林斯顿计算机科学家阿尔温德·纳拉亚南在其博客上说，可供分析的数据越多，就越不可能保持“匿名”，识别一个人只要33个字节的信息量。

　　纽约广告商奥美的调查显示，75%受访者表示不希望企业存储个人数据，90%反对企业追踪自己的上网记录。

　　在现代社会，一个更加迫切的问题是：人们是否真的愿意接受一个“数字驱动经济”的世界？在这个世界里，数据分析能预测你的孩子在学校表现如何，他将来适合怎样的工作，谁有多大几率犯罪或得癌症，电视台和唱片公司能根据预测迎合观众或听众的口味……但在这个一切都计算好的世界里，创意、灵感和惊喜在哪里？

　　互联网哲学家叶夫根尼·莫罗佐夫对许多“大数据”应用程序背后的意识形态提出尖锐批评，警告即将发生“数据暴政”。他提出，那些“大数据”应用程序应当接受独立审计人定期审查，以防权力滥用。

 

 

大数据技术已经成为互联网后的又一个里程碑意义的科技革命与生产力革命，也是产业结构战略调整的战略机遇。如何管理自身的业务大数据，从中获取智慧，对传统业务再造并实巨大价值的产品和服务？如何将大数据困境转换为大数据宝藏？如何从大数据概念炒作到实践落地？

由北京理工大学大数据搜索挖掘实验室、中国科学院计算技术研究所教育中心联合主办，大数据论坛联合承办，开设大数据技术进修班。聘请北京理工大学赵燕平教授、张华平博士、北京市外办信息中心姜伟主任、清华大学马宝君博士等知名专家全面讲授大数据架构、大数据搜索、大数据挖掘以及大数据应用四大板块，分享亲身经历的大数据应用，并为学员提供大数据搜索挖掘工具的实训。

授课时间 9月7、8日上午9:00-12:00，下午13:30-16:30 ( 16:30-17:00 开放式讨论答疑 )

进修费用 4980元（包含发票，讲义，教材，工作餐，与讲师互动自助晚餐会）； 老学员或同单位三人以上报名九折优惠； 全日制学生凭学生证优惠价格2980元，不含发票。差旅及食宿费用自理

授课方式 ：(a)《大数据搜索与挖掘》教材（科学出版社）； (b)中文多媒体讲义；

             (c) 针对学员具体需求的互动交流会。 (d)大数据搜索与挖掘工具实训；

(e)互动自助晚餐会；

主讲讲师：张华平：北京理工大学大数据搜索挖掘实验室主任，博士，副教授

             赵燕平：北京理工大学教授，教育部电子商务专家

             姜伟：北京市外事办信息中心主任

             马宝君：清华大学搜索评价与推荐系统专家

小班授课：为保证充分讨论，确保进修效果，采用小班授课，名额有限，先到先得。

培训内容：《科学的大数据观》《云计算与大数据架构》《大数据精准搜索关键技术》          

          《大数据挖掘关键技术》《大数据搜索与挖掘平台工具实训》 

          《大数据与电子商务应用》《大数据在电子政务中的应用》《微博大数据挖掘》 

          《大数据困惑及解决》《方案应对讨论》

报名地址：http://www.lingjoin.com/lingjointrain/#add06

赵老师   010-68918050    13681251543

 

转载于:https://my.oschina.net/u/1160813/blog/145631