BigDataMining-CSDN博客

转载为何多数的大数据项目以失败告终？

几乎每个人的心目中，大数据就是企业IT部门的大大小小的结构化和非结构化数据，而且其量正在成倍的增长。但是，尽管大数据已然成为了一种主流的IT现象，多数的大数据项目仍然以失败而告终。究其原因，就在于企业很难找到适当的方法进行大数据的收集、管理和理解，并最终从大数据信息中提取出有价值的东西。征服大数据项目，并最终从中提取出您企业所需要的业务洞察力本身就是一项非常艰巨的任务。但当涉及到定义大数据

2013-12-11 23:31:43 1037

转载 “大数据”如何驱动世界的未来？

“大数据”是近年关注度极高的一个概念，而在目前A股市场信息服务行业绝大多数公司都或多或少的涉足这一领域。大数据的发展与IT行业的飞速进步息息相关。软件驱动世界的进程已进入深化发展阶段，原子世界正与比特世界展开深度交叉融合，形成人类更易洞察的数据世界。未来软件将不断重新定义世界的万事万物，数据在软件冶炼工艺的作用下价值将不断被挖掘出来。1、 IT变化令人惊叹的十年过去十年， IT对经济社会的

2013-12-11 11:44:49 1681

转载大数据、物联网、智慧城市三者之间的关系

大数据是信息化社会无形的生产资料，其概念被社会各界不断演绎出多种版本，但关于大数据、物联网、智慧城市三者之间的关系，很多人不甚明了。对此，记者采访了同方物联网产业应用本部技术总监赵英，她对此做出了详细的解读。　　大数据、物联网、智慧城市三者之间的关系简单来说就是：大数据的发展源于物联网技术的应用，并用于支撑智慧城市的发展。物联网技术作为互联网应用的拓展，正处于大发展阶段。物联网是智慧城市的

2013-12-10 10:21:08 2286

大数据这个概念最早是在上个世纪80年代提出的，随后的20多年里，美国企业界、学术界对它不断地加以探讨、深究，2010年推出了《规划数字化的未来：美国总统科学技术顾问委员会给总统和国会的报告》，再到2011年麦肯锡咨询公司发布的研究成果《大数据：下一个创新、竞争和生产率的前沿》，将这个概念进行大范围的推广。直到2012年3月29日，奥巴马宣布将投入2亿多美元立即启动“大数据发展和研究计划（Big D

2013-12-06 07:19:08 3770

原创与数据开放有关的那些事

（1）2009年。Data.gov是美国总统奥巴马在2009年就任后，为了增加政府资料透明度而设立的一系列网站，但随着今年美国政府陷入财政困局，白宫于2011年4月宣布Data.gov等终止运营，但好在有关技术并不会就此埋没，白宫已经宣布将它们开源化。Data.gov的设置不仅作为政府数据开放进程中的里程碑事件，还拉开了人类社会在大数据时代背景下“数据大战”的序曲，引发了数据在社会自由流动，知识向

2013-12-06 04:12:23 1273

转载探寻“大数据驱动创新”的路径

探寻“大数据驱动创新”的路径■主持人的话错失机遇，就会落后　　这一年来,全球热议大数据，大家都已经感受到了大数据带来的冲击。目前，大数据已经在社会管理、社会服务、公共安全等各方面改变着我们。　　对上海来讲，我们已经感受到大数据对这座城市发展带来的冲击和影响。如果不抓住由大数据带来的变革机遇，上海很可能就会落后于这一轮发展的潮流。为此，我们综合了各方面的意见，确定今年院士圆

2013-12-05 09:28:56 1868

转载关于大数据的八大热点问题

1.数据科学与大数据的学科边界这一问题综合了两个问题，即大数据的基本内涵与数据的科学问题。前者关注的是大数据的基本定义和基本结构。迄今为止，什么是大数据，在产业界、学术界并没有形成一个公认的科学定义，大数据的内涵与外延也缺乏清晰的说明。大数据区别于其他数据的关键特性是什么？IBM提出了3V的说法，即volume（体量大）、variety（模式多）和velocity（速度快）。尔后又有人提出

2013-12-04 10:46:11 9417

原创大数据时代就在你我身边

1、政府部门2、学术机构（1）2008年《Nature》出版了一个关于大数据的专辑 “Big Data：Science in the petabyte era”，专辑从互联网技术、环境科学、生物医药、网络经济学以及超级计算等多个方面介绍了大数据所带来的挑战（2）2011年，《Science》推出了关于数据处理的专刊“Dealing with data”，讨论了数据洪流所带来的挑

2013-12-04 05:24:49 2521

转载阿里大数据业务平台两年发展历程

这篇文章来自一个公司内部的分享，是自己所服务的业务中数据平台的发展历程，已经讲了有几个月了，最近打算挑几个点拿出来用文章的形式写出来。是自己进入公司以来参与过或者接触过的数据型项目的情况。基本包含了业务数据分析的整个流程。这篇文章纯文字描述，没有任何图呵呵。所以看我需要耐心。1、最早的数据分析可能就报表目前很多数据分析后的结果，展示的形式很多，有各种图形以及报表，最早的应该是简单的几条数据

2013-12-04 04:50:41 1438

转载 Data Mining for Global Change: Furthering Science, Knowledge

On November 12, 2013, the White House Office of Science and Technology Policy (OSTP) and the Networking and Information Technology R&D (NITRD) program held an event,Data to Knowledge to Action: Bu

2013-12-04 04:09:27 983

原创淘宝数据分享平台战略

淘宝平台的数据大概可以分成三块：一是离线的数据，比如什么地方的人最爱吃大闸蟹。二是在线数据，主要是图片，淘宝一些大的卖家都把图片存在淘宝里面。三是一些信息是用户的淘宝收藏夹。 2010年3月，淘宝宣布将面向全球首度开放数据，并制定了两条大原则：数据分层次开放；涉及消费者个人或者企业隐私的数据绝对保护。淘宝的数据开放：一是对公众的免费信息，比如推出类似于宏观经济数据的“淘宝指数”。商家

2013-12-04 03:50:42 2204

原创数据科学和大数据研究单位

Data Science在美国这边目前希望成为一个学科的趋势，Illinois Institute of Technology已经开始在Data Science学科的Master学位了。一些学校已经成立Data Science的Institute orresearch center1. ColumbiaUniversity 和New York City的The Institute f

2013-12-04 03:41:44 1364

转载谁来引领中国大数据的发展

毋庸置疑，大数据对我们时代的改变将越来越深刻。无论是IBM、CISCO这样的老牌 IT 公司、还是在Hadoop生态圈中的专注于大数据的IT新秀，都在短短的几年之内抢占了大数据产业链的各大环节。未来谁能够引领大数据技术，中国制造商能否在大数据爆发性增长来到时抢占到一席之地？未来制约大数据发展和应用的瓶颈又会是什么？　　谁将引领大数据？　　通过对比分析目前IT企业在大数据领域的发展情

2013-12-04 02:46:29 1418

原创移动互联网、云计算、大数据、物联网的关系

从这幅图中我们可以看出：物联网对应了互联网的感觉和运动神经系统。云计算是互联网的核心硬件层和核心软件层的集合，也是互联网中枢神经系统萌芽。大数据代表了互联网的信息层（数据海洋），是互联网智慧和意识产生的基础。包括物联网，传统互联网，移动互联网在源源不断的向互联网大数据层汇聚数据和接受数

2013-12-04 02:42:56 2502

转载阿里数据十年

大数据时代，阿里巴巴集团是最有资本进行烂漫遥想的公司之一。阿里数据平台事业部服务器上，攒下了超过100PB已“清洗”的数据。马云曾在2012年公开宣称“平台、数据、金融”是阿里集团和阿里小微集团未来的指导路线。在此前后，战略布局已渐次展开：2010年，推出重要的搜索业务“一淘”，2011年收购数据属性公司CNZZ，近期有接连收购友盟、入股新浪微博和高德，抢占数据源；在物流领域，阿里由天猫主

2013-12-04 02:29:59 5757

转载大数据驱动城市运行体征的管理创新

全国各地的智慧城市建设得如火如荼。近日以来，同方又陆续收到几座城市的智慧城市规划邀请意向，这些城市分布于新疆、山东、辽宁等省市（自治区）。它们当中有些已经进入规划的后期阶段，有些刚刚开始。同方基于大数据城市运行中心建设智慧城市，用顶层规划和指标体系规范智慧建设的建设内容。　　“智慧”源自大数据　　物联网、移动互联网和传统信息化的建设，驱使着历史的滚滚车轮步入大数据时代。“智慧”来自

2013-12-04 02:22:32 3218

转载大数据将驱动学科研究变革

不久前，美国科学技术政策办公室和“网络与信息技术研发项目”推出了第二轮大数据行动，即“从数据到知识到行动：建立新的伙伴关系”计划。这一计划是对2012年3月奥巴马政府“大数据研发计划”的延续。它的推出在美国掀起了新一轮大数据研究热潮，美国各界对大数据研究涉及的科学与社会问题进行了集中探讨。　　未来诸多研究将由大数据驱动　　为响应第二轮大数据行动，加州大学伯克利分校宣布将新建伯克利数

2013-12-04 02:11:49 1135

转载大数据技术的发展趋势

大数据领域已经涌现出了大量新的技术，它们成为大数据采集、存储、处理和呈现的有力武器。这些技术下一步将如何发展？它们之中哪些技术将广为流行？又会诞生哪些新的技术？技术趋向多样化，企业应选择接受度高和未来会快速普及的技术目前，大数据相关的技术和工具非常多，给企业提供了更多的选择。在未来，还会继续出现新的技术和工具，如Hadoop分发、下一代数据仓库等，这也是大数据领域的创新热点。那么企业到

2013-12-04 02:08:58 1302

转载大数据：商业革命与科学革命

什么叫大数据？ “大数据”是“数据化”趋势下的必然产物！数据化最核心的理念是：“一切都被记录，一切都被数字化”，它带来了两个重大的变化：一是数据量的爆炸性剧增，最近2年所产生的数据量等同于2010年以前整个人类文明产生的数据量总和；二是数据来源的极大丰富，形成了多源异构的数据形态，其中非结构化数据（包括语音、视频、图像等）所占比例逐年增大。牛津大学互联网研究所维克托·

2013-12-04 01:54:46 1331

原创大数据时代下的智慧农业

1、背景（1）根据联合国粮食组织预测，未来全球的粮食生产力必须提高60%才能应对人口快速增长带来的负担。面对不断缩小的可种耕地，越来越严峻的天气，农业生产面临着巨大的挑战。（2）随着人口压力不断提高，可用耕地不断减少，农业需要另一场变革，来满足人类的粮食生产需求。随着信息技术的发展，大数据、物联网以及云计算的普及，给传统农业转型带来了新的机遇，这将促进农业的加速发展与转型。（3）大

2013-11-16 02:17:43 5332

转载大数据浪潮：平凡而又神奇的贝叶斯方法

概率论只不过是把常识用数学公式表达了出来。——拉普拉斯记得读本科的时候，最喜欢到城里的计算机书店里面去闲逛，一逛就是好几个小时；有一次，在书店看到一本书，名叫贝叶斯方法。当时数学系的课程还没有学到概率统计。我心想，一个方法能够专门写出一本书来，肯定很牛逼。后来，我发现当初的那个朴素归纳推理成立了——这果然是个牛逼的方法。——题记目录0. 前言 1. 历史 1.1

2013-11-14 22:50:00 3428

BigDataMining的专栏