说到最近几年最热门的技术流行语,少不了云计算、大数据、人工智能、物联网等热词。不过,尽管人人(至少是企业界)言必称大数据,但是其在企业的采用周期要远远滞后于炒作周期。所以大数据从新奇酷的技术变成核心系统,从炒作到产品部署往往需要几年的时间。从去年开始,大家越来越感觉到这项技术已经在某种程度上陷入了停滞。不过好消息是,2017年大数据开始进入部署阶段,大数据的炒作逐渐散去,但它的应用却正在蓬勃发展,代表成熟度的标志性IPO也正在出现。而大数据在几年前经历的泡沫正在无可争议地转移到人工智能身上,过去几个月AI所经历的共同意识“大爆炸”与大数据当年相比甚至有过之而无不及。从2013开始制作大数据版图的Matt Turck刚刚发布了最新的2017年大数据版图,我们一起来看看在这个领域有哪些最新趋势和玩家的分布情况。
高层趋势
大数据+AI=新栈
2016年无疑是机器学习之年,任何目睹过众多pitch的VC都应该能感受到这一点,那就是每一家初创企业都成为了“机器学习公司”,“.ai”变成了必备域名,而“等等,可是我们是用机器学习做到这个的”也成为了pitch deck的必备幻灯片。机器学习正在迅速成为许多应用的关键建构块。
相应地,一个新兴的技术栈正在出现,在这个技术栈里面,大数据被用于处理核心的数据工程挑战,而机器学习则用于以分析洞察或者行动的形式从数据中析取出价值。
换言之,大数据提供管道,AI提供智能。当然,这种共生关系已经出现多年,只是能实现这个的目前还不多而已。
但是,现在这些技术开始大众化的普及。“大数据+AI”正在成为众多现代应用(不管是消费者型还是企业型)的默认技术栈。无论是初创企业还是一些财富1000强公司都在利用这一新的技术栈。而且在云巨头的努力下,这个技术栈往往还有云计算这个更基础的建构块的加入,以机器学习云的形式出现。
但是AI的大众化是否就意味着这种技术在短期内能实现商品化呢?现实是AI在技术上仍然非常困难。尽管许多工程师都在争先培养AI技能,但全球这方面的领域专家仍然十分稀缺。
不过这股大众化的趋势已经不可逆转,而机器学习早晚都要从竞争优势演变成桌面筹码。
这对初创企业和大公司都会产生影响。对于初创企业来说,除非你把AI软件做成自己的最终产品,否则的话自我标榜为“机器学习公司”将变得毫无意义。对于大公司来说,如果现在你不积极推进大数据+AI的战略,就会有变得过时的风险。AI已经是下一个风口了。
企业预算:一切向钱看
从2016年的情况来看,财富1000强公司已经在纷纷增加预算用于升级核心基础设施以及分析,其关键的关注点正是大数据技术。分析机构IDC预计大数据和分析市场将从2016年的1300亿美元增长到2020年的超过2030亿美元。
而且财富1000强公司里面的许多买家在大数据技术方面正在变得越来越娴熟、越来越目光敏锐。这些公司过去几年做了很多功课,正在进入全面部署阶段。这种情况不仅发生在技术导向型的公司,在很多行业都是如此。
在大公司每隔几年就要发生的旧技术替代自然周期的推动下,这种情况得到进一步加速。大数据遭遇的环境也从逆风变成了顺风。当然,很多大公司仍然处在大数据部署的早期阶段,但是情况似乎在快速演变。
企业数据向云端迁移
直到几年前,把企业数据迁移到公有云上面对于大公司CIO来说还是不可想象的事情,顶多是在开发环境下或者拿非关键的、面向外部的应用来尝试一下。但现在画风开始有所变化,大家对此的态度似乎变得更加开放了,比方说你会听到这样的说法“不管怎么说我们的客户数据已经放到Salesforce云上面了”,或者“在网络安全方面我们永远也不会有像AWS那么多的预算”。但目前里大多数企业都向公有云迁移还远得很,这部分是因为遗留系统和管制方面的原因。不过云供应商正在竭尽全力来加速这一趋势的转变。比如说AWS甚至可以开卡车来运你的硬盘到云端。
2017年大数据全景图
![spss](https://i-blog.csdnimg.cn/blog_migrate/fe51f25c7bbeb475cb0d4ae5f89c126f.jpeg)
基础架构
![spss](https://i-blog.csdnimg.cn/blog_migrate/75902d6eaf68c685eb290efaca9f52c5.png)
![spss](https://i-blog.csdnimg.cn/blog_migrate/59a3cc2455a7571cf084df6b32ceac12.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/cf65261eb7850b4fe808ef312bd6425a.png)
![spss](https://i-blog.csdnimg.cn/blog_migrate/c27dcc2db2835744370044706b06682a.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/4d02ebf7dd499dee2ccc5669c638f8f0.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/5384b51d51631064e85cc107a9255c5c.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/973856864c77e3373f19922518c98acc.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/9b8cf4c3db0810a67cd1d0a6b7600d46.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/1edf456ec66a09902ea6fc8ed28f38a8.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/48c549bbb14cc59eb81e542a97f6035c.jpeg)
分析
![spss](https://i-blog.csdnimg.cn/blog_migrate/6568c9635fd20a21a1e832edeb7ada6f.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/2440b14b8687ee00aa23ed441e70af59.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/cf947bb1914f270e8da7ae5cf7dd7499.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/3fc131437abcbe911c8f09de054741b9.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/07794617fbd24320d5bddad69b1e0224.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/4ae043269a9229ddc76c8610850a2bef.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/20b7337df556f3ad5ae5559ed1772f5e.jpeg)
分析&基础架构跨界
![spss](https://i-blog.csdnimg.cn/blog_migrate/46292087455cb2ba268dc14eef608229.jpeg)
开源系统
![spss](https://i-blog.csdnimg.cn/blog_migrate/08f4b28f9a9b88792ce856cf07ee675f.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/14f52848f3cb4610c1fd91cfa42f1571.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/7cd9a347f360d24983b82c55eba2f86b.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/c948746dc9e31872dedef7ddf00a5c10.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/4ec98f597d97ea183977db4601fd595f.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/e24649cb638847f712d98d7ea8a8542a.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/98bf6e5d23ad051b2e2ffa2168fdd1ad.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/beb292f6a93c8ae5f4324b6fd0d1394f.jpeg)
数据源&应用程序接口
![spss](https://i-blog.csdnimg.cn/blog_migrate/6c6f947f33f421e27f8a98b4c154673b.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/05e4f5a1623fce1c2ac319fe3c6f04fb.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/58f0d0e23294df8b95415ab96e76dbaa.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/cf1d8e25eb2c860d2b8281ff36635a0f.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/59eb622915f6896513fe0bb0cdca84bd.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/9a3a428e22e8ad56fb343d9c08a16f74.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/4ebbd12921304925899d129d64b0fb71.jpeg)
企业应用
![spss](https://i-blog.csdnimg.cn/blog_migrate/c12e77c43af8fd9a30397c2d838310e1.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/b4604ee51754a72c7079ace87f319274.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/094774d44b058f08b5a67ad43273891d.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/66c9e428781fd24bee19c17ccb64d111.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/a52ae0014cc70bcee2032d70a00cbddd.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/60216050e20adf9714c3835ed817e410.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/9e1e88d69dd86d4270116739a22cba91.jpeg)
垂直行业应用
![spss](https://i-blog.csdnimg.cn/blog_migrate/19f727b92751f83cbcc3299d8be9a161.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/43179db2536658b5b092547f79241d0c.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/b0a6ca371c85de6e3c3d54b9b1782aae.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/cb92ab0dd85322d88ce7b11b7af3eeee.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/dd3c235cc46b075c6f463025d54e0099.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/adf68c697a36c9bbd192ebabf2082382.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/6a905ab79e864c1a3d1830672ae79c5d.jpeg)
数据资源
![spss](https://i-blog.csdnimg.cn/blog_migrate/2f4374cb60cf49f013b676a99024d448.jpeg)
![spss](https://i-blog.csdnimg.cn/blog_migrate/f29a74d85e5be3106e3f2c80fdd52f30.jpeg)
附热门大数据产品下载地址:
SPSS Modeler:https://www.evget.com/product/3729/download
SPSS Statistics Subscription:https://www.evget.com/product/3959/download