开源大数据周刊-第4期

摘要：

E-Mapreduce支持VPC，发布教学视频，Apache Spark在SnappyData支持即时SQL分析

阿里云E-Mapreduce动态

• E-Mapreduce团队 发布了1.3.1版本，修复若干BUG
• E-Mapreduce团队 发布了VPC方案，可以帮助用户构建出一个隔离的网络环境，此外您也可以通过专线/ VPN 等连接方式将 VPC 与传 统数据中心组成一个按需定制的网络环境，实现大数据混合云架构，大数据可以先上云。
• Aliyun-emapreduce-demo已经发布到github上，用户可以基于此demo继续开发自身的业务
• E-Mapreduce团队 发布教学视频，包括基本介绍、数据同步、离线处理、流式处理等内容。
• E-Mapreduce团队即将增加zepplin和hue等交互式处理软件，用户可以直接写SQL甚至写python、scala代码交互式执行，查看运行结果

资讯播报

• 浅谈数据分析和数据建模
  比较简单讲述了数据分析的基本步骤，谈论了数据分析部门应该怎么构建，企业内部的各个角色之间怎么协调。
• 老司机的干货：如何提升数据的价值让大数据变现?
  大数据一直以来就有，只是当时没有有效的存储及分析手段。现如今，技术的发展让大数据分析成为可能，但是企业也不能太专注于技术本身忽略了数据分析本身。大数据如何变现呢？文中给出了一些思考。
• 大数据中的母爱：1次冲突背后是4.3次理解
  周日是母亲节，同仁就用大数据分析，用数据说话证明了母爱的伟大。
• 盘点人气云计算&大数据开源技术变迁
  整个云计算发展过程中，在服务可靠性技术问题得以解决之后，数据归属成为不折不扣的导火索，公有云与私有云之争一度也异常激励，而经过了长时间实践之后，则形成当下公有云、私有云、混合云等解决方案并存的状态。业务也促使了当前Hadoop及其生态、docker、OpenStack等繁荣发展。
• 旧金山云软件公司Pivotal完成2.53亿美元C轮融资，由福特公司领投
  成立3年，估值28亿美元。Pivotal成立于2013年4月份，由Winodws之父、前VMware CEO Paul Maritz掌舵。该公司业务主要包括销售系列软件工具和咨询服务，同时云计算以及数据处理技术等业务也在快速发展中，为企业级用户打造企业级云平台和大数据平台。
• IBM开放量子计算机希望普及开拓更新领域
  把众多的PC机器联合起来组成集群提供数据处理能力外，目前一些较大的公司致力于投资在量子计算机领域的研究。国内阿里云在15年7月联合中国科学院成立量子计算实验室。当前IBM直接开放了量子计算机。如果50-100量子比特的通用量子计算机能实现，且成本能控制在一定范围，这会颠覆目前计算模式。
• Apache Spark在SnappyData支持即时SQL分析
  SnappyData是结合DB、Hadoop技术的一个尝试，OLTP、OLAP界限正在变得模糊。
• Google云端机器学习和Tensor Flow的Alpha测试版本发布
  Tensor Flow也集成了Dataproc模块，Dataproc是google提供的一个托管的Hadoop和Spark服务。另外也集成了Kubernets、Docker等功能。