《程序员》11月精彩内容：大数据平台架构与技术实践

本期《程序员》呈现大数据平台架构与技术实践精彩内容，汇聚来自去哪儿、游族网络、链家网、万达金融等公司的技术专家，将带领读者共同探讨热门技术应用和实践优化，深入解析蕴藏的数据价值，展现时下大数据的行业发展和前沿动向。

• 基于Spark一栈式开发的通信运营商社交网络（丁廷鹤，大数据工程师）
• Lambda与Kappa计算架构之我见（姚仁捷，游族网络运维开发经理）
• 链家网大数据平台枢纽——工具链（吕毅，链家网平台架构师）
• 基于Mesos和Docker构建企业级SaaS应用Elasticsearch as a Service（马文，徐磊，吕晓旭）
• Apache Beam：下一代的数据处理标准（李呈祥，万达网络科技集团大数据技术专家）
• 在Apache Spark 2.0中使用DataFrames和SQL的第一步（马小龙，浙江财经大学数据分析和大数据计算客座教授）
• 基于Spark的公安大数据实时运维技术实践（秦海龙，杭州以数科技有限公司大数据工程师）

---

资讯
CSDN要闻
集成电路之后：Jack Kilby在太阳能发电系统上的失败经历
廉价激光雷达：无人驾驶汽车价格亲民的关键
全息技术简介

---

云计算

• Kubernetes从部署到运维详解（杨乐，时速云联合创始人兼技术总监）

  Kubernetes作为容器集群管理工具，其活跃的社区吸引了广大开发者热情关注，刺激了容器周边生态的快速发展，为众多互联网企业采用容器集群架构升级内部IT平台设施，以及构建高效大规模计算体系提供了技术基础，本文详解介绍了Kubernetes从部署到运维的全程详解。

• 如何构建高质量MongoDB云服务（杨成虎，阿里巴巴分布式和数据库高级技术专家）

  作为一款云数据库产品，SLA就代表着云服务的质量。SLA是一个综合性体系结构，好比建房子，高质量的地基，配合高质量的框架，多个层面相结合，这样的房子（系统）才能抗地震、抗台风。本文给大家介绍下阿里云数据库团队的“建筑师”是如何建造MongoDB这座金字塔的。

• 深入解读DC/OS核心功能（刘超，网易云计算解决方案总架构师）

  DC/OS全称为数据中心操作系统，本文从其的总体架构、调度功能、网络功能、存储功能以及负载均衡等角度全面深入剖析DC/OS的核心功能。

---

人工智能

• KDD 2016精选论文（洪亮劼，Etsy数据科学主管）

  人工智能和机器学习领域的学术论文汗牛充栋。每年的各大顶级会议、研讨班录用好几千篇论文，即便是亲临现场也很难追踪到所有的前沿信息。在时间精力有限的情况下，选择精读哪些论文，学习哪些热门技术就成为了AI学者和从业人员所头痛的问题。本栏目旨在要帮助大家筛选出有意思的论文，解读出论文的核心思想，为精读提供阅读指导。

• 机器学习在异常检测中的尝试（姚仁捷，游族网络运维开发经理）

  机器学习是近年来最火热的技术之一，作者对大数据计算和监控系统都有一定的经验，希望能借助机器学习的一些技术，帮助解决异常检测这一问题。从正常数据中找出异常数据，除了使用阈值以外，似乎没有更好的解决方法。在这篇文章中，作者会从异常的定义入手，从概括抽象的角度介绍传统的阈值报警方式，以及使用机器学习帮助异常检测的一些尝试。

• 图计算系统进展和展望（成杰峰，刘勤，李震国）

  挖掘大规模图数据能增强现有商业业务，甚至产生新的商业模式。然而，这些图数据的规模让图数据挖掘本身成为难题，这些突出的挑战都指向了发展具有高可扩展能力的大规模图计算处理的有效工具。本文先展开叙述图计算技术的几个核心层面，进而介绍华为诺亚方舟实验室的VENUS图计算系统，最后对图计算发展的趋势作简要展望。

• 高精地图在无人驾驶中的应用（陈辰，刘少山）

  高精地图是无人驾驶核心技术之一，精准的地图对无人车定位、导航与控制，以及安全至关重要。本文是“无人驾驶技术系列”第七篇，首先介绍高精地图与传统地图的区别，然后介绍其特点及制作过程。在了解高精地图基础知识后，探索其在无人驾驶场景中的应用。

---

移动

• 手机游戏无障碍设计——猜地鼠之Android篇（何金源，腾讯Android手Q开发工程师）

  手机应用无障碍化逐渐受到重视，这项技术为盲人或者视力有障碍的人士带来了很大便利。那么对于手机游戏，同样也应该进行无障碍化，本文将以盲人猜地鼠游戏为例，讲解如何对手机游戏进行无障碍化设计，如何让原本无法操作变成可在无障碍模式下正常使用，最后总结手机游戏无障碍化的大体思路。

• IM技术在多应用场景下的实现及性能调优：iOS视角（陈宜龙，LeanCloud iOS开发工程师）

  IM已经成为当下App的必备模块，在不同垂直领域，技术实现不尽相同。究竟该如何选型？技术实现过程中，又该如何进行性能调优？本篇文章分为应用场景、技术实现细节、针对移动网络特点的性能调优三个部分，具体讲解IM即时通讯技术在社交、直播、红包等不同场景下的技术实现与性能调优。

• 移动直播连麦实现——Server端合成（张亚伟，齐聚科技技术研究院技术总监）

  本文是移动直播连麦实现系列的第二篇，分享由Server端（UpServer）执行音视频合成的流程及细节。此前我们介绍了移动直播连麦实现思路的整体情况，包括音视频合成的几种实现思路，参与连麦的客户端角色和服务器角色，内容详情见《程序员》2016年10月刊。

---

技术

• CSS Selectors Level 4新特性解析（李滨泓，饿了么大前端部实习生）

  本文对目前W3C工作草案中的CSS Selectors Level 4新特性进行了阶段性总结。从这些新特性可以看出CSS正逐渐将以前需要依赖JavaScript做到的事情转化为CSS自身能够处理的过程，大大降低了CSS和JavaScript之间的代码耦合，继而降低了项目迭代过程中的维护成本。

• 现代C++实现万能函数容器（祁宇，金山WPS资深工程师）

  如何实现一个通用容器可以保存所有类型的函数并实现调用？本文通过C++11/14的一些新特性和模版元技巧解决这一技术难题。

---

知识库
React Native学习指南
React Native知识库内容精选

---

百味
西乔漫画：这就是为啥你今晚又要加班了

---

订阅2016年程序员（含iOS、Android及印刷版）请访问 http://dingyue.programmer.com.cn

订阅咨询：

• 在线咨询（QQ）：2251809102
• 电话咨询：010-64351436
• 更多消息，欢迎关注“程序员编辑部”