2016年04月_仲浩

06月 05月 04月 03月 02月 01月

原创 Spark技能成长，CSDN就go了！

2016中国Spark技术峰会最早发起时间可以归结到2015年底，那时恰逢Reynold Xin（辛湜，Databricks联合创始人兼Apache Spark首席架构师）回国在CSDN参办的BDTC 2015（中国大数据技术大会，今年会在12月左右举办）上进行主题演讲。当时Reynold的时间很紧，我们只能约好在他演讲结束后进行交流，而令人意想不到的是，在Reynold分享结束后，十多个人围了上...

2016-04-26 09:23:22 681

原创 3位Committer，12场国内外技术实践，2016中国Spark技术峰会议题详解

源于2014年，由CSDN主办的中国Spark技术峰会已成功举办两届，而到了2016年，峰会更得到了Spark护航者Databricks的支持，所有议题均由Databricks联合创始人兼首席架构师Reynold Xin及峰会主席陈超联合把关。会议将于5月15日北京拉开帷幕，而在这里，笔者就将带大家初窥由Databricks、Hortonworks、Intel、Elastic、腾讯、新浪、AdMa...

2016-04-21 09:28:33 1660

原创为什么微软重视小冰这样的“智能机器人”服务

原文：Microsoft to offer blockchain to banks with new partnership 译者：张晓东审校：朱正贵摘要：微软发布了新的Bot框架，旨在开放微软在类似“小冰”的智能机器人服务，帮助人们更好的利用机器学习和人工智能的能力。微软的CEO Satya Nadella积极的向开发者推广创建虚拟助理和智能聊天机器人的服务，以帮助...

2016-04-20 19:46:04 359

原创时间序列数据库武斗大会之 KairosDB 篇

【编者按】作者刘斌是OneAPM后端研发工程师，拥有10多年编程经验，参与过大型金融、通信以及Android手机操作系的开发，熟悉Linux及后台开发技术。曾参与翻译过《第一本Docker书》、《GitHub入门与实践》、《Web应用安全权威指南》、《WEB+DB PRESS》、《Software Design》等书籍，也是Docker入门与实践课程主讲人。本文所阐述的「时间序列数据库」，系笔者所...

2016-04-08 17:38:47 1155

原创 GraphFrames：一个基于DataFrame的图处理库

原文：Introducing GraphFrames 作者：Joseph Bradley、Tim Hunter、Ankur Dave、Xiangrui Meng近日，Databricks和UC Berkeley及MIT一起为Apache Spark设计了一个图处理库——GraphFrames。它既能利用DataFrame良好的扩展性和强大的性能，同时也为Scala、Java和Pyth...

2016-04-08 09:51:12 4430

原创基于SQL on Hadoop的数据仓库技术

作者简介：孙元浩，星环信息联合创始人兼首席技术官。责编：仲浩（[email protected]）本文为《程序员》原创文章，未经允许不得转载，更多精彩文章请订阅2016年程序员数据仓库是企业统一的数据管理的方式，将不同的应用中的数据汇聚，然后对这些数据加工和多维度分析，并最终展现给用户。它帮助企业将纷繁浩杂的数据整合加工，并最终转换为关键流程上的KPI，从而为决策/管理等提...

2016-04-04 09:34:55 933

Spark在TalkingData移动大数据平台的实践

2013年9月份，TalkingData开始尝试使用Spark解决数据挖掘性能问题。随着对Spark的逐渐了解，TalkingData开始将Spark应用到整个移动大数据平台的建设中。在移动大数据平台中，ETL过程、计算过程、数据挖掘、交互式数据提取等等都依赖于Spark。在这里，我将要介绍我们使用Spark的状况、平台架构、以及一些实践经验。当然也包括一些总结的最佳实践。

2016-04-28

The Future of Real-Time in Spark

via Reynold Xin, Co-Founder & Chief Architect, Databricks

2016-02-26

Spark Usage in Enterprise Business Operations

Via Ken Tsai, Head of Cloud Platform & Data Management, SAP

2016-02-26

Role of Spark in transforming eBay’s Enterprise Data Platform

VIA Seshu Adunuthula, Head of Analytics Infrastructure, eBay

2016-02-26

Apache Spark, the Analytics Operating System

VIA Anjul Bhambhri, VP of Big Data Engineering, IBM

2016-02-26

Accelerating Enterprise Spark

via Shaun Connolly, VP of Business Strategy, Hortonworks

2016-02-26

Democratizing Access to Data

via Databricks联合创始人兼CEO Ali Ghodsi

2016-02-26

Spark 2.0概览

via Databricks联合创始人兼CTO Matei Zaharia。

2016-02-26

2015中国开源参与调查报告Final

本报告的形成是基于开源社与 CSDN 携手推出的“2015 年中国开源社区参与调查问卷”,旨在对中国开源社区、开源生态、开源开发者做一次全面性地摸底调查。

2016-02-04

服务端开发那些事

服务端开发对于任何互联网公司来讲，都并非易事，它所涉及的技术知识面非常广泛，如果开发人员的经验不足，将直接影响产品用户的体验。

2015-11-06

李永辉：IBM Watson 大数据与分析平台

2015-10-30

韩卿：Apache Kylin－Hadoop上的大规模联机分析平台

2015-10-30

戴金权：基于Spark软件栈的下一代大数据分析

Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。

2015-10-30