- 博客(6)
- 收藏
- 关注
RSS订阅原创 Jstorm到Flink 在今日头条的迁移实践
本文将为大家展示字节跳动公司怎么把Storm从J storm迁移到Flink的整个过程以及后续的计划。你可以借此了解字节跳动公司引入Flink的背景以及Flink集群的构建过程。字节跳动公司是如何兼容以前的Jstorm作业以及基于Flink做一个任务管理平台的呢？本文将一一为你揭开这些神秘的面纱。本文内容如下：引入Flink的背景Flink集群的构建过程构建流式管理平台...
2018-09-03 00:09:52
3855
原创 Flink大数据计算的机遇与挑战
本文来自于王绍翾在2018年08月11日Flink China Meetup。 王绍翾，花名“大沙”，加州大学圣迭戈分校计算机工程的博士，Apache Flink Commiter。目前在阿里负责Flink平台以及生态的一些工作。本文内容如下：流计算核心技术 Flink是德国data Artisans创造的，早期Flink主要是做偏批计算的，但是Spark在批处理上已经有一定优势，...
2018-08-27 00:38:38
561
原创 Flink状态管理和容错机制介绍
本文来自8月11日在北京举行的 Flink Meetup会议，分享来自于施晓罡，目前在阿里大数据团队部从事Blink方面的研发，现在主要负责Blink状态管理和容错相关技术的研发。本文主要内容如下： 有状态的流数据处理；Flink中的状态接口；状态管理和容错机制实现；阿里相关工作介绍；一.有状态的流数据处理1.1.什么是有状态的计算 计算任务的结果不仅仅依赖于...
2018-08-25 16:56:07
1021
原创 Flink 靠什么征服饿了么工程师？
阿里妹导读：本文将为大家展示饿了么大数据平台在实时计算方面所做的工作，以及计算引擎的演变之路，你可以借此了解Storm、Spark、Flink的优缺点。如何选择一个合适的实时计算引擎？Flink凭借何种优势成为饿了么首选？本文将带你一一解开谜题。一 、平台现状下面是目前饿了么平台现状架构图： 来源于多个数据源的数据写到kafka里，计算引擎主要是Storm,S...
2018-08-15 20:43:21
795
原创 Flink在唯品会的实践
本文来自于王新春在2018年7月29日 Flink China社区线下 Meetup·上海站的分享。王新春目前在唯品会负责实时平台相关内容，主要包括实时计算框架和提供实时基础数据，以及机器学习平台的工作。之前在美团点评，也是负责大数据平台工作。他已经在大数据实时处理方向积累了丰富的工作经验。本文主要内容如下：唯品会实...
2018-08-14 21:50:39
1219
原创 基于 Flink 的实时特征平台在携程的应用
      本文来自7月26日在上海举行的 Flink Meetup 会议，分享来自于刘康，目前在大数据平台部从事模型生命周期相关平台开发，现在主要负责基于flink开发实时模型特征计算平台。熟悉分布式计算，在模型部署及运维方面有丰富实战经验和深入的理解，对模型的算法及训练有一定的了解。本文主要内容如下：在公司实时特征开发的现状...
2018-08-14 20:56:02
932
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人