你真了解实时大数据？高手们如何玩转开源流计算？

最新推荐文章于 2024-04-25 16:32:44 发布

糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖糖

最新推荐文章于 2024-04-25 16:32:44 发布

阅读量168

点赞数

本文链接：https://blog.csdn.net/cpongo4/article/details/89156548

版权

9月，一场热闹非凡的技术盛宴——2018实时大数据Meetup要来啦！

最近两年，实时大数据快速发展，流式SQL、在线机器学习、流式大数据查询、SQL复杂时间处理（CEP SQL）、时空数据分析（Time GeoSpatial）与处理等高大上特性迅速成长起来，并扎根于科技金融、车联网、物联网、电商、智慧城市等应用场景，创造新的价值。

毋庸置疑，数据越实时价值越大，毫秒~秒级的实时流式大数据计算场景层出不穷。并且当下，从数据产生到分析结果的计算，数据时效性对业务的蓬勃发展起到更至关重要的作用。在面向毫秒的实时大数据计算场景上，Spark和Flink各有所长。

而针对当前大数据领域分析场景需求各异而导致的存储冗余问题，Apache CarbonData则提供了一种新的融合数据存储方案，以一份数据同时支持快速过滤查找和各种大数据离线分析和实时分析。目前，CarbonData已在20+企业生产环境上部署应用。

因此，本次Meetup将深度解析大数据实时流计算两大引擎Apache Spark(Structured Streaming) 、Apache Flink和社区新贵Apache CarbonData技术与实践，并将融合实时的数据存储方案。这些来自于开源社区和一线企业的实践经验，将带给大家关于实时大数据技术的更多落地思考。

插入主视觉图

本次Meetup将开设为期一整天的演讲+动手实训活动，并集合了Databricks、华为云及美团的大咖级嘉宾。他们的集体「授业解惑」一定能帮你更好地进阶Spark、Flink及CarbonData开发，用更开放的视角实操大数据实时流计算。

这场技术盛宴已开启限额免费报名通道！

上午场Meetup演讲嘉宾

本次Meetup汇聚了实时大数据领域优秀的工程师、分析师、代码贡献者及一线实践者。

这些嘉宾包括Databricks工程师及Spark Structured Streaming项目带头人Tathagata Das、华为云相关专家、美团点评专家，他们长期活跃在Apache开源社区，并担任PMC和Committer关键技术角色。

其中，作为Spark Structured Streaming的主要开发人员，Tathagata Das将从推动者的视角分享Spark Structured Streaming当前的一些进展，为工程师们基于其特性更好地开发提供成熟思路。其他三位业内大牛讲师，也将带来他们对Spark、Flink及CarbonData的技术观察和最佳实践分享。

演讲话题

Easy, Scalable, Fault-Tolerant Stream Processing with Structured Streaming in Apache Spark\\t
What's New in Apache CarbonData 1.5\\t
美团点评Flink实践与应用\\t
智能流计算：Flink/Spark在CloudStream中的应用实践\

（点击「阅读原文」，查看所有演讲嘉宾及演讲议题摘要）