Flink
文章平均质量分 89
图特摩斯科技
数据库方向-图数仓的发明者,时序、多维、异构、动态+静态知识图谱数据库AbutionGraph发明者。
展开
-
还在做Flink+Druid/ES/Hbase的实时数仓吗?AbutionGraph+Flink带您构建流批一体的增强流式知识图谱数据仓库
AbutionGraph是众多国产数据库中新兴的一员,且是唯一一款GraphHOLAP的实时知识图谱数据仓库,将在本文中介绍Abution如何结合Flink(无缝对接Flink-1.12.1)构建增强的流批一体实时数仓。Abution结合Flink和Spark的差异AbutionGraph最初实现了跟Spark的无缝对接,使得我们可以很方便的将图数据与Spark的数据结构GraphX、GraphFrames、DataFrame、RDD互转,格式的转化已经覆盖了Spark的所有格式。对于流式处理.原创 2021-02-19 14:43:51 · 1593 阅读 · 0 评论 -
[AbutionGraph] 知识图谱+Flink:大规模实时动态图谱平台的实现
作者 | Raini出品 | 北京图特摩斯科技(www.thutmose.cn)Flink:目前最受关注的大数据技术,最活跃 Apache 项目之一。AbutionGraph:北京图特摩斯科技自研的国内首个准实时多维图形数据库,首个将实时/离线/指标聚合/图挖掘/AI框架等热门技术线深度整合在一起的认知图谱平台,本文仅对实时性的相关优势做分析。AbutionGraph 具有以...原创 2019-12-30 22:28:37 · 4807 阅读 · 0 评论 -
[AbutionGraph] 大规模实时动态时序知识图谱+AI平台
作者 | Raini出品 | 图特摩斯(北京)科技有限公司AbutionGraph是什么?AbutionGraph是一种能对历史和实时数据提供亚秒级别查询的多维图数据存储与分析平台。AbutionGraph支持低延时的数据摄取,灵活的数据探索分析,高性能的数据聚合,简便的水平扩展。高容错的架构在发生代码部署、机器故障以及其他产品系统遇到宕机等情况时,仍能够保持100...原创 2019-12-18 11:48:23 · 6687 阅读 · 0 评论 -
Spark持续流处理与Flink比对
Spark流处理Spark从2.3版本开始引入了持续流式处理模型,可将流处理延迟降低至毫秒级别,让 Structured Streaming 达到了一个里程碑式的高度;使用 Pandas UDF 提升 PySpark 的性能;为 Spark 应用程序提供 Kubernetes 原生支持。出于某些原因的考虑,Spark 引入 Structured Streaming 将微批次处理从高级...原创 2018-11-19 19:41:17 · 3698 阅读 · 0 评论 -
Structured Streaming与Flink比较
flink是标准的实时处理引擎,而且Spark的两个模块Spark Streaming和Structured Streaming都是基于微批处理的,不过现在Spark Streaming已经非常稳定基本都没有更新了,然后重点移到spark sql和structured Streaming了。Flink作为一个很好用的实时处理框架,也支持批处理,不仅提供了API的形式,也可以写sql文本。这...转载 2019-01-11 10:43:16 · 5355 阅读 · 0 评论