Confluo是一个由伯克利大学riselab开源的多数据流实时数据分析系统，声称其吞吐量比Kafka高4到10倍。Confluo的设计目标是同时实现高吞吐量数据提取和复杂查询，采用C++实现，支持Python和Java的Client API。与Kafka相比，Confluo通过无锁的RingBuffer和原创报文头数据索引提高并发效率，解决了快照问题。
18年的12月5号，伯克利大学的riselab开源了Confluo。作为一个多数据流实时数据分析系统，按照论文的说法，吞吐量将会比 Kafka 高 4 到 10 倍。
原文：《Confluo: Millisecond-level Queries on Large-scale Live Data》
地址：https://rise.cs.berkeley.edu/blog/confluo-millisecond-level-queries-on-large-scale-streaming-data/
github地址：https://ucbrise.github.io/confluo/
Confluo是一个开源的C++项目，目前Confluo Client API支持的语言还包含：Python，Java，包括：1）Confluo的数据结构库，支持高吞吐量日志，以及各种在线（实时聚合，条件触发器执行等）和离线（ad-hoc过滤器，聚合等）查询； 2）Confluo服务器实现，它封装数据结构并通过RPC接口公开其操作，以及C ++，Java和Python中的客户端库。
场景评估：
- 一个网络监控和诊断框架，Confluo能够在单个
最低0.47元/天 解锁文章
扫一扫
835
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
