Druid:一款开源数据分析工具

转载 2018年04月17日 15:29:06

Druid 是一个针对在线分析处理(OLAP)事件数据而设计的开源数据存储分析工具。它提供了低延迟(实时)数据摄取、灵活的数据探索及快速的数据聚合功能。现存的已实施的Druid项目已经能处理数万亿的事件和拍字节(拍字节即PB,1PB=1024TB)的数据了。Druid现在是面向用户分析应用中使用率最高的。


关键特性

 

  • 次秒级(sub-second)OLAP查询:Druid的列取向和反向索引能使其能进行复杂的多维度过滤,并扫描出哪些才是一个查询所真正需要的。数据的聚合与过滤只在毫秒之间就得以完成。
  • 实时的流式摄取:典型的数据库分析都是分批次来进行的。由于事务锁或其它瓶颈因素限制,使得一次只处理一个事件这种方式的数据摄取速度很慢。Druid使用无锁方式摄取数据集,以实现每节点每秒能同时摄取并查询上万个事件的功能。简单地说,一个事件从发生到可被观测之间的延迟只取决于传递给Druid的速度。
  • 强大的分析应用:Druid有许多为多租户(multi-tenancy)内置的特性。拥有为上千并发用户而设计的强大的面向用户分析应用。
  • 性价比高:Druid在进行规模应用时非常节省成本而且还内置了诸多能降低成本的功能。通过简单的配置就能降低成本并提高性能。
  • 高有效性:Druid作为软件即服务的一种实现方式,需要做到时刻可用。Druid支持滚动更新,这样即使在更新升级期间,你的数据及查询功能仍然保持可用。
  • 大规模应用:现有的Druid实施项目处理着数万亿的事件、拍字节量级的数据并在每秒钟执行上千次查询。

开发资源

官方网站:http://druid.io/
开源地址:https://github.com/druid-io/druid/


2017年Java日志框架及工具综述

2017年Java日志框架及工具综述 版权声明:本文为博主chszs的原创文章,未经博主允许不得转载。 应用程序中的日志信息对于了解所有应用程序运行时的行为至关重要,特别是在遇到意外的场景、错误或仅用...
  • chszs
  • chszs
  • 2017-10-10 20:25:22
  • 1338

10款超好用的开源大数据分析工具

现如今,整个互联网已经进入大数据时代,“大数据”一词的重点现也已经不仅在于数据规模的定义,它更代表着信息技术发展进入了一个新的里程,虽然只有极少数人能够修炼成数据科学家这一21世纪最性感多金专业人士,...
  • chenjunji123456
  • chenjunji123456
  • 2017-07-18 17:38:33
  • 1158

应用Moduler方式重构应用

第十章  应用Moduler方式重构应用不同于导航式容器如ViewStack等容器加载方式,从Flex2开始,Flex标准实现中包含了一种名称叫做ModuleLoader的容器。这个容器可以在需要的时...
  • jiabangok
  • jiabangok
  • 2009-02-16 14:22:00
  • 1362

快速了解Druid -- 实时大数据分析软件

Druid 是什么   Druid 单词来源于西方古罗马的神话人物,中文常常翻译成德鲁伊。    本问介绍的Druid 是一个分布式的支持实时分析的数据存储系统(Data Store)。美国广...
  • guichenglin
  • guichenglin
  • 2017-10-20 14:24:59
  • 801

Druid:一个用于大数据实时处理的开源分布式系统之是什么

Druid是一个JDBC组件,它包括三部分:  DruidDriver 代理Driver,能够提供基于Filter-Chain模式的插件体系。  DruidDataSource...
  • u012031380
  • u012031380
  • 2016-12-19 15:03:09
  • 532

开源视频质量评价工具: IQA

Image Quality Assessment (IQA)是一个快速,精确,可靠的测量视频/图像质量的基于C的库。 它实现了很多流行的算法比如 MS-SSIM, SIMM, MSE 和 PSNR。 ...
  • leixiaohua1020
  • leixiaohua1020
  • 2013-10-10 12:15:20
  • 4285

开源社会网络分析工具NodeXL介绍

sna nodexl 社会网络分析 wpf
  • wphnudt
  • wphnudt
  • 2010-12-17 17:33:00
  • 6467

几款开源的数据挖掘工具

come from:http://idmer.blog.sohu.com/106647744.html; http://blog.csdn.net/liygcheng/article/detai...
  • u010140338
  • u010140338
  • 2013-12-20 20:57:06
  • 3009

重磅 | 谷歌发布免费GNSS数据分析工具【内附下载地址】

摘要: 谷歌GNSS分析工具,对安卓设备采集的GNSS测量数据进行分析。   泰伯网讯  继去年推出安卓设备的GNSS原始测量功能,近日,谷歌又发布了免费GNSS(全球导航卫星系统)分析工具,用于处...
  • gis_3s_user
  • gis_3s_user
  • 2018-01-05 16:51:43
  • 224

OLAP及分析工具选型

Druid vs Elasticsearch Druid vs Key/Value Stores (HBase/Cassandra) Druid vs Redshift Druid vs Spark ...
  • spirit_zyl
  • spirit_zyl
  • 2017-03-01 18:58:50
  • 631
收藏助手
不良信息举报
您举报文章:Druid:一款开源数据分析工具
举报原因:
原因补充:

(最多只允许输入30个字)