基于所有SQL引擎,200倍速度,分析查询加速神器出世?

也许你还在使用spark impala做数据分析,推荐一款查询加速器,可以基于spark,impala等一切SQL查询引擎,让你的查询速度提升200倍(损失1%的准确性)

clickhouse表示不服

数据来源于官网,目前尚未实际测试,

资源减少200倍

没有对应用程序的更改

与所有SQL引擎兼容

通过利用统计和近似查询处理方面的最新技术,VerdictDB显着降低了现有数据库的查询处理成本。

通过牺牲仅1%的准确度,速度提高200倍,

verdictdb可以在计算精确答案所需时间的一小部分内为您的大数据查询提供99%的准确答案。

如果你的数据太大而无法在几秒钟内分析,你会喜欢的。

通过使用VerdictDB,您可以大规模地体验“真正的交互式”数据分析,即使集群被数百名处理大量数据集的其他用户使用也是如此。

 

没有对数据库的更改

VerdictDB是一个站在应用程序和SQL引擎之间的查询加速器,无论是传统的DBMS还是现代的SQL-on-Hadoop。 您的应用程序可以简单地发出相同的查询,但可以选择立即接收大致的答案或等待确切的答案。

在所有基于SQL的引擎上运行

VerdictDB可以在任何支持标准SQL(传统和现代)的数据库上运行。 

已经有Apache Hive,Apache Impala,Apache Spark和Amazon Redshift的驱动程序。 我们也在为许多其他数据库添加驱动程序(Google BigQuery,HP Vertica,Oracle,Teradata,MS SQL Server等)。 如果您使用的数据库不在此列表中,可以发邮件提供支持

Verdict支持标准接口,如JDBC。对于Apache Spark,您可以简单地包含Verdict的jar文件并向Verdict的SQL上下文发出查询。

由于支持标准接口,Verdict可以轻松地与流行的前端工具集成,例如Apache Zeppelin,Hue,Jupyter笔记本等。

具体实现原理将在下一文章中解析,欢迎fork 或star

https://gitee.com/datayy_p/ptDataware

pthunter也fork了一版,改名数件,地址:​

项目原地址:https://github.com/mozafari/verdictdb

 

 

转载于:https://my.oschina.net/pthunter/blog/1858472

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值