impala
TracyGao01
保持专注
展开
-
Presto、Impala性能比较
下面是Presto、Impala这两种典型的内存数据库的简单测试比较,当然这种内存数据库类似的还有spark sql,这种数据库在大数据量,多表关联查询时,会展现出自己的优势,下面是一组impala和presto的性能对比图:环境准备:1台32G内存、2台16G内存,没有完全把内存配置饱和测试数据:hive中3张2000W数据量的表集群:impala和presro部署在3台机器上原创 2018-01-22 01:32:09 · 28918 阅读 · 5 评论 -
impala刷新元数据
hive新增表,impala查不到时,需要刷新元数据:INVALIDATE METADATA;原创 2018-01-08 18:54:25 · 2772 阅读 · 0 评论 -
impala查询hbase数据效率问题
之前都是用impala查hive共享的数据,今天测试查了一下hbase的数据,方法很简单,就是hive里建hbase的外部表,用impala查询hive外部表的数据,发现一个问题,相同数据的情况下,查询hbase表数据和hive差别太大,如下图:同样的数据量:1、hive内部表数据2、hive外部表hbase数据速度根本不是一个数量级的!这一块儿如果真要应用impala查hbase原创 2018-01-08 19:31:35 · 4864 阅读 · 4 评论