11.4 kudu列式存储和hdfs+parquet列式存储impala查询效率对比 1亿数据

演示对比1亿条数据(41列)列式存储和效率kudu和hdfs+parquet列式对比

当前设置'kudu.num_tablet_replicas' = '1',有一台过期了,内核1, 机械盘

Impala Daemon 内存限制 2g 

 

1.kudu存储转态:

2.执行插入1亿数据 1h16mmin

 3.占用磁盘空间:

kudu  5.45g

hdfs+parquet    1.2g

 

4.效率

kudu对主键列查询,未分区优化

 

 

hdfs+parquet +impala

不支持update