clickhouse性能测试及与hive的性能对比

测试一

数据库实例配置

  • 计算节点:节点规格: 8 核 32 GB ; 存储空间: 1000 GB ; 副本数: 2 ; 分片数: 1
  • ZK节点:节点规格: 8 核 32 GB ; 存储空间: 300 GB ; 节点数目: 3

测试表

  • test_1(10个字段):15652条,使用MergeTree作为表引擎
  • test_2(28个字段):1026820983条,使用MergeTree作为表引擎

测试场景一:ClickHouse插入性能测试

  • 外部数据无序插入到ClickHouse:55000条/秒
    备注:与官方数据差距较大,官方号称单节点可以达到50万条/秒的插入速度
  • ClickHouse节点内数据复制(test_2,新表使用MergeTree作为表引擎):85万条/秒
  • ClickHouse节点内数据复制(test_2,新表使用ReplicatedMergeTree作为表引擎,并行两张表):40万条/秒

测试场景二:单节点与Hive对比

  • 关于缓存,Clickhouse的缓存实际上是基于linux 的page cache,这块有兴趣的可以自行查找资料学习。
场景 hive耗时(秒) CH第1次查询(秒) CH第2次查询(秒) CH第3次查询(秒
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值