Clickhouse开源版和WSDCK版本有什么区别

 1 Clickhouse介绍

1.1 Clickhouse简介

ClickHouse最初是为Yandex.Metrica世界第二大Web分析平台而开发的。多年来一直作为该系统的核心组件被该系统持续使用着。目前为止,该系统在ClickHouse中有超过13万亿条记录,并且每天超过200多亿个事件被处理。它允许直接从原始数据中动态查询并生成报告。

在Yandex.Metrica中,ClickHouse被用于多个场景中。 它的主要任务是使用原始数据在线地提供各种数据报告。它使用374台服务器的集群,存储了20.3万亿行的数据。在去除重复与副本数据的情况下,压缩后的数据达到了2PB。未压缩前(TSV 格式)它大概有17PB。

Clickhouse已经被Microsoft、GitLab、cailbre、NGINX、resmo、eBay等国外企业,国家信息中心、赛迪新材料所、北京经信局等国家部委、院所,新浪、今日头条、腾讯、携程、京东、神州租车、东鹏特饮等多家公司所使用。

1.2 Clickhouse技术特点

  1. 现代化MPP架构
  2. 秒级查询返回延时
  3. 支持标准SQL语言,兼容MySql协议
  4. 向量化执行器:为了高效的使用CPU,数据不仅仅按列存储,同时还按向量(列的一部分)进行处理,这样可以更加高效地使用CPU
  5. 高性能、高可用(多分片,多副本):在ClickHouse中,数据可以保存在不同的shard上,每一个shard都由一组用于容错的replica组成,查询可以并行地在所有shard上进行处理。当数据被写入任何一个可用副本后,系统会在后台将数据分发给其他副本,以保证系统在不同副本上保持相同的数据
  6. 多样化的数据库引擎和表引擎
  7. 极致的数据压缩存储(能够达到10倍)
  8. 完备的DBMS特性:包括数据权限控制、DDL、DML等。

1.3 Clickhouse 就是快
 

ClickHouse数据处理速度,明显优于其它数据库,从官方对比测试中,可以看出:是Vertica的6倍,是MonetDB的23倍,是Greenplum的24倍,是InfiniDB的31倍,是Hive的289倍,是MySQL的831倍。

1.4 Clickhouse是OLAP的最佳拍档

OLAP 是 OnLine Analytical Processing 的缩写,即联机分析处理。它的关键特征主要包括:

  1. 单个查询时需要高吞吐量
  2. 存在大量宽表
  3. 速度快
  4. 数据量大
  5. 大量统计分析需求
  6. 数据源种类繁多
  7. 自主分析

而clickhouse具备以下特性:

  1. 列式存储带来高速IO,并计算带来高速计算
  2. 列式存储,对宽表支持更友好
  3. 查询计算性能远高于其它引擎
  4. 按列压缩,更高的效率,更小的空间占用
  5. 大量统计分析函数
  6. 一条SQL可解决消息引擎、数据库、文件、API接口等多种数据源接入
  7. Clickhouse远高于hive、greenplum等工具的并发和性能,让普通用户可直接利数据数据进行自主分析

列式数据库更适合于OLAP场景(对于大多数查询而言,处理速度至少提高了100倍),clickhouse具有的特性正好能够满足OLAP应用场景的需求!

2 万山数据clickhouse企业版WSDCK

2017年clickhouse进入中国后,万山数据的技术团队开始做clickhouse本土化的事情。2017年大CIIM-泸州电子商务大数据开放实验室开始,2018年贵州政务服务中心,2019年国家信息中心……,截止目前为止已经在国家部委、省级平台、地市级平台,以及互联网、快销、家居制造、旅游、医疗、军工、钢铁等多个行业落地应用。

WSDCK是万山数据在clickhouse多年应用基础上推出的更简单、更稳定、更便捷的企业版。万山数据于2021年正式推出了WSDCK V1.0版本,为用户解决clickhouse应用的一系列难题。2023年正式推出WSDCK V2.0版本。

3 万山数据WSDCK与clickhouse开源版本对比

特性

CLICKHOUSE开源版

CLICKHOUSE企业版-WSDCK

统一SQL界面接入外部数据库

仅部分开源数据库经过验证

国产数据库,以及HANAOracleSQLServer等商业数据库均通过验证,并有大量实践

自然语言处理

不支持

支持多种模式分词、语义提取,支持拼音、简繁体等处理

全文检索

性能较差,配置复杂

性能更优,操作更简单

API接口操作

支持GETPOST等方法,支持多种认证

国密加解密

不支持

支持

文件读写

只支持固定格式

支持多种文件格式

字典

字典基本功能

附带行业字典库

定时任务

不支持

支持

功能定制

不支持

支持

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值