ClickHouse
文章平均质量分 81
程序员大佬超
计算机科班人,全栈工程师,分享编程经验、技术干货、工具资源、学习资料等,帮你少走弯路。
展开
-
Clickhouse Too many partitions for single INSERT block (more than xxx) 解决方法
Clickhouse批量导入数据时提示分区数太大,超过了100个分区Too many partitions for single INSERT block (more than 100)The limit is controlled by 'max_partitions_per_insert_block' setting. Large number of partitions is a common misconception.原因:clickhouse 要求每次写入的数据不能跨越特别多的 pa原创 2022-06-10 14:47:46 · 4811 阅读 · 1 评论 -
《手摸手带你学ClickHouse》之Oracle同步数据到Clickhouse
前文回顾:《手摸手带你学ClickHouse》之安装部署《手摸手带你学ClickHouse》之访问接口《手摸手带你学ClickHouse》之导入导出数据《手摸手带你学ClickHouse》之MergeTree系列表引擎《手摸手带你学ClickHouse》之ReplacingMergeTree表引擎《手摸手带你学ClickHouse》之CollapsingMergeTree表引擎《手摸手带你学ClickHouse》之VersionedCollapsingMergeTree表引擎...原创 2022-06-10 14:37:43 · 2420 阅读 · 3 评论 -
《手摸手带你学ClickHouse》之分布式集群
前面的文章详细介绍了单机的安装及使用,但是通常生产环境我们会用集群代替单机,主要是解决两个问题:效率、稳定。对于数据库来说,如何提升效率和稳定性,那就是数据分片、数据备份、高可用。而集群是解决这两个问题的最佳手段。原创 2022-05-24 19:52:46 · 988 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之MySQL表引擎
MySQL 表引擎主要是与 MySQL 数据库建立映射,远程执行 SQL,包括 SELECT 和 INSERT 。原创 2022-03-25 12:39:01 · 1353 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之AggregatingMergeTree表引擎
AggregatingMergeTree 和 SummingMergeTree 原理类似,都是对数据进行聚合操作,不同的是,这个可以针对某个字段使用某种聚合函数。例如原创 2022-03-21 21:37:07 · 1191 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之SummingMergeTree表引擎
SummingMergeTree 表引擎可在分区合并时对数据进行聚合汇总。将同一分组下多行数据合并成一行,减少数据存储量,这样在查询时就能降低性能消耗,提高效率。原创 2022-03-20 10:48:02 · 870 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之VersionedCollapsingMergeTree表引擎
上一篇文章讲了CollapsingMergeTree表引擎的使用,提到了它的缺陷,就是这个引擎对数据的写入顺序有严格要求,如果将顺序置换,先写入sign为-1,再写入sign为1的数据,则不能折叠。在实际使用中,如果写入数据是单线程执行,那还好控制。但是如果数据量很大,通常利用多线程执行,这种情况就无法保证写入顺序,为了解决这个问题,ClickHouse提供了VersionedCollapsingMergeTree表引擎。原创 2022-03-17 09:41:02 · 879 阅读 · 2 评论 -
《手摸手带你学ClickHouse》之CollapsingMergeTree表引擎
前面的文章详细介绍了ClickHouse单机的安装部署、ClickHouse监听端口、访问接口、设置允许其他ip访问、可视化的客户端、数据的导入导出、MergeTree表引擎以及ReplacingMergeTree表引擎。本文主要内容为ClickHouse的另外一个表引擎 CollapsingMergeTree。原创 2022-03-07 11:24:59 · 850 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之ReplacingMergeTree表引擎
前面的文章详细介绍了ClickHouse单机的安装部署、ClickHouse监听端口、访问接口、设置允许其他ip访问、可视化的客户端、数据的导入导出以及MergeTree表引擎。本文主要内容为ClickHouse的另外一个表引擎 ReplacingMergeTree。原创 2022-02-22 17:41:23 · 897 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之MergeTree系列表引擎
前面的文章详细介绍了ClickHouse单机的安装部署、ClickHouse监听端口、访问接口、设置允许其他ip访问、可视化的客户端以及数据的导入导出。本文主要内容为ClickHouse数据存储功能的核心,也就是MergeTree系列的表引擎。原创 2022-02-14 19:22:04 · 962 阅读 · 0 评论 -
《手摸手带你学ClickHouse》之导入导出数据
前两篇文章详细介绍了ClickHouse单机的安装部署、ClickHouse监听端口、访问接口、设置允许其他ip访问以及可视化的客户端。本文主要内容为数据的导入导出。原创 2022-02-08 11:42:01 · 3239 阅读 · 2 评论 -
《手摸手带你学ClickHouse》之访问接口
上一篇文章《手摸手带你学ClickHouse》之安装部署,详细介绍了ClickHouse单机的安装部署,本文主要内容为ClickHouse监听端口、访问接口、设置允许其他ip访问以及可视化的客户端。原创 2022-01-10 18:29:07 · 6405 阅读 · 2 评论 -
《手摸手带你学ClickHouse》之安装部署
ClickHouse是俄罗斯第—大搜索引擎Yandex开发的列式储存数据库,这个列式储存数据库的性能大幅超越了很多商业MPP数据库软件,所以我花了一段时间实际应用了一下,其出众的速度征服了我,还是很有应用前景的。原创 2022-01-06 20:33:37 · 2090 阅读 · 0 评论