天河书阁 - VicRestart

从商业计算机的出现开始，数据处理就一直推动着计算机的发展。事实上，数据处理自动化早于计算机的出现。Herman Hollerith 发明的穿孔卡片，早在20世纪初就用来记录美国的人口普查数据，并且用机械系统来处理这些卡片和列出结果。穿孔卡片后来被广泛用作将数据输入计算机的一种手段。

例如，如果 max_memory_usage 设置为10000000000，你想使用外部聚合，可以设置 max_bytes_before_external_group_by 到 10000000000，并且设置 max_memory_usage 到 20000000000。该 max_bytes_before_external_group_by 可以设置触发的阈值，当RAM消耗超过这个阈值后， GROUP BY 会把多余的临时数据输出到文件系统并在磁盘进行处理计算。将数据转储到文件系统只能在阶段1中发生。

LSM（Log-Structured Merge）是一种用于设计和优化存储系统的思想和架构。它最初由闪存文件系统（Flash File System）和大规模分布式存储系统（如 Bigtable 和 HBase）采用，并在键值存储引擎中广泛应用，如 LevelDB 和 RocksDB。

影响ClickHouse查询性能的因素很多。在大多数场景中，关键因素是ClickHouse在计算查询WHERE子句条件时是否可以使用主键。因此，选择适用于最常见查询模式的主键对于表的设计至关重要。