Clickhouse 数据删除更新

Clickhouse删除/更新数据(UPDATE/DELETE/DROP)与普通的sql语法有点不一样,因此做一下记录。

1 删除表

DROP table db.视图表 ON CLUSTER cluster_name;
DROP table db.本地表 ON CLUSTER cluster_name;

2 数据删除

按分区删除

ALTER TABLE db_name.table_name DROP PARTITION '20200601'

按条件删除

ALTER TABLE db_name.table_name DELETE WHERE day = '20200618'

3 数据更新

ALTER TABLE <table_name> UPDATE col1 = expr1, ... WHERE <filter>

注意:
1. 该命令必须在版本号大于1.1.54388才可以使用,适用于 mergeTree 引擎

2. 该命令是异步执行的,可以通过查看表 system.mutations 来查看命令的是否执行完毕

举例:

:) select event_status_key, count(*) from test_update where event_status_key in (0, 22) group by event_status_key;

┌─event_status_key─┬──count()─┐
│                0 │ 17824710 │
│               22 │     1701 │
└──────────────────┴──────────┘

:) ALTER TABLE test_update UPDATE event_status_key=0 where event_status_key=22;

0 rows in set. Elapsed: 0.067 sec.


:) select event_status_key, count(*) from test_update where event_status_key in (0, 22) group by event_status_key;

 ┌─event_status_key─┬──count()─┐
 │                0 │ 17826411 │
 └──────────────────┴──────────┘

4 Clickhouse更新操作有一些限制:

① 索引列不能进行更新

:) ALTER TABLE test_update UPDATE event_key = 41 WHERE event_key = 40;

Received exception from server (version 18.12.17):
Code: 420. DB::Exception: Received from localhost:9000, ::1. DB::Exception: Cannot UPDATE key column `event_key`.

② 分布式表不能进行更新

Received exception from server (version 18.12.17):
Code: 48. DB::Exception: Received from localhost:9000, ::1. DB::Exception: Mutations are not supported by storage Distributed.

ALTER TABLE UPDATE/DELETE不支持分布式DDL,因此需要在分布式环境中手动在每个节点上local的进行更新/删除数据。

③ 不适合频繁更新或point更新

由于Clickhouse更新操作非常耗资源,如果频繁的进行更新操作,可能会弄崩集群,请谨慎操作。

 

参考:

https://www.altinity.com/blog/2018/10/16/updates-in-clickhouse

Clickhouse中,更新数据的方式主要有两种:MUTATION操作和使用特定的MergeTree引擎。 首先,MUTATION操作是通过ALTER TABLE语句来实现数据更新删除。然而,MUTATION操作是一种较重的操作,与标准的SQL语法中的UPDATE和DELETE不同,它是异步执行的。因此,MUTATION操作更适用于批量数据不频繁更新删除的场景。你可以参考中提供的链接了解更多关于MUTATION操作的信息。 其次,Clickhouse通过使用CollapsingMergeTree、VersionedCollapsingMergeTree和ReplacingMergeTree等特定的MergeTree引擎,来实现数据更新删除。 CollapsingMergeTree、VersionedCollapsingMergeTree和ReplacingMergeTree都是通过INSERT语句插入最新的数据,新数据会“抵消”或“替换”掉老数据。但是,这些操作都是在数据文件后台Merge时发生的,也就是说,在Merge之前,新数据和老数据会同时存在。因此,在查询时需要注意避免查询到老数据。 使用CollapsingMergeTree和VersionedCollapsingMergeTree需要标记位字段和版本字段,而使用ReplacingMergeTree则更加方便。你可以参考中提供的Clickhouse官方文档链接了解如何使用CollapsingMergeTree和VersionedCollapsingMergeTree。 综上所述,你可以根据具体业务需求选择合适的方式来实现Clickhouse中的数据更新删除操作。请参考和提供的链接获取更详细的信息。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [Clickhouse如何实现数据更新](https://blog.csdn.net/shuyun123456789/article/details/122726982)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *2* [ClickHouse 数据插入、更新删除操作 SQL](https://blog.csdn.net/m0_67401055/article/details/126098952)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Halo 咯咯

有你的支持我会更加努力。

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值