【clickhouse】clickhouse 大表删除 Size 256G is greater than max_[table/partition]_size_to_drop 50GB

已于 2024-01-31 18:37:53 修改
阅读量1.3k 收藏
点赞数
分类专栏： clickhouse 文章标签： linux
于 2021-10-10 12:04:45 首次发布
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/120684665
版权
clickhouse 专栏收录该内容
139 篇文章 633 订阅 ¥19.90 ¥99.00
订阅专栏

文章目录


在这里插入图片描述

1.概述

因为一些原因需要删除clickhouse的表，但是这个表很大，大概有360G,然后发现删除不掉

1.clickhouse1 :) select count(1) from ailpha_security_alarm2;

┌──count(1)─┐
│ 594369313 │
└───────────┘
了解本专栏 订阅专栏 解锁全文
九师兄
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
clickhouse
xy908325的博客
09-05 1353
下载地址：https://repo.yandex.ru/clickhouse/rpm/stable/x86_64/ clickhouse-test-19.4.0-2.noarch.rpm clickhouse-common-static-19.4.0-2.x86_64.rpm clickhouse-common-static-dbg-19.4.0-2.x86_64.rpm clickhouse-s...
clickhouse如何删除大表
gjc592的博客
06-13 2043
点击上方蓝字关注我clickhouse在单表或单分区超过50GB时，将无法直接删除1. 案例模拟删除单表或单分区超过50GB时，删除报错的情况1.1 一个表中超过50GB的分区--删除分区的脚本如下 ALTERTABLEtestdb.testDROPPARTITION(20220606,'12');报错信息如下Code:359.DB::Exception...
Size (154.47 GB) is greater than max_[table/partition]_size_to_drop (50.00 GB) 2. File ‘/data/servic
念念不忘，必有回响
03-08 2511
错误 Reason: 1. Size (154.47 GB) is greater than max_[table/partition]_size_to_drop (50.00 GB) 2. File '/data/service/clickhouse/flags/force_drop_table' intended to force DROP doesn't exist How to fix th ... 产生原因 这是在执行 drop table操作一张超过50gb的MergeTree报错的，删除不
二百二十四、Kettle——曲线实现从Hive插入更新到ClickHouse（分区字段是month或year
最新发布
2401_84170414的博客
05-15 711
删除ClickHouse数据虽然有几种方法，可以delete，也可以删除分区，也可以truncate，也可以TTL设置保存时间，还可以删除数据文件，但是对这种需要即时删除ClickHouse表中最新的分区数据，无法用delete、TTL等方式实现，而删除分区又太麻烦，刚好这几张表的数据量较少，因此先采用truncate方式，先删除表数据，再全量导入即可。所以，对于相同的插入更新控件配置，导入MySQL插入更新可以，导入ClickHouse插入更新则失败！这两种方式都试过，都可以！
clickhouse 删除表_查询提升 200 倍，ClickHouse 你值得拥有！
weixin_39995764的博客
02-01 431
Java技术栈www.javastack.cn关注阅读更多优质文章作者：起个帅的名来源：https://juejin.im/post/6863283398727860238ClickHouse 是 Yandex(俄罗斯最大的搜索引擎)开源的一个用于实时数据分析的基于列存储的数据库，其处理数据的速度比传统方法快 100-1000 倍。ClickHouse 的性能超过了目前市场上可比的面向列...
clickhouse日志表占用大量磁盘空间
qq_37758790的博客
07-03 1216
注意此处的目录是使用错误提示的这个目录，因为我更改了clickhouse的默认数据存储目录，所以可能跟你提示的不一样。ps：然后有一个恶心的地方就是每需要删除一个大数据的分区的时候都需要执行一遍上述的linux命令 恶心~ps通过删除分区的方式删除数据的效率会高一点，然后问题来了当我删去耨个分区的数据的时候报错了。这个分区的数据超过50G，ck处于保护机制，是禁止这样删除大数据的表格的。可以看到query_thread_log表的分区也是年月格式的。然后使用下面sql使用删除分区的方式开始删除数据。
Clickhouse删除表某一天分区
感谢你的关注~~~~ღ( ´･ᴗ･` )
07-24 1万+
ALTER TABLE kuming.tableName DELETE WHERE toDate(insert_at_timestamp)='2020-07-21';
列式数据库ClickHouse，大宽表聚合、报表一下全搞定
小王博客基地
11-01 2009
关系型数据库（ MySQL、Oracle、PostgreSQL）非关系型数据库（Redis、MongoDB、Cassandra、Neo4j）全文搜索引擎和分布式文档存储系统（Elasticsearch ）列式数据库（ClickHouse）每种都在各自的领域表现出色，但当涉及到大规模数据分析和复杂查询时，ClickHouse 出现在了舞台上。ClickHouse使用列式存储，这意味着它可以高效地执行聚合、过滤和排序操作。面试经常问到大宽表查询聚合怎么办，这不是解决方案来了嘛！！
simulink_labs.rar_PCM/FM_PLL.mdl_SIMULINK LABS_matlab PCM mdl_ma
07-14
This project allows you to learn communication systems in greater depth. It contains the Simulink files (*.mdl) which are block design files of various communication systems such as AM, DSB-SC, FM, ...
ChatRoom-master.zip_Chat_Room-master_greater8gq_聊天系统
09-20
ChatRoom-master.zip_Chat_Room-master_greater8gq_聊天系统是一个包含源代码的压缩包，主要用于构建一个聊天系统，支持群聊和点对点聊天功能。这个项目可能是一个开源或者个人开发的项目，由greater8gq创建或维护。...
BPSK.rar_BPSK Gray_Greater_gray coding_satellite_satellite chann
09-19
This m-file simulates MPSK (BPSK,... Numerical examples of a satellite link design are shown using QPSK and/or 8PSK when the bit rate(Rb)is greater than the channel bandwidth Wc (Band-limited channel).
数据仓库中的拉链表-Clickhouse实现.pdf
08-26
Clickhouse是一个用于联机分析处理（OLAP）的列式数据库管理系统（columnar DBMS）。 传统数据库在数据大小比较小，索引大小适合内存，数据缓存命中率足够高的情形下能正常提供服务。但残酷的是，这种理想情形最终会随着业务的增长走到尽头，查询会变得越来越慢。你可能通过增加更多的内存，订购更快的磁盘等等来解决问题（纵向扩展），但这只是拖延解决本质问题。如果你的需求是解决怎样快速查询出结果，那么ClickHouse也许可以解决你的问题。
divider1-(3).rar_Greater_divider method_division
09-23
Code for divider is written in Verilog where divider and dividend both are of 8 bits. Division is done using continuous subtraction method until the divisor becomes greater or equal to dividend.
Buck_boostinverting.rar_Greater_Transformer-less_VOLTAGE MAGNITU
07-14
The buck–boost converter is a type of DC-to-DC converter that has an output voltage magnitude that is either greater than or less than the input voltage magnitude. It is equivalent to a flyback ...
clickhouse物化视图实时构建宽表
曌的博客
07-02 1965
--实测只有主表动宽表动，从表动主表不动宽表不动 CREATE MATERIALIZED VIEW dws_iot.realtime_device engine = CollapsingMergeTree(sign) PARTITION BY toYYYYMM(created_date) order by id POPULATE AS SELECT dv.id AS id, dv.sign AS sign, dv.created_date AS created_date,
clickhouse常用操作命令
anyitian的博客
04-15 1万+
文章目录前言基本操作客户端常用参数多行查询常用的sql语法导入csv数据导入数据时忽略错误导出csv数据删除分区查看表大小执行sql文件查看分区信息查看后台进程杀死后台进程 前言 在日常使用clickhouse中，会用到很多命令，特此整理记录一下。以下大部分内容都来自clickhouse_中文文档.pdf。 文档链接：https://pan.baidu.com/s/1Ai33BE6jClIs9kMDElv5Yg 提取码：pp7h 基本操作 在我们日常使用clickhouse中，用的最多的应该就是客户
ClickHouse中表的操作
热门推荐
思过留痕
01-17 2万+
1、删视图表与本地表 DROP table db.视图表 ON CLUSTER cluster_name; DROP table db.本地表 ON CLUSTER cluster_name; 2、删表的列 ALTER TABLE db.视图表 ON CLUSTER cluster_name DROP COLUMN column_name1, DROP COLUMN column_name2; ...
27.hadoop系列之50G数据清洗入库秒查询实践
算法小生
06-02 329
这插入速度还行吧,插入后，存在两条记录，对于ReplaceMergeTree来说，无妨，看过之前文章的你应该很熟悉为啥了吧。目前本地有50G的企业年报csv数据, 需要清洗出通信地址，并需要与原有的亿条数据合并以供业务查询最新的企业通信地址。新建字段mail_address1，剔除省市区前缀信息，列式存储，全量更新很快，请不要单条那种更新。我们50G的数据无须上传至集群处理，上传目前带宽2M/S, 巨慢，我直接在本地hadoop处理。我们先看下数据格式，以@_@分割，最后一列是杂乱的数据。
为什么clickhouse适合做（离线）报表（大宽表）数据存储？
stubbornTu的博客
07-01 3895
clickhouse的简介和简单测试
ora-00823: specified value of sga_target greater than sga_max_size
04-30
ORA-00823是Oracle数据库的一个错误代码，它指出sga_target的指定值大于sga_max_size的值。 SGA代表“共享全局区”，是Oracle数据库中重要的组成部分之一，它用于存储数据库运行时所需的数据缓存区。sga_target表示SGA可以使用的内存总量，而sga_max_size则表示SGA最大可用内存的大小。 当ORA-00823错误出现时，说明SGA已经使用了所有可用的内存资源，无法再分配更多的内存。这意味着，如果要增加sga_target的值，则必须先增加sga_max_size的值。 为解决ORA-00823错误，需要重新配置数据库参数，提高sga_max_size的值。这可以通过在Oracle实例的初始化参数文件中配置sga_max_size参数来实现。 值得注意的是，增加sga_max_size的值可能会导致系统内存不足而出现问题。因此，在进行此操作前，必须仔细评估计算机的内存资源，以确保足够的内存可用。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值