clickhouse数据库删除数据的五种方式

 

 


前言

clickhouse数据库清理数据的方式很多,每种方式都各有自己的优缺点,请根据实际需要采用适合自己的方式,下面逐一介绍。

一、通过删除表分区的方式

##查询某表分区
ck001 :) select database,table,partition,name, bytes_on_disk  from system.parts where table='ck_test1';

┌─database─┬─table┬─partition─┬─name────┬─bytes_on_disk─┐
│ default  │ ck_test1 │ 202302    │ 202302_3_3_0 │           221 │
│ default  │ ck_test1 │ 202301    │ 202301_4_4_0 │           232 │
└──────────┴────────────────────┴───────────┴

##删除某表分区
ck001 :) alter table ck_test1 drop partition 202301;
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10

二、执行delete方式

该方式为异步执行,并非实时。

## DELETE操作
-- 删除记录
alter table ck_table01 delete where id='11';
-- 删除分片表数据
alter table ck_table01 on cluster main_cluster where create_date>< '2023-02-02 15:00:00';
  • 1
  • 2
  • 3
  • 4
  • 5

三、执行truncate方式

truncate适用于删除全表数据的情况,而且效率比DELETE更高。

truncate table default.ck_table01;
  • 1

四、设置表数据生命周期

--设置白鸥ck_table01的TTL为30分钟
create table default.ck_table01
(
    id Int64,
    name Nullable(String),
    address Nullable(String),
    create_date Date
)
ENGINE = MergeTree
PARTITION BY toYYYYMM(create_date)
ORDER BY id
TTL toDate(create_date) + toIntervalMinute(30)
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12

toIntervalMinute:n分钟过期
toIntervalDay:n天过期
toIntervalMonth:n月过期

五、删除数据文件目录

clickhouse数据目录和元数据目录是分开的,所以删除数据目录文件并不影响表结构。下面以清空全部表数据为例。
1、停止clickhoue数据库

systemctl stop clickhouse-server
  • 1

2、删除数据文件目录

rm -rf /opt/clickhouse/data/default/
  • 1

3、启动clickhouse数据库

systemctl start clickhouse-server
  • 1

总结

方法三、五将清理全部数据,请确保数据安全,根据实际场景谨慎应用。

posted @ 2023-07-28 13:50  甜菜波波  阅读(4893)  评论(0编辑  收藏  举报