clickhouse清除system 表数据释放磁盘空间

注:clickhouse 默认系统有以下几个 log 表,如下

bash 复制代码
system.asynchronous_metric_log  
system.metric_log
system.part_log
system.query_log
system.query_thread_log
system.session_log 
system.trace_log 

如果不想看原文直接执行以下语句即可。

bash 复制代码
ALTER table `system`.asynchronous_metric_log  DELETE where event_date is not null;
ALTER table `system`.metric_log DELETE where event_date is not null;
ALTER table `system`.part_log DELETE where event_date is not null;
ALTER table `system`.query_log DELETE where event_date is not null;
ALTER table `system`.query_thread_log DELETE where event_date is not null;
ALTER table `system`.session_log DELETE where event_date is not null;
ALTER table `system`.trace_log DELETE where event_date is not null;

OPTIMIZE TABLE system.asynchronous_metric_log FINAL;
OPTIMIZE TABLE system.metric_log FINAL;
OPTIMIZE TABLE system.part_log FINAL;
OPTIMIZE TABLE system.query_log FINAL;
OPTIMIZE TABLE system.query_thread_log FINAL;
OPTIMIZE TABLE system.session_log FINAL;
OPTIMIZE TABLE system.trace_log FINAL;

问题

为什么我执行ALTER table system.asynchronous_metric_log DELETE where event_date is not null;和 truncate table system.asynchronous_metric_log; 后store 文件不见减少

📌 执行 ALTER TABLE ... DELETE 或 TRUNCATE TABLE 后,为什么 store 目录文件没有减少?

当你执行以下命令:

sql 复制代码
ALTER TABLE system.asynchronous_metric_log DELETE WHERE event_date IS NOT NULL;

或者

sql 复制代码
TRUNCATE TABLE system.asynchronous_metric_log;

你可能发现 /var/lib/clickhouse/store/ 目录下的文件没有减少,或者磁盘空间没有释放。

✅ 1. DELETE 只是标记数据删除,并不会立刻释放磁盘

在 ClickHouse 里,DELETE 并不会 立即 物理删除数据,而是:

创建一个"删除标记",表示哪些数据不再可见。

实际数据仍然存储在 store/ 目录中,但不会被查询结果返回。

数据真正删除要等到 MergeTree 进行合并(Merge)时,ClickHouse 才会清理过时数据。

🔹 解决方案:手动触发合并

你可以手动执行 OPTIMIZE 命令:

sql 复制代码
OPTIMIZE TABLE system.asynchronous_metric_log FINAL;

✅ 这会强制 ClickHouse 合并数据,并物理删除被标记为删除的数据。

✅ 2. TRUNCATE 可能只是逻辑清理,并不一定释放文件

sql 复制代码
TRUNCATE TABLE system.asynchronous_metric_log;

🔹 TRUNCATE 主要做的是:

清除 system.asynchronous_metric_log 的所有数据,使其不可见。

但 不会立刻释放磁盘空间,因为 ClickHouse 可能会延迟文件删除,以提高性能。

✅ 解决方案:手动触发磁盘回收

bash 复制代码
sudo systemctl restart clickhouse-server

这会重启 ClickHouse 服务器,并确保 ClickHouse 释放已经删除的数据文件。

✅ 3. store/ 目录中的数据文件为何不减少?

ClickHouse 采用 MergeTree 存储引擎,它不会立即删除文件,而是等到数据合并后才会清理旧文件。即使你 DELETE 或 TRUNCATE 了表,store/ 目录的文件仍然可能保留一段时间。

🔹 如何检查哪些文件仍在占用空间?

bash 复制代码
du -sh /var/lib/clickhouse/store/*

🔹 如果想立即释放空间

sql 复制代码
OPTIMIZE TABLE system.asynchronous_metric_log FINAL;

然后执行:

bash 复制代码
sudo systemctl restart clickhouse-server

结论

命令 是否释放空间? 解决方案

DELETE ❌ 不会立即释放 OPTIMIZE TABLE ... FINAL; 后重启

TRUNCATE ⚠ 可能不会释放 重启 ClickHouse

OPTIMIZE FINAL ✅ 强制清理数据 确保数据合并后释放磁盘

🚀 推荐执行 OPTIMIZE TABLE ... FINAL;,然后重启 ClickHouse,确保 store/ 目录清理! 🎯

相关推荐
复园电子15 分钟前
企业级PDF批量盖章方案选型指南
数据库·pdf
AI-好学者7 小时前
阶段一-图数据库基础与PropertyGraph模型
数据库·rag·knowledge graph·graphrag
其实防守也摸鱼8 小时前
运维--学习阶段问题解答(1)(自测)
linux·运维·服务器·数据库·学习·自动化·命令模式
懒鸟一枚9 小时前
深入理解 Linux 内存、Swap 交换分区与分页机制的关系
java·linux·数据库
龙仔7259 小时前
SQL Server 创建只读账号完整操作(分两种场景:SSMS图形界面 + T-SQL脚本)
数据库·sql·oracle
霁月的小屋9 小时前
生产环境中的事务实践——银行系统上线记(四)
数据库
Database_Cool_9 小时前
AI 应用数据底座首选:阿里云 PolarDB 为大模型 RAG 提供一体化支撑
数据库·阿里云
玖玥拾9 小时前
C# 语言进阶(十五)C# 游戏服务端 MySQL 数据库
服务器·开发语言·网络·数据库·mysql·c#
IvorySQL11 小时前
PG 日报|社区讨论重构 pg_hba 配置文件格式
数据库·人工智能·postgresql·重构·ivorysql
逝水无殇11 小时前
C# 文件的输入与输出详解
开发语言·数据库·后端·c#