微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

clickhouse-client :非常高的内存使用率

如何解决clickhouse-client :非常高的内存使用率

我已经在 wsl2 上运行的 clickhouse-server 上加载了 ontime 数据集。在服务器端一切正常,但突然 clickhouse-client 开始占用大量内存,这在给定的 htop 输出中很明显。

htop output of clickhouse-client

它发生在一个简单的 group by 查询执行时,

select year,count(1) from datasets.ontime group by year

我不得不关闭 wsl 才能从中恢复。

如果我做错了什么,请告诉我!

注意:我把ontime数据集的分区指令改成了YEAR和ORIGINSTATE 即:PARTITION BY (Year,OriginState)

Clickhouse 版本:21.4.5.46(官方版本)

客户端+服务器的htop输出

htop output with client + server

解决方法

Clickhouse 专为具有 64GB 以上 RAM(句点)的服务器而设计。

,

clickhouse-client 在客户端尝试 AST 解析和重写查询 此外,它会尝试接收所有元数据以进行自动完成 ALTER TABLE ontime 后你有多少分区?

,

尝试清理客户端历史文件:.clickhouse-client-history

~/.clickhouse-client-history

出于某种原因,clichouse-client 在内存中加载 clickhouse-client-history 文件,在我的情况下几乎是 5Gb 的 RAM。 (ClickHouse 客户端版本 21.7.4.18)。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。