clickhouse自动合并任务使用内存过大,能通过参数限制吗

laijunlin_data 2025-05-26 11:26:34

#遇到问题的现象描述
clickhouse(22.3.7.28)自动合并任务使用内存过大,能通过参数限制吗?
#问题相关情况
表引擎使用的是ReplicatedMergeTree

 

img

 


 
{
"SELECT \r\n    database,\r\n    table,\r\n        memory_usage,\r\n         memory_usage \/ 1073741824 AS memory_usage_gib, -- 转换为 GiB\r\n    elapsed,\r\n    progress,\r\n    num_parts,\r\n    result_part_name,\r\n    is_mutation,\r\n    total_size_bytes_compressed,\r\n    total_size_marks,\r\n    bytes_read_uncompressed,\r\n    rows_read,\r\n    bytes_written_uncompressed,\r\n    rows_written,\r\n    thread_id,\r\n    merge_type,\r\n    merge_algorithm\r\nFROM system.merges": [
	{
		"database" : "traceablity",
		"table" : "ck_traceability_info",
		"memory_usage" : 17206055010,
		"memory_usage_gib" : 11.6024387450888753,
		"elapsed" : 481.386892202,
		"progress" : 0.4034078198535675,
		"num_parts" : 9,
		"result_part_name" : "2025_2663098_2837828_333",
		"is_mutation" : 0,
		"total_size_bytes_compressed" : 31103940946,
		"total_size_marks" : 13675,
		"bytes_read_uncompressed" : 68023543442,
		"rows_read" : 27105999,
		"bytes_written_uncompressed" : 78651449792,
		"rows_written" : 27105999,
		"thread_id" : 41153,
		"merge_type" : "REGULAR",
		"merge_algorithm" : "Vertical"
	}
]}

#解答思路
能否通过设置clickhouse的相关参数进行合并操作的内存限制。

 

...全文
26 回复 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

111

社区成员

发帖
与我相关
我的任务
社区描述
ClickHouse开发者
其他 企业社区
社区管理员
  • csdnsqst0018
  • IT学习日记
  • karina17
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

社区宗旨:意在给学习Clickhouse数据库的朋友提供一个氛围轻松、友好的交流平台,欢迎社区小伙伴们积极讨论。

 

欢迎大家加入到Clickhouse社区大家庭,为了对大家积极的参与感谢,现在准备以下一些奖品【20个CSDN定制帆布包和2个咖啡杯】,满足以下2个条件即有机会领取:

  • 1、加入Clickhouse社区,成为社区成员
  • 2、在社区中发布2个及以上的帖子
  • 帖子条件如下(示例地址:):
    • 推荐文章:需要是至少5篇的推荐内容,内容地址可以放超链接

    • 推荐书籍:需要大致介绍书籍重点内容,或者放书籍目录

    • 推荐视频:需要大致介绍视频重点内容

奖励评选规则:

  • 参与时间:2022年3月1号 ~ 2022年3月8号
  • CSDN定制帆布包【前20位】先到、先满足上面的条件可得(每人一个,机不可失)
  • 咖啡杯则需要根据大家的帖子内容质量,在【加精】帖子中抽奖得出(概率很大哦)

额外奖励:

  • 如果有小伙伴能够介绍给周围的小伙伴,并成功邀请他们加入社区,每拉取2个人奖励现金5元(赚个早餐钱简单)
  • 免费赠送Clickhouse学习电子书籍(即:Clickhouse教程-中文版、ClickHouse万亿数据双中心的设计与实践 )

 

奖励领取方式:

  • 添加博主微信:yyuuyy1235(备注:clickhouse社区)

试试用AI创作助手写篇文章吧