一种应用于Clickhouse MergeTree引擎的自适应数据合并与优化方法和系统
申请号:CN202411958222
申请日期:2024-12-30
公开号:CN119377233B
公开日期:2025-08-22
类型:发明专利
摘要
本发明专利申请提供了一种应用于Clickhouse MergeTree引擎的自适应数据合并与优化方法和系统,包括:基于Clickhouse MergeTree引擎中的数据,采用自适应数据合并触发机制,生成数据合并优化任务;采用智能数据折叠策略,将数据合并优化任务中的合并优化数据进行合并折叠归档处理;采用一致性保障算法,对合并折叠归档处理后的合并优化数据,进行数据一致性校验,完成数据合并优化任务;本发明通过对ClickHouse数据库的MergeTree引擎中的数据,采用动态分析决策机制、智能数据折叠策略,能够智能自主完成数据合并和折叠操作,且通过一致性保障算法,确保了在数据合并和折叠操作时的数据一致性,提高了ClickHouse数据库的MergeTree引擎的性能。
技术关键词
合并触发机制
数据一致性校验
数据更新
事件处理技术
模式识别技术
任务调度器
监听技术
机器学习算法
数据归档
数据存储模块
数据访问
校验模块
数据分类
识别模块
资源
时效性