一种预聚合存储表创建方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种预聚合存储表创建方法
申请号:CN202510453061
申请日期:2025-04-11
公开号:CN120371834B
公开日期:2025-10-10
类型:发明专利
摘要
本发明公开了一种预聚合存储表创建方法,涉及数据处理技术领域,包括S1、动态规则生成:首先通过大数据分析系统,对原始表内大量历史数据进行深度分析,全面掌握数据类型分类,并分析每日平均数据量以及数据时间窗口特性,S2、多级聚合窗口划分,S3、实时反馈优化,S4、分布式协同处理,S5、自适应压缩机制,S6、容错恢复机制,S7、数据质量监控,S8、元数据管理,S9、外部系统对接。通过动态规则生成实时反馈优化步骤和自适应压缩机制步骤,达到了数据处理的精准性、高效性与存储成本降低的效果,通过多级聚合窗口划分分布式协同处理步骤和容错恢复机制步骤,达到了增强系统处理复杂数据能力、提升系统可靠性与保障业务连续性的效果。
技术关键词
存储表 分布式协同 大数据分析系统 备份 TensorFlow框架 压缩算法 滑动窗口机制 数据分布 数据传输延迟 元数据管理 学习算法 关系型数据库 保障业务连续性 节点 动态 字符串匹配算法 保证数据一致性 数据复制技术