一种基于动态分区重平衡与流批协同的计量数据处理方法
申请号:CN202510424426
申请日期:2025-04-07
公开号:CN119939362B
公开日期:2025-07-04
类型:发明专利
摘要
本发明公开了一种基于动态分区重平衡与流批协同的计量数据处理方法,包括:采集多源异构计量数据并添加质量标记;执行基于时变特征的自适应分区特征提取和低开销分区重平衡,生成优化分区方案;对实时数据流和历史批量数据执行流批协同处理;将处理结果进行多维分析与应用。本发明解决了计量数据处理中分区不均衡、处理效率低和服务质量不稳定等问题,提高了系统吞吐量和处理精度。
技术关键词
数据处理方法
模式识别器
多源异构数据源
批量数据
系统运行状态
标记
执行增量
动态分区管理
建立多维索引
李雅普诺夫指数
数据访问模式
深度学习识别
时序预测模型
指标
优先级算法
构建知识图谱
输入多尺度