可扩展分布式存储架构下的多源动作数据管理系统及方法
申请号:CN202510913802
申请日期:2025-07-03
公开号:CN120407690B
公开日期:2025-08-22
类型:发明专利
摘要
本申请公开了可扩展分布式存储架构下的多源动作数据管理系统及方法,涉及数据管理技术领域,方法包括基于多源数据接口将数据采集模块采集的原始采集数据信息接入,输出数据接入完成信号;压缩原始采集数据信息得到多源压缩数据信息,对多源压缩数据信息时间戳校准,对多源压缩数据信息中各数据进行采集参数的标记;根据多源压缩数据信息的数据类型和采集时间划分得到数据动态分片策略信息,判断存储集群中各存储节点的健康度,筛选有效存储节点,基于数据动态分片策略信息将各数据分散存储至有效存储节点,判断存储集群是否需扩容,若需扩容则基于数据迁移算法进行扩容。本申请具有提高多源动作数据管理效率的效果。
技术关键词
分布式存储架构
存储集群
数据动态分片
数据管理方法
数据迁移算法
节点
数据接口
动态脱敏技术
国密SM4算法
数据采集模块
数据管理系统
数据类型信息
硬件安全模块
空间坐标信息
图谱
数据安全
索引
校准
快照