基于分布式存储的云备份平台数据去重方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于分布式存储的云备份平台数据去重方法
申请号:CN202510020907
申请日期:2025-01-07
公开号:CN119938406B
公开日期:2025-08-12
类型:发明专利
摘要
本发明涉及数据处理技术领域,尤指一种基于分布式存储的云备份平台数据去重方法。包括以下步骤:利用动态分块算法对数据进行自适应分块,生成唯一标识码并提取多维特征信息;通过分布式哈希表建立全局索引,映射数据位置并维护索引一致性;基于深度学习算法进行冗余分析与相似性匹配,执行去重策略;根据访问频率及负载情况,采用分层图划分算法实现数据块的分布式存储;利用强化学习算法动态优化分块策略、索引频率与存储布局,实现性能与资源的全局最优。本发明实现了数据去重的高效性、准确性与动态优化,提升了云备份平台的数据存储与管理效率。
技术关键词
数据去重方法 分块特征 强化学习算法 分块策略 备份 划分算法 分块算法 分布式哈希表 节点 索引 高维特征向量 动态 分布式一致性协议 深度学习算法 平台 多智能体协作 物理存储位置 多维特征数据