基于磁盘性能感知的HDFS异构集群副本存储方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于磁盘性能感知的HDFS异构集群副本存储方法
申请号:CN202511556395
申请日期:2025-10-29
公开号:CN121029103A
公开日期:2025-11-28
类型:发明专利
摘要
本发明提供基于磁盘性能感知的HDFS异构集群副本存储方法,涉及分布式存储技术领域,包括通过采集存储节点磁盘性能和健康状态计算综合评分;利用LSTM‑Attention网络预测数据块访问频次,将数据块分为高、中、低频三类;基于磁盘评分对不同频次数据块副本进行差异化分配;当评分或访问频次变化时,按优先级执行数据块迁移;记录迁移影响优化分配策略。本发明提高了异构HDFS集群存储效率和可靠性,降低了数据访问延迟。
技术关键词
数据块迁移 节点 副本存储方法 磁盘 密度峰值聚类算法 吞吐量变化率 机架 周期性特征 计算机程序指令 数据访问延迟 网络链路状态 分布式存储技术 资源 异构 序列 集群