数据处理方法及装置

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
数据处理方法及装置
申请号:CN202410742452
申请日期:2024-06-07
公开号:CN118567903A
公开日期:2024-08-30
类型:发明专利
摘要
本申请实施例提供一种数据处理方法,方法包括:在接收到目标存储数据的情况下,将目标存储数据按照单个数据条带分为若干个第一数据分片,数据条带包括至少分布在两个数据中心的N个第二数据分片、M个至少分布在三个数据中心局部校验分片和K个至少分布在三个数据中心全局校验分片;将每一个第一数据分片切分为N份后分别写入一个数据条带的第二数据分片中,并根据当前第二数据分片写入的数据生成对应的局部校验分片和全局校验分片;根据编码完成的第二数据分片、局部校验分片和全局校验分片分配存储节点并写入。本申请实施例提供的数据处理方法,可以降低修复惩罚比、数据冗余度、解码复杂度和存储成本。
技术关键词
分片 数据中心 数据处理方法 条带 纠删码算法 数据存储容量 解码复杂度 计算机设备 处理器 可读存储介质 数据处理装置 节点 冗余度 模块 存储器 编码
系统为您推荐了相关专利信息
体征采集终端 可穿戴式传感器 数据中心 智能控制设备 患者
行情数据处理方法 服务端 客户端 参数 数据处理装置
多级反馈队列 多任务 拥塞控制方法 强化学习算法 数据中心
主机 最大化吞吐量 接收端 拥塞信息 网络发送速率
下采样方法 三维点云数据 分片 切片点云 网络