基于环形内存的信息去重方法、系统、介质及设备

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于环形内存的信息去重方法、系统、介质及设备
申请号:CN202411372059
申请日期:2024-09-29
公开号:CN119440398A
公开日期:2025-02-14
类型:发明专利
摘要
本发明提供了一种基于环形内存的信息去重方法、系统、介质及设备,包括:步骤1:通过传入预定的内存和内存大小进行模块对象的创建,在创建过程中,同时设定最大去重长度,即数据重复序列的最大长度;步骤2:模块对象创建后,进入参数检查和初始化阶段;步骤3:在初始化完成后,通过接口调用数据并进行重复检测,实现数据块的组织和更新;步骤4:以输入的数据块作为判重标准,根据数据头部结构中的去重标志信息和最近重复信息的长度数据缩小索引范围,对索引范围内距离最近重复度最高的信息数据块和其索引进行去重;步骤5:对数据块进行存储。本发明优化了存储空间的利用效率,同时提高了数据记录的准确性和可读性。
技术关键词
去重方法 去重算法 索引 内存 去重系统 重复序列 环形 模式 模块 对象 数据存储 嵌套 处理器 标志 阶段 组织 可读存储介质 接口