一种数据处理方法、装置、设备及存储介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种数据处理方法、装置、设备及存储介质
申请号:CN202411829002
申请日期:2024-12-12
公开号:CN119669209A
公开日期:2025-03-21
类型:发明专利
摘要
本申请公开了一种数据处理方法、装置、设备及存储介质,涉及云计算技术领域。本申请在执行第一数据处理进程的过程中,并行调用数据校验进程,通过对进程中预设校验时间点之前预设时间段内的实际处理量和理论处理量进行数据校验。在校验结果为实际处理量和理论处理量之间的差值满足预设修正条件的情况下,再调用与第一数据处理进程处理逻辑相同的第二数据处理进程,对预设时间段内数据源产生的数据进行处理,得到无异常的数据修正结果,并利用数据修正结果覆盖数据湖仓中存储的第一数据处理进程所得的数据处理结果,对数据湖仓的存储数据进行修正。基于此,提高了数据校验和修正的时效性和效率,且不影响数据处理进程正常运行。
技术关键词
数据处理方法 时间段 进程 数据存储系统 理论 备份 日志 目录 离线 电子设备 分区 计算机存储介质 数据处理单元 云计算技术 存储计算机程序 数据处理装置 校验单元 逻辑 处理器