数据集成方法、装置、服务器、介质及程序

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
数据集成方法、装置、服务器、介质及程序
申请号:CN202411095117
申请日期:2024-08-12
公开号:CN118626496B
公开日期:2024-12-03
类型:发明专利
摘要
本申请实施例提供一种数据集成方法、装置、服务器、介质及程序,其中方法包括:在配置源数据库的连接信息后,通过全量数据采集,将源数据库的全量数据拉取到中间库的中间表,并从中间表拉取到目标库的目标表;在源数据库存在数据更新时,通过增量数据采集,将源数据库的增量数据拉取到中间表,并从中间表拉取到目标表;对于全量数据采集,将全量数据采集到中间表,再根据数据集成语句,从中间表拉取到目标表;对于增量数据采集,根据增量更新字段,将增量数据采集到中间表,再利用带有增量更新子句的数据集成语句,从中间表拉取到目标表;数据从中间表拉取到目标表还进行数据类型转换和字段映射。本申请实施例可以提升数据集成过程中的效率。
技术关键词
数据集成方法 增量更新 语句 数据集成平台 数据映射关系 计算机可执行指令 数据更新 集成模块 消息 字段 网络 下游系统 接口 数据集成装置 智能匹配算法 主题 存储系统