一种基于云端脚本配置的数据采集与处理系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于云端脚本配置的数据采集与处理系统
申请号:CN202511004056
申请日期:2025-07-21
公开号:CN120994278A
公开日期:2025-11-21
类型:发明专利
摘要
本发明涉及一种基于云端脚本配置的数据采集与处理系统,包括:数据接入模块,用于接收多源异构的原始数据;模型配置模块,提供适配模型、映射模型和计算模型三类可配置的数据处理模型;脚本与表达式管理模块,用于存储用户上传的 Groovy 脚本或表达式,并生成脚本内容的哈希指纹;执行引擎,根据数据处理模型绑定的脚本或表达式动态执行逻辑;缓存模块,以所述哈希指纹为键缓存已编译的脚本实例;输出模块,输出处理后的结构化数据。本发明结合 Groovy 脚本与表达式引擎的能力,构建灵活的数据处理模型体系(包括适配模型、映射模型与计算模型),支持数据接入、转换、计算等环节的模块化配置和热更新,有效提升了系统的通用性、扩展性和维护效率。
技术关键词
数据处理模型 表达式 云端 生成脚本 指纹 输出模块 摘要算法 动态 逻辑 异构 指标 链路 格式 编码 平台 关系