一种多源异构事件数据实时处理方法及系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种多源异构事件数据实时处理方法及系统
申请号:CN202511016187
申请日期:2025-07-23
公开号:CN120935281A
公开日期:2025-11-11
类型:发明专利
摘要
本发明公开一种多源异构事件数据实时处理方法及系统,涉及数据处理技术领域。针对多源异构数据高效汇聚、智能化清洗和实时准确分发的问题,采用方案包括:通过多源适配器动态加载技术,自动匹配异构数据源的解析协议、选择对应转化脚本将解析后的数据转为统一格式并存储,实现多源异构事件数据的汇聚;制定轻量级智能清洗策略,通过初级过滤层的规则引擎对汇聚后事件数据进行初级过滤,通过语义校正层的轻量化AI模型对过滤后事件数据进行语义校正;对语义校正后的事件数据,通过提取结构化语义标签并与城市权责清单进行多维度匹配,结合动态路由和分发机制实现事件智能分发,并基于处理结果优化权责清单。本发明可以提升事件汇聚和分发效率。
技术关键词
数据实时处理方法 数据实时处理系统 异构 语义标签 格式 协议 动态加载技术 动态加载模块 校正 自定义脚本 地理位置信息 清洗策略 机制 增量更新 系统日志 分发模块