基于多模态的事件检测方法、装置、电子设备及存储介质
申请号:CN202411982715
申请日期:2024-12-27
公开号:CN119989258A
公开日期:2025-05-13
类型:发明专利
摘要
本发明提供一种基于多模态的事件检测方法,该方法包括:获取目标场景的多个模态的待处理数据;对待处理数据按模态分别进行特征提取,得到多个模态的特征数据,同一模态的特征数据与待处理数据相对应;将特征数据按第一动态权重进行融合,得到第一融合特征,每个模态对应一个第一动态权重,第一动态权重根据目标场景的环境进行确定;通过预训练的事件检测模型对融合特征进行事件检测,得到目标场景的事件检测结果。本发明通过引入多模态数据,结合多种模态的数据所对应的特征,可以在不同环境条件下保持稳定的识别性能,有效防范单一模态数据被干扰或伪造的风险,提高事件检测的识别准确率。
技术关键词
事件检测方法
事件检测模型
融合特征
多模态
动态
数据
事件检测装置
特征提取网络
场景
样本
可读存储介质
特征提取模块
处理器
电子设备
规模
存储器
计算机
风险