一种基于跨模态动态注意力的多传感器边缘系统及方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于跨模态动态注意力的多传感器边缘系统及方法
申请号:CN202411846005
申请日期:2024-12-16
公开号:CN119292799A
公开日期:2025-01-10
类型:发明专利
摘要
本发明公开了一种基于跨模态动态注意力的多传感器边缘系统及方法,包括如下步骤:S1.获取基于多的传感器的环境数据和基于交互模块的多模态输入数据;S2.对获取的环境数据和多模态输入数据进行预处理后,进行特征提取,获得特征提取后的多模态特征数据;S3.对多模态特征数据进行时空维度增强;S4.基于步骤S3所获得的增强后的多模态特征数据,动态优化各模态资源的配置;S5.将动态优化后的各模态资源信息输入生成式模型中,生成输出结果。本发明所提供的方法不仅优化了数据处理流程,减少了数据传输延迟,还通过跨模态动态注意力机制实现了信息的高效整合与利用,增强了决策的精准度和鲁棒性。
技术关键词
边缘计算方法 跨模态 模态特征 动态 文字输入设备 多媒体 融合算法 多传感器 数据传输延迟 模块 环境传感器 多模态 收发设备 资源 矩阵 注意力机制 表达式