摘要
本发明公开了一种基于跨模态动态注意力的多传感器边缘系统及方法,包括如下步骤:S1.获取基于多的传感器的环境数据和基于交互模块的多模态输入数据;S2.对获取的环境数据和多模态输入数据进行预处理后,进行特征提取,获得特征提取后的多模态特征数据;S3.对多模态特征数据进行时空维度增强;S4.基于步骤S3所获得的增强后的多模态特征数据,动态优化各模态资源的配置;S5.将动态优化后的各模态资源信息输入生成式模型中,生成输出结果。本发明所提供的方法不仅优化了数据处理流程,减少了数据传输延迟,还通过跨模态动态注意力机制实现了信息的高效整合与利用,增强了决策的精准度和鲁棒性。