一种面向应急救援场景的可伸缩跨模态触觉信号生成方法

本发明公开了一种应用于应急救援场景的可伸缩跨模态触觉信号生成方法，首先在设备端执行音视频信号的编码，并利用对比学习降低模态间差异，而后其利用边缘端感知网络带宽信息，并及时反馈给设备端，指导设备端完成可伸缩的语义编码，最后，边缘端接收到相应的跨模态融合语义信息或融合语义的不同层次表示后，利用设计的自适应触觉信号生成策略，生成相应粒度的触觉信号。本发明地解决了在应急救援中因触觉信号难以直接获取和动态波动的传输带宽导致的触觉信号缺失，最终影响执行远程控制的操作员体验的问题，实现了多模态信号的相关语义学习和跨模态生成，确保了在网络带宽动态波动条件下，触觉信号实时可靠获取，并最终提高操作员的救援效率。