一种基于强干扰环境下的旋翼飞行器多模态控制系统、装置及方法

本发明公开了一种基于强干扰环境下的旋翼飞行器多模态控制系统、装置及方法，包括指令识别模块，用于识别操纵人员发出的语音信息或手势图像发送给控制模块；智能头盔模块，用于连接头戴式耳麦和语音转换单元，且用于连接双目摄像头和图像分析单元；控制模块，用于接收所述文本信息和所述手势图像并解析生成控制指令，执行所述控制指令实现对旋翼飞行器的多模态控制。本发明建立了一种多模态控制，将语音识别技术和手势识别技术与飞行器控制结合，显著提高了强噪声、低可见度等恶劣环境下旋翼飞行器的控制鲁棒性，提高了操作效率。