基于多模态大模型的智能工具车控制系统及其控制方法

本发明公开了基于多模态大模型的智能工具车控制系统及其控制方法，涉及智能工具车技术领域，该系统包括以下组成部分：机械底盘、电源管理模块、主控单元和感知模块、通信模块、提示装置以及抽屉驱动单元和多模态大模型模块；本发明通过部署多模态大模型模块，实现了对感知模块采集的多种传感器数据和执行器状态的联合分析，这种多模态联合分析机制显著提高了异常检测的准确性，能够在某一模态失效时，自动生成冗余模态组合切换指令和控制逻辑重构指令，例如，当语音识别模块因环境噪声干扰而失效时，系统可以自动切换到触屏输入模态，确保用户指令的准确接收与执行，这种冗余设计与自适应调整能力极大地增强了系统的可靠性和稳定性。