摘要
本发明提供了一种基于多模型协同的智能机械臂控制系统方案,属于自动化与智能控制领域。将系统划分为人机交互、检测与感知、任务解耦规划与程序生成、机器人执行操作四个部分。人机交互,用户以文本或语音格式输入指令,通过语音识别及自然语言翻译模型进行指令处理;检测与感知,利用多模态大模型对相机捕获目标进行识别与定位;任务解耦规划与程序生成,应用任务规划模型与程序翻译模型,将用户指令及感知信息解析为可执行程序;利用程序检查模型对程序进行检查与纠正,并驱动机械臂完成任务。本发明的系统方案不仅能应对多变的环境,还能理解复杂的语言指令,实现机械臂智能控制,显著提高了机械臂的多任务执行能力与智能化水平。