基于多模态大模型的机器人控制法

本发明公开了基于多模态大模型的机器人控制法，涉及机器人控制技术领域，包括以下步骤：步骤一：通过安装多模态传感器组实时采集机器人的感知数据，构建机器人自身的姿态三维模型以实时获取多模态传感器组的姿态变化数据；本发明通过安装多模态传感器组以实时采集机器人的感知数据，并构建姿态三维模型，处理环境视频、音频、接触状态和姿态变化数据，通过长短期记忆网络动态更新隐藏状态和记忆状态，以生成可预测的机器人行为策略，采用动态进化算法优化行为策略的调整量，实现最优行为策略的演化，根据即时奖励更新机器人行为策略的Q值，形成反馈循环，帮助机器人实时调整并优化其行为策略。