摘要
本发明涉及一种机器人的感知、理解与控制方法及其设备。通过优化计算资源、数据传递和感知装置的分配,实现了具身智能机器人的准确感知理解以及高速规划、决策和控制,同时提高了具身智能机器人的经济性和实用性。本发明的关键特点包括一个较低频率运行的二维传感器和一个较高频率运行的三维传感器,分别用于环境理解和物理空间中的位置姿态感知。还包括机器人与执行器的动态绑定方式,允许机器人本体与多个执行器单元进行动态绑定和解绑。此外,本发明还提供了一种额外方法,允许系统在不依赖端到端大模型的情况下,仅依靠大语言模型来操作执行器,从而降低部署成本。