基于多模态物理孪生的机器人社交交互系统及同步控制方法

本发明涉及机器人交互技术领域，提供基于多模态物理孪生的机器人社交交互系统，包括：物理孪生建模单元，构建机器人的高精度动力学模型；多模态感知单元，集成视觉传感器、激光雷达、麦克风阵列，实时采集环境数据；通信控制单元，采用5G NR协议实现超低时延的多机器人同步；社交决策引擎，基于强化学习模型生成交互策略，策略函数为：，其中θ为网络权重，st为多模态融合状态。本发明对微小手势的抑制作用，在儿童交互场景中误触发率降低82%，工业/社交模式的无缝切换更突破“高精度与快响应不可兼得”的技术偏见，通过意图置信度模型融合语义/手势/表情三模态数据。