摘要
一种基于AR或MR的矿用大型电铲远程控制方法,属于电铲智能化技术领域。该方法利用多源数据融合算法构建三维数字模型,结合电铲数字孪生模型,在AR或MR头显设备中实现虚实场景同步呈现,动态叠加显示推压杆伸缩行程、开合斗状态、左右履带行走路径;构建虚实融合的多模态交互系统,实现控制指令的时空一致性校准,并建立动态映射模型,将多维度控制输入解析为具体动作参数,并通过强化学习模型的持续学习,对电铲的铲斗运动路径和行走路径进行预演,及时修正,同时支持在头显设备中保存和回放历史作业过程。本发明解决了传统人工操作危险性高、现有远程控制动态适应性差及网络延迟导致的指令失真问题,显著提升操作安全性、作业效率及设备可靠性。