基于混合现实技术的人机交互方法及相关设备

本公开提供了一种基于混合现实技术的人机交互方法及相关设备，涉及计算机技术领域。该方法包括通过获取目标图像数据，确定与目标图像数据相匹配的混合现实的设备模型；获取任务信息，对当前任务信息进行单一模型编码与检索，确定目标文案信息；根据设备模型和目标文案信息，输出设备模型的标记零部件模型和对应的文案信息。本申请通过只使用一种模型作为编码模型，不需要插入大量的目标检测模型，解决了混合现实技术的人机交互需要获取应用场景中的全部数据导致数据获取成本高的问题。