摘要
本发明公开了一种机器人及其交互方法、交互系统、存储介质、控制器,该方法包括:获取目标场景的多模态环境数据;将多模态环境数据输入至预先训练好的多模态深度学习模型,得到环境感知结果;对环境感知结果进行语义提取,得到结构化语义信息;根据目标推送策略和结构化语义信息生成推送消息,并将推送消息推送给与机器人绑定的用户终端。该方法利用预先训练好的多模态深度学习模型对多模态环境数据进行处理,将处理得到的环境感知结果提取为结构化语义信息,并基于目标推送策略将结构化语义信息生成推送消息发送给用户终端,具有环境适应能力强、部署灵活高效、人机交互友好等优点,在智能机器人和人工智能领域具有广阔的应用前景。