一种多模态的图文研究方法

本发明公开了一种多模态的图文研究方法，涉及图文处理技术领域，方法包括获取多模态数据，对多模态数据进行分析处理得到文本数据库、图像数据库和声音数据库；基于文本数据、图像数据和声音数据构建图文研究模型；获取当下输入数据及用户信息在图文研究模型进行研究处理输出图文结果。本发明采用多模态数据进行图文研究并设置复杂程度进行匹配更加符合用户需求。