摘要
本申请涉及数据融合技术领域,具体涉及用于专家模型的多模态数据融合方法及系统,该方法包括:获取不同专家模块对多模块融合数据的贡献比例;通过筛选出的专家模块对多模态数据融合后获得的文本中各专家模块相关语句数量及其之间的间隔语句数量的占比,对融合效果进行评价;并分析不同专家模块中的知识点交织情况确定待加入激活专家模块组的专家模块;并分析每次待加入的专家模块加入后对多模态数据融合后融合效果的适宜程度,以确定多模态数据融合的最适宜激活组;按照最适宜激活组对多模态数据进行融合。本申请旨在对多模态数据有关的专家模块考虑更全面准确,可以得到更好的融合效果。