摘要
本发明提供了一种基于多模态的合同问答方法，涉及人工智能领域。目的在于解决多模态合同问答系统中知识筛选效率低、多模态融合效果不佳、系统扩展性和自适应性有限等问题，主要方案包括。数据采集和预处理，得到规范化的数据集；对数据集中的文本、图像、音频进行提取特征，并通过数据融合、特征融合、决策融合和word Encoding技术生成统一的特征表示；对融合后的特征表示进行数据分析和应用，得到分析或预测结果；对数据分析和应用产生的结果进行评估和优化，得到筛选后的特征表示；业务问答数据准备，对结构化数据和非结构化数据进行处理，构建索引和知识库；对用户查询进行问答系统设计与实现，生成易读且相关性强的答案。
