一种融合多模态知识图谱的大语言模型知识问答方法及系统
申请号:CN202411102645
申请日期:2024-08-13
公开号:CN118627628B
公开日期:2025-01-14
类型:发明专利
摘要
本发明提出一种融合多模态知识图谱的大语言模型知识问答方法及系统,属于人工智能设备技术领域,包括:获取多模态数据,构建多模态知识图谱,构建多模态大模型,构建动态更新机制,获取用户问题,从专业知识库中找出相关文本片段,获得专业问题答案,获得三元组信息,找到与问题直接相关的知识节点,获取与知识节点匹配的多模态资源;将多模态资源与相关文本片段进行关联分析和逻辑梳理,获得整合信息,进行处理获得最终答案,并传输给用户;不仅能提供准确、全面的答案,还通过整合多媒体元素,为用户带来更加直观、易于理解的知识获取体验,极大地提升了用户满意度和问答系统的实用性。
技术关键词
多模态
知识问答方法
专业知识库
答案
文本
三元组
高维向量空间
子模块
预训练语言模型
矩阵乘法运算
动态更新
知识图谱技术
语音识别模型
数据
音频
知识问答系统
对齐模块
关系抽取技术
实体