一种面向大语言模型的结构化知识注入方法及系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种面向大语言模型的结构化知识注入方法及系统
申请号:CN202411117913
申请日期:2024-08-15
公开号:CN118643142B
公开日期:2024-10-29
类型:发明专利
摘要
本发明提供一种面向大语言模型的结构化知识注入方法及系统,涉及人工智能技术领域。所述方法包括:利用命名实体识别技术对问题中的实体进行识别标记;在知识图谱上链接识别出的实体;检索两两实体之间的可能路径上的实体及其关系,构建知识子图;根据实体对与问题的相关性,对知识子图上的实体对进行打分;利用图神经网络对知识子图进行建模,并利用打分的分数引导图神经网络消除噪音;基于知识子图选取图谱嵌入化知识,并映射到大语言模型的参数化知识空间,得到对齐知识;将对齐知识注入大语言模型的前馈神经网络参数中进行知识性问答。本发明能够提高大语言模型对知识检索以及知识利用的能力。
技术关键词
大语言模型 前馈神经网络 命名实体识别技术 图谱 命名实体识别模型 知识性 打分器 识别标记 广度优先搜索算法 深度优先搜索算法 多层感知机 参数 对齐模块 文本 注意力 预训练语言模型 链接模块
系统为您推荐了相关专利信息
大语言模型 论文 辅助系统 关键词 科研
自动识别方法 发动机系统 架构设计模型 模型定义方法 模型映射方法
分诊方法 置信度阈值 图谱 网络流量日志 数据
大语言模型 在线 信息处理模块 表单 输出模块
交互特征 良率 芯片 连续型 神经网络单元