一种基于双角度注意力融合的文档级关系抽取方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于双角度注意力融合的文档级关系抽取方法
申请号:CN202411383444
申请日期:2024-09-30
公开号:CN119271824B
公开日期:2025-11-14
类型:发明专利
摘要
本发明提供了一种基于双角度注意力融合的文档级关系抽取方法,该方法包括:通过窗口滑动的方式将文档划分为多个片段,并通过训练好的BERT模型得到片段中的实体表达和实体表达的表达向量;将表达向量进行分类组合,得到不同的实体向量;实体向量包括:头实体向量和尾实体向量;将头实体向量和尾实体向量进行拼接操作,得到实体对;计算实体对与实体对的关联性,得到第一特征;通过训练好的BERT模型得到实体对的上下文嵌入;计算实体对和上下文嵌入的关联性,得到第二特征;将第一特征和第二特征进行特征融合,得到抽取结果。该方法通过实体对和上下文信息的潜在关系保证了抽取结果的完整性,并提高了模型的性能。
技术关键词
实体 关系抽取方法 注意力 协方差矩阵 降维特征 语义向量 元素 表达式 聚类 参数