一种针对检索增强生成RAG系统的评估方法及装置

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种针对检索增强生成RAG系统的评估方法及装置
申请号:CN202411922213
申请日期:2024-12-25
公开号:CN119848197B
公开日期:2025-10-28
类型:发明专利
摘要
本申请实施例提供了一种针对检索增强生成RAG系统的评估方法及装置,涉及数据处理技术领域,该方法具体为:将预设问答文本输入目标检索增强生成RAG系统中,以获取第一答复文本和检索上下文文本;对获取到的标准答复文本对应的标准声明集合、第一答复文本对应的第一声明集合、以及检索上下文文本对应的检索上下文声明集合进行声明比较,对生成第一声明集合中的正确声明子集、错误声明子集、缺失的正确声明子集以及不相关声明子集进行分析计算,获取第一性能分析结果,并基于多个第一性能分析结果,生成目标RAG系统的目标综合性能评估结果。本申请能够从多个方面对RAG系统进行性能评估,为RAG系统在人工智能领域的更广泛、更高效应用提供有力支撑。
技术关键词
文本 数值 语义 参数 综合性 可读存储介质 存储计算机程序 大语言模型 数据处理技术 指标 评估装置 电子设备 分析单元 精度 模块 存储器 处理器