基于大模型的文本处理方法、装置、设备、介质及产品

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于大模型的文本处理方法、装置、设备、介质及产品
申请号:CN202411136208
申请日期:2024-08-19
公开号:CN118656479B
公开日期:2024-11-05
类型:发明专利
摘要
本申请提供一种基于大模型的文本处理方法、装置、设备、介质及产品,涉及人工智能、大语言模型等技术领域。通过基于待处理文本,采用通用大模型进行实体单元识别得到第一概率分布,采用识别大模型进行实体单元识别得到第二概率分布,基于所述第一概率分布和第二概率分布,获得所述待处理文本中的目标实体单元。且基于待处理文本和目标实体单元,采用通用大模型对目标实体单元进行分类得到第三概率分布,采用分类大模型进行分类得到第四概率分布,并基于第三概率分布和第四概率分布获得目标类别;通过将抽取分解为识别和分类,不同流程轮换利用不同大模型的能力,可提高抽取结果的准确性。
技术关键词
实体 样本 文本处理方法 预测类别 词典 标签 识别误差 训练集 文本处理装置 大语言模型 计算机程序产品 处理器 识别模块 可读存储介质 存储器 参数 电子设备