一种基于大模型多阶段数据增强的跨语言简讯生成方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于大模型多阶段数据增强的跨语言简讯生成方法
申请号:CN202410726533
申请日期:2024-06-06
公开号:CN118821796A
公开日期:2024-10-22
类型:发明专利
摘要
本发明涉及一种基于大模型多阶段数据增强的跨语言简讯生成方法,属于计算机自然语言处理技术领域。本方法通过指令微调技术,利用英文原文和中文简讯之间的对应关系,生成适合大模型学习的指令微调语料。本发明将大模型应用于跨语言科技简讯生成领域,以及结合多阶段数据增强框架,提高了模型在特定任务上的表现,同时保持了模型的泛化能力,解决了传统跨语言文本摘要任务样本不足等问题,避免了传统跨语言任务流水线方法中的误差传播,能够更快地进行推理。本方法通过串行结构学习多个相关任务,并通过辅助任务数据进行增强,从共享的知识中受益,提高了性能,增强泛化能力,有效应对数据稀缺性。
技术关键词
多阶段 生成方法 摘要 机器翻译 计算机自然语言 跨语言科技 数据 指令 机器学习框架 流水线方法 矩阵 序列 模型预训练 参数 微调技术 模板 预训练模型 中文文本