基于双向回译对抗网络的数据增强方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于双向回译对抗网络的数据增强方法
申请号:CN202510866925
申请日期:2025-06-26
公开号:CN120893449A
公开日期:2025-11-04
类型:发明专利
摘要
本发明涉及基于双向回译对抗网络的数据增强方法,属自然语言处理领域。在低资源语言机器翻译中,由于缺乏大规模多样化的训练语料导致机器翻译结果在特定领域内偏差的问题。为缓解在特定领域内偏差带来的影响,提供了本发明,本发明通过结合对抗训练和双向回译技术,利用预训练的遮蔽语言模型生成高质量的对抗样本和多样化的训练数据以此增强模型的鲁棒性。先使用对抗训练对数据集进行数据增强,再利用双向翻译方法生成语义相似但表达不同的文本,然后使用预训练遮蔽语言模型生成语义合理的文本变体,最后融合双向翻译和MLM生成更合理且多样化的增强数据,并用这些数据对模型再训练。本发明在数据层面上显著增强NMT模型的鲁棒性和性能。
技术关键词
目标语言句子 数据 对齐工具 双向翻译方法 翻译语言 网络 非暂态计算机可读存储介质 机器翻译 对抗性 处理器 模块 鲁棒性 计算机程序产品 语义 偏差 标记 自然语言 关系 新词 文本