一种基于知识蒸馏的多任务电力数据实体识别方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于知识蒸馏的多任务电力数据实体识别方法
申请号:CN202410947638
申请日期:2024-07-16
公开号:CN118940757A
公开日期:2024-11-12
类型:发明专利
摘要
本发明特别涉及一种基于知识蒸馏的多任务电力数据实体识别方法及装置,通过知识蒸馏结合多任务学习,提高小模型的准确性、迁移能力和泛化能力,有效降低对计算资源和内存的要求,适配小型设备和系统工作需求,极大增强电力系统专有名词中的同义词、多义词以及不规范用语的泛化能力,管理准确高效,界面展示多个可选的实体识别模型指标,从预设的多个待选择模型中获取用户从返回的多个第二待选模型中选择的模型作为最终模型;对多种实体分别训练教师模型,捕获不同实体的语义信息,通过知识蒸馏技术使学生模型充分学习各个实体的语义信息以及不同实体类型间的差异性和关联性,得到待训练模型;显著提高了电力领域实体识别的效率和适用性。
技术关键词
实体识别方法 数据 多任务 实体识别模型 教师 电力设备 计算机程序产品 计算机设备 学生 知识蒸馏技术 标签 模块 处理器 通信接口 可读存储介质 指标 小型设备