一种基于多教师知识蒸馏的神经网络故障感知训练方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于多教师知识蒸馏的神经网络故障感知训练方法
申请号:CN202510365827
申请日期:2025-03-26
公开号:CN120317326A
公开日期:2025-07-15
类型:发明专利
摘要
本发明涉及人工智能和神经网络技术领域,特别涉及一种基于多教师知识蒸馏的神经网络故障感知训练方法,包括多个教师神经网络和一个学生神经网络,神经网络包括特征提取子网络和分类子网络,每个教师神经网络注入不同的故障比率,并将教师模型训练至收敛;将训练样本分别输入多个教师模型和学生模型,并计算每个教师模型与学生模型之间的损失;分别根据对应的损失函数值更新蒸馏温度以及每个教师模型的权重,直到学生模型收敛。本发明采用利用多教师知识蒸馏和输出值的熵相结合的技术,使模型在不同程度的噪声下具有高准确率,有利于增强神经网络的故障容错性。
技术关键词
教师 神经网络模型 学生 蒸馏 联合分布函数 神经网络技术 比率 样本 超参数 符号 标签 噪声
系统为您推荐了相关专利信息
联邦学习方法 客户端 服务器 矩阵 蒸馏方法
实训系统 模拟模型 数据获取单元 反馈算法 实训教学技术
检测人脸图像 人脸五官 神经网络模型 人脸皮肤 人脸图像鉴伪方法
陆相页岩 测井 BP神经网络模型 传播算法 地质勘探技术
钢梁结构 特征提取模型 边缘检测模型 图像 特征点