一种基于三路混合编码与MOE架构的特征提取与融合方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于三路混合编码与MOE架构的特征提取与融合方法
申请号:CN202510640720
申请日期:2025-05-19
公开号:CN120180057B
公开日期:2025-07-29
类型:发明专利
摘要
一种基于三路混合编码与MOE架构的特征提取与融合方法,包括:获取时序数据及其N维特征数据,将N维特征数据按行分割为N组子序列数据;通过有相同参数的共有编码器提取得到N组共有特征;通过N个有不同参数的私有编码器提取得到N组私有特征;将共有特征按列堆叠得到共有特征矩阵,将私有特征按列堆叠得到私有特征矩阵,将共有特征矩阵和私有特征矩阵按列堆叠得到混合特征矩阵;搭建三路Transformer混合专家模型;将三个矩阵分别输入到三路Transformer混合专家模型的三条支路,门控机制控制选择Transformer专家计算特征建模子任务;三条支路分别得到相应的输出特征;利用前馈神经网络融合各输出特征,得到特征结果。
技术关键词
混合特征矩阵 融合方法 输出特征 前馈神经网络 编码器 一维卷积神经网络 支路 数据 机制 序列 参数 时序 加速度 模块 噪声
系统为您推荐了相关专利信息
输送线 动态控制方法 节点 样条插值算法 动态控制系统
训练图像数据 令牌 视觉特征 图像编码器 图像识别方法
模态特征 图像语义分割方法 可见光图像 特征提取模块 航拍
卫星观测数据 融合多源数据 深度学习模型 变分自动编码器 海浪
预训练模型 信号编码器 多模态 文本编码器 信号解码器