一种适用于GPU/DCU的多模态基础模型卷积操作优化框架方法
申请号:CN202510917605
申请日期:2025-07-03
公开号:CN120687716A
公开日期:2025-09-23
类型:发明专利
摘要
本发明提出了一种适用于GPU/DCU的多模态基础模型卷积操作优化框架方法,用于解决现有卷积算子优化方法的调优过程耗时且难以捕捉跨层算子融合的技术问题。本发明的步骤为:通过参数化输入接口接收卷积算子;利用形状分析器收集结构化参数集中每个卷积算子的形状特征,实现卷积特征分析;判定是否启用批量归一化与非线性激活函数融合计算;启发式优化器基于卷积参数特征动态选择计算图优化策略;将计算任务适配到GPU/DCU的物理架构上,以最大化利用硬件资源;基于卷积参数特征生成面向DCU/GPU架构优化的卷积计算核函数;通过DCU/GPU硬件任务队列实现核函数流水线执行;采用设备端原子操作实现多计算单元间的梯度同步。本发明能够显著提高多模态基础模型中卷积操作的执行效率。
技术关键词
框架方法
优化器
Winograd算法
分析器
全局内存访问
基础
参数
SIMD指令
数据访问模式
多模态
数据依赖关系
输入接口
启发式规则
设备端
分块策略
生成平台
卷积算法
映射技术