多模态大模型感知量化训练方法、装置、计算机设备及存储介质
申请号:CN202411057371
申请日期:2024-08-02
公开号:CN118981604A
公开日期:2024-11-19
类型:发明专利
摘要
本发明实施例公开了多模态大模型感知量化训练方法、装置、计算机设备及存储介质。所述方法包括:获取不同模态电网数据;对所述不同模态电网数据进行预处理,以得到处理结果;构建多模态大模型;利用所述处理结果对多模态大模型进行感知量化训练。通过实施本发明实施例的方法可实现有效降低多模态大模型的计算复杂度和内存占用,使其适应嵌入式设备的要求,同时保持模型的精度。
技术关键词
量化训练方法
多模态
计算机设备
量化误差
网络
融合图像特征
参数
数据获取单元
嵌入式设备
训练装置
数据格式
处理器
图像处理
文本
存储器
复杂度
内存
因子