摘要
本发明提供了一种基于扩散模型的创意材质生成方法,包括:S1.数据预处理及数据增强,以获得预处理和增强后的材质数据;S2.材质扩散模型预训练;S3.基于渲染损失的材质贴图解码器的设计与训练;S4.多模态控制模块的设计与训练;S5.超分模块的设计与训练;S6.获得材质及对应3D资产:将高质量创意材质贴图对3D几何白模附上材质,渲染得到基于物理的保有真实感的3D资产。本发明方法通过将文本、图片及3D几何模型作为条件支持引导模型生成高分辨率、可平铺的高质量创意材质贴图,进而批量得到高质量3D资产。