摘要
本申请涉及计算机视觉与深度学习技术领域,具体公开了一种基于多重特征低秩适配器的扩散变压器虚拟换装方法,方法包括:获取参考图像、文本提示句、衣物图像及遮挡图像;训练衣物特征低秩适配器与遮挡特征低秩适配器,提取包含衣物纹理图案细节的衣物图像特征和包含需穿上衣物指定位置的遮挡后人物特征;将参考图像转换为潜在图像特征,对潜在图像特征和文本提示句对应的文本特征、衣物图像特征及遮挡图像特征进行层标准化、缩放与移位处理;将处理后的潜在图像特征、文本特征、衣物图像特征和遮挡图像特征共同输入扩散变压器的多模态注意力模块;通过扩散变压器的去噪网络对交互后的特征进行迭代去噪,生成穿有指定衣物的指定人物换装图像。