摘要
本发明涉及一种基于多模态损失与动态加权的仿真到现实校准方法,本发明构建多模态、领域自适应的初始损失函数;根据像素感兴趣区域之间的位置关系生成对所构建的多模态、领域自适应的初始损失函数进行空间动态加权的空间权重图和多尺度空间权重图。空间权重图和多尺度空间权重图加权初始损失函数的基础损失项;综合空间动态加权L1损失、空间动态加权多尺度结构相似性损失,感知损失和权重调度器计算的时空加权后的目标损失函数;权重调度器负责在优化过程中,根据训练时间来动态调整不同损失项的权重;根据目标损失函数计算仿真器的仿真参数的梯度,并使用优化器根据梯度迭代的更新仿真器参数,以使得所述目标损失函数最小。