基于多模态模型与自监督学习的遥感影像生成方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于多模态模型与自监督学习的遥感影像生成方法
申请号:CN202410852767
申请日期:2024-06-28
公开号:CN118823182A
公开日期:2024-10-22
类型:发明专利
摘要
本发明公开了一种基于多模态模型与自监督学习的遥感影像生成方法,包括获取遥感影像数据集并进行数据增强;建立包括第一编码器和第二编码器的多模态模型,利用数据增强后的遥感影像对第一编码器进行自监督学习;使用数据增强后的遥感影像训练更新后的多模态模型,建立损失函数和度量函数,当达到预设的第一训练结束条件时,得到训练好的多模态模型;建立包括生成器和鉴别器的生成图像模型,基于训练好的多模态模型、生成器的损失函数和鉴别器的损失函数进行训练,当达到预设的第二训练结束条件时,得到训练好的生成图像模型;获取遥感文本数据,基于训练好的多模态模型和训练好的生成图像模型生成遥感影像。有效改善生成图像的质量。
技术关键词
编码器 影像生成方法 多模态 图像块 遥感影像数据 度量 生成式对抗网络 样本 切片 文本 代表 基础结构 自然语言 尺寸 策略 教师 视觉