摘要
本发明公开了一种基于多模态遥感数据的建筑目标毁伤评估方法,构建文本引导的两阶段建筑目标分类网络,包含CLIP文本编码器、Unet图像编码器和文本图像融合解码器,输入图像文本描述信息和灾前/灾后双时相遥感图像,CLIP文本编码器模块对文本描述信息特征进行提取,Unet图像编码器对灾前/灾后双时相遥感图像的图像特征进行提取,文本图像融合解码器对文本描述信息特征和图像特征进行融合,根据融合后的特征对建筑目标毁伤进行分类;构建融合建筑矢量数据和灾后遥感图像数据的建筑目标毁伤评估模块,利用官方地理信息库或OSM库已经构建的建筑矢量数据,将建筑矢量数据转换为灾前遥感图像的位图,作为文本引导的两阶段建筑目标分类网络BCL‑Unet中的灾前图像,利用文本引导的两阶段建筑目标分类网络BCL‑Unet进行建筑目标毁伤等级分类。本发明为灾后建筑目标毁伤高效检测提供了可行技术方案。