摘要
本发明公开了缺陷检测的方法与系统，提高准确性和效率，减少误判和漏判。其技术方案为：输入文本和图像到多模态融合编码器，获取文本特征向量和图像块令牌；采用并行的两个路径处理图像块令牌，提取特征与定位异常区域，获得预测结果特征图与像素预测结果；通过残差连接与双线性插值将不同尺度的特征融合，得到粗糙分割结果，进行二值化处理，生成掩码；识别出框和点，将所识别的框和点并输入到掩码分割网络内，生成细化掩码与置信度分数；将粗糙分割结果与细化掩码融合，得到细粒度分割结果；输入标准物件图作为模板与待检测图片进行模板匹配，对匹配区域进行差值处理，二值化并提取疑似缺陷区域；将疑似缺陷区域与细粒度分割结果融合。
