一种融合多模态美学和属性特征的图像美学评估方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种融合多模态美学和属性特征的图像美学评估方法
申请号:CN202411684939
申请日期:2024-11-22
公开号:CN119625338B
公开日期:2025-11-21
类型:发明专利
摘要
本发明提供了一种融合多模态美学和属性特征的图像美学评估方法。所述方法包括:构造图像‑美学以及图像‑属性文本对数据;构建联合属性和美学描述的多模态预训练模型;利用冻结的图像编码器与条件编码器提取原始图像特征与条件特征;利用文本解码器生成匹配条件特征的美学或属性文本;最小化生成文本与目标文本差异得到预训练模型;获取并处理图像和美学评分数据,构建融合多模态美学和属性特征的美学评分模型;提取并融合图像的属性和美学特征得到属性感知的美学特征;将该特征通过线性层映射得到美学分数;利用均方误差函数优化模型参数,得到最终的美学评分模型;本发明不仅能获得能准确的美学评分,而且在推理阶段仅需要单张图像。
技术关键词
美学评估方法 美学特征 图像编码器 特征提取模块 文本 多模态 预训练模型 损失函数优化 解码器 参数 数据 线性 注意力 误差函数 阶段