基于多模态学习的校园绿色空间具身感知评估方法及系统
申请号:CN202510358454
申请日期:2025-03-25
公开号:CN119862400B
公开日期:2025-05-30
类型:发明专利
摘要
本发明公开了基于多模态学习的校园绿色空间具身感知评估方法及系统,所述方法具体包括:将视觉特征编码网络和听觉特征编码网络各自的输出结果输入到视听模态特征融合模块进行融合处理,获得环境联合表征;将生理响应数据集和心理评估数据集输入至生理心理协同编码器进行处理,获得生理心理联合表征;将环境联合表征和生理心理联合表征输入至全局融合模块进行深度融合,获得最终融合特征;将最终融合特征输入至多任务预测通道进行处理,并结合损失函数训练优化,获得环境舒适度综合评分结果和解释性决策依据。本发明实现了对校园绿色空间具身感知的全面评估,提高了评估的准确性和科学性,为优化校园空间设计提供了决策支持。
技术关键词
视觉特征编码
生理
心理
融合特征
环境感知数据
感知评估方法
模态特征
时序
网络
声学特征
多任务
协同注意力
编码器
局部特征提取
听觉
视听
校园