一种基于视觉经验检索的大脑刺激重建方法、介质及设备
申请号:CN202411864718
申请日期:2024-12-18
公开号:CN119323616B
公开日期:2025-04-18
类型:发明专利
摘要
本申请公开了一种基于视觉经验检索的大脑刺激重建方法、介质及设备,涉及计算视觉技术领域,该方法通过提取待处理fMRI信号的低级视觉线索和高级视觉线索,确保了重建过程中语义信息的保留;通过模拟人类大脑的记忆检索过程,检索视觉记忆图像,为退化的视觉刺激提供上下文信息,进一步提高图像重建的精度、丰富语义细节;通过利用低级视觉线索和超级视觉线索(高级视觉线索和视觉记忆图像的CLIP特征的融合结果)生成若干个重建图像,并从中选取最终的重建图像,可充分捕获或保留视觉刺激中的关键语义信息,提高图像重建结果的准确性。
技术关键词
线索
视觉
多层感知器
Sigmoid函数
模拟人类大脑
加权特征
图像重建
多头注意力机制
ReLU函数
信号
编码器
序列
处理器
网络
语义特征
计算机设备
可读存储介质