内窥镜视野场景重建方法、装置、设备及介质

本发明公开了一种内窥镜视野场景重建方法、装置、设备及介质，涉及视觉图像处理技术领域，该方法通过原始腹腔镜视频流图像，通过学习和优化高斯光栅化的变分梯度，设计了一种新的帧间姿态估计模块，以进行精确的微小姿态估计。基于微分梯度场优化，设计了一种新的动态高斯生长策略，用于在约束内窥镜视图内进行新的高斯合成。结合上述两个模块，提出了一种具有前向重建和后向优化策略的新型3D高斯训练架构，用于顺序生成高斯模型并解决SfM先验的局限性。改进的相对姿态估计和新的高斯增长策略带来了更好的新视图合成质量和腹腔镜视野下器官组织模型几何重建。