一种基于多视角监督的单视角重建方法

摘要

本发明提出了一种基于多视角监督的单视角重建方法，其主要内容包括：三维形状的表示与观察、射线一致性的应用、观察结果与附加像素标记的合并、单视角图形重建的学习，其过程为，提出一种可微分公式可以根据任意视角观测三维形状后所得的观察结果计算出其梯度，这里通过使用可微分射线一致性(DRC)重新构建视角一致性来实现。这种公式可以纳入学习框架中以利用前景蒙版，深度，彩色图像，语义等不同类型的多视角观测进行监督来学习单视角三维形状预测，最后实现三维图像的重建。这种方法在很大程度上减少了在进行三维图像重建时所需的用于训练CNN的三维图像信息，因此很好的提高了三维图像重建效率。