深度学习驱动的单目视觉里程计:克服尺度漂移的新方法

0 下载量 143 浏览量 更新于2024-06-20 收藏 2.49MB PDF 举报
"本文主要探讨了深度虚拟立体测距技术,即如何利用深度预测进行单目直接稀疏测距(DSO)。文章介绍了在单目视觉里程计(VO)中,仅依赖几何线索容易造成尺度漂移的问题,而深度学习可以作为解决这一问题的有效手段。作者设计了一种新的深度网络,通过半监督方式训练,以从单个图像中预测深度。这种方法提高了深度预测的精度,从而改善了单目视觉里程计的性能。 在详细介绍中,作者指出,传统的单目VO系统由于缺乏尺度信息,容易发生尺度漂移,需要足够的运动视差来进行运动估计。为了解决这一问题,他们引入了深度预测,将DSO与深度学习相结合,形成深度虚拟立体测距(DVSO)。这种新方法利用深度预测作为虚拟立体测量的依据,能够提供更准确的尺度信息。 论文的关键创新点在于提出的深度网络结构,它能在两阶段过程中从单个图像中预测深度。这个网络被训练以确保照片一致性,并且其预测的深度与立体DSO的精确稀疏深度重建相匹配。实验结果显示,该深度预测在KITTI基准上超越了现有的单眼深度估计方法,并且在准确性上显著优于其他基于单眼和深度学习的方案。 此外,DVSO的性能在实际应用中也表现优秀,其单目视觉里程计的精度接近最先进的立体方法,同时保持了仅使用单个相机的优势,降低了系统复杂性和成本。通过使用基于深度学习的左右差异预测,DVSO在初始化和虚拟立体约束方面实现了优化,从而能够恢复准确的度量估计。 这篇论文为单目视觉里程计提供了一个新的解决方案,结合深度学习的力量,有效地解决了尺度漂移问题,并提升了单目测距的精度和可靠性。这种方法对自动驾驶、机器人导航和增强现实等领域的应用具有重大意义,为单目视觉系统带来了更加准确的环境感知能力。"