RawNeRF:黑暗中噪声图像的高动态范围视图合成

0 下载量 196 浏览量 更新于2025-01-16 收藏 2.81MB PDF 举报
"黑暗中的NeRF:从嘈杂的原始图像合成高动态范围视图"是一项前沿的计算机视觉技术,由谷歌研究团队开发。这项工作旨在解决传统视图合成方法如NeRF遇到的问题,即它们通常依赖于经过有损处理的低动态范围(LDR)图像,这些图像在捕捉暗环境或高对比度场景时会丢失大量细节和动态范围。原始图像的噪声、剪裁和色调映射都会影响合成效果。 NeRF的核心思想是通过神经网络学习一个连续的三维场景表示,但传统方法在处理噪声密集的原始图像时表现不佳。作者提出了一种新型的模型,称为RawNeRF,它直接在未经过色调映射和降噪处理的线性原始图像上进行训练。这样,模型能够保留图像的全动态范围,从而能够更准确地重建和渲染场景,即使在极端条件下,如极低光照或者具有高对比度的日光和阴影区域。 RawNeRF的优势在于其对噪声的鲁棒性。通过联合优化多个输入图像上的单个场景表示,模型能够在噪声水平较高的情况下依然保持高精度。这种方法不仅能够改变相机视角,还允许用户在合成后的视图中控制焦点、曝光和色调映射,提供了更大的灵活性。 实验结果显示,与专用于单图像或多图像深度原始去噪的算法相比,RawNeRF在处理从近黑暗环境中获取的嘈杂图像时,其生成的新视图质量更高。这表明,RawNeRF不仅适用于光线充足的场景,而且对于那些传统方法难以处理的暗淡和高动态范围场景有着显著的优势。 "黑暗中的NeRF"开辟了一条新的路径,使得高质量的视图合成不再受限于低质量的输入图像,而是能够从原始传感器数据中提取更多的信息,为增强现实、虚拟现实和摄影等领域带来了新的可能性。这项研究对于提升图像处理的鲁棒性和真实感具有重要意义。"