光源引导的深度框架:单幅图像光晕去除新方法

1 下载量 28 浏览量 更新于2025-01-16 收藏 16.54MB PDF 举报
"光源引导的单幅图像光晕去除方法" 本文主要探讨了"光源引导的单幅图像光晕去除"这一技术,这是针对摄影图像中常见的光学伪影——光晕现象进行研究的一种新方法。光晕是由于相机内部的非预期反射和散射导致的,尤其是在拍摄强光源时,它会影响图像的视觉质量和后续的视觉任务,如语义分割和深度估计。 当前的光晕去除方法往往依赖于预定义的光晕强度和几何特性,这限制了它们在处理多样性和复杂光晕时的效能。文章作者来自香港城市大学,他们提出了一种创新的深度学习框架,名为光源感知引导的单幅图像光晕去除(SIFR)。该方法首先通过检测图像中的光源区域和光晕区域,然后利用光源信息作为引导,有效去除光晕伪影。 SIFR模型的关键在于学习光源区域和光晕区域之间的潜在关系,这使得模型能适应不同类型的光晕。为了解决训练数据的局限性,作者创建了第一个无配对光晕去除数据集,并引入了新的循环一致性约束,减少了对人工标注的依赖,从而能训练出更适应多样情况的模型。 论文中展示了大量实验结果,证明了SIFR在定性和定量上均优于现有的基线方法。此外,模型不仅能够去除光晕,还能用于操纵光晕效果,比如添加或改变图像的光晕特征。图1对比了SIFR与其他方法的性能,显示了SIFR在准确去除光晕方面的优势,而其他方法可能无法完全去除光晕或者误识别其他图像区域为光晕。 总结来说,这项工作提出了一个基于光源引导的深度学习策略,有效地解决了单幅图像光晕去除问题,提升了图像质量,并且在实际应用中具有广泛的价值。此方法对于图像处理和计算机视觉领域都是一个重要的贡献,特别是在应对复杂光照条件下的图像处理挑战。