色彩重生:基于 Retinex 理论的 UR2P-Dehaze 去雾增强器解析

发布于:2025-03-13 ⋅ 阅读:(18) ⋅ 点赞:(0)

论文总结:《UR2P-Dehaze: Learning a Simple Image Dehaze Enhancer via Unpaired Rich Physical Prior》

1. Retinex 理论简介

Retinex 理论由 Edwin Land 提出,主要用于解释人类视觉系统如何感知颜色和光照。该理论认为,图像可以分解为两个部分:

  • 反射分量(Reflectance):表示物体本身的固有颜色。

  • 光照分量(Illumination):表示光源对物体的影响。

其中 Ihazy 和 Iclear 表示迭代过程中的模糊图像和恢复图,而 Lhazy 和 Lclear 表示迭代期间的照明图像。它们共享相同的反射率分量R。 

在去雾任务中,Retinex 理论的作用是将去雾问题转换为图像增强问题,通过恢复合理的光照和反射分量,提高图像的视觉质量。

2. 核心创新

UR2P-Dehaze 的主要创新包括:

  1. 基于 Retinex 理论的去雾策略

    • Retinex 理论由 Edwin Land 提出,其核心思想是将图像分解为反射分量(物体固有颜色)与光照分量(光源影响)。在去雾过程中,通过恢复合理的光照和反射分量,能够更好地还原图像真实颜色和细节。
  2. 共享先验估计器(SPE)

    • 模型自动从有雾图像中学习光照、反射率和颜色信息,而不依赖人工设定的先验,使得去雾过程更加适应不同场景。
  3. 动态小波可分离卷积(DWSC)

    • 结合小波变换与深度可分离卷积,模型能够在高低频域同时提取特征。高频信息有助于细节恢复,低频信息则保证整体结构一致性。
  4. 自适应颜色校正器(ACC)与颜色损失

    • 为解决去雾后常见的颜色偏差问题,模型引入自适应颜色校正模块,并在损失函数中加入颜色损失,确保输出图像的色彩分布与真实图像一致。

3. 模型架构与流程

UR2P-Dehaze 采用了两分支结构,分别从不同角度恢复图像信息,具体流程如下:

  1. 输入层

    • 模型的输入是一张有雾图像(Hazy Image)。
  2. 自适应先验分支

    • 共享先验估计器(SPE):
      利用 Retinex 理论将输入图像分解为光照与反射分量,同时提取颜色信息。通过数据驱动学习,获得精确的物理先验。这一分支不仅有助于恢复图像细节,同时为后续颜色校正提供有力支持。
    • 颜色损失支撑:
      在该分支中,颜色损失用于约束模型生成的反射分量,使其在色彩分布上与原始图像保持一致,避免出现色偏。
  3. 频率分解分支

    • 动态小波可分离卷积(DWSC):
      通过小波变换将图像分解为低频和高频部分,利用深度可分离卷积分别提取两部分的特征。低频特征保证整体亮度和结构的一致性,高频特征则用于细节恢复和纹理保留。
  4. 自适应颜色校正(ACC)

    • 将来自两个分支的特征融合后,使用 ACC 对融合结果进行颜色调节,进一步校正因去雾过程引入的色偏,确保输出图像在视觉上更自然、色彩更准确。
  5. 最终输出

    • 综合以上两大分支的优势,模型输出一张高质量的去雾图像,既保留了细节,也恢复了真实的颜色信息。

4. 损失函数

  • 投影损失(Projection loss):降低图像去雾过程中信息的丢失,确保重构结果与原始图像在结构上保持一致。

其中,Iproject表示去除冗余特征后的图像

  • 反射一致性损失(Reflectance Consistency Loss):约束反射分量的准确性,帮助模型更好地捕捉物体固有颜色和纹理信息。

其中,R1和R2分别表示由ΦReflect估计器预测的反射率图和粗糙去雾图像的反射率图

  • Retinex 损失:用于保证生成图像的光照一致性,使得去雾后的图像在亮度上更加合理。

 其中,Linitial 表示初始估计的照度信息,即每个RGB通道的最大值。为了保证Iproject的分解更加准确,引入了  \left \| R-Iproject/stopgrad\left ( L \right ) \right \|_{2}^{2}  来指导分解。

  • 颜色损失(Color Loss):通过比较去雾图像与原始图像的颜色分布,减少色偏问题,从而提高色彩还原的准确性。

其中,C_{F}表示带雾图像的RGB三通道颜色估计,\hat{C}_{F} 表示在训练过程期间去雾图像的RGB三通道颜色估计。

总损失

 其中,λ1 = 50,,λ2 =0.1, λ3 = 0.1 , λ4 = 1

5. 实验结果与分析

UR2P-Dehaze 在多个标准数据集(如 SOTS-outdoor、I-HAZE 等)上均表现出色,尤其在色彩还原和细节恢复方面有明显优势。实验结果显示,该方法在 PSNR、SSIM 等指标上均优于部分现有方法,同时视觉效果更自然、色彩更真实。

消融研究

6. 优缺点

优点:

  • 结合 Retinex 理论,使得光照和反射分量恢复更加合理。
  • 共享先验估计器(SPE)能够自动学习物理先验信息,提高模型泛化能力。
  • 动态小波可分离卷积(DWSC)有效捕捉多尺度特征,兼顾全局与局部信息。
  • 自适应颜色校正器(ACC)和颜色损失使输出图像在色彩上更为准确。

缺点:

  • 模型依赖于小波变换,可能在不同分辨率图像上的适应性有所差异。
  • 在极端天气条件下,去雾效果可能不够稳定,需要进一步优化。
  • 复杂的分支结构可能增加模型训练和调试的难度。

总结

UR2P-Dehaze 通过结合 Retinex 理论和数据驱动的先验估计,采用两分支结构来分别处理光照、反射和频率信息,最后再通过自适应颜色校正解决色偏问题,实现了高质量的图像去雾。该方法在恢复图像细节与颜色校正方面表现出色,但在模型复杂性和对极端情况的适应性上还有提升空间。

这篇博客全面解读了 UR2P-Dehaze 的设计思路及其在实验中的表现,为研究者和工程师提供了宝贵的参考。如果你对去雾技术或 Retinex 理论感兴趣,UR2P-Dehaze 无疑是一个值得深入研究的方向。