引en
×

分享给微信好友或者朋友圈

使用微信“扫一扫”功能。

基于Retinex的图像增强方法综述

  • 谢凤英1,2

    机 构：

    1. 北京航空航天大学宇航学院图像处理中心，北京，100191

    2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

    ×
  • 汤萌1,2

    机 构：

    1. 北京航空航天大学宇航学院图像处理中心，北京，100191

    2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

    ×
  • 张蕊1,2

    机 构：

    1. 北京航空航天大学宇航学院图像处理中心，北京，100191

    2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

    ×
1. 北京航空航天大学宇航学院图像处理中心，北京，100191； 2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

    中图分类号: TP391.4

    DOI:10.16337/j.1004⁃9037.2019.01.001

    Review of Image Enhancement Algorithms Based on Retinex

    • Xie Fengying1,2

      Affiliation：

      1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China

      2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      ×
    • Tang Meng1,2

      Affiliation：

      1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China

      2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      ×
    • Zhang Rui1,2

      Affiliation：

      1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China

      2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      ×
    1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China； 2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      CLC: TP391.4

      DOI:10.16337/j.1004⁃9037.2019.01.001

      参考文献 1
      LandE H, MccannJ J. Lightness and Retinex theory[J]. JOSA, 1971, 61(1): 1-11.
      查找原文
      参考文献 2
      LandE H. The Retinex theory of color vision[J]. Scientific American, 1977, 237(6): 108-128.
      查找原文
      参考文献 3
      LandE H. An alternative technique for the computation of the designator in the retinex theory of color vision.[J]. Proceedings of the National Academy of Sciences, 1986, 83(10): 3078-3080.
      查找原文
      参考文献 4
      HornB K P. Determining lightness from an image[J]. Computer Graphics and Image Processing, 1974, 3(4): 277-299.
      查找原文
      参考文献 5
      KimmelR, ShakedD, EladM, et al. A variational framework for Retinex[J]. International Journal of Computer Vision, 2003, 52(1): 7-23.
      查找原文
      参考文献 6
      BertalmíoM, CasellesV, ProvenziE. Issues about Retinex theory and contrast enhancement[J]. International Journal of Computer Vision, 2009, 83(1): 101-119.
      查找原文
      参考文献 7
      RizziA, GattaC, MariniD. A new algorithm for unsupervised global and local color correction[J]. Pattern Recognition Letters, 2003, 24(11): 1663-1677.
      查找原文
      参考文献 8
      LeccaM, RizziA, SerapioniR P. GRASS: A gradient-based random sampling scheme for milano Retinex[J]. IEEE Transactions on Image Processing, 2017, 26(6): 2767-2780.
      查找原文
      参考文献 9
      GianiniG, LeccaM, RizziA. A population-based approach to point-sampling spatial color algorithms[J]. Journal of the Optical Society of America, A: Optics, Image Science, and Vision, 2016, 33(12): 2396-2413.
      查找原文
      参考文献 10
      ProvenziE, FierroM, RizziA, et al. Random spray Retinex: A new Retinex Implementation to investigate the local properties of the model[J]. IEEE Transactions on Image Processing, 2007, 16(1): 162-171.
      查找原文
      参考文献 11
      BanićN, LončarićS. Smart light random memory sprays Retinex: A fast Retinex implementation for high-quality brightness adjustment and color correction[J]. JOSA A, 2015, 32(11): 2136-2147.
      查找原文
      参考文献 12
      Palma-AmestoyR, ProvenziE, BertalmioM, et al. A perceptually inspired variational framework for color enhancement[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2009, 31(3): 458-474.
      查找原文
      参考文献 13
      WangW, HeC. A variational model with barrier functionals for Retinex[J]. SIAM Journal on Imaging Sciences, 2015, 8(3): 1955-1980.
      查找原文
      参考文献 14
      ParkS, YuS, MoonB, et al. Low-light image enhancement using variational optimization-based retinex model[J]. IEEE Transactions on Consumer Electronics, 2017, 63(2): 178-184.
      查找原文
      参考文献 15
      ZhaoR, PanH, HouG, et al. A multichannel total variational Retinex model based on nonlocal differential operators[C]//Ninth International Conference on Graphic and Image Processing (ICGIP 2017). USA: International Society for Optics and Photonics, 2018, 10615: 106152E.
      查找原文
      参考文献 16
      ChengM H, HuangT Z, ZhaoX L, et al. A variational model with hybrid hyper-Laplacian priors for Retinex[J]. Applied Mathematical Modelling, 2019, 66: 305-321.
      查找原文
      参考文献 17
      JobsonD J, RahmanZ, WoodellG A. A multiscale Retinex for bridging the gap between color images and the human observation of scenes[J]. IEEE Transactions on Image Processing, 1997, 6(7): 965-976.
      查找原文
      参考文献 18
      RajputG S, RahmanZ U. Hazard detection on runways using image processing techniques[C]//Proceedings of SPIE. USA: The International Society for Optical Engineering, 2008, 6957: 1-12.
      查找原文
      参考文献 19
      GaoH, WeiP, KeJ. Color enhancement and image defogging in HSI based on Retinex model[C]//2015 International Conference on Optical Instruments and Technology: Optoelectronic Imaging and Processing Technology. USA: International Society for Optics and Photonics, 2015, 9622: 962203.
      查找原文
      参考文献 20
      FuX, ZhuangP, HuangY, et al. A Retinex-based enhancing approach for single underwater image[C]//2014 IEEE International Conference on Image Processing (ICIP). USA: IEEE, 2014: 4572-4576.
      查找原文
      参考文献 21
      石丹, 李庆武, 范新南, 等. 基于Contourlet变换和多尺度Retinex的水下图像增强算法[J]. 激光与光电子学进展, 2010, 47(4): 41-45.
      ShiDan, LiQingwu, FanXinnan, et al. Underwater image enhancement algorithm based on Contourlet transform and multi-scale Retinex[J]. Laser & Optoelectronics Progress, 2010, 47(4): 41-45.
      查找原文
      参考文献 22
      ZhangS, WangT, DongJ, et al. Underwater image enhancement via extended multi-scale Retinex[J]. Neurocomputing, 2017, 245: 1-9.
      查找原文
      参考文献 23
      唐亮, 谢维信, 黄建军, 等. 城市航空影像中基于模糊Retinex的阴影消除[J]. 电子学报, 2005(3): 500-503.
      TangLiang, XieWeixin, HuangJianjun, et al. Removing shadows from urban aerial images based on fuzzy Retinex [J]. Acta Electronica Sinica, 2005(3): 500-503.
      查找原文
      参考文献 24
      ZhaoY, LiuY, WuX, et al. Retinal vessel segmentation: An efficient graph cut approach with Retinex and local phase[J]. PLoS ONE, 2015, 10(4): e0122332.
      查找原文
      参考文献 25
      李宏宇,朱一峰,黄怡.基于Retinex改进的夜间图像增强算法[J].长春理工大学学报(自然科学版),2018,41(6):104-108.
      LiHongyu, ZhuYifeng, HuangYi. Improved night image enhancement algorithm based on Retinex[J]. Journal of Changchun University of Science and Technology(Natural Science Edition), 2018, 41(6): 104-108.
      查找原文
      参考文献 26
      LandE H. Recent advances in retinex theory and some implications for cortical computations: Color vision and the natural image[J]. Proceedings of the National Academy of Sciences, 1983, 80(16): 5163-5169.
      查找原文
      参考文献 27
      ProvenziE, MariniD, De CarliL, et al. Mathematical definition and analysis of the Retinex algorithm[J]. Journal of the Optical Society of America A, 2005, 22(12): 2613.
      查找原文
      参考文献 28
      MariniD, RizziA. A computational approach to color adaptation effects[J]. Image and Vision Computing, 2000, 18(13): 1005-1014.
      查找原文
      参考文献 29
      CooperT J. Analysis and extensions of the Frankle-McCann Retinex algorithm[J]. Journal of Electronic Imaging, 2004, 13(1): 85.
      查找原文
      参考文献 30
      ZossoD, TranG, OsherS J. Non-local Retinex—A unifying framework and beyond[J]. SIAM Journal on Imaging Sciences, 2015, 8(2): 787-826.
      查找原文
      参考文献 31
      FrankleJ A, MccannJ J. Method and apparatus for lightness imaging[P]. United States: 4384336, 1983-05-17.
      查找原文
      参考文献 32
      BanićN, LončarićS. Light random sprays Retinex: Exploiting the noisy illumination estimation[J]. IEEE Signal Processing Letters, 2013, 20(12): 1240-1243.
      查找原文
      参考文献 33
      ChengD, LiuH, LiL，et al. Video image denoising and enhancing method and device based on random spray retinex[P]. United States: 9978131, 2018-05-22.
      查找原文
      参考文献 34
      ProvenziE. Formalizations of the Retinex model and its variants with variational principles and partial differential equations[J]. Journal of Electronic Imaging, 2017, 27(1): 1.
      查找原文
      参考文献 35
      BlakeA. Boundary conditions for lightness computation in Mondrian world[J]. Computer Vision, Graphics, and Image Processing, 1985, 32(3): 314-327.
      查找原文
      参考文献 36
      BlakeA. On lightness computation in Mondrian world[C]//Central and Peripheral Mechanisms of Colour Vision. [S.l.]: Springer, 1985: 45-59.
      查找原文
      参考文献 37
      BrelstaffG, BlakeA. Computing lightness[J]. Pattern Recognition Letters, 1987, 5(2): 129-138.
      查找原文
      参考文献 38
      MorelJ M, PetroA B, SbertC. Fast implementation of color constancy algorithms[C]//Proceedings of SPIE. [S.l.]: The International Society for Optical Engineering, 2009, 7241: 724106-1-724106-10.
      查找原文
      参考文献 39
      MorelJ M, PetroA B, SbertC. A PDE formalization of Retinex theory[J]. IEEE Transactions on Image Processing, 2010, 19(11): 2825-2837.
      查找原文
      参考文献 40
      MaW, MorelJ M, OsherS, et al. An L1-based variational model for Retinex theory and its application to medical images[C]//CVPR 2011. Colorado Springs, CO, USA: IEEE, 2011: 153-160.
      查找原文
      参考文献 41
      ProvenziE, CasellesV. A wavelet perspective on variational perceptually-inspired color enhancement[J]. International Journal of Computer Vision, 2014, 106(2): 153-171.
      查找原文
      参考文献 42
      MaW, OsherS. A TV Bregman iterative model of Retinex theory[J]. UCLA Cam Report, 2010, 10: 13.
      查找原文
      参考文献 43
      NgM K, WangW. A total variation model for Retinex[J]. SIAM Journal on Imaging Sciences, 2011, 4(1): 345-365.
      查找原文
      参考文献 44
      ChenT, YinW, ZhouX S, et al. Total variation models for variable lighting face recognition[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2006, 28(9): 1519-1524.
      查找原文
      参考文献 45
      RudinL I, OsherS, FatemiE. Nonlinear total variation based noise removal algorithms[J]. Physica D: Nonlinear Phenomena, 1992, 60(1-4): 259-268.
      查找原文
      参考文献 46
      JobsonD J, RahmanZ, WoodellG A. Properties and performance of a center/surround Retinex[J]. IEEE Transactions on Image Processing, 1997, 6(3): 451-462.
      查找原文
      参考文献 47
      JobsonD J. Retinex processing for automatic image enhancement[J]. Journal of Electronic Imaging, 2004, 13(1): 100.
      查找原文
      参考文献 48
      PetroA B, SbertC, J-MMorel . Multiscale Retinex[J]. Image Processing on Line, 2014, 4: 71-88.
      查找原文
      参考文献 49
      MccannJ J, RizziA. The art and science of HDR imaging[M]. USA: John Wiley & Sons, 2011: 26.
      查找原文
      参考文献 50
      LinH, ShiZ. Multi-scale retinex improvement for nighttime image enhancement[J]. Optik, 2014, 125(24): 7143-7148.
      查找原文
      参考文献 51
      JungC, SunT, JiaoL. Eye detection under varying illumination using the Retinex theory[J]. Neurocomputing, 2013, 113: 130-137.
      查找原文
      参考文献 52
      葛微, 李桂菊, 程宇奇, 等. 利用改进的Retinex进行人脸图像光照处理[J]. 光学精密工程, 2010, 18(4): 1011-1020.
      GeWei, LiGuiju, ChengYuqi, et al. Face image illumination processing based on improved Retinex [J]. Optics and Precision Engineering, 2010, 18(4): 1011-1020.
      查找原文
      参考文献 53
      LuY, XieF, WuY, et al. No reference uneven illumination assessment for dermoscopy images[J]. IEEE Signal Processing Letters, 2015, 22(5): 534-538.
      查找原文
      参考文献 54
      张鑫垒, 傅迎华. 眼底图像光照不均匀校正[J]. 软件导刊, 2017, 16(2): 168-171; 203.
      ZhangXinlei, FuYinghua. Correction of uneven illumination in fundus image [J]. Software Guide, 2017, 16(2): 168-171; 203.
      查找原文
      参考文献 55
      ZhanB, WuY. Infrared image enhancement based on wavelet transformation and Retinex[C]//2010 Second International Conference on Intelligent Human-Machine Systems and Cybernetics. [S.l.]:IEEE, 2010, 1: 313-316.
      查找原文
      参考文献 56
      方帅, 杨静荣, 曹洋, 等. 图像引导滤波的局部多尺度Retinex算法[J]. 中国图象图形学报, 2012, 17(7): 748-755.
      FangShuai, YangJingrong, CaoYang, et al. Local multi-scale Retinex algorithm based on guided image filtering [J]. Journal of Image and Graphics, 2012, 17(7): 748-755.
      查找原文
      参考文献 57
      王静静, 贾振红, 覃锡忠, 等. 基于Shearlet变换和多尺度Retinex的遥感图像增强算法[J]. 计算机应用, 2015, 35(1): 202-205; 210.
      WangJingjing, JiaZhenhong, QinXizhong, et al. Remote sensing image enhancement algorithm based on Shearlet transform and multi-scale Retinex [J]. Journal of Computer Applications, 2015, 35(1): 202-205; 210.
      查找原文
      目录 contents

        摘要

        Retinex作为一种源自人类视觉系统研究的颜色恒常性模型，在解决光照不均、色偏等方面都有非常广泛的应用。本文首先介绍了Retinex理论的来源与后续的发展。然后根据当前研究现状将Retinex模型分为路径模型、PDE（Partial differential equations）模型、变分模型和中央周边（Center-Surround）模型4种类型，并对每一种类型进行综述。最后介绍了Retinex在图像增强方面的典型应用，并总结4种Retinex模型的优劣，展望了Retinex的未来发展方向。

        Abstract

        As a color consistence model derived from human visual system research, Retinex has been widely used in processing uneven illumination and color shift images. This paper first introduces the fundamental principle and subsequent development of Retinex theory. Then according to the current research status, the Retinex model is divided into four types: Path-based model, PDE (Partial differential equations) model, variational model and center-surround model, and each type of model is reviewed. Finally, the paper summarizes the advantages and disadvantages of the four Retinex models, and introduces the typical application of Retinex in image enhancement, as well as the future development direction.

      • 引言

        20世纪70年代前后，Land等人[1,2]发现在不同光照条件下，人眼可以产生近乎一致的色彩感知，这种性质被称为颜色恒常性，他们猜测这种恒常性是经过视网膜（Retina）和大脑皮层（Cortex）共同处理后的结果，于是将两个英文单词组合成“Retinex”，提出了用于模拟人类视觉系统（Human visual system，HVS）机理的Retinex理论。在Retinex理论提出的40多年来，诸多学者对其进行了大量的研究，产生了许多新的解读[3,4,5]，这也显示出Retinex旺盛的生命力。需要注意的是，Retinex的初始模型依赖于心理学的实验，目的在于研究如何解读HVS的机理，而当前的Retinex在某种意义上是对数字图像进行处理，使其更接近于人类所观察到的场景，这两者存在区别[6]。本文主要针对后者进行讨论。

        Retinex理论提出的40多年来，各种Retinex模型相继提出，Retinex理论也不断得到丰富和发展。Land和MacCann在提出Retinex的同时提到了一种用于基于路径的计算机制[1,2]，即通过计算路径相邻位置的相对亮度并结合路径中的局部最亮点——白色参考点（White patch，WP）[7]来获取物体的反射率。Land并未构造足够明确的Retinex数学模型，这使得许多研究学者对Retinex理论产生了不同的理解，陆续提出了路径模型、PDE（Partial differential equations）模型、变分模型和中央周边模型（Center-surround）等各种Retinex模型。路径模型是最基础的一种Retinex模型，源于Land提出的路径机制，近年来亦有不少学者致力于路径模型的改进[6,8,9,10,11]。而Horn创新性地将图像分解为光照图像和反射图像，以此设计偏微分方程，构建了PDE模型[4]；这种将图像进行分解的做法能够降低后续算法设计的难度，启发了后来的许多变分模型。变分模型是Retinex模型里比较重要的一个分支，也是近年研究的重点[12,13,14,15,16]；变分模型将求解Retinex问题看作最优化问题，该方法通过设计满足Retinex理论的约束项来构造能量泛函，进而获得理论上的最优结果。变分方法效果较好，但由于需要求解优化问题，计算量偏大。中央周边方法最早由Land提出[3]，其目的是希望简化基于路径的Retinex模型，这类方法中最具代表性的是多尺度Retinex模型（Multiscale Retinex，MSR）[17]，该方法在处理效果和处理速度之间取得了较好的平衡，应用也最为广泛。

        Retinex理论方法的发展，促进了其在图像增强中的应用。Retinex主要用来解决数字图像中的光照不均和色偏等问题，也被广泛用于雾霾图像、水下图像等图像处理任务中以获得高对比度的图像[18,19,20,21,22]，同时在医学、遥感、公安、交通等各个领域都有成功的应用。如文献[23]采用Retinex算法来减少航拍图像中出现的阴影；文献[24]针对视网膜图像中存在的光照不均问题，采用Retinex算法进行矫正；文献[25]将Retienx用于改善夜间图像的成像效果。

        本文首先介绍Retinex理论的基本原理，并对Retinex的4种主要模型分别进行综述，在此基础上对当前Retinex增强方法在图像处理任务中的应用进行介绍，最后总结Retinex的当前研究现状和未来发展方向。

      • 1 Retinex理论基本原理

        1

        Land等人使用由不同色块组成的“蒙德里安”图像进行人类视觉恒常性的研究。他们对“蒙德里安”图像使用梯度光照进行照射并仔细调整光照，使图像不同色块的反射光的组成成分一致。他们发现尽管最后反射到人眼的光的组成成分相同，但人眼依然可以准确地确定不同色块在正常光照条件下的对应颜色。为解释这种现象，Land和MacCann等人进行一系列的实验[1,2,26]，发现色觉产生所依赖的3个色彩感知系统相互独立并且每个系统都能够单独在复杂的光照条件下表现出恒常特性。他们认为色觉不由照射到人眼的可见光的光强决定，而是由物体表面固有的反射率所确定，人眼能够以某种方式过滤掉光照的影响而直接获得物体表面的反射率从而确定颜色。对每个色彩感知系统来说，如果将其所接收到的光的强弱用光出射度 I 表示（为便于叙述本文也将其称为为亮度），将物体表面对于相应波长的光的反射率记为 R ，将光照度记为 B ，那么每个通道所感知的色彩强弱可以认为由如下简化模型得到

        I x = R x ⋅ B x
        (1)

        式中x为坐标点。

        反射率是物体本身固有的性质，与光照条件无关，如果能够从一幅图像中获得3个色彩通道对应的反射率 R ，那么从某种程度上可以说是解读了人类的视觉恒常特性。

        对于数字图像来说，Retinex对其处理方式一般分为两种：一种是将彩色图像分为RGB三个通道，对每个通道应用Retinex算法以解决色偏问题；另一种是将图像转换到含有亮度通道的色彩模型（如HSV色彩模型、CIELuv色彩模型）中，对其亮度通道单独进行处理以解决光照不均的问题。在色偏问题中Retinex对RGB图像3个通道处理方式相同，在光照不均问题中仅处理亮度通道，因此接下来对模型的叙述不再对通道加以区分。

      • 2 Retinex模型分类

        2

      • 2.1 路径模型

        2.1

        路径模型是Retinex模型中最为基础的一类模型，最早由Land提出，后来诸多的Retinex模型或多或少与路径模型有着一定的联系。

      • (1) 原始的路径方法

        (1)

        Land在提出了Retinex理论后，引入一种路径计算机制，通过计算路径相邻位置的相对亮度并结合路径中的WP[7]来获取物体的反射率。Provenzi等人[27]则对该模型进行了精确的数学描述。给定归一化的数字图像 I ，从该图像上某一点 y 到目标点 x 可以选定任一条路径，假设路径上相邻的两个像素上对应的亮度值分别为 I x k ， I x k + 1 ，比值为 S k = I x k + 1 I x k ，则沿这条路径可以求得 x 处相对亮度值为

        R Λ x = ∏ k = 1 n - 1 δ ϵ S k
        (2)

        式中 : n 表示该条路径中像素点的个数； δ ϵ 为阈值函数。

        为减弱噪声的影响，可以计算多条这样的路径，最终 x 处相对亮度值可以表示为

        R x = 1 N ∑ k = 1 N R k Λ = 1 N
        (3)

        如果忽略阈值机制 δ ϵ ，Provenzi等人证明 ∏ t k = 1 n k - 1 δ k S k 实际上就是终点 x 处的亮度 I ( x ) 与路径中最大亮度 I ( x H ) 的比值[27]。因此式 3 可以简化为

        R x = 1 N ∑ k = 1 N
        (4)

      • (2) 改进的路径模型

        (2)

        式 4 中 N 越大噪声越少，但相应的计算量会大大增加。为了尽可能在路径较少的情况下减弱噪声，Marini和Rizzi采用了一种随机中点位移的方法来使选取的路径接近于布朗运动[28]，Cooper等则使用一种双重螺旋的方式来选取路径[29]。不过这些路径的采样方式是一种一维的采样，依赖于方向而不是某一点的邻域信息，因而会导致处理后的图像出现光晕、伪影等问题[10,30,31]。此外这类方法所需的参数较多，并且不同的图像对这些参数也比较敏感，很难确定统一的参数来获得一致的结果。

        针对一维采样方法的不足，Provenzi等人提出了基于二维的随机撒点模型（Random spay Retinex，RSR）[10]。该方法将一维的路径方式改为向二维圆形中撒点，并通过“密度函数”来控制离中心 x 距离 r 处圆周撒点的密度，其公式描述如下

        R x = 1 N ∑ k = 1 N
        (5)

        式中 C k x 表示第 k 次撒点的区域。该模型减少了参数个数，而后出现一些模型来对其继续改进。比较有代表性的是Banić和Lončarić提出的LRSR（Light random sprays Retinex）模型[32]以及SLRMSR（Smart light random memory sprays Retinex）模型[11]，前者能够在参数 N 和 n 更小的情况下获得噪声更少的Retinex结果，而后者通过改变撒点的方式来进一步降低计算复杂度。

        Bertalmío等人将二维撒点过程用更加高效的“核”来替代，提出了KBR（Kernel-based Retinex）模型[6]。其形式如下

        R x = ∑ y : I y ≥ I x w x , y f +
        (6)

        式中：x,y为图像空间 Ω 上的两个点； w x , y 为所谓的“核”，表示在点 x 周围选点选到 y 的概率密度，取值在 0,1 区间，并且满足 ∀ x , y ∈ Ω ， w x , y = w ( y , x ) ， ∑ y ∈ Ω w x , y = 。

        Provenzi等人用严格的数学理论证明了上述几种Retinex模型在计算过程中仅能够对欠曝的图像进行处理，无法处理过曝的图像[27]。为此Bertalmío等人参考了Palma-Amestoy提出的一种图像色彩增强的变分框架[12]，将KBR模型进行反对称改造，得到了aKBR（Anti-symmetrization KBR）变分模型[6]，从而解决了KBR模型无法处理过曝图像的问题。经过改造的模型可以表示为如下的形式

        R x = ∑ y ∈ Ω w x , y f I x I y s i g n + - ∑ y ∈ Ω w x , y f I y I x s i g n -
        (7)

        式中 s i g n + ξ = 1 , ξ > 0 1 2 , ξ = 0 0 , ξ < 0 ， s i g n - ξ = 1 - s i g n + ξ 。

        这类改进的路径模型忠实于Land路径模型，参数相对较多、计算量大且易于产生噪声，最新的一些路径模型[8,9,33]也多围绕减少噪声、降低计算量进行改进。而一些学者则试图摆脱路径模型的基础框架，从其基本的原理出发，衍生出了更丰富的Retinex模型。

      • 2.2 PDE模型

        2.2

        通常认为Land提出的路径模型是最原始的Retinex模型。该方法一方面需要进行随机采样来尽可能在减少计算量的情况下减弱噪声，而另一方面Retinex从某种意义上说是使用局部信息恢复颜色认知的一种计算模型[34]，但如果选取的路径不断增多、范围不断增大，模型将退化为全局的WP模型[27]。Retinex提出后不久，Horn率先以一种极具创新的视角解读了Retinex模型[4]并对其进行简化，提出了一种PDE形式的Retinex模型。他率先将式 1 中的光照分量 B 和反射分量 R 从亮度 I 中分离开来，分别得到光照图像和反射图像，以此构建偏微分方程。后来的许多方法都受此思想的影响。

        出于计算方便，将式 1 两边取对数后有

        I x = R x + B x
        (8)

        式中 I x = l o g I x , R x = l o g R x , B x = l o g B ( x ) ，那么由式 8 可以得到

        Δ I x = Δ R x + Δ B x
        (9)

        式中 Δ 为拉普拉斯算子。取

        δ ϵ Δ I x = Δ I x Δ I x > ϵ 0 其 他
        (10)

        Horn认为在光照平滑的前提下，光照图 B 处处平滑，对应点位置的偏导数是一个小量；另一方面，物体反射率一般只在边缘处有较大变化，在物体内部可视为反射率不变，因此认为 δ ϵ Δ I x ≈ Δ R x 。最终得到泊松方程为

        Δ R ˆ x = δ ϵ Δ I x
        (11)

        对此Horn采用了一种迭代的策略进行求解，但该方法并不是一个最优的方法[30]。Blake[35,36,37]对Horn的方法进行了改进，他指出Horn的方法不完全等同于Land的Retinex，因而将Horn微分方程中的Laplace算子更改为了梯度。

        Morel等人[38,39]直接从基于路径的Retinex模型中推导出了具有类似形式的泊松方程。他们证明了对称随机游走Retinex模型可以表示为具有诺伊曼边界条件的离散泊松方程为

        - Δ d R x = ∑ x 0 ∈ N 4 x δ ϵ I x - I x 0 x ∈ Ω ∂ d R x ∂ n = 0 x ∈ ∂ Ω
        (12)

        式中 Δ d 以及 ∂ d 分别表示离散拉普拉斯算子以及离散偏微分符号。在此基础上可以推导出，在不考虑阈值函数 δ ϵ 的情况下，式 12 将退化为Horn的泊松方程的形式。

        Ma等人[40]分析了式 12 后认为其本质可视为 L 2 范数的优化问题，因而可以称为 L 2 -Retinex，即

        R ˆ = a r g m i n R ∇ R - δ ϵ ∇ I 2 2
        (13)

        类似地，他们提出了一种 L 1 -Retinex模型[40]

        R ˆ = a r g m i n R ∇ R - δ ϵ ∇ I 1
        (14)

        PDE模型根据Retinex理论的一些基本假设来构建偏微分方程，相对于路径模型其描述更为精确，并且参数量少，得到的结果更为稳定。

      • 2.3 变分模型

        2.3

        变分方法是Retinex方法中的另一条重要的分支。基于变分方法的Retinex模型融合一些假设和先验条件构造变分问题。相对而言，变分模型在保证模型描述精确的同时又不失灵活，既可以完全遵照Retinex的基本理论和假设，也可以融合一些限制条件来满足实际应用需要。由于构建的模型可能不完全遵照原始的Retinex理论，因此有文献也将这种类型的模型称为Retinex-like模型。

        变分模型主要包括两个分支，一种来源于对人类视觉系统的研究，称为基于HVS的变分模型；另一种模型把Hron将图像分解为光照图像和反射图像这一思想作为一种先验信息，称为基于Horn物理先验的变分模型。

      • (1) 基于HSV的变分模型

        (1)

        Palma-Amestoy等人[12]率先从HVS出发构建了一种Retinex-like变分模型，具体形式为

        M i n i m i z e : E w I = D I + C w I
        (15)

        式中全局项 D 用以控制最终生成的图像满足GW（Gray world）假设；另一项为局部项 C w ，最小化该项会使得图像对比度增强，而这一项具有一定的Retinex模型的特性。

        Palma-Amestoy选取“离差熵”作为全局项，将最终优化的结果接近原始图像 I 0 ，同时满足GW假设，即最终结果接近 1 2 ，表达式为

        D α , β ε I ≜ α ∫ 1 2 l o g 1 2 I x - 1 2 - I x d x + β ∫ I 0 x l o g I 0 x I x - I 0 x - I x d x
        (16)

        式中 α , β > 0 。局部项可以定义为

        C w F ( m i n m a x ) I ≜ 1 4 ∬ w x , y F m i n I x , I y m a x I x , I y d x d y
        (17)

        式中： w x , y 为距离函数，其值随像素之间距离的增加单调递减，用以实现“局部”特性； F 用以对图像进行伽马校正。事实上如果令 F ' ( ξ ) = ξ f ( ξ ) ，通过计算可以得到

        I x δ C w F m i n m a x I x = 1 2 ∫ Ω w x , y f I x I y s i g n + I y - I x d y - 1 2 ∫ Ω w x , y f I y I x s i g n - I y - I x d y
        (18)

        式中 δ C w F m i n m a x I 为 C w F m i n m a x I 的变分。可以看到式 18 与aKBR在形式上是一致的。

        变分模型计算量相对较大，为此Provenzi等人[41]在Palma-Amestoy等人的变分模型基础上与小波进行结合，降低了计算量。

      • (2) 基于Horn物理先验的变分模型

        (2)

        Kimmel等人认为光照分量的空间变化是平滑的，根据这一先验假设，其在Horn工作的基础上，构造了Retinex的变分形式

        M i n i m i z e : F B = ∬ Ω ∇ B 2 2 + α B - I 2 + β ∇ B - ∇ I 2 2 d x S u b j e c t t o : B ≥ I , ∇ B , n = 0
        (19)

        式中：第一项 ∇ B 2 2 用以确保最终光照分量平滑；第二项 B - I 2 是保真项，使 B 和 I 两者差距不至于过大；第三项 ∇ B - ∇ I 2 2 等同于 ∇ R 2 2 ，其目的是希望得到的反射分量空间分布也尽可能平滑，从而获得视觉效果更舒服的结果； α 和 β 是权重系数，用来控制对应项的重要程度。后来的一些模型在Kimmel模型的基础上，通过修改或添加一些约束来构造新的模型[42,43,44]，这也体现了变分方法的灵活性。Ma和Osher[42]引入一种全变分(Total variation，TV）噪声抑制模型[45]用于对光照进行估计

        M i n i m i z e : F B = ∬ Ω 1 2 ∇ B 2 2 + t ∇ R 2 d x
        (20)

        式中： ∇ R 2 为TV项，以获取分段光滑的反射图；参数 t 为权重系数。Ma和Osher等人的模型并未考虑保真项，Ng和Wang在此基础上加入保真项得到

        M i n i m i z e : F B = α 2 ∇ B 2 2 + ∇ R 2 + β 2 B - R - I 2 d
        (21)

        式中： B - R - I 2 为保真项； α 和 β 为权重系数。

        这类基于Horn物理先验的变分模型相对灵活，可以方便地添加不同的约束项来获得更好的效果。例如Wang等人[13]参考了凸优化问题中的内点法定义约束项，而Cheng等人[16]则加入了混合超拉普拉斯先验来构造约束项，均获得了很好的效果。

      • 2.4 中央周边模型

        2.4

        中央周边模型是一个相对简单但效果不错的Retinex模型，可以说中央周边模型本身就是为降低计算的复杂度而诞生的，最早也是由Land提出[3]，他认为图像某点的Retinex结果应当为该点的光出射度与邻近位置光平均出射度的比值，并且通过实验解释了马赫带现象，确立了该方法的合理性。Land的中央周边模型希望通过某一点与其周围区域相比较从而消去光照的影响这一思想，在某种程度上可以看作Land路径方法中通过相邻像素之比消去光照影响这一思想的延伸，在此基础上Jobson等人[46]构造了SSR模型（Single-scale Retinex）为

        R x = I x - l o g F * I x
        (22)

        式中 F 为卷积核，作者选取具有局部特征的高斯核作为卷积核。考虑光照变化平滑这一先验假设，那么可认为

        l o g F * I x = l o g F * B ⋅ R x ≈ l o g F * R x ⋅ B x
        (23)

        令 F * R = R ¯ ，可以得到

        R x ≈ l o g B x ⋅ R x B x ⋅ R ¯ x = l o g R x R ¯ x
        (24)

        由式 24 可以看到，SSR模型通过“局部对比”消去了光照的影响，因而在光照平滑变化的条件下具有光照不变的恒常特性。然而SSR最终效果与高斯核的大小密切相关，对于一幅灰度图像来说，小尺寸高斯核可以提升图像暗部亮度，但有可能会导致补偿过度使图像动态范围过小，亦会出现“光晕”现象，而大尺寸高斯核可以提升图像动态范围，但可能使模型丧失局部特性，导致图像阴影处无法得到补偿。因此Jobson等人进而提出MSR模型[17]，该模型融合多尺度高斯核，可以获得稳定的结果

        R M S R x = ∑ n = 1 N w n
        (25)

        对应处理彩色图像的MSR模型为MSRCR（MSR with color restoration）模型[17,47,48]和MSRCP（MSR with chromaticity preservation）模型[48]，前者用于处理彩色图像色偏，后者用于解决光照不均的问题。

      • 3 基于Retinex的图像增强算法应用

        3

        Retinex理论的一个重要基础是将图像分解为光照照度和反射率的乘积，各种Retinex模型的一个共同目标是获得尽可能准确的反射图，从而在复杂的光照条件下恢复场景中物体的真实色彩，这给Retinex的应用提供了很大的空间。

        在实际应用中，如果仅对图像的亮度信息使用Retinex相关算法进行处理，可以提高图像暗区的亮度[49]，因而许多Retinex模型被用于处理曝光不足或者动态范围较低的图像以获得较好的视觉观感。再比如夜间相机成像曝光普遍不足，因而文献[25,50]将改进的MSR算法用在夜间成像中，在不损失高光细节的情况下提升了图像整体亮度；文献[23]则将Retinex用于航空影像中，以去除航空影像中高大建筑物的阴影。此外Petro[48]和Palma-Amestoy[12]等人指出，如果使用Retinex算法对彩色图像RGB三个通道分别进行处理，可以在一定程度上减少色偏。

        事实上Retinex作为一种解决光照不均或色偏的图像增强算法，已经被广泛用于各种图像分析任务的预处理步骤中，以降低图像的复杂性，从而增强后续算法的鲁棒性。例如文献[51,52]在人脸检测任务中将Retinex作为图像的预处理步骤，移除光照的影响从而提升复杂光照条件下算法的鲁棒性。Lu等人[53]采用Retinex变分模型来评价皮肤镜图像的光照不均程度；文献[54]则将Retinex用于眼底图像光照不均的矫正。

        另一方面许多Retinex模型在求解反射率时假设光照是均匀的，那么根据式 8 可以看到，在光照均匀这一前提下可以将一幅图像视为低频的光照信息与高频的反射率信息的加和，这与同态滤波的思想非常接近，因而一些学者将这类Retinex模型用于增强低能见度图像，通过抑制图像分解后的低频部分，达到增强图像的效果。例如Rajput等人[18]提出了一个基于Retinex的对比度增强算法，有效提升了雾天图像的视觉效果。Gao等人[19]则将彩色图像转换到HSI空间后应用MSR算法，也取得了不错的去雾效果。类似地，文献[20,22]将Retinex用于水下的彩色图像，以增强水下图像的能见度。

        Retinex适用的任务十分广泛，实际上很多图像处理任务复杂，单纯应用Retinex方法经常不能达到理想的图像增强效果，因此许多文献也往往将Retinex方法与其他方法结合起来，进行图像的预处理增强。例如Zhan等人[55]将Retinex与小波变换结合，用以红外图像的处理，在增强细节的同时改善了红外图像的视觉效果；文献[56]将Retinex与引导滤波结合以实现图像细节，同时减少图像颜色失真；文献[57]则将Retinex与Shearlet变换结合，在提升处理速度的同时改善了图像视觉效果。

      • 4 结束语

        4

        在各种图像处理任务中，图像质量的优劣，对最终图像处理的结果至关重要。而在实际任务中，受限于各种条件，所获取的图像往往会存在诸多质量问题，而Retinex作为一种致力于实现人眼的颜色恒常特性的图像增强模型，能够将图像分解为反射率图像和光照图像，进而能够剔除或减弱光照的影响，在解决光照不均或是色偏方面有着非常出色的效果，能够大大降低后续图像处理算法的处理难度。

        Retinex方法可以分为路径模型、PDE模型、变分模型和中央周边模型4种类型。本文对这4种Retinex模型进行原理介绍和综述，同时给出了Retinex算法在图像增强中的一些典型应用。综合来看，基于路径的Retinex模型源自Land对人类视觉系统的相关实验，具有相对完备的理论支撑，然而由于路径方法参数较多，相对耗时，并且存在噪声，目前的应用相对较少。PDE模型源自Horn，是对路径方法的一种全新的解读，相对于路径模型而言，PDE模型的参数较少，性能稳定。基于HSV的Retinex模型与路径模型出发点相似，从人类视觉模型的特点出发给出了Retinex模型的变分形式，具有启发意义；而对基于物理性质的变分模型而言，灵活的架构能够对变分模型中的约束项加以调整，从而获得出色的结果，但其对计算的要求太高，难以获得广泛的应用。中央周边模型是目前最为均衡的一种模型，参数量少、速度较快、结果较为稳定，在性能和速度上取得了很好的平衡，是当前应用最为广泛的一种Retinex模型。

        近年来，上述4种模型都在不断地改进与完善。但是，Retinex算法仍然面临的主要挑战是计算速度和处理效果之间的矛盾。一方面Retinex可以通过构造更复杂的模型来获得更好的效果，例如变分Retienx模型可以添加不同类型的能量泛函以对模型进行更精确的调整，从而提升图像整体的视觉效果。但另一方面，复杂的结构又使得模型的计算量大大增加，限制了算法的广泛应用。如何在优化处理速度的同时提升效果，将是Retinex算法未来研究的一个难点和热点。

      • 参考文献

        • 1

          Land E H, Mccann J J. Lightness and Retinex theory[J]. JOSA, 1971, 61(1): 1-11.

        • 2

          Land E H. The Retinex theory of color vision[J]. Scientific American, 1977, 237(6): 108-128.

        • 3

          Land E H. An alternative technique for the computation of the designator in the retinex theory of color vision.[J]. Proceedings of the National Academy of Sciences, 1986, 83(10): 3078-3080.

        • 4

          Horn B K P. Determining lightness from an image[J]. Computer Graphics and Image Processing, 1974, 3(4): 277-299.

        • 5

          Kimmel R, Shaked D, Elad M, et al. A variational framework for Retinex[J]. International Journal of Computer Vision, 2003, 52(1): 7-23.

        • 6

          Bertalmío M, Caselles V, Provenzi E. Issues about Retinex theory and contrast enhancement[J]. International Journal of Computer Vision, 2009, 83(1): 101-119.

        • 7

          Rizzi A, Gatta C, Marini D. A new algorithm for unsupervised global and local color correction[J]. Pattern Recognition Letters, 2003, 24(11): 1663-1677.

        • 8

          Lecca M, Rizzi A, Serapioni R P. GRASS: A gradient-based random sampling scheme for milano Retinex[J]. IEEE Transactions on Image Processing, 2017, 26(6): 2767-2780.

        • 9

          Gianini G, Lecca M, Rizzi A. A population-based approach to point-sampling spatial color algorithms[J]. Journal of the Optical Society of America, A: Optics, Image Science, and Vision, 2016, 33(12): 2396-2413.

        • 10

          Provenzi E, Fierro M, Rizzi A, et al. Random spray Retinex: A new Retinex Implementation to investigate the local properties of the model[J]. IEEE Transactions on Image Processing, 2007, 16(1): 162-171.

        • 11

          Banić N, Lončarić S. Smart light random memory sprays Retinex: A fast Retinex implementation for high-quality brightness adjustment and color correction[J]. JOSA A, 2015, 32(11): 2136-2147.

        • 12

          Palma-Amestoy R, Provenzi E, Bertalmio M, et al. A perceptually inspired variational framework for color enhancement[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2009, 31(3): 458-474.

        • 13

          Wang W, He C. A variational model with barrier functionals for Retinex[J]. SIAM Journal on Imaging Sciences, 2015, 8(3): 1955-1980.

        • 14

          Park S, Yu S, Moon B, et al. Low-light image enhancement using variational optimization-based retinex model[J]. IEEE Transactions on Consumer Electronics, 2017, 63(2): 178-184.

        • 15

          Zhao R, Pan H, Hou G, et al. A multichannel total variational Retinex model based on nonlocal differential operators[C]//Ninth International Conference on Graphic and Image Processing (ICGIP 2017). USA: International Society for Optics and Photonics, 2018, 10615: 106152E.

        • 16

          Cheng M H, Huang T Z, Zhao X L, et al. A variational model with hybrid hyper-Laplacian priors for Retinex[J]. Applied Mathematical Modelling, 2019, 66: 305-321.

        • 17

          Jobson D J, Rahman Z, Woodell G A. A multiscale Retinex for bridging the gap between color images and the human observation of scenes[J]. IEEE Transactions on Image Processing, 1997, 6(7): 965-976.

        • 18

          Rajput G S, Rahman Z U. Hazard detection on runways using image processing techniques[C]//Proceedings of SPIE. USA: The International Society for Optical Engineering, 2008, 6957: 1-12.

        • 19

          Gao H, Wei P, Ke J. Color enhancement and image defogging in HSI based on Retinex model[C]//2015 International Conference on Optical Instruments and Technology: Optoelectronic Imaging and Processing Technology. USA: International Society for Optics and Photonics, 2015, 9622: 962203.

        • 20

          Fu X, Zhuang P, Huang Y, et al. A Retinex-based enhancing approach for single underwater image[C]//2014 IEEE International Conference on Image Processing (ICIP). USA: IEEE, 2014: 4572-4576.

        • 21

          石丹, 李庆武, 范新南, 等. 基于Contourlet变换和多尺度Retinex的水下图像增强算法[J]. 激光与光电子学进展, 2010, 47(4): 41-45.

          Shi Dan, Li Qingwu, Fan Xinnan, et al. Underwater image enhancement algorithm based on Contourlet transform and multi-scale Retinex[J]. Laser & Optoelectronics Progress, 2010, 47(4): 41-45.

        • 22

          Zhang S, Wang T, Dong J, et al. Underwater image enhancement via extended multi-scale Retinex[J]. Neurocomputing, 2017, 245: 1-9.

        • 23

          唐亮, 谢维信, 黄建军, 等. 城市航空影像中基于模糊Retinex的阴影消除[J]. 电子学报, 2005(3): 500-503.

          Tang Liang, Xie Weixin, Huang Jianjun, et al. Removing shadows from urban aerial images based on fuzzy Retinex [J]. Acta Electronica Sinica, 2005(3): 500-503.

        • 24

          Zhao Y, Liu Y, Wu X, et al. Retinal vessel segmentation: An efficient graph cut approach with Retinex and local phase[J]. PLoS ONE, 2015, 10(4): e0122332.

        • 25

          李宏宇,朱一峰,黄怡.基于Retinex改进的夜间图像增强算法[J].长春理工大学学报(自然科学版),2018,41(6):104-108.

          Li Hongyu, Zhu Yifeng, Huang Yi. Improved night image enhancement algorithm based on Retinex[J]. Journal of Changchun University of Science and Technology(Natural Science Edition), 2018, 41(6): 104-108.

        • 26

          Land E H. Recent advances in retinex theory and some implications for cortical computations: Color vision and the natural image[J]. Proceedings of the National Academy of Sciences, 1983, 80(16): 5163-5169.

        • 27

          Provenzi E, Marini D, De Carli L, et al. Mathematical definition and analysis of the Retinex algorithm[J]. Journal of the Optical Society of America A, 2005, 22(12): 2613.

        • 28

          Marini D, Rizzi A. A computational approach to color adaptation effects[J]. Image and Vision Computing, 2000, 18(13): 1005-1014.

        • 29

          Cooper T J. Analysis and extensions of the Frankle-McCann Retinex algorithm[J]. Journal of Electronic Imaging, 2004, 13(1): 85.

        • 30

          Zosso D, Tran G, Osher S J. Non-local Retinex—A unifying framework and beyond[J]. SIAM Journal on Imaging Sciences, 2015, 8(2): 787-826.

        • 31

          Frankle J A, Mccann J J. Method and apparatus for lightness imaging[P]. United States: 4384336, 1983-05-17.

        • 32

          Banić N, Lončarić S. Light random sprays Retinex: Exploiting the noisy illumination estimation[J]. IEEE Signal Processing Letters, 2013, 20(12): 1240-1243.

        • 33

          Cheng D, Liu H, Li L，et al. Video image denoising and enhancing method and device based on random spray retinex[P]. United States: 9978131, 2018-05-22.

        • 34

          Provenzi E. Formalizations of the Retinex model and its variants with variational principles and partial differential equations[J]. Journal of Electronic Imaging, 2017, 27(1): 1.

        • 35

          Blake A. Boundary conditions for lightness computation in Mondrian world[J]. Computer Vision, Graphics, and Image Processing, 1985, 32(3): 314-327.

        • 36

          Blake A. On lightness computation in Mondrian world[C]//Central and Peripheral Mechanisms of Colour Vision.

          [S.l.]: Springer, 1985: 45-59.

        • 37

          Brelstaff G, Blake A. Computing lightness[J]. Pattern Recognition Letters, 1987, 5(2): 129-138.

        • 38

          Morel J M, Petro A B, Sbert C. Fast implementation of color constancy algorithms[C]//Proceedings of SPIE.

          [S.l.]: The International Society for Optical Engineering, 2009, 7241: 724106-1-724106-10.

        • 39

          Morel J M, Petro A B, Sbert C. A PDE formalization of Retinex theory[J]. IEEE Transactions on Image Processing, 2010, 19(11): 2825-2837.

        • 40

          Ma W, Morel J M, Osher S, et al. An L1-based variational model for Retinex theory and its application to medical images[C]//CVPR 2011. Colorado Springs, CO, USA: IEEE, 2011: 153-160.

        • 41

          Provenzi E, Caselles V. A wavelet perspective on variational perceptually-inspired color enhancement[J]. International Journal of Computer Vision, 2014, 106(2): 153-171.

        • 42

          Ma W, Osher S. A TV Bregman iterative model of Retinex theory[J]. UCLA Cam Report, 2010, 10: 13.

        • 43

          Ng M K, Wang W. A total variation model for Retinex[J]. SIAM Journal on Imaging Sciences, 2011, 4(1): 345-365.

        • 44

          Chen T, Yin W, Zhou X S, et al. Total variation models for variable lighting face recognition[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2006, 28(9): 1519-1524.

        • 45

          Rudin L I, Osher S, Fatemi E. Nonlinear total variation based noise removal algorithms[J]. Physica D: Nonlinear Phenomena, 1992, 60(1-4): 259-268.

        • 46

          Jobson D J, Rahman Z, Woodell G A. Properties and performance of a center/surround Retinex[J]. IEEE Transactions on Image Processing, 1997, 6(3): 451-462.

        • 47

          Jobson D J. Retinex processing for automatic image enhancement[J]. Journal of Electronic Imaging, 2004, 13(1): 100.

        • 48

          Petro A B, Sbert C, Morel J-M . Multiscale Retinex[J]. Image Processing on Line, 2014, 4: 71-88.

        • 49

          Mccann J J, Rizzi A. The art and science of HDR imaging[M]. USA: John Wiley & Sons, 2011: 26.

        • 50

          Lin H, Shi Z. Multi-scale retinex improvement for nighttime image enhancement[J]. Optik, 2014, 125(24): 7143-7148.

        • 51

          Jung C, Sun T, Jiao L. Eye detection under varying illumination using the Retinex theory[J]. Neurocomputing, 2013, 113: 130-137.

        • 52

          葛微, 李桂菊, 程宇奇, 等. 利用改进的Retinex进行人脸图像光照处理[J]. 光学精密工程, 2010, 18(4): 1011-1020.

          Ge Wei, Li Guiju, Cheng Yuqi, et al. Face image illumination processing based on improved Retinex [J]. Optics and Precision Engineering, 2010, 18(4): 1011-1020.

        • 53

          Lu Y, Xie F, Wu Y, et al. No reference uneven illumination assessment for dermoscopy images[J]. IEEE Signal Processing Letters, 2015, 22(5): 534-538.

        • 54

          张鑫垒, 傅迎华. 眼底图像光照不均匀校正[J]. 软件导刊, 2017, 16(2): 168-171; 203.

          Zhang Xinlei, Fu Yinghua. Correction of uneven illumination in fundus image [J]. Software Guide, 2017, 16(2): 168-171; 203.

        • 55

          Zhan B, Wu Y. Infrared image enhancement based on wavelet transformation and Retinex[C]//2010 Second International Conference on Intelligent Human-Machine Systems and Cybernetics.

          [S.l.]:IEEE, 2010, 1: 313-316.

        • 56

          方帅, 杨静荣, 曹洋, 等. 图像引导滤波的局部多尺度Retinex算法[J]. 中国图象图形学报, 2012, 17(7): 748-755.

          Fang Shuai, Yang Jingrong, Cao Yang, et al. Local multi-scale Retinex algorithm based on guided image filtering [J]. Journal of Image and Graphics, 2012, 17(7): 748-755.

        • 57

          王静静, 贾振红, 覃锡忠, 等. 基于Shearlet变换和多尺度Retinex的遥感图像增强算法[J]. 计算机应用, 2015, 35(1): 202-205; 210.

          Wang Jingjing, Jia Zhenhong, Qin Xizhong, et al. Remote sensing image enhancement algorithm based on Shearlet transform and multi-scale Retinex [J]. Journal of Computer Applications, 2015, 35(1): 202-205; 210.

    • 基本信息

      DOI:10.16337/j.1004⁃9037.2019.01.001

      中图分类号: TP391.4

      文献标识码: A

      引用信息

      谢凤英,汤萌,张蕊.基于Retinex的图像增强方法综述[J].数据采集与处理,2019,34(01):1-11.

      Xie Fengying,Tang Meng,Zhang Rui.Review of Image Enhancement Algorithms Based on Retinex[J].Journal of Data Acquisition and Processing,2019,34(01):1-11.

      基金信息

      国家自然科学基金（61871011）资助项目。

      稿件历史

      纸刊出版 : 2019-01-15
      收稿日期 : 2018-12-20
      修回日期 : 2019-01-15

      • 谢凤英

      机 构：

      1. 北京航空航天大学宇航学院图像处理中心，北京，100191

      2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

      Affiliation：

      1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China

      2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      作者简介：

      谢凤英（1973-），女，教授，博士生导师，研究方向：图像质量评价、目标检测识别、遥感图像处理与应用、医学图像分析等，E-mail：xfy_73@buaa.edu.cn。

      汤萌

      机 构：

      1. 北京航空航天大学宇航学院图像处理中心，北京，100191

      2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

      Affiliation：

      1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China

      2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      作者简介：

      汤萌（1995-），男，硕士研究生，研究方向：自然场景图像光照校正。

      张蕊

      机 构：

      1. 北京航空航天大学宇航学院图像处理中心，北京，100191

      2. 北京航空航天大学生物医学工程高精尖创新中心, 北京，100191

      Affiliation：

      1. Image Processing Center, School of Astronautics, Beihang University, Beijing, 100191, China

      2. Beijing Advanced Innovation Center for Biomedical Engineering, Beihang University, Beijing，100191, China

      作者简介：

      张蕊（1994-），女，硕士研究生，研究方向：自然场景图像光照校正、遥感图像薄云去除。

      张黄群

      角 色：中文编辑

      Role：Editor

      image /

    • 参考文献

      • 1

        Land E H, Mccann J J. Lightness and Retinex theory[J]. JOSA, 1971, 61(1): 1-11.

      • 2

        Land E H. The Retinex theory of color vision[J]. Scientific American, 1977, 237(6): 108-128.

      • 3

        Land E H. An alternative technique for the computation of the designator in the retinex theory of color vision.[J]. Proceedings of the National Academy of Sciences, 1986, 83(10): 3078-3080.

      • 4

        Horn B K P. Determining lightness from an image[J]. Computer Graphics and Image Processing, 1974, 3(4): 277-299.

      • 5

        Kimmel R, Shaked D, Elad M, et al. A variational framework for Retinex[J]. International Journal of Computer Vision, 2003, 52(1): 7-23.

      • 6

        Bertalmío M, Caselles V, Provenzi E. Issues about Retinex theory and contrast enhancement[J]. International Journal of Computer Vision, 2009, 83(1): 101-119.

      • 7

        Rizzi A, Gatta C, Marini D. A new algorithm for unsupervised global and local color correction[J]. Pattern Recognition Letters, 2003, 24(11): 1663-1677.

      • 8

        Lecca M, Rizzi A, Serapioni R P. GRASS: A gradient-based random sampling scheme for milano Retinex[J]. IEEE Transactions on Image Processing, 2017, 26(6): 2767-2780.

      • 9

        Gianini G, Lecca M, Rizzi A. A population-based approach to point-sampling spatial color algorithms[J]. Journal of the Optical Society of America, A: Optics, Image Science, and Vision, 2016, 33(12): 2396-2413.

      • 10

        Provenzi E, Fierro M, Rizzi A, et al. Random spray Retinex: A new Retinex Implementation to investigate the local properties of the model[J]. IEEE Transactions on Image Processing, 2007, 16(1): 162-171.

      • 11

        Banić N, Lončarić S. Smart light random memory sprays Retinex: A fast Retinex implementation for high-quality brightness adjustment and color correction[J]. JOSA A, 2015, 32(11): 2136-2147.

      • 12

        Palma-Amestoy R, Provenzi E, Bertalmio M, et al. A perceptually inspired variational framework for color enhancement[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2009, 31(3): 458-474.

      • 13

        Wang W, He C. A variational model with barrier functionals for Retinex[J]. SIAM Journal on Imaging Sciences, 2015, 8(3): 1955-1980.

      • 14

        Park S, Yu S, Moon B, et al. Low-light image enhancement using variational optimization-based retinex model[J]. IEEE Transactions on Consumer Electronics, 2017, 63(2): 178-184.

      • 15

        Zhao R, Pan H, Hou G, et al. A multichannel total variational Retinex model based on nonlocal differential operators[C]//Ninth International Conference on Graphic and Image Processing (ICGIP 2017). USA: International Society for Optics and Photonics, 2018, 10615: 106152E.

      • 16

        Cheng M H, Huang T Z, Zhao X L, et al. A variational model with hybrid hyper-Laplacian priors for Retinex[J]. Applied Mathematical Modelling, 2019, 66: 305-321.

      • 17

        Jobson D J, Rahman Z, Woodell G A. A multiscale Retinex for bridging the gap between color images and the human observation of scenes[J]. IEEE Transactions on Image Processing, 1997, 6(7): 965-976.

      • 18

        Rajput G S, Rahman Z U. Hazard detection on runways using image processing techniques[C]//Proceedings of SPIE. USA: The International Society for Optical Engineering, 2008, 6957: 1-12.

      • 19

        Gao H, Wei P, Ke J. Color enhancement and image defogging in HSI based on Retinex model[C]//2015 International Conference on Optical Instruments and Technology: Optoelectronic Imaging and Processing Technology. USA: International Society for Optics and Photonics, 2015, 9622: 962203.

      • 20

        Fu X, Zhuang P, Huang Y, et al. A Retinex-based enhancing approach for single underwater image[C]//2014 IEEE International Conference on Image Processing (ICIP). USA: IEEE, 2014: 4572-4576.

      • 21

        石丹, 李庆武, 范新南, 等. 基于Contourlet变换和多尺度Retinex的水下图像增强算法[J]. 激光与光电子学进展, 2010, 47(4): 41-45.

        Shi Dan, Li Qingwu, Fan Xinnan, et al. Underwater image enhancement algorithm based on Contourlet transform and multi-scale Retinex[J]. Laser & Optoelectronics Progress, 2010, 47(4): 41-45.

      • 22

        Zhang S, Wang T, Dong J, et al. Underwater image enhancement via extended multi-scale Retinex[J]. Neurocomputing, 2017, 245: 1-9.

      • 23

        唐亮, 谢维信, 黄建军, 等. 城市航空影像中基于模糊Retinex的阴影消除[J]. 电子学报, 2005(3): 500-503.

        Tang Liang, Xie Weixin, Huang Jianjun, et al. Removing shadows from urban aerial images based on fuzzy Retinex [J]. Acta Electronica Sinica, 2005(3): 500-503.

      • 24

        Zhao Y, Liu Y, Wu X, et al. Retinal vessel segmentation: An efficient graph cut approach with Retinex and local phase[J]. PLoS ONE, 2015, 10(4): e0122332.

      • 25

        李宏宇,朱一峰,黄怡.基于Retinex改进的夜间图像增强算法[J].长春理工大学学报(自然科学版),2018,41(6):104-108.

        Li Hongyu, Zhu Yifeng, Huang Yi. Improved night image enhancement algorithm based on Retinex[J]. Journal of Changchun University of Science and Technology(Natural Science Edition), 2018, 41(6): 104-108.

      • 26

        Land E H. Recent advances in retinex theory and some implications for cortical computations: Color vision and the natural image[J]. Proceedings of the National Academy of Sciences, 1983, 80(16): 5163-5169.

      • 27

        Provenzi E, Marini D, De Carli L, et al. Mathematical definition and analysis of the Retinex algorithm[J]. Journal of the Optical Society of America A, 2005, 22(12): 2613.

      • 28

        Marini D, Rizzi A. A computational approach to color adaptation effects[J]. Image and Vision Computing, 2000, 18(13): 1005-1014.

      • 29

        Cooper T J. Analysis and extensions of the Frankle-McCann Retinex algorithm[J]. Journal of Electronic Imaging, 2004, 13(1): 85.

      • 30

        Zosso D, Tran G, Osher S J. Non-local Retinex—A unifying framework and beyond[J]. SIAM Journal on Imaging Sciences, 2015, 8(2): 787-826.

      • 31

        Frankle J A, Mccann J J. Method and apparatus for lightness imaging[P]. United States: 4384336, 1983-05-17.

      • 32

        Banić N, Lončarić S. Light random sprays Retinex: Exploiting the noisy illumination estimation[J]. IEEE Signal Processing Letters, 2013, 20(12): 1240-1243.

      • 33

        Cheng D, Liu H, Li L，et al. Video image denoising and enhancing method and device based on random spray retinex[P]. United States: 9978131, 2018-05-22.

      • 34

        Provenzi E. Formalizations of the Retinex model and its variants with variational principles and partial differential equations[J]. Journal of Electronic Imaging, 2017, 27(1): 1.

      • 35

        Blake A. Boundary conditions for lightness computation in Mondrian world[J]. Computer Vision, Graphics, and Image Processing, 1985, 32(3): 314-327.

      • 36

        Blake A. On lightness computation in Mondrian world[C]//Central and Peripheral Mechanisms of Colour Vision.

        [S.l.]: Springer, 1985: 45-59.

      • 37

        Brelstaff G, Blake A. Computing lightness[J]. Pattern Recognition Letters, 1987, 5(2): 129-138.

      • 38

        Morel J M, Petro A B, Sbert C. Fast implementation of color constancy algorithms[C]//Proceedings of SPIE.

        [S.l.]: The International Society for Optical Engineering, 2009, 7241: 724106-1-724106-10.

      • 39

        Morel J M, Petro A B, Sbert C. A PDE formalization of Retinex theory[J]. IEEE Transactions on Image Processing, 2010, 19(11): 2825-2837.

      • 40

        Ma W, Morel J M, Osher S, et al. An L1-based variational model for Retinex theory and its application to medical images[C]//CVPR 2011. Colorado Springs, CO, USA: IEEE, 2011: 153-160.

      • 41

        Provenzi E, Caselles V. A wavelet perspective on variational perceptually-inspired color enhancement[J]. International Journal of Computer Vision, 2014, 106(2): 153-171.

      • 42

        Ma W, Osher S. A TV Bregman iterative model of Retinex theory[J]. UCLA Cam Report, 2010, 10: 13.

      • 43

        Ng M K, Wang W. A total variation model for Retinex[J]. SIAM Journal on Imaging Sciences, 2011, 4(1): 345-365.

      • 44

        Chen T, Yin W, Zhou X S, et al. Total variation models for variable lighting face recognition[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2006, 28(9): 1519-1524.

      • 45

        Rudin L I, Osher S, Fatemi E. Nonlinear total variation based noise removal algorithms[J]. Physica D: Nonlinear Phenomena, 1992, 60(1-4): 259-268.

      • 46

        Jobson D J, Rahman Z, Woodell G A. Properties and performance of a center/surround Retinex[J]. IEEE Transactions on Image Processing, 1997, 6(3): 451-462.

      • 47

        Jobson D J. Retinex processing for automatic image enhancement[J]. Journal of Electronic Imaging, 2004, 13(1): 100.

      • 48

        Petro A B, Sbert C, Morel J-M . Multiscale Retinex[J]. Image Processing on Line, 2014, 4: 71-88.

      • 49

        Mccann J J, Rizzi A. The art and science of HDR imaging[M]. USA: John Wiley & Sons, 2011: 26.

      • 50

        Lin H, Shi Z. Multi-scale retinex improvement for nighttime image enhancement[J]. Optik, 2014, 125(24): 7143-7148.

      • 51

        Jung C, Sun T, Jiao L. Eye detection under varying illumination using the Retinex theory[J]. Neurocomputing, 2013, 113: 130-137.

      • 52

        葛微, 李桂菊, 程宇奇, 等. 利用改进的Retinex进行人脸图像光照处理[J]. 光学精密工程, 2010, 18(4): 1011-1020.

        Ge Wei, Li Guiju, Cheng Yuqi, et al. Face image illumination processing based on improved Retinex [J]. Optics and Precision Engineering, 2010, 18(4): 1011-1020.

      • 53

        Lu Y, Xie F, Wu Y, et al. No reference uneven illumination assessment for dermoscopy images[J]. IEEE Signal Processing Letters, 2015, 22(5): 534-538.

      • 54

        张鑫垒, 傅迎华. 眼底图像光照不均匀校正[J]. 软件导刊, 2017, 16(2): 168-171; 203.

        Zhang Xinlei, Fu Yinghua. Correction of uneven illumination in fundus image [J]. Software Guide, 2017, 16(2): 168-171; 203.

      • 55

        Zhan B, Wu Y. Infrared image enhancement based on wavelet transformation and Retinex[C]//2010 Second International Conference on Intelligent Human-Machine Systems and Cybernetics.

        [S.l.]:IEEE, 2010, 1: 313-316.

      • 56

        方帅, 杨静荣, 曹洋, 等. 图像引导滤波的局部多尺度Retinex算法[J]. 中国图象图形学报, 2012, 17(7): 748-755.

        Fang Shuai, Yang Jingrong, Cao Yang, et al. Local multi-scale Retinex algorithm based on guided image filtering [J]. Journal of Image and Graphics, 2012, 17(7): 748-755.

      • 57

        王静静, 贾振红, 覃锡忠, 等. 基于Shearlet变换和多尺度Retinex的遥感图像增强算法[J]. 计算机应用, 2015, 35(1): 202-205; 210.

        Wang Jingjing, Jia Zhenhong, Qin Xizhong, et al. Remote sensing image enhancement algorithm based on Shearlet transform and multi-scale Retinex [J]. Journal of Computer Applications, 2015, 35(1): 202-205; 210.

      • 您是本站第 访问者

      通信地址：南京市御道街29号 南京航空航天大学(明故宫校区)

      邮编：210016 传真：025-84892742

      电话：025-84892742 E-mail：sjcj@nuaa.edu.cn

      技术支持：北京勤云科技发展有限公司

      网站版权： © 《数据采集与处理》 编辑部