一种改进的透射率分布估计的夜间图像去雾算法

薛 楠，严利民,2

一种改进的透射率分布估计的夜间图像去雾算法

薛 楠1，严利民1,2

（1. 上海大学 机电工程与自动化学院，上海 200444；2. 上海大学 微电子研究与开发中心，上海 200444）

针对基于暗通道先验理论（dark channel prior, DCP）的去雾算法在处理夜间有雾图像时细节信息缺失、光源区域的纹理受损严重的问题，本文提出了一种改进的透射率分布估计的夜间图像去雾算法。通过引入暗态点光源模型、暗通道可信度权值因子和伪去雾图像，结合夜间图像成像模型，获取改进的透射率分布，对夜间降质图像进行去雾处理。实验结果表明，经本文算法处理后的图像在纹理细节上损失小、图像清晰度高，图像明暗对比度得到较好的拉伸，可以实现夜间有雾图像的有效去雾。

夜间图像去雾；暗通道先验；透射率分布估计

0 引言

夜间高分辨率图像被广泛应用于安防安保监控系统、航天航空军事制导、对地检测卫星遥感以及汽车自动驾驶等领域。然而，有雾的夜间图像经增强处理后呈现出对比度低，细节模糊等特征，不易辨识。目前最广泛使用的基于暗通道先验理论（dark channel prior, DCP）的去雾算法[1]对白天降质图像进行去雾时具有较好的效果，但对夜间降质图像进行去雾后，图像在人工光源区域存在严重的颜色失真[2]，暗区域的亮度不够[3]。

目前，基于DCP算法的夜间图像去雾算法的研究已经取得了较大的进展：陈志恒提出了一种自适应全局亮度补偿算法[4]，自适应调节夜间有雾图像的全局亮度，提高了夜间降质图像待去雾区域的可视度，但对微弱光源的夜间图像去雾效果有待改进；皮燕燕将夜间有雾图片分为结构层和纹理层，利用DCP算法得到结构层的无雾反射光图像，对纹理层进行增强后得到夜间去雾图像[5]，但对图像天空部分的去雾存在失真；王柳哲针对夜晚环境的光照不均匀会影响暗通道的大气光估计，采用中值滤波与加权正则化模型对环境光进行优化的方法来估计大气光值[6]，改进了去雾图像的色偏现象，但是不能很好地去除光晕。

针对现有算法存在的图像颜色失真、微弱光源图像去雾效果差、光晕不能很好去除等问题，本文提出了采用暗态点光源模型的夜间有雾图像去雾算法，针对传统图像透射率分布估计不准导致颜色失真的问题，通过暗通道可信度权值因子对粗透射率分布进行修正，再利用边窗导向滤波对粗透射率分布进行细化。实验结果表明，本文算法去雾效果好、在微弱光源处还原性好，有效减少了还原图像的光晕与颜色失真。

1 基于暗通道先验理论的去雾算法

He通过统计发现，晴朗天气图像的暗通道图像中至少86%以上的灰度值集中分布在[0,16]的灰度空间范围之内，且在无天空区域图像的R、G、B通道中，至少存在一个通道的灰度值是趋近于0的[1]。He将这一结果定义为暗通道先验，用式(1)进行表示：

式中：dark(,)表示无雾图像的暗通道图像；c(,)表示无雾图像的RGB通道中的某一通道；(,)表示滤波的窗口大小。

通过计算大气光值和透射率分布²(,)解得无雾图像(,)的表达式如式(2)所示：

然而，当透射率分布²(,)趋近于零时，会导致还原后的去雾图像(,)包含大量的噪声，表现出复原的图像整体偏白。为避免该类情况的发生，在实际处理中，给透射率分布设置一个下限0，复原后的降质图像可以表示为式(3)：

式中：0一般取作0.1，相当于去雾图像仍然保留了少量的雾层。

DCP算法对白天图像进行处理时具有较好的去雾效果，去雾结果颜色真实自然。但对夜间图像进行去雾时，处理后的图像在人工光源区域产生严重的颜色失真，暗区域的亮度不够导致细节信息缺失，光源区域的纹理受损严重。

2 基于暗态点光源模型的夜间有雾图像去雾算法

针对夜间有雾图像的纹理细节保持、色彩保持等问题，本文在DCP算法的基础上，提出了一种采用暗态点光源模型的夜间有雾图像去雾算法。算法实现过程如图1所示，主要由夜间环境光分布估计、透射率分布估计以及颜色校正3个模块组成，具体过程如下：

图1 采用暗态点光源模型的夜间图像去雾算法流程

2.1 夜间环境光分布估计

利用最小值滤波算法、自适应伽马变换算法建立暗态点光源模型，并利用最大值滤波算法获取夜间降质图像的亮度分布。使用暗态点光源模型、亮度分布以及联合双边滤波算法估计夜间降质图像的环境光分布[7]。

2.2 透射率分布估计

通过颜色空间转换、HSV通道分离，对降质图像的亮度通道和饱和度通道分别进行最大值滤波、最小值滤波处理，利用联合双边滤波对其进行细化处理，得到暗通道可信度权值因子。然后，建立扇形模型，利用高斯均值函数、边界约束、均值不等关系，获取“伪”去雾图像，再结合夜间环境光分布，将获取的暗通道可信度权值因子和伪去雾图像作为修正参数，改进透射率分布的求取公式，获取夜间降质图像的透射率分布。最后利用边窗导向滤波细化纹理，得到精细化透射率分布，再对降质图像进行还原后获取去雾图像。

2.3 颜色校正

根据输入图像通道的最大灰度值，计算输入图像的景深图像，将其与输入图像通道、通道的最大灰度值做减法，求取景深差分图像DDF。再利用、两个校正参数分别对图像通道和通道进行色偏校正，再将处理后的3个通道进行融合，得到颜色校正的图像。

3 改进透射率分布的获取

3.1 暗通道可信度权值因子的获取

暗通道可信度权值因子获取流程如图2所示，将夜间降质图像(,)转换至HSV颜色空间，并进行通道分离得到饱和度通道(,)、亮度通道(,)图像，分别对其进行最大值滤波、最小值滤波，得到max(,)和min(,)。

图2 暗通道可信度权值因子获取流程

max(,)和min(,)图像自身边缘信息损失严重，需用联合双边滤波对其进行纹理细化，得到细化结果min¢(,)和min¢(,)，处理过程如式(4)所示：

此时以细化后max¢(,)和min¢(,)为处理对象，对暗通道可信度权值因子进行求取，求取过程如式(5)、(6)所示。

＝1×2(6)

式中：(,)表示夜间环境光分布；1表示饱和度系数；2表示亮度系数；表示暗通道可信度权值因子。暗通道可信度权值因子会随着max¢(,)的增加、min¢(,)的减少而出现大幅度下降；1和2表示sigmoid函数的缩放系数，当1＝8、2＝20时，具备较好的实验效果。

3.2 夜间伪去雾图像的获取

本文通过边缘最值约定对min(c(,))的范围进行约束，构建如图3所示的扇形模型，由图可知：min(c(,))的最优解存在于min(cmin(,))与min(cmax(,))之间的阴影区域中。

图3 扇形模型几何表示

采用不等式逼近对阴影区域内的最优解min(c(,))进行求取。采用较为剧烈的衰减2处理上边界min(cmax(,))，对下边界min(cmax(,))采用较为平和的衰减1对其进行估值，以防止逼近过程中产生溢出现象。得到扇形区域两侧边界的估计值如式(7)所示：

3.3 改进透射率分布的获取

式中：¢(,)为粗透射率分布；为暗通道可信度权值因子；为雾层保留参数，用作去雾图像中少量雾气的保留，以保证图像的视觉真实性，对于夜间雾图的处理中，一般取作0.65。

3.4 透射率分布的精细化处理

为减小去雾后出现的光晕现象，本文根据文献[9]提出的边窗导向滤波技术对粗透射率分布进行纹理细化处理，以提升图像边缘信息的保持能力。通过对边窗的滤波核函数进行加权操作，并将其应用在{L, R, U, D, NW, NE, SW, SE}8个窗口类型上，从输出的8个结果中，找出与输入最接近的边窗类型，将其滤波结果作为最终的边窗滤波结果，得到精细化透射率分布²(,)。

4 算法实验结果与分析

在得到夜间环境光分布(,)以及细透射率分布²(,)以后，对式(3)进行改进得到式(10)：

为验证本文算法的去雾效果，本文将从主观和客观两个评价角度进行实验对比。

4.1 主观对比

本文以重度雾霾下的城市夜景实拍等夜间降质图像建立降质图库，随机选取了4幅具有低照度夜间特征代表性的降质图像，基于低照度夜间增强算法对其处理之后，分别采用基于暗通道先验理论去雾算法与本文算法对其进行去雾处理，得到结果如图4所示。

图4 本文算法的去雾结果对比

可以看到，采用基于暗通道先验理论的去雾图像在人工光源区域有严重的光晕效应，而本文的去雾算法的去雾结果中图像中的雾气得到有效去除，去雾后的图像颜色自然，符合人眼视觉观感。

4.2 客观对比

使用图像信息熵、平均梯度和对比度对经过文献[1]、[6]、[10]中算法与本文算法的处理结果进行客观评价。统计其客观评价结果如表1～表3所示，其中，表1为图像信息熵的统计结果，表2为图像平均梯度的统计结果，表3为图像对比度的统计结果。表中，算法1为传统DCP算法[1]，算法2为基于多光源模型与暗通道先验的去雾算法[6]，算法3为基于暗通道补偿与大气光值改进的去雾算法[10]。

表1 图像信息熵统计结果

表2 图像平均梯度统计结果

表3 图像对比度统计结果

可以看出，经过本文算法处理过后的图像的质量普遍有较为明显的改善，主要表现在图像的信息熵值、平均梯度以及对比度均高于对比算法，说明处理后的夜间有雾图像所包含的信息量更为丰富，在纹理细节上损失较小、图像清晰度高，同时夜间降质图像的明暗对比度得到较好地拉伸。

5 结论

为解决基于暗通道先验理论的去雾算法在处理夜间有雾图像时细节信息缺失、光源区域的纹理受损严重的问题，本文提出采用暗态点光源模型的夜间有雾图像去雾算法。同时通过暗通道可信度权值因子和“伪”去雾图像对图像粗透射率分布进行修正，再利用边窗导向滤波对其进行细化，提高了透射率分布估算结果的准确度。实验结果表明，本文算法处理后的图像在微弱光源处还原性好，有效减少了还原图像的光晕与颜色失真且在去雾前经过视见度增强处理，降质图像的亮度得到一定程度的保留，可视性较好。

[1] HE K, SUN J, TANG X. Single image haze removal using dark channel prior[J]., 2010, 33(12): 2341-2353.

[2] ZHANG J, CAO Y, WANG Z F. Nighttime haze removal based on a new imaging model[C]//, 2014: 4557-4561.

[3] PEI S C, LEE T Y. Nighttime haze removal using color transfer pre-processing and dark channel prior[C]//(ICIP), 19, 2012: 957-960.

[4] 陈志恒, 严利民, 张竞阳. 采用自适应全局亮度补偿的夜间去雾算法[J]. 红外技术, 2021, 43(10): 954-959.

CHEN Zhiheng, YAN Limin, ZHANG Jingyang. Nighttime dehazing algorithm with adaptive global brightness compensation[J]., 2021, 43(10): 954-959.

[5] 皮燕燕, 王远明, 王兴岭. 基于图像分层与暗通道先验的夜间图像去雾算法[C]//惯性技术发展动态发展方向研讨会文集, 2018: 132-135.

PI Yanyan, WANG Yuanming, WANG Xingling. Night-time image dehazing algorithm based on image stratification and dark channel prior[C]//, 2018: 132-135.

[6] 王柳哲. 基于多光源模型与暗通道先验的夜间图像去雾[D]. 北京: 北京交通大学, 2018.

WANG Liuzhe. Night Image Defogging Based on Multiple Light Source Models and Dark Channel Priors[D]. Beijing: Beijing Jiaotong University, 2018.

[7] 张竞阳, 严利民, 陈志恒. 采用暗态点光源模型的夜间去雾算法[J]. 红外技术, 2021, 43(8): 798-803.

ZHANG Jingyang, YAN Limin, CHEN Zhiheng. Nighttime fog removal using the dark point light source model[J]., 2021, 43(8): 798-803.

[8] ZHANG J, CAO Y, FANG S, et al. Fast haze removal for nighttime image using maximum reflectance prior[C]//, 2017: 7016-7024.

[9] YIN Hui, GONG Yuanhao, QIU Guoping. Side window guided filtering[J]., 2019, 165(C): 315-330.

[10] 高强, 胡辽林, 陈鑫. 基于暗通道补偿与大气光值改进的图像去雾方法[J]. 激光与光电子学进展, 2020, 57(6): 150-156.

GAO Qiang, HU Liaolin, CHEN Xin. Image dehazing method based on dark channel compensation and improvement of atmospheric light value[J]., 2020, 57(6): 150-156.

Nighttime Image Dehazing Algorithm Based on Improved Transmittance Distribution Estimation

XUE Nan1，YAN Limin1,2

(1.,,200444,;2.,,200444,)

This paper presents an improved transmittance distribution estimation algorithm for nighttime image dehazing to solve lack of detailed information and serious damage to the texture of light source areas when the dark channel prior dehazing algorithm processes foggy images at night. An improved transmittance distribution was obtained by introducing a dark state point light source model, a dark channel credibility weight factor, and a pseudo dehazing image, combined with a nighttime image imaging model, and the dehazed image at night was dehazed. The experimental results showed that the image processed by using the proposed algorithm had little loss in texture details and high image definition, and the contrast between the light and dark of the image was better stretched, which effectively dehazed a foggy image at night.

nighttime image dehazing,dark channel prior,transmission distribution estimation

TP391

A

1001-8891(2022)10-1089-06

2022-01-02；

2022-03-24.

薛楠（2001-），男，本科生，研究领域为图像处理及计算机视觉。E-mail：wilson_xue@outlook.com。

严利民（1971-），男，博士，副教授，研究领域为集成电路设计及系统集成、新型显示技术和计算机视觉。E-mail：yanlm@shu.edu.cn。