摘 要:由于逆光交通場景下采集到的圖像存在前景亮度過低、背景亮度失真等特點,導(dǎo)致采集圖像清晰度低、信息丟失嚴(yán)重和可識別性差,針對逆光圖像前背景的不同特性,研究提出了一種分區(qū)域增強方法。對逆光圖像使用最大類間方差法(OTSU 法) 分割圖像的前景和背景;對逆光圖像全局使用LIME 方法,提升前景亮度的同時保持色彩的失真度;單獨將背景部分RGB 三個通道上的全局直方圖均衡化結(jié)果一一映射到對應(yīng)的限定區(qū)間內(nèi),提高了背景的對比度;使用Canny 算子檢測出前背景拼接處的黑邊,根據(jù)黑邊生成3 個自適應(yīng)的濾波模板對黑邊進(jìn)行分步均值濾波處理,消除了黑色邊緣,提升了圖像的視覺質(zhì)量。在實驗室自建的CHD_B 數(shù)據(jù)集上,所提方法在4 種常用客觀評價指標(biāo)上綜合占優(yōu)。實驗結(jié)果表明,所提出的圖像增強算法能有效地消除圖像中的逆光現(xiàn)象。
關(guān)鍵詞:逆光圖像;LIME;直方圖均衡;邊緣優(yōu)化;圖像增強
中圖分類號:TP391 文獻(xiàn)標(biāo)志碼:A 開放資源(資源服務(wù))標(biāo)識碼(OSID):
文章編號:1003-3106(2024)05-1146-09
0 引言
隨著交通領(lǐng)域的快速發(fā)展,在交通場景下獲取高質(zhì)量圖像成為了一種新的必然的要求。攝像頭在采集圖片的過程中很容易受到光照環(huán)境的影響,在逆光環(huán)境下采集的圖像背景亮度高、前景亮度低,前景中的有效信息無法正常獲取。消除逆光現(xiàn)象的常用方法是使用補光燈照射前景,但在大量的交通場景中采用該方法會產(chǎn)生高額的成本。為了消除交通場景圖像中的逆光現(xiàn)象,研究者從軟件的角度提出了圖像增強技術(shù)。
直方圖均衡化[1-4]是處理逆光圖像時常用的一種方法,通過對圖像的灰度值進(jìn)行均衡化分布處理,對圖像進(jìn)行增強,但對逆光圖像過暗部分的亮度提升效果較為有限。此外,針對灰度進(jìn)行處理的灰度線性變換以及灰度非線性變換等方法也常被應(yīng)用于逆光圖像的清晰化處理,該方法處理后的圖像整體對比度增強明顯,但不利于突出感興趣的前景區(qū)域信息。許多學(xué)者對Retinex[5-7]理論進(jìn)行深入研究并優(yōu)化,提出了單尺度Retinex 算法(SSR),多尺度Retinex算法(MSR)和帶色彩恢復(fù)的Retinex 算法(MSRCR)。SSR 算法假設(shè)入射光是平滑的,但逆光圖像中的入射光變化很大,因此該算法會在較暗的前景輪廓處產(chǎn)生光暈。MSR 算法通過多個尺度的濾波去改善SSR 算法的缺點,但該方法沒有考慮到顏色的因素,處理后的圖像存在顏色失真的問題。MSRCR 算法加入了色彩因子,改善了MSR 處理圖像的色彩失真問題,但顏色因子的計算大大增加了算法的運行時間,該算法還需要設(shè)置很多經(jīng)驗參數(shù),降低了算法的泛用性。Im等[8]采用暗通道發(fā)的思想,將圖像中欠曝光前景部分提取出來,并用自適應(yīng)對比度進(jìn)行空域?qū)Ρ榷仍鰪姟6低ǖ婪ㄗ畛醣挥脕硖幚韴D像去霧任務(wù),該方法分割出的前景與背景區(qū)域并不可靠。北京交通大學(xué)的郭倩在文獻(xiàn)[9]中采用了分區(qū)域處理的方法并引入了基于亮度保持的圖像局部區(qū)域增強方法,對逆光圖像局部區(qū)域進(jìn)行增強,但在局部的增強過程中,暗區(qū)提取方式單一,該方法在很多場景無法應(yīng)用。為此,提出一種基于逆光圖像前背景特性的圖像增強算法,對明暗兩部分分別進(jìn)行針對性處理,該方法對交通場景下的逆光圖像增強效果顯著。
1 相關(guān)背景
1. 1 逆光交通場景(CHD_B)數(shù)據(jù)集
在陜西省交通運輸廳道路養(yǎng)護(hù)的工作中,使用Canon EOS 70D 單反相機(jī)采集交通逆光場景下的各種交通場景圖像,經(jīng)篩選共保留120 張。自建了名為CHD_B 的數(shù)據(jù)集,該數(shù)據(jù)集中的圖像采集于西安市尚苑路和朱宏路交匯處、長安大學(xué)渭水校區(qū)北門周圍、尚苑路、草灘一路、長安大學(xué)渭水校區(qū)內(nèi)部路以及汽車試驗場。采集的圖像內(nèi)容包含交通標(biāo)識牌、交通信號燈以及各種其他逆光的交通場景等。CHD_B 數(shù)據(jù)集的部分圖像如圖1 所示。
1. 2 LIME 理論
在以往基于Retinex 理論的逆光圖像增強研究中,各方法對入射分量的估計往往不夠真實,使得處理結(jié)果容易出現(xiàn)過度增強、亮度增強不夠等問題。學(xué)者們通常以優(yōu)化入射分量作為切入點進(jìn)行研究,使其更加自然。Guo 等[10]基于Retinex 理論,提出了一種簡單有效的微光圖像增強(LIME)理論。通過估計圖像的光照圖來實現(xiàn)低照度圖像的增強,為簡化計算,選取3 個顏色分量的最大值作為光照圖來進(jìn)行光照估計,將光照圖T 初始化為:
通過此方法得到的T^ (x)不會出現(xiàn)飽和的情況,因為:
R(x) = L(x)/ (max c Lc(x)+ ε)。(2)
加入了非常小的常量ε,主要為了避免分母為0和R(x)過度飽和。
可使用式(1)初步地估算出光照的情況,更好的方法是由局部一致性估算光照情況,以下是比較常用的2 種方法:
式中:Ω(x)是以像素x 為中心的區(qū)域,y 是Ω(x)區(qū)域的位置索引,這種方法增強了局部一致性,但在結(jié)構(gòu)性上欠缺考慮。下面自定義了的優(yōu)化方法對存在的問題進(jìn)行優(yōu)化:
式中:‖·‖F 和‖·‖1 為F 范數(shù)和L1 正則,α 為平衡系數(shù)。式(5)前項的F 范數(shù),考慮細(xì)化后的光照圖與初始光照圖之間的保真度,式(7)后項為L1正則,考慮的是平滑度。?。?為一階導(dǎo)數(shù)濾波器,包括水平和垂直2 個方向。W 為權(quán)重矩陣,優(yōu)化的關(guān)鍵在于W 如何設(shè)計。受RTV 啟發(fā),對于每個位置的權(quán)重設(shè)計方式如下:
由于圖像不同位置噪聲大小的差異,對所有位置采用相同的去噪方法會損失很多的信息。要避免在暗處過度去噪,同時也要避免在亮處過度平滑。采用如下方法改進(jìn):
Rf ← R·T + Rd ·(1 - T), (9)
式中:Rf 為去噪后的結(jié)果,Rd 為重構(gòu)后的結(jié)果。
2 本文方法
本文基于逆光圖像的特性,使用最大類間方差法(OTSU 法)將逆光圖像分割成過暗的前景和較亮的背景2 個區(qū)域。使用LIME 方法全局處理逆光圖像,只保留處理后的前景區(qū)域,作為前景增強的結(jié)果。對逆光圖像做掩膜處理,只保留背景區(qū)域,并對其使用限定區(qū)域的直方圖均衡化處理,作為背景增強的結(jié)果。最后對兩部分處理結(jié)果進(jìn)行拼接,并對拼接邊緣處突兀不自然的問題進(jìn)行3 次邊緣優(yōu)化處理,得到整幅逆光圖像的增強結(jié)果。算法流程如圖2 所示。
2. 1 逆光圖像閾值分割
逆光圖像的成因是拍攝目標(biāo)恰好位于光源與拍攝設(shè)備之間,具有低亮度部分和高亮度部分且亮度反差通常較大,所以逆光圖像的灰度值通常集中于某個低亮度值和某個高亮度值附近,圖像的直方圖呈現(xiàn)“雙峰”狀分布。根據(jù)逆光圖像灰度分布的特點,本文采用OTSU 法計算出最佳閾值對圖像進(jìn)行分割,能正確地將逆光圖像的前景區(qū)域和背景區(qū)域分割開的同時,保證算法的運行速度。在后續(xù)的處理中,使用二值化后的圖像作為蒙版,掩膜遮蓋得到逆光圖像的前景和背景,并分別對2 區(qū)域進(jìn)行單獨處理。
2. 2 結(jié)合全局的LIME 前景處理
為了優(yōu)化前景圖像的亮度和清晰度,本文使用LIME 方法分別單獨對前景局部和全局逆光圖像進(jìn)行處理,得到的結(jié)果如圖3 所示。
前景區(qū)域進(jìn)行局部LIME 處理后,前景亮度的提升相較于全局LIME 處理效果相差不大。但局部處理結(jié)果的前景邊緣處(圖3(c)的方框中)出現(xiàn)了多處過度曝光,導(dǎo)致圖像出現(xiàn)色彩失真,丟失了部分前景細(xì)節(jié)。因此本文選擇結(jié)合全局的LIME 處理逆光圖像的前景部分,在提升了前景亮度的同時,保證了色彩失真度,使得過暗的前景區(qū)域得到了較好的增強。本文對全局LIME 的處理結(jié)果做掩膜,只保留前景部分,將該部分作為本文算法前景的增強結(jié)果。
2. 3 逆光圖像的背景增強
2. 3. 1 較亮區(qū)域亮度區(qū)間估計
對于背景區(qū)域的彩色逆光圖像,分別對逆光圖像的R、G、B 三個色彩分量進(jìn)行直方圖均衡化處理,并將結(jié)果融合。逆光圖像進(jìn)行直方圖均衡化處理后,雖然圖像的整體對比度明顯提高,圖像較亮區(qū)域中的細(xì)節(jié)得到增強,但整體色彩失真十分嚴(yán)重,對于亮度的恢復(fù)效果并不理想。逆光圖像的背景區(qū)域仍然整體處于一個亮度、色彩失調(diào)的狀態(tài),視覺效果遠(yuǎn)達(dá)不到對逆光圖像清晰化的目標(biāo)。
在改進(jìn)上述問題之前,首先要對背景灰度分布區(qū)間有一個較為準(zhǔn)確的估計。根據(jù)逆光圖像的性質(zhì),背景區(qū)域灰度值集中于某個較高亮度值附近。本文假設(shè)其灰度值分布規(guī)律服從正態(tài)分布N (μ,σ2 ),μ、σ 分別為背景區(qū)域灰度值的均值和標(biāo)準(zhǔn)差:
式中:r 為圖像較亮部分的灰度值,Nr 為灰度值為r的像素點的個數(shù)。由較亮區(qū)域像素值可以統(tǒng)計得到正態(tài)分布N(μ,σ2 )的置信區(qū)間[μ-zσ,μ+zσ],期望得到盡可能多包含較亮區(qū)域灰度值的灰度區(qū)間。為了更多地保持背景區(qū)域的亮度及色彩,本文令z = 2. 58 得到置信區(qū)間[μ-2. 58σ,μ+2. 58σ],使置信水平p = 0. 99,即期望逆光圖像背景區(qū)域的灰度值落在該置信區(qū)間內(nèi)的概率為99% 。
2. 3. 2 限定區(qū)間的直方圖均衡化
由于逆光圖像背景區(qū)域亮度較為合理,本文結(jié)合逆光圖像特點基于直方圖均衡化方法提出了一種針對逆光圖像背景區(qū)域進(jìn)行增強的方法,使背景區(qū)域在保持原有亮度及色彩的前提下進(jìn)行限定灰度區(qū)間的直方圖均衡化處理,達(dá)到突出其細(xì)節(jié)的增強效果。
在進(jìn)行限定區(qū)間的直方圖均衡化處理時,分別在逆光圖像較亮區(qū)域的3 個顏色分量上令:
得到限定的灰度區(qū)間[low,high]。將其3 個顏色分量上的全局直方圖均衡化結(jié)果一一映射至對應(yīng)的限定區(qū)間內(nèi):
sr = low + T(r)/ 255·(high - low),r = 1,2,…,255,(12)
式中:sr 為灰度值r 經(jīng)本文方法映射至[low,high]得到的灰度值。采用本文方法對逆光圖像較亮區(qū)域灰度分布直方圖進(jìn)行限定區(qū)間的均衡化處理,逆光圖像的較亮區(qū)域經(jīng)過本文方法處理后擁有了更多細(xì)節(jié),對比度也得到了增強。改善了傳統(tǒng)直方圖均衡化處理后圖像的顏色失真、亮度失調(diào)的問題。最終得到的結(jié)果如圖4 所示。
2. 4 拼接邊緣處優(yōu)化
本文方法對逆光圖像前景和背景區(qū)域處理并將2 區(qū)域拼接后,圖像前景部分的增強效果理想,亮度和色彩都得到了較好的恢復(fù),且背景部分的細(xì)節(jié)在保持原有亮度和色彩的基礎(chǔ)上得到了很好的增強。
對拼接后的圖像進(jìn)行觀察,在前景和背景的交界處往往會出現(xiàn)一圈黑邊,十分突兀。經(jīng)研究分析,出現(xiàn)黑邊的主要原因是逆光處的光源照射在拍攝目標(biāo)時,通常會在拍攝目標(biāo)的輪廓處產(chǎn)生較強的反光,產(chǎn)生輪廓處亮度較高的情況,甚至高于整幅圖像較亮部分中的大部分區(qū)域,因此在閾值分割時這部分高亮邊緣會被劃分至較亮區(qū)域。而對過暗的前景區(qū)域進(jìn)行處理后,逆光圖像前景的亮度得到了增強,通常超過黑邊的亮度,導(dǎo)致黑邊更加突兀,降低了本文方法對逆光圖像清晰化的整體效果及視覺效果。
基于反光引起的黑邊具有狹窄且寬度較為均勻的特性,本文提出一種提取黑邊部分并對其優(yōu)化的方法。黑邊部分優(yōu)化步驟的示例如圖5 所示。處理步驟如下:
處理步驟如下:
① 以圖5(a)局部黑邊部分為例,通過對前景和背景區(qū)域拼接處鄰域采用Canny 算子進(jìn)行邊緣檢測,并得到最大連通區(qū)域即可得到待優(yōu)化的黑邊部分,再向過暗部分略微膨脹,得到包括拼接邊緣以及黑邊部分的目標(biāo)處理區(qū)域,如圖5(b)中紅色區(qū)域。對該區(qū)域以直徑大于目標(biāo)區(qū)域?qū)挾鹊木禐V波模版進(jìn)行均值濾波,選擇較大模版是為了采集到期望考慮到的黑邊之外的顏色與亮度,使黑邊色彩得到較大程度平滑,與周圍色彩更加接近,消除黑邊部分的突兀感。
② 將步驟①中目標(biāo)區(qū)域向較亮區(qū)域進(jìn)一步膨脹,得到本次處理目標(biāo)區(qū)域,如圖5(c)中藍(lán)色區(qū)域,并選用直徑小于目標(biāo)區(qū)域?qū)挾鹊木禐V波模版進(jìn)行均值濾波,本次處理在步驟①的基礎(chǔ)上略微擴(kuò)大了處理范圍,并選用較小的模版,目的是在盡量保持圖像原有細(xì)節(jié)的基礎(chǔ)上對步驟①中處理區(qū)域的邊界進(jìn)一步平滑,優(yōu)化圖像的視覺效果。
③ 針對之前處理區(qū)域的邊緣進(jìn)行進(jìn)一步優(yōu)化,對步驟②中目標(biāo)區(qū)域的邊緣部分進(jìn)行輕微膨脹并與其輕微腐蝕結(jié)果作差,得到需要優(yōu)化的目標(biāo)區(qū)域,如圖5(d)中綠色區(qū)域。對此部分采用直徑較小的均值濾波模版進(jìn)一步平滑優(yōu)化處理,得到最終的優(yōu)化結(jié)果。本文對目標(biāo)區(qū)域f(x,y)內(nèi)的像素點以半徑為r 的均值濾波模版進(jìn)行均值濾波時,在R、G、B三個顏色分量上分別以式(13)計算得到目標(biāo)像素點a(i,j)的值。優(yōu)化結(jié)果如圖6 所示。
從圖6(c)可以直觀看到,本文提出的優(yōu)化方法對于拍攝目標(biāo)輪廓黑邊的優(yōu)化效果顯著,突兀的黑邊已經(jīng)消失,并且明暗部分色彩過渡平滑自然,觀察不到拼接的痕跡,驗證了本文方法對逆光圖像增強結(jié)果視覺效果的改善作用。
3 實驗結(jié)果與分析
本文所給出的運行結(jié)果和運行時間均在同一臺電腦上得到,其運行環(huán)境如下:CPU 為Intel (R)Core(TM)i7-6700 CPU @ 3. 40 GHz,顯卡為Intel(R)HD Graphics 530,內(nèi)存8 GB,操作系統(tǒng)為Windows 10專業(yè)版,使用軟件為Matlab R2081b 和Pycharm 2018。
3. 1 閾值分割驗證實驗
閾值分割作為本文實驗的第一步驟,需要滿足區(qū)分過暗前景和較亮背景的正確性以及算法運行時較快的速度。分別對比OTSU 方法、直方圖雙峰法、迭代閾值法、三角閾值法和最大熵法[11]對逆光圖像進(jìn)行閾值分割,處理結(jié)果如圖7 所示,T 為對應(yīng)算法所求出的閾值。
圖7(a)的前景區(qū)域為較暗的紅綠燈,背景為較亮的天空,閾值分割的結(jié)果應(yīng)將紅綠燈和天空區(qū)分開。OTSU 法、直方圖雙峰法和迭代閾值法的閾值集中在89 附近,能夠很好地將前景區(qū)域和背景區(qū)域分割開。三角閾值法和最大熵法的閾值都大于100,部分較亮的背景區(qū)域被分割到過暗的前景區(qū)域,出現(xiàn)區(qū)域分割錯誤的情況。這種錯誤會嚴(yán)重影響本文提出的基于前背景特性的逆光圖像增強效果,在選擇算法時不考慮這2 種算法。
為了同時兼顧算法的運行時間,分別展示了分割效果優(yōu)秀的3 種算法在CHD_B 數(shù)據(jù)集上的平均運行時間,其中OTSU 法和迭代閾值法使用Matlab語言,在CPU 上計算;直方圖雙峰法使用Python 語言,在CPU 上運行。具體數(shù)據(jù)如表1 所示。
OTSU 法的運行時間最快,且閾值分割的正確性高,驗證了該算法在交通場景下逆光圖像閾值分割的有效性。
3. 2 分區(qū)域?qū)Ρ葘嶒?/p>
3. 2. 1 前景對比實驗
本次實驗對前景區(qū)域的處理要求是提升前景的亮度,找回因亮度過低而丟失的前景信息,因此本文采用前景區(qū)域的亮度均值作為處理效果優(yōu)劣的評價指標(biāo),該值越大表明圖像的亮度越高,處理效果越好。分別使用LIME 方法、SRIE 方法[12]、MF 方法[13]、Ying 方法[14]和SDD 方法[15]對圖像進(jìn)行處理,將處理后的圖像進(jìn)行掩模,只留下處理后的前景部分。不同方法處理CHD_B 數(shù)據(jù)集的平均像素均值比較如表2 所示。效果展示如圖8 所示。
LIME 算法處理結(jié)果的像素均值遠(yuǎn)高于其他方法,前景區(qū)域亮度最高,前景的紅綠燈信息清晰可見。
3. 2. 2 背景對比實驗
由于逆光圖像的背景區(qū)域的亮度普遍較高,因此亮度不能作為該區(qū)域增強結(jié)果的評價指標(biāo)。圖像的信息熵[16]代表圖像的細(xì)節(jié)信息含量,其值越大,代表圖像中的細(xì)節(jié)信息越豐富、圖像的清晰程度與平滑度越高??梢允褂眯畔㈧刈鳛楸尘皡^(qū)域清晰化結(jié)果分析的評價指標(biāo):
H(x) = - Σp(x)lbp(x), (14)
式中:p(x)表示圖像中灰度值為x 的像素所占全部像素的比例。分別使用SRIE 方法、MF 方法、Ying方法、SDD 方法和本文方法對圖像進(jìn)行處理,處理后遮蓋前景,只留下背景部分,并分別計算其信息熵。不同方法處理CHD_B 數(shù)據(jù)集的信息熵平均值數(shù)據(jù)如表3 所示。效果展示如圖9 所示。
圖9(b)、圖9(d)和圖9(e)背景對比度相較于原始圖像更低,沒有起到增強效果;圖9(c)存在顏色失真的情況;圖9(f)的色彩對比度增強、細(xì)節(jié)豐富,有良好的視覺效果。從客觀的角度來看,除本文方法外,其余方法處理后圖像的信息熵均低于原始圖像,減少了圖像中的信息。綜上所述,本文在背景區(qū)域增強的結(jié)果在細(xì)節(jié)豐富度和顏色失真度上綜合占優(yōu)。
3. 3 逆光圖像增強結(jié)果分析
3. 3. 1 主觀評價
分別使用本文方法、SRIE 方法、MF 方法、SDD方法和Ying 方法對CHD_B 數(shù)據(jù)集中的交通逆光圖像進(jìn)行處理。本文方法與列舉其他方法處理的數(shù)據(jù)集中的部分結(jié)果如圖10 所示。
圖10(b)存在增強過的問題,許多云彩的紋理模糊,且前景的亮度不高;圖10(c)和圖10(d)存在顏色失真的情況;圖10(e)的亮度整體偏暗,丟失了細(xì)節(jié)信息;圖10(f)的前景和背景增強效果自然,細(xì)節(jié)信息豐富,視覺效果好。
對比不同方法的處理效果可以直觀地體現(xiàn)本文方法相比于其他方法在視覺效果上的優(yōu)越性,不僅對逆光圖像前景區(qū)域的亮度與顏色進(jìn)行了恢復(fù),并且在保持亮度的同時增強了背景區(qū)域的對比度,使逆光圖像全局達(dá)到了良好的增強效果。
3. 3. 2 客觀評價
分別采用Natural Image Quality Evaluation(NIQE)[17]、Blind / Referenceless Image Spatial Quality Evaluator(BRISQUE)[18]、平均梯度和圖像信息熵指標(biāo)對清晰化結(jié)果進(jìn)行客觀評價。NIQE 是一種無參考的評價指標(biāo),該指標(biāo)通過計算測試圖像中提取的特征模型與事先設(shè)定好的模型特征特之間的距離,來評價圖像的質(zhì)量。BRISQUE 為無參考的空域圖像質(zhì)量評價指標(biāo),算法總體原理是將Mean SubtractedContrast Normalized Coefficients(MSCN)從圖像中提取出來,并將其擬合成非對稱的廣義高斯分布,高斯分布的特征輸入到支持向量機(jī)(SVM)中做回歸,得到圖像評估的結(jié)果;平均梯度表現(xiàn)圖像的在多維方向上的灰度變化率,這種變化率可以準(zhǔn)確反映圖像的清晰度;圖像信息熵反映圖像中所包含信息的多少。不同方法對CHD_B 數(shù)據(jù)集處理后的平均結(jié)果如表4 所示,最優(yōu)結(jié)果用粗體標(biāo)出。
NIQE 值越小意味著該圖像的失真越少,圖像越自然;BRISQUE 值越小表示圖像質(zhì)量越高,其取值為0 ~ 100;平均梯度值越大代表圖像中細(xì)節(jié)表達(dá)能力越強;信息熵值越大代表圖像中的內(nèi)容越豐富。本文方法在以上評價指標(biāo)上均為最優(yōu)。
分別展示了各種算法處理CHD_B 數(shù)據(jù)集所有圖像的平均運行時間,所有的算法均使用Matlab 語言,在CPU 上運行得到。SRIE、SDD 方法的時間開銷過大,僅存在實驗意義,很難運用到實際生產(chǎn)中;本文算法的時間開銷在合理的范圍內(nèi),且僅次于Ying 方法。不同方法平均運行時間比較的具體數(shù)據(jù)如表5 所示。
綜合上述,本文算法在較少的時間開銷范圍內(nèi),有最好的處理效果,在實際的生產(chǎn)應(yīng)用中有很大的科研價值。
4 結(jié)束語
由于逆光圖像的特性,在圖像中同時包含過暗區(qū)域和較亮區(qū)域,對圖像整體增強的算法通常都會出現(xiàn)過暗區(qū)域增強不足或較亮區(qū)域曝光過度的情況。本文從這一問題入手,提出了一種分區(qū)域的處理方法。首先將逆光圖像準(zhǔn)確地分割成過暗區(qū)域和較亮區(qū)域,然后使用結(jié)合全局的LIME 方法對過暗區(qū)域進(jìn)行處理,接下來提出了一種限定區(qū)間的直方圖均衡化方法對較亮區(qū)域進(jìn)行處理,最后分3 步優(yōu)化2 區(qū)域合成后邊緣處出現(xiàn)的黑邊。考慮算法的實際應(yīng)用情況,本文在算法的時間開銷上盡可能地減少,因此本文的方法可以作為圖像預(yù)處理的一部分嵌入到各種圖像處理方法當(dāng)中,將逆光圖像增強到較好的水平后再由其他方法處理。在未來的工作中,將嘗試使用深度學(xué)習(xí)的方法來優(yōu)化本文算法,并提高其處理其他類型圖像的能力,而不僅限于交通逆光場景下的數(shù)據(jù)集。
參考文獻(xiàn)
[1] RAO B S. Dynamic Histogram Equalization for ContrastEnhancement for Digital Images[J]. Applied Soft Computing,2020,89:106114.
[2] 王瀟,于炯,楊嘉能,等. 優(yōu)化動態(tài)直方圖均衡的水下圖像增強方法[J ]. 計算機(jī)仿真,2022,39 (10 ):259-264.
[3] 閆哲,蔣礫,楊帆等. 基于雙直方圖均衡算法的紅外圖像增強[J]. 紅外技術(shù),2022,44(9):944-950.
[4] 羅強,吳俊峰,于紅,等. 一種基于改進(jìn)直方圖均衡化的顯著圖提取算法[J]. 小型微型計算機(jī)系統(tǒng),2018,39(5):1092-1096.
[5] 雷飛,朱林,王雪麗. 改進(jìn)多尺度Retinex 色彩灰度的水下彩色圖像研究[J]. 小型微型計算機(jī)系統(tǒng),2018,39(1):185-188.
[6] QIN X J,CHENG Y F,FAN Y L,et al. Retinex ImageEnhancement Algorithm Based on ThreeSide Filtering inHSV Color Space[J]. Journal of Chinese Computer Systems ,2016,37(1):168-172.
[7] 謝鳳英,湯萌,張蕊. 基于Retinex 的圖像增強方法綜述[J]. 數(shù)據(jù)采集與處理,2019,34(1):1-11.
[8] IM J,YOON I,HAYES M H,et al. Dark Channel PriorBased Spatially Adaptive Contrast Enhancement for BackLighting Compensation [C ]∥ 2013 IEEE InternationalConference on Acoustics,Speech and Signal Processing.Vancouver:IEEE,2013:2464-2468.
[9] 郭倩. 低質(zhì)圖像增強算法研究[D]. 北京:北京交通大學(xué),2018.
[10] GUO X J,LI Y,LING H B. LIME:Lowlight Image Enhancement via Illumination Map Estimation [J]. IEEETransactions on Image Processing,2016,26(2):982-993.
[11] 范九倫. 灰度圖像閾值分割法[M]. 北京:科學(xué)出版社,2019.
[12] FU X Y,ZENG D L,HUANG Y,et al. A Weighted Variational Model for Simultaneous Reflectance andIllumination Estimation[C]∥2016 IEEE Conference onComputer Vision and Pattern Recognition (CVPR). LasVegas:IEEE,2016:2782-2790.
[13] FU X Y,ZENG D L,HUANG Y,et al. A FusionbasedEnhancing Method for Weakly Illuminated Images [J].Signal Processing,2016:129:82-96.
[14] YING Z Q,LI G,REN Y R,et al. A New Image ContrastEnhancement Algorithm Using Exposure Fusion Framework[C]∥ International Conference on Computer Analysis ofImages and Patterns. Ystad:Springer,2017:36-46.
[15] HAO S J,HAN X,GUO Y R,et al. Lowlight Image Enhancement with Semidecoupled Decomposition [J ].IEEE Transactions on Multimedia,2020,22 (12 ):3025-3038.
[16] 李響,馬榮貴,何逸煦. 基于序列光圈拍攝的逆光圖像重建方法[J]. 計算機(jī)技術(shù)與發(fā)展,2022,32 (6 ):79-84.
[17] MITTAL A,SOUNDARARAJAN R,BOVIK A C. Makinga “Completely Blind”Image Quality Analyzer[J]. IEEESignal Processing Letters,2013,20(3):209-212.
[18] MITTAL A,MOORTHY A K ,BOVIK A C. NoreferenceImage Quality Assessment in the Spatial Domain [J].IEEE Transactions on Image Processing,2012,21 (12):4695-4708.
作者簡介
馬榮貴 男,(1967—),博士,教授,博士生導(dǎo)師。主要研究方向:交通信息及控制。
(*通信作者)魏子仲 男,(1999—),碩士研究生。主要研究方向:交通信息類數(shù)字圖像處理。
何逸煦 男,(1999—),碩士研究生。主要研究方向:交通信息及控制。
黃訓(xùn)燕 女,(1998—),碩士研究生。主要研究方向:智能交通與信息系統(tǒng)工程。
基金項目:國家重點研發(fā)計劃(2021YFB1600104);國家自然科學(xué)基金(52002031)