(華東交通大學(xué) 電氣與自動化工程學(xué)院,江西 南昌 330013)
近年來,很多學(xué)者關(guān)注到了單幅圖像去霧方法,這些方法利用單幅圖像中的先驗信息或一些合理的假設(shè),實現(xiàn)了圖像去霧。這些主流的去霧算法一般可分為三類:對比度拉伸算法[1-2]、基于Retinex模型的圖像增強算法[3]和基于大氣散射模型的去霧算法[4-7]。Tan[4]通過比較對比度高低的先驗、規(guī)整化馬爾科夫隨機場的處理結(jié)果,使局部對比度最大化來對圖像進行去霧處理; Fattal[5]假設(shè)鄰域內(nèi)的色度和透射率是完全不相關(guān)的,所以特征不突出的地方實現(xiàn)結(jié)果較不理想;Tarel[6]等人通過中值濾波估計消散函數(shù),沒有單中值濾波器邊緣保持特性,導(dǎo)致圖像恢復(fù)在深度突變的地方殘留少量霧氣;He[7]等人第一次提出了暗通道先驗去霧方法并達(dá)到了比較好的去霧效果。針對圖像去霧領(lǐng)域中存在的失真問題,從透射率錯誤估計的方面改進了這個方法,并進行了分析。本文設(shè)計了一種場景透射率估計方法,首先通過對場景透射率進行粗估計來得到一種塊透射率;再利用上下文正則化對塊透射率進行更深一步的細(xì)化處理來得到較準(zhǔn)確的場景透射率;最后再使用一種改進的容差機制修正場景透射率錯誤估計的區(qū)域來獲得一個更加準(zhǔn)確的透射率值。最終,利用大氣散射模型和準(zhǔn)確的透射率來處理有霧圖像達(dá)到一個去霧的效果。
大氣散射模型數(shù)學(xué)模型表達(dá)式如下:
I(x)=t(x)J(x)+(1-t(x))A
(1)
式中,I(x)為有霧圖像;J(x)為無霧圖像;A為全球大氣光;t(x)為場景透射率??梢杂孟率絹肀硎総(x):
t(x)=e-βd(x)
(2)
式中,β為介質(zhì)消光系數(shù);d(x)為目標(biāo)距離攝像機的距離;t(x)、J(x)被稱為直接衰減項。
本文探究了輻射的約束,這種限制能夠變成透射率的約束,通過透射率的約束來獲得粗估計的塊場景透射率。
去霧過程就是沿著A到I(x)的指向來獲得無霧清晰圖像J(x)??梢姡饷嫱?,能達(dá)到更好的去霧效果[8]。通過下式可以看出線性外推:
(3)
顧及到場景輻射都是帶有約束條件的,所以
C0≤J(x)≤C1,?x∈Ω
(4)
式中,C0和C1為兩個與給定圖像相關(guān)的常向量。因此,對于任意一個像素點x,J(x)的外推必須位于由C0和C1邊界點組成的輻射立方體(Radiance Cube)中,從另一面來看,對t(x)的邊界約束可以從對J(x)的邊界約束變化而來。假設(shè)A是給定的,這樣可以得到任意像素點x的邊界約束[9]。然后,t(x)的下界能夠利用式(3)和式(4)來獲得,最后能夠推導(dǎo)下面的對于t(x)的邊界約束:
0≤tb(x)≤t(x)≤1
(5)
式中,tb(x)為t(x)的下界,由式(6)給出:
(6)
(7)
式中,ωx為x為中心的局部塊??梢钥闯鲞吔缂s束是一種應(yīng)用范圍更廣的先驗知識[10]。
為了更好地保護圖像的邊緣信息,通過在約束上加一個權(quán)函數(shù)W(x,y)的方法來實現(xiàn):
(8)
式中,x和y為相鄰的點?;趚與y的約束,加權(quán)函數(shù)對其進行了調(diào)節(jié)[11]。
(9)
整個圖像域中的加權(quán)上下文正則化積分致使t(x)上的上下文正則化[12]
(10)
其中的圖像域。 對于正則化,用L1范數(shù)的積分來代替L2范數(shù)的積分[13]。
為了便于計算,式(10)的離散化形式為
(11)
式中,I為圖像像素點的下標(biāo)索引的集合;ωij為加權(quán)函數(shù)W(x,y)的離散化。代替式(11)的求和秩序,又引入差分算子,因此可以進一步重寫式(11)為
(12)
為了便于計算,對式(10)用離散化形式來進行表述:
(13)
(14)
根據(jù)1.2節(jié)的分析,通過最小化以下的目標(biāo)函數(shù)可以得到優(yōu)化的透射函數(shù)t(x):
(15)
第一個是數(shù)據(jù)保真項,用于測量t(x)和根據(jù)邊界約束得出的基于塊的透射率之間的保真度;第二個是t(x)的上下文約束[14]。
詳細(xì)地說,相較于變量分裂的方法,加了一個輔助變量uj(j∈ω)產(chǎn)生了一個約束項:uj=Dj?t,則式(15)的目標(biāo)函數(shù)就變成了包含兩個參數(shù)的有約束的優(yōu)化問題:
(16)
然后使用二次性的懲罰函數(shù)用于將約束項納入式(16),這樣一來,有約束的優(yōu)化問題就等價轉(zhuǎn)化為一個無約束的優(yōu)化問題:
(17)
式中,β為權(quán)重;uj為輔助變量。當(dāng)β→∞時,式(17)將收斂于式(15)。
通過第1.3節(jié),可以獲得精確的場景透射率,但是由于在某些區(qū)域錯誤地估計了獲得的場景透射率,因此需要找到錯誤的估計區(qū)域并對其進行修正[15]。
選取學(xué)校的一處景點的霧天圖像進行分析,得到含明亮區(qū)域的去霧效果圖如圖1所示。從圖1(a)可以看出,天空附近的顏色失真十分嚴(yán)重,但從圖1(b)中可以看到天空區(qū)域的顏色,相比之下失真得顯然不是那么嚴(yán)重,但仍然有輕微的顏色失真。這些失真明顯是由邊界約束得出的基于塊的場景透射率引起的[16]。
圖1 含明亮區(qū)域的去霧效果圖
當(dāng)有霧圖像I接近全局大氣光A時,實際局部塊的灰度值要大得多,如果通過使用式(6)來獲得透射率,則計算得出的透射率值要低于實際尺寸。在這種情況下,復(fù)原后將會被擴大許多倍,因此天空區(qū)域的失真現(xiàn)象便會出現(xiàn)[17]。
不考慮邊界約束的假設(shè),推導(dǎo)出的透射率的函數(shù)應(yīng)為
(18)
根據(jù)以上的分析可以得出,如果想要消除色彩失真的現(xiàn)象并恢復(fù)真實無霧的圖像,將灰度值調(diào)整為接近全局氣體光A的明亮區(qū)域的透射率,使得估計的透射率t與實際透射率更加一致。對于這種情況,引入一個定義為容差的參數(shù)K,對于|I-A| (19) 本文從網(wǎng)上隨機選取了兩幅有霧圖像并實景拍攝了南昌市兩處地標(biāo)性景點的有霧圖像,圖2和圖3展示了本方法與He[7]、Meng[20]、Tan[4]、Tarel[6]等人提出的算法對有霧圖像的去霧效果和處理的細(xì)節(jié)。從圖像去霧來看,本文算法的效果可以很好地應(yīng)對亮度較大的天空位置失真與細(xì)節(jié)上halo失真的問題。由表1中客觀評價數(shù)據(jù)可知,信噪比和信息熵的值越大,代表圖像去霧的效果更好,且本文算法處理的結(jié)果在信噪比、信息熵和細(xì)節(jié)強度、色調(diào)還原、結(jié)構(gòu)信息4個指標(biāo)上均優(yōu)于He、Meng、Tan、Tarel等人提出的算法,本文算法對圖像去霧的效果更好。 本文去霧流程如下。 圖2 實驗效果比較 圖3 本文算法去霧效果細(xì)節(jié)處理 算法八一廣場(圖2第三行)滕王閣(圖2第四行)信噪比信息熵細(xì)節(jié)強度色調(diào)還原結(jié)構(gòu)信息信噪比信息熵細(xì)節(jié)強度色調(diào)還原結(jié)構(gòu)信息He61.876511.76840.15370.53640.697663.860914.65760.18830.85360.7168Meng66.676412.34430.20890.62760.715669.830814.87630.21980.87470.7148Tarel61.138711.37890.13760.46780.618761.455714.45520.15450.65590.5465本文68.878913.98720.27670.69760.739873.987615.76370.27820.89760.7456 (1) 場景透射率的粗估計。 輸入:全球大氣光A、有霧圖像I、塊大小sz×sz和上邊界點C1、下邊界點C0; ① 透射率下邊界tb: (2) 透射率細(xì)化。 輸出:透射率細(xì)估計t。 ② 初始化β0,βmax,βrate; Repeat: 求ui,ti,β,ui+1,ti+1。 β=β×βrate,ui+1=ui,ti+1=tiUntil:β≤βmax。 (3) 透射率修正。 輸出:修正透射率ttrue。 ① 初步修正透射率: ② 改進容差機制系數(shù)K。 利用復(fù)合函數(shù)對容差機制系數(shù)K進行改進,再把改進后的容差系數(shù)帶入上式,計算使得透射率的增長趨勢趨向于平緩。 本文算法的優(yōu)點在于能夠比較好地對灰度值大于全球大氣光區(qū)域進行處理,對于在全球大氣光區(qū)域灰度值接近的場景透射率進行了修正,改進了原有的容差機制的模型,結(jié)合原有的冪函數(shù)和對數(shù)函數(shù),構(gòu)成一個遞減復(fù)合函數(shù),確保了透射率和領(lǐng)域的透射率在補償程度上差別不大,從而確保灰度值和全球大氣光區(qū)域相近有較好的處理效果。穩(wěn)步提升透射率,然后提高透射率的升高強度,這樣就能非常好地去除彩色失真。本文算法普遍性強,很多霧化圖像都可通用,方法過程簡單,容易實現(xiàn),不需要構(gòu)造新的參數(shù),使用方便,且能夠無失真地恢復(fù)出清晰圖像。2 仿真分析
3 結(jié)束語