陳琛 霍兵強 李海軍 陸惠玲
摘要:為了使PET/CT醫(yī)學圖像融合達到更好的效果,討論了小波變換和區(qū)域的最優(yōu)融合方法。首先將PET圖像和CT圖像通過二維離散小波變換,得到低頻子帶和高頻子帶;其次采用鄰域能量、鄰域方差、鄰域梯度3種算法對高頻子帶進行規(guī)范化,融合規(guī)則均選用絕對值取大的方法;然后選用取平均值的方法對低頻子帶進行融合,將融合后的PET/CT圖像通過二維離散小波逆變換,獲得最終的融合圖像;最后對3種融合算法進行比較,得出最優(yōu)算法。實驗結(jié)果表明,基于鄰域梯度的融合方法在客觀評價指標和人眼視覺效果上均優(yōu)于其它方法,且魯棒性較強。
關(guān)鍵詞:圖像融合;小波變換;區(qū)域;PET/CT
DOIDOI:10.11907/rjdk.171458
中圖分類號:
TP317.4文獻標識碼:A文章編號:16727800(2017)010020203
0引言
當代醫(yī)學能夠利用成熟影像設(shè)備得到人體臟器結(jié)構(gòu)、內(nèi)部組織、功能變化等多方面的人體健康狀況信息,從而更加客觀、精確地了解人體健康水平。PET/CT兼具PET和CT的功能和優(yōu)點,既能精確定位,又能在分子水平上實時測量人體細胞癌變情況,還能反映病灶的形態(tài)結(jié)構(gòu)及病理生理。利用小波變換進行圖像融合具有實際的物理意義與較高的臨床實用價值,針對大小不同的細節(jié)、邊緣信息,并在不同尺度上進行提取處理,合成的融合圖像能準確體現(xiàn)所有特性的細節(jié)信息。小波分解是多尺度、多分辨率的分解過程。
為了解決小波基的構(gòu)造問題,SMallat與YMeyer[12]創(chuàng)建了多尺度分析方法,解決了很多Fourier變換不能處理的困難問題。小波分析應(yīng)用領(lǐng)域十分廣泛,包括信號分析與圖像處理、醫(yī)學成像與診斷、地震勘探數(shù)據(jù)處理、計算機分類與識別、大型機械的故障診斷、量子力學與理論物理等方面[34]。
根據(jù)基于小波變換和區(qū)域的PET/CT醫(yī)學圖像的3種融合方法,得出融合方法的基本思路是:首先對已配準的PET和CT圖像進行小波變換,得到低頻子代和高頻子代;再對分解后的低頻子帶采用取平均的融合規(guī)則進行融合,而對于高頻分量,分別在3種區(qū)域算法下,進行取最大值的融合規(guī)則;最后,找出最優(yōu)算法。實驗結(jié)果表明,領(lǐng)域梯度融合算法是有效、可行的,即領(lǐng)域梯度融合算法可獲得信息量較高的融合圖像,取得滿意的視覺效果。
1小波變換
20世紀80年代中期,法國科學家Morlet和Grossman在進行地震信號分析時提出小波分析 (Wavelet Analysis)方法,隨后該方法發(fā)展迅速。在許多應(yīng)用中,都將小波分析歸結(jié)為信號處理問題。目前,傅立葉分析是對性質(zhì)隨時間穩(wěn)定不變的信號進行處理的理想工具。而在實際情況下,絕大多數(shù)信號是非穩(wěn)定的,而適用于非穩(wěn)定信號處理的工具是小波分析。小波分析應(yīng)用的一個重要方面就是圖像與信號壓縮,其特點是壓縮速度快、壓縮比高,在傳遞中可以抗干擾,且保持壓縮后圖像與信號的特性不變。目前比較成功的基于小波變換的壓縮方法有小波變換向量壓縮、小波變換零樹壓縮、小波域紋理模型方法和小波包最好基方法等[5]。
2基于區(qū)域的融合算法
區(qū)域融合算法是通過每個像素點所在區(qū)域的特征因子運算加權(quán)系數(shù)得到的。該算法不但考慮了每個像素的灰度值大小,而且考慮了該像素點所在區(qū)域的各個像素間的關(guān)聯(lián)性,可改善像素所在區(qū)域的清晰度[6]。相比于單個像素點的算法,其改善了源圖像清晰區(qū)域提取的準確性。常見的區(qū)域有鄰域梯度、鄰域能量和鄰域方差。設(shè)F(x,y)是融合圖像在點(x,y)的灰度值,S為窗口區(qū)域(設(shè)窗口大小為3*3), H為窗口函數(shù),i=C或D(C、D為源圖像)是圖像i在點(x,y)處的灰度值,則有以下定義:
(1)鄰域能量的定義為:
Ei(x,y)=∑m,nsH(m,n)f2i(x+m,y+n)(1)
其中,H=01/801/81/21/801/80,i=1、2,窗口函數(shù)H的公式是可變的。
(2)鄰域方差的定義為:
σi(x,y)=19∑1m=-1∑1n=-1fi(x+m,y+n)-fi(x+m,y+n)2(2)
式中:
fi(x,y)=19∑1m=-1∑1n=-1fi(x+m,y+n)(3)
(3)鄰域梯度的定義為:
Gi(x,y)=∑m,nSH(m,n)fi(x+m,y+n)(4)
其中,H=18-1-1-1-18-1-1-1-1 ,i=1、2,窗口函數(shù)H的公式是可變的。
3基于小波變換與區(qū)域的PET/CT醫(yī)學圖像融合
3.1融合思路
基于小波變換和區(qū)域的PET/CT醫(yī)學圖像融合算法流程如圖1所示。
圖1融合算法流程
先對已配準好的PET圖像和CT圖像進行二維離散小波變換,獲得1個低頻分量和3個不同方向的高頻分量。根據(jù)不同分量的特點,分別選用各自的融合方法。其中低頻部分采用取平均值的融合方法,高頻部分選用鄰域能量、鄰域方差和鄰域梯度3種不同區(qū)域取最大值的融合方法。之后將融合后的系數(shù)矩陣經(jīng)過二維離散小波逆變換,獲得最終的融合圖像。最后,通過對比試驗充分驗證了鄰域梯度融合算法的可行性和有效性。
3.2實現(xiàn)方法
3.2.1低頻融合方法
通過小波分解獲得低頻帶的小波系數(shù),比較對應(yīng)的像素且取均值,新系數(shù)即是融合后的系數(shù)矩陣低頻子帶的系數(shù)[7]。
Fij(x,y)=∑Kk=1ck×Dik,j(x,y)(5)
式中,K表示源圖像數(shù)目,F(xiàn)ij(x,y)是融合后圖像在(x,y)第j層小波的分解系數(shù),ck表示各圖像的加權(quán)系數(shù);i= 1、2、3是0°、90°和45°的小波分解系數(shù);Dik,j(x,y)是圖像K 的(x,y)第j層小波分解系數(shù)。endprint
3.2.2基于鄰域的高頻融合規(guī)則
源圖像經(jīng)過小波變換后的多方向高頻子帶,包含了圖像的輪廓信息和細節(jié)特征,PET與CT圖像經(jīng)小波變換后得到3個方向的高頻子帶。針對高頻子帶具有稀疏性的特點[8],首先通過區(qū)域算法,將其變?yōu)橄鄳?yīng)區(qū)域下的鄰域能量矩陣、鄰域方差矩陣和鄰域梯度矩陣。在圖像的小波變換中,小波系數(shù)的絕對值處于較大情況下,圖像有對比度變化較大的邊緣等特征。由于人眼對這些特征比較敏感,因此在基于區(qū)域矩陣變換后,比較并取相應(yīng)像素的較大絕對值,獲得系數(shù)為融合后的系數(shù)矩陣高頻子帶的系數(shù)。
Fij(x,y)=maxK{abs(Dik,j(x,y))}(6)
式中,abs(Dik,j(x,y))是將小波變換系數(shù)Dik,j(x,y)進行絕對值運算;maxK{abs(Dik,j(x,y))}是將小波變換系數(shù)進行取最大值運算。
4仿真實驗及分析
4.1實驗環(huán)境
硬件環(huán)境為:仿真硬件平臺為Pentium(R) DualCore CPU E6700,3.2 GHz,2. 0 Gbyte內(nèi)存,操作系統(tǒng)為Windows 7。軟件環(huán)境為 Matlab R2014a。
實驗采用一組肺癌經(jīng)配準后的PET及CT圖像,圖像大小為256×256像素,驗證試驗采用3組其它肺癌配準后的PET及CT圖像,圖像大小為256×256像素。
小波分解參數(shù)設(shè)置為:分解系數(shù)dim=2,小波類型為離散型小波,鄰域矩陣大小為3×3。
4.2實驗結(jié)果及分析
實驗1:對鄰域方差、鄰域梯度和區(qū)域能量3種圖像融合算法進行比較。
為了檢驗融合算法在圖像融合中的優(yōu)勢,將鄰域能量、鄰域方差與鄰域梯度3種圖像融合算法進行比較。算法中,圖2(c)高頻子帶采用基于鄰域能量的取大融合方法,圖2(d)高頻子帶采用基于鄰域方差的取大融合方法,圖2(e)高頻子帶采用基于鄰域梯度的取大融合方法,圖2(c)、(d)和(e)的低頻融合規(guī)則均為加權(quán)平均法。評價PET/CT圖像依據(jù)數(shù)據(jù)指標和人眼觀察的角度,圖2說明鄰域梯度融合算法得到的PET/CT圖像的邊緣、輪廓、清晰度和紋理等方面信息,好于其它方法的融合效果,且融合圖像既反映了病灶輪廓,又能說明組織與器官的毗鄰關(guān)系。
圖2不同算法融合結(jié)果
為了客觀評價不同指標下融合圖像的效果,選取信息熵(IE)、平均梯度(MG)、均方誤差(MSE)、峰值信噪比(PSNR)、絕對平均誤差(MAE)和信噪比(SNR)來客觀分析融合圖像的效果。通過對客觀評價指標分析得出,基于鄰域梯度融合算法得到的融合圖像在IE、MG、MSE、PSNR、MAE和SNR指標上均優(yōu)于其它2種方法,故鄰域梯度算法提高了融合圖像質(zhì)量??陀^數(shù)據(jù)指標和主觀視覺上的一致性,說明鄰域梯度融合算法的PET/CT圖像融合效果較好,進而驗證了該算法的優(yōu)越性,如表1所示。
實驗2:最優(yōu)算法進行多組肺癌PET/CT融合效果圖像。
對其它幾組肺癌的PET圖像與CT圖像進行融合檢驗,肺癌患者3組PET圖像與CT圖像融合如圖3所示,結(jié)果表明該算法能較好地應(yīng)用于圖像融合。PET/CT圖像既包含了PET圖像中病灶的代謝情況,又體現(xiàn)了CT圖像中病灶的輪廓與邊緣信息,數(shù)據(jù)指標也證實了該方法的優(yōu)點。
實驗表明,基于鄰域梯度的高頻取大和低頻取平均的融合算法,在數(shù)據(jù)指標和視覺評價上都具有顯著優(yōu)勢,證明該方法的魯棒性較好,能為手術(shù)及定位病灶提供更好的影像依據(jù),且適用于其它疾病的 PET/ CT圖像融合。
5結(jié)語
為了對病人作出正確且全面的診斷治療,對不同醫(yī)學成像設(shè)備產(chǎn)生的圖像信息進行分析[9]。在選擇融合規(guī)則方面,按照小波變換和區(qū)域 PET/ CT醫(yī)學圖像的成像特點,比較了不同融合方法,并針對小波變換高頻部分矩陣系數(shù)稀疏的特點,利用區(qū)域算法,有效重構(gòu)了圖像的細節(jié)和紋理等信息[10]。而低頻子帶選用取平均值的融合算法,結(jié)合了PET/ CT圖像特性,結(jié)果證實此算法能保留更多代謝特征和邊緣信息,且更適應(yīng)人眼視覺特性。該方法用于PET/CT圖像融合,不僅能提高融合圖像質(zhì)量,而且降低了存儲空間的計算復(fù)雜度,使主觀視覺效果和客觀評價指標一致,證明該方法有較好的融合圖像效果,進而驗證了區(qū)域梯度法的優(yōu)越性。
參考文獻參考文獻:
[1]TARANTOLA G, ZITO F, GERUNDINI P. PET instrumentation and reconstruction algorithm in wholebody applications[J]. Nucl Med,2003(44):756769.
[2]TOWNSEND DW, BEYER T. A combined PET/CT scanner: the path to true image fusion[J]. British Journal of Radiology,2002(75):2430.
[3]RAJIV KAPOOR. Fusion for registration of medical imagesa study [J]. Applied Imagery Pattern Recognition Workshop,2004,13(9):5968.
[4]AANTERAMIREZ B, LOPEZCALOCA A. Image fusion with the Hermite transforms [J]. Image Processing,2005,10(9):1417.
[5]YUMEI MIAO, YUSONG MIAO. The research of semantic content applied to image fusion [J]. Imagery Pattern Recognition Workshop,2003,5(10):1517.
[6]AKERMAN A. Pyramidal techniques for multisensor fusion [J]. Proceedings of SPIE,1992,18(2):124131.
[7]TOET A, L J, VAN RUYVEN. Merging thermal and visual images by a constract pyramid [J]. Optional Engineering,1989,28(7):789792.
[8]倪倩,陳超敏,周凌宏.一種小波域上運用變分模型的PET/CT圖像融合方法[J].醫(yī)療衛(wèi)生裝備,2008,29(5):810.
[9]王文文,王惠群,周濤,等.基于壓縮感知和NSCTPCNN的PET/CT醫(yī)學圖像融合算法[J].重慶理工大學學報:自然科學,2016(2):101108.
[10]王惠群,王文文,周濤,等.基于多分辨率變換和壓縮感知的PET/CT融合方法[J].電視技術(shù),2016(3):1116.
責任編輯(責任編輯:黃?。〆ndprint