非剛性醫(yī)學(xué)圖像配準(zhǔn)算法的設(shè)計(jì)與實(shí)現(xiàn)
時(shí)間:2022-03-18 08:03:00
導(dǎo)語(yǔ):非剛性醫(yī)學(xué)圖像配準(zhǔn)算法的設(shè)計(jì)與實(shí)現(xiàn)一文來(lái)源于網(wǎng)友上傳,不代表本站觀點(diǎn),若需要原創(chuàng)文章可咨詢客服老師,歡迎參考。
【關(guān)鍵詞】醫(yī)學(xué)圖像;非剛性;圖像配準(zhǔn);匹配矩陣;薄板樣條
摘要:非剛性圖像匹配問(wèn)題已成為醫(yī)學(xué)圖像分析中一個(gè)非常具有挑戰(zhàn)性的問(wèn)題。基于薄板樣條插值方法,引入實(shí)匹配矩陣,并給出相應(yīng)配準(zhǔn)變換算法,該算法將薄板樣條參數(shù)表示成仿射分量和非仿射分量,并分別進(jìn)行求解。與其它非剛性匹配算法相比,該算法不僅保證了對(duì)應(yīng)特征點(diǎn)的雙向?qū)?yīng),也實(shí)現(xiàn)了自動(dòng)特征點(diǎn)選擇,實(shí)驗(yàn)結(jié)果令人滿意。
關(guān)鍵詞:醫(yī)學(xué)圖像;非剛性;圖像配準(zhǔn);匹配矩陣;薄板樣條
1引言
在醫(yī)學(xué)診斷和治療過(guò)程中,常需要對(duì)比分析多幅圖像,以獲得更為精確和全面的信息。圖像分析大都要求多幅圖像的幾何位置一致,因此,配準(zhǔn)是醫(yī)學(xué)圖像分析的一個(gè)重大課題。醫(yī)學(xué)圖像配準(zhǔn)是指對(duì)于一幅醫(yī)學(xué)圖像尋求一種(或一系列)空間變換,使它與另一幅醫(yī)學(xué)圖像上的對(duì)應(yīng)點(diǎn)達(dá)到空間上的一致。這種一致是指人體上的同一解剖點(diǎn)在兩張匹配圖像上有相同的空間位置。配準(zhǔn)的結(jié)果應(yīng)使兩幅圖像上所有的解剖點(diǎn),或至少是所有具有診斷意義的點(diǎn)及手術(shù)感興趣的點(diǎn)都達(dá)到匹配。圖像配準(zhǔn)不僅可以校正病人多次成像間的位置變化,也可以校正由于成像模式本身導(dǎo)致的畸變。對(duì)同一個(gè)病人的不同時(shí)間的圖像進(jìn)行配準(zhǔn),可以了解發(fā)育過(guò)程及腫瘤病變的病情;對(duì)不同人的圖像進(jìn)行配準(zhǔn),去除種族、年齡等臨床及遺傳差異,從而形成疾病或人群特異性圖譜,可用于正常與否的分析;對(duì)不同成像模式進(jìn)行配準(zhǔn),可以獲得互補(bǔ)信息。
醫(yī)學(xué)圖像配準(zhǔn)可分為剛性配準(zhǔn)和非剛性配準(zhǔn)兩類。剛性配準(zhǔn)在許多情況下不能滿足臨床的需要,因?yàn)楹芏嘈巫兊男再|(zhì)是非剛體、非線性的。比如為了精確定位MR圖像左心室,常常伴有組織磁化系數(shù)差異、非水分子的化學(xué)位移以及血流流動(dòng)等因素導(dǎo)致的幾何畸變以及由于磁場(chǎng)不均勻、磁場(chǎng)梯度非線性及渦流等導(dǎo)致的探測(cè)畸變,因此在放療計(jì)劃制定中,將MR圖像配準(zhǔn)時(shí),不能單純地使用剛性配準(zhǔn),必須使用非剛性配準(zhǔn)。
非剛性配準(zhǔn)算法可分為灰度驅(qū)動(dòng)、模型驅(qū)動(dòng)及混合算法三種[1~3]。灰度驅(qū)動(dòng)方法基于數(shù)學(xué)或統(tǒng)計(jì)尺度將一個(gè)灰度模式與另一個(gè)對(duì)準(zhǔn)。典型情況下,需要定義源系統(tǒng)與目標(biāo)系統(tǒng)之間的灰度相似性的數(shù)學(xué)量度。灰度相似性測(cè)度包括象素灰度的均方差、相關(guān)或互信息。模型驅(qū)動(dòng)方法首先建立明確的幾何模型,以此表示解剖標(biāo)志。這些解剖標(biāo)志包括有重要功能的表面、曲線和點(diǎn)。將源系統(tǒng)的解剖標(biāo)志參數(shù)化,與目標(biāo)系統(tǒng)的對(duì)應(yīng)部分對(duì)準(zhǔn),以這種對(duì)應(yīng)關(guān)系引導(dǎo)系統(tǒng)其余部分的變換。模型驅(qū)動(dòng)算法包括點(diǎn)約束法、線約束法和面約束法。混合算法是結(jié)合使用以上兩種算法的方法。薄板樣條插值方法是非剛體變換中的一種特殊的變換,它允許局部調(diào)整,并符合某種連續(xù)性或平滑性要求。第2節(jié)討論剛性能量函數(shù);第3節(jié)給出非剛性能量函數(shù);第4節(jié)設(shè)計(jì)并實(shí)現(xiàn)一個(gè)非剛性配準(zhǔn)算法;最后給出實(shí)驗(yàn)結(jié)果。
2剛性能量函數(shù)
本研究之所以采用薄板樣條,是因?yàn)樗莫?dú)特性質(zhì),就是能夠?qū)⒖臻g變換分解為一個(gè)全局仿射變換和一個(gè)局部非仿射變換。Booksteein[4]首先將薄板樣條函數(shù)應(yīng)用于標(biāo)志點(diǎn)的匹配,結(jié)果證明它是一個(gè)非常有用的形狀分析工具。假設(shè)在二維空間,已知兩個(gè)具有N對(duì)對(duì)應(yīng)點(diǎn)的點(diǎn)集,Q={Qi,i=1,2,…,n}和P={Pi,i=1,2,…,n},將點(diǎn)集Q,P表示為:
Q=1x1y1
1x2y2
………
1xnynP=1x1y1
1x2y2
………
1xnyn
下面我們建立從點(diǎn)集P到點(diǎn)集Q的薄板樣條映射f(Pi),由于薄板樣條是不對(duì)稱的,因此從P到Q的映射不能簡(jiǎn)單地反轉(zhuǎn)為從Q到P的映射。通過(guò)最小化下面的能量函數(shù),可以得到一個(gè)剛性能量函數(shù):
Etps(f)=∑ni=1‖Q-f(P)‖2+λJ(f)(1)
其中,J(f)=R22fx22+22fxy2+2f2y2dxdy
(1)式第一項(xiàng)代表經(jīng)過(guò)變換的源標(biāo)志點(diǎn)與目標(biāo)標(biāo)志點(diǎn)之間的距離和;第二項(xiàng)代表了獲得的變換的不平滑度,也叫懲罰函數(shù)。使該式最小化的變換既滿足變換后源標(biāo)志點(diǎn)與目標(biāo)標(biāo)志點(diǎn)間接近(近似)的要求,同時(shí)也加入了足夠的平滑。系數(shù)λ(λ>0)表征了近似和平滑之間的相對(duì)關(guān)系:當(dāng)λ較小時(shí),獲得的變換表現(xiàn)了很好的近似效果;當(dāng)λ較大時(shí),就獲得了比較平滑的變換,對(duì)較大的局部畸變進(jìn)行了調(diào)整。薄板函數(shù)計(jì)算如下:
設(shè)z(x,y)=-U(r)=-r2logr2,其中,r=x2+y2,U(r)是構(gòu)建薄板樣條的基函數(shù),設(shè)rij=|Pi-Pj|為點(diǎn)Pi與點(diǎn)Pj的歐幾里德距離。對(duì)分散點(diǎn)數(shù)據(jù)集Pi進(jìn)行薄板樣條彈性插值后可以得到曲面。插值過(guò)程形象地模擬為一個(gè)薄金屬板在點(diǎn)約束下的扭曲變形,要使金屬板在點(diǎn)(xi,yi)處高度為zi,并且該板具有最小彎曲能量,即薄板函數(shù)f(x,y)使罰函數(shù)J(f)最小。定義n×n矩陣:
K=0U(r12)…U(r1n)
U(r21)0…U(r2n)
…………
U(rn1)U(rn2)…0
V=(z(x1,y1),z(x2,y2),…,z(xn,yn))T
通過(guò)解線性方程組(2)可以得到W=(w1,w2,…,wn)T和T=(a1,ax,ay)T
KW+PT=V
PTW=0(2)
W是n×3的非仿射變換形變參數(shù)矩陣,T是3×3的仿射形變參數(shù)矩陣,K是薄板樣條的核,為n×n矩陣。
然后構(gòu)造函數(shù):
f(x,y)=a1,axx+ayy+∑ni=1wiU(|(xi,yi)-(x,y)|)(3)
此時(shí)該函數(shù)對(duì)于所有i,有f(xi,yi)=zi,并使罰函數(shù)J(f)最小。
事實(shí)上,直接解方程組(2)是困難的,也不現(xiàn)實(shí),我們將通過(guò)迭代求解點(diǎn)集之間的匹配矩陣來(lái)求方程(2)的參數(shù)W和T。
3非剛性能量函數(shù)
由剛性能量函數(shù)推導(dǎo)表明,只要已知兩個(gè)點(diǎn)集之間的對(duì)應(yīng)點(diǎn),就可以得到它們之間的薄板樣條映射參數(shù)。但是當(dāng)對(duì)應(yīng)點(diǎn)未知時(shí),該如何處理呢?傳統(tǒng)的方法往往都是手動(dòng)選點(diǎn),這種方法費(fèi)時(shí)費(fèi)力,同時(shí)在結(jié)構(gòu)不清的情況下,很難選擇到足夠多的精確對(duì)應(yīng)點(diǎn)。而且其準(zhǔn)確性也只是相對(duì)的,誤差是不可避免的。文獻(xiàn)[10]定義兩個(gè)點(diǎn)集之間的匹配矩陣M={Mij}:
Mij=1,若點(diǎn)Qi對(duì)應(yīng)于點(diǎn)Pi
0,其他
由于兩個(gè)點(diǎn)集之間是雙向一一對(duì)應(yīng)的,即一個(gè)點(diǎn)集中的每個(gè)點(diǎn)在另一個(gè)點(diǎn)集中至多有一個(gè)對(duì)應(yīng)點(diǎn),反之亦然。匹配矩陣{Mij}具有下面約束:
j,∑N1i=1Mij=1,i,∑N2j=1Mij=1(4)
N1和N2分別是兩個(gè)點(diǎn)集的點(diǎn)數(shù),將匹配矩陣考慮到式(1)中,得到基于薄板樣條映射的非剛性匹配的能量函數(shù)為:
Etps(M,T,W)=∑N1i=1∑N2j=1Mij‖Q-PT-KW‖2+λJ(f)(5)
式(5)的第一項(xiàng),可以使點(diǎn)集P中的點(diǎn)盡可能近地映射到Q中的點(diǎn);第二項(xiàng)是平滑性約束,用于映射的調(diào)整,調(diào)整參數(shù)λ決定了映射的形變程度,當(dāng)λ→0時(shí),將得到對(duì)應(yīng)點(diǎn)的精確匹配。
4非剛性配準(zhǔn)算法的設(shè)計(jì)與實(shí)現(xiàn)
在保證式(4)的約束下,放松對(duì)匹配矩陣的約束,將二值的匹配矩陣轉(zhuǎn)化為連續(xù)實(shí)數(shù)矩陣,即Mij∈{0,1}→Mij∈[0,1],允許部分匹配的存在,稱這樣的匹配矩陣為模糊匹配矩陣。由第下面的算法可以看到,隨著時(shí)間的推移,Mij的值逐漸變大,越來(lái)越接近二值矩陣,當(dāng)時(shí)間足夠長(zhǎng)時(shí),就會(huì)得到最終的二值匹配矩陣。
根據(jù)匹配矩陣元素的性質(zhì),令:
Mij=1‖Q-PT-KW‖2+1(6)
當(dāng)‖Q-PT-KW‖→0時(shí),Mij→1。所以,非剛性能量函數(shù)(4)式可改寫為:
Etps(M,T,W)=∑N1i=1∑N2j=1(Mij2(‖Q-PT-KW‖2+1)+2Mij)+λJ(f)(7)
通過(guò)EMij=0能夠得到使能量函數(shù)(7)式極小的匹配矩陣元素Mij。
在第2節(jié)我們知道,直接解方程組(2)中參數(shù)W和T是困難的,對(duì)于仿射變換T的計(jì)算是獨(dú)立于(2)式。
因?yàn)槎S歐氏空間上的仿射變換可寫為:S(Pj)=TPj+A,其中,A=(Δx,Δy)T為平移量,T=kcosθsinθ
-sinθcosθ,平移、旋轉(zhuǎn)、縮放及反射和剪切等是二維仿射變換的特例。此模型中的參數(shù)k、θ、Δx和Δy,即為兩圖像的配準(zhǔn)參數(shù)。確定這幾個(gè)參數(shù)的步驟為:首先對(duì)需配準(zhǔn)的兩幅圖像估計(jì)初始值k0、θ0、Δx0和Δy0,建立兩個(gè)點(diǎn)集的坐標(biāo)對(duì)應(yīng)關(guān)系。計(jì)算兩幅圖像對(duì)應(yīng)點(diǎn)互信息,可得到Δx0和Δy0。對(duì)k0、θ0的選取可先確定一個(gè)大致范圍,然后設(shè)定一定的間隔μ作步長(zhǎng)因子,設(shè)k=μ1k0,θ=μ2θ0,以互信息最大為原則進(jìn)行迭代搜索,自適應(yīng)取得最佳值。實(shí)際中圖像經(jīng)過(guò)預(yù)處理后,圖像之間的旋轉(zhuǎn)角θ比較小,取值范圍為(-π/4,π/4),就能保證找到正確的θ值。按照最大相關(guān)原則迭代搜索,以獲得最佳值θ,對(duì)k0的處理方法與此類似。
獲得了最佳值k和θ后,再對(duì)Δx0和Δy0按最大互信息原則沿圖像兩個(gè)正交方向逐像素搜索,以取得最佳值Δx和Δy。
確定了配準(zhǔn)參數(shù)K、θ、Δx和Δy,就可對(duì)圖像進(jìn)行平移、旋轉(zhuǎn)和縮放。將得到的T代入(2)式,求得參數(shù)W。W的作用是將圖像經(jīng)T變換后坐標(biāo)值不落在像素點(diǎn)上的點(diǎn)調(diào)整到像素點(diǎn)上。
本研究的算法主要包括以下幾個(gè)步驟:
①給定特征點(diǎn)集Q和P;
②初始化:Mij=1(全1矩陣),W=1(全1矩陣),T=0(零矩陣),A=0(零向量),λ=λ0,N=100,構(gòu)造初始薄板樣條;
③根據(jù)仿射坐標(biāo)最大相關(guān)原則迭代計(jì)算T,A;
④根據(jù)(4)式計(jì)算W;
⑤根據(jù)(6)式計(jì)算Mij;
⑥根據(jù)(3)式,構(gòu)造薄板樣條;
⑦如果M滿足(4)式約束或迭代次數(shù)大于>N,則轉(zhuǎn)⑧,否則轉(zhuǎn)③;
⑧end。
需要指出的是,由于互信息量是統(tǒng)計(jì)量,因此我們對(duì)標(biāo)準(zhǔn)圖確定的點(diǎn)數(shù)不能太少,保證互信息量的統(tǒng)計(jì)有效性。
5實(shí)驗(yàn)結(jié)果
圖1顯示了對(duì)一對(duì)96×96,灰度級(jí)為256級(jí)的MRI圖像進(jìn)行非剛性配準(zhǔn)的實(shí)例。(a)是一幅標(biāo)準(zhǔn)的MRI心臟長(zhǎng)軸的一個(gè)切片;(b)是一幅有變形的MRI圖像心臟長(zhǎng)軸同一周期另一個(gè)切片,此圖像是用圖像處理軟件Photoshop手動(dòng)變形處理獲得;(c)是標(biāo)準(zhǔn)圖像中特征點(diǎn)的選取,圖中的小紅圓圈為選擇的特征點(diǎn);(d)是最大互信息搜索方法在變形圖像上搜索到的對(duì)應(yīng)特征點(diǎn);(e)是配準(zhǔn)結(jié)果。由圖1(a)、(b)、(e)我們可以看出,經(jīng)過(guò)配準(zhǔn)變換后,圖1(b)變形為圖1(e),與圖1(a)已基本完全一致了。通過(guò)計(jì)算整幅圖像之間的互信息量我們得到:圖1(a)和圖1(b)的互信息量為1.037,圖1(a)和圖1(e)之間的互信息量為3.44,而圖1(a)與自身計(jì)算得到的互信息量為3.46。可見(jiàn),經(jīng)過(guò)非剛性性配準(zhǔn)變換,圖像達(dá)到了較高的匹配精度。
abcde
圖1MRI非剛性配準(zhǔn)的實(shí)例
6結(jié)束語(yǔ)
一直以來(lái),學(xué)者們提出了各種非剛性圖像匹配方法。文獻(xiàn)[5]將圖像分解為許多子圖像,估計(jì)每個(gè)子圖像之間仿射變換,這樣用多個(gè)仿射變換近似反映整個(gè)圖像之間的非剛性映射。文獻(xiàn)[6]首先從圖像中提取出特征點(diǎn),然后將特征點(diǎn)擬合成曲線或曲面進(jìn)行匹配。這種方法在擬合的曲線或曲面比較光滑的情況下效果好,但是當(dāng)圖像所包含的形狀很復(fù)雜時(shí),曲線或曲面的擬合就變得非常困難,這種方法的好處是曲線的匹配相對(duì)于點(diǎn)集的匹配要容易些。
最近還有許多非剛性匹配的研究主要集中于非剛性形狀的統(tǒng)計(jì)特性的學(xué)習(xí)上[7],其方法類似于迭代最近點(diǎn)(ICP)算法,是基于局部的啟發(fā)式搜索。以上這些方法大都存在魯棒性差,而且通常不能保證圖像之間的一一對(duì)應(yīng)和特征點(diǎn)的自動(dòng)確定。本研究提出了一種通過(guò)薄板樣條函數(shù)來(lái)表征特征點(diǎn)集之間的非剛性映射,把該映射分解為仿射變換和非仿射變換,并分別計(jì)算求解薄板樣條的參數(shù)并滿足雙向?qū)?yīng)的約束。
參考文獻(xiàn)
1LikarB,pernuiF.Ahierarchicalapproachtoelasticregistrationbasedonmutualinformation.ImagVisionComput,2001,19:33~44.
2KyriacouSK,DavatzikosC.Nonlinearelasticregistrationofbrainimageswithtumorpathologyusingabiomechanicalmodel[MRI].IEEEtransMedImag,1999,18:580~592.
3ButtA,AcharyaR,SibataC,putMedImagGraph,1998,22:13~23.
4BooksteinFL.Principalwarps:Thinplatesplinesandthedecompositionofdeformations.IEEETarans.1989,PAMI11(6):567~585.
5PappuS,GoldS.AFrameworkforNonRigidMatchingandCorrespondence.AdvanceinNeuralinformationProcessingSystems,MITpress,Cambridge:1996,8.795~801.
6SzeliskiR,LavalleeS.Matching3Danatomicsurfaceswithnonrigiddeformationsusingoctreesplines.Int1JComputerVision,1996,18:171~186.
7DutaN,JainAK,etal.Learning2Dshapemodels.IEEEConf.OnComputerVisionandPatternRecognition(CVPR).Colombia:FortColins,1999,2:8~14.
8SunDongmei,QiuZhengding.ANewNonRigidImageMatchingAlgorithmUsingThinPlatesSpline.ACTAElectronicSinica(inChina).2002,30(8):1104~1108.
9RenHaihua,etal.MedicalImageElasticRegistrationBasedonThinPlateSplines.BeijingBiomedicalEngineering(inChnia).2003,22(4):241~245.
10孫冬梅,裘正定.利用薄板樣條函數(shù)實(shí)現(xiàn)非剛性圖像匹配算法.電子學(xué)報(bào),2002,30(8):1104~1107.