版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
1、Multifocus image fusion using region segmentation and spatial frequencyxoulongxia專業(yè):計算機科學與技術(shù)一一 研究背景二二 研究動態(tài)三三 研究內(nèi)容四四 文章理解五五 想 法研究背景 定義 圖像融合(Image Fusion)是通過對源圖像間冗余信息和互補信息進行處理,使得到的融合圖像可靠性增強,能更客觀地、更精確地和更全面地對某一場景進行圖像描述,更加適合人眼和機器視覺感知,更加有利于圖像分割、特征提取和目標識別等更深層次的圖像處理任務(wù)。 高效的圖像融合方法可以根據(jù)需要綜合處理多源通道的信息,從而有效地提高了圖像信
2、息的利用率、系統(tǒng)對目標探測識別地可靠性及系統(tǒng)的自動化程度。其目的是將單一傳感器的多波段信息或不同類傳感器所提供的信息加以綜合,消除多傳感器信息之間可能存在的冗余和矛盾,以增強圖像中信息透明度,改善解譯的精度、可靠性以及使用率,以形成對目標的清晰、完整、準確的信息描述。 例如,對于聚集不同的多幅對準圖像,如果圖像中的一些景物在其中的一幅圖像中很清晰,而在別的圖像中較為模糊的話,那么可以采取圖像融合的方法獲得一幅新的圖像,融合后的圖像比融合前的任意一幅圖像具有更多的信息量。圖一:左聚焦圖像圖一:左聚焦圖像 圖二:右聚焦圖像圖二:右聚焦圖像 圖三:融合圖像圖三:融合圖像研究動態(tài) 圖像融合近年來在很多
3、領(lǐng)域都有了越來越多的應(yīng)用和發(fā)展。在醫(yī)學上,醫(yī)學圖像的配準和融合為醫(yī)生提供更加豐富、可靠的圖像依據(jù),以便更加直觀地利用這些信息并結(jié)合臨床經(jīng)驗做出準確診斷;隨著遙感技術(shù)的發(fā)展,高空間分辨率、波譜分辨率和時間分辨率的圖像數(shù)據(jù)已經(jīng)問世;根據(jù)各種不同類型的多光譜數(shù)據(jù)信息之間存在著重疊和互補,利用圖像融合技術(shù)對遙感圖像進行融合,近年來在土地動態(tài)監(jiān)測、防洪防災(zāi)和軍事偵察方面得到應(yīng)用。 在圖像融合目標識別方面,國外從70年以已開始研究被動微波紅外復合的雙模(雙傳感器)尋的系統(tǒng),進入80年代后,更多型式的雙模(雙傳感器)尋的系統(tǒng)如:半主動雷達紅外、主動毫米波雷達、激光紅外等型式的雙模尋的系統(tǒng)大量出現(xiàn),其主要的目
4、的就是企圖通過多種不同類型的傳感器系統(tǒng)的組合和信號的綜合利用使整個系統(tǒng)在性能上取得互補,以提高尋的系統(tǒng)總的性能指標。研究內(nèi)容 目前,國內(nèi)外學術(shù)界在圖像融合領(lǐng)域已取得了豐碩的研究成果。在理論和方法方面主要有主成分分析法、演化計算法、神經(jīng)網(wǎng)絡(luò)法、小波變換法和模糊邏輯等圖像融合方法:在融合效果客觀評價方面,有shannon提出的信息熵、交叉熵、互信息、聯(lián)合熵以及均方根誤差、均值、標準差、平均誤差、偏差、相對偏差、空間頻率、灰度標準差、相關(guān)系數(shù)、信噪比和峰值信噪比等客觀評價標準。 一般情況下,圖像融合由低到高分為三個層次:像素級融合、特征級融合、決策級融合。 像素級融合是在嚴格配準的條件下,直接在傳感
5、器采集所得的圖像原始數(shù)據(jù)層上進行處理,可用來提高信號的靈敏度與信噪比,以利于目視觀測與特征提取。 像素級圖像融合具有明顯的局限性:它要處理的圖像數(shù)據(jù)量太大,處理代價高;這種融合是在信息的最低層進行,傳感器原始信息的不確定性、不完全性和不穩(wěn)定性要求在進行融合時有較高的糾錯處理能力;要求各傳感器信息之間有精確到一個像素的配準精度;數(shù)據(jù)通信量大,抗干擾能力差。 特征級圖像融合是中間層次上的融合,它是先提取來自傳感器的原始信息的特征,產(chǎn)生特征矢量,然后對特征矢量進行融合處理。一般來說,提取的特征信息應(yīng)該是像素信息的充分表示量或充分估計量,然后按照特征信息對多傳感器數(shù)據(jù)進行綜合分析和處理。 特征級圖像融
6、合的主要優(yōu)點有:由于提取傳感器原始信息的特征信息,信息得到了壓縮,有利于實時處理。 決策級圖像融合是最高層次的融合,包含檢測、分類、識別和融合,在決策級圖像融合之前,每種傳感器已經(jīng)被獨立完成了決策和分類任務(wù),融合工作實質(zhì)上是做出全局的最優(yōu)決策。決策級圖像融合的優(yōu)點主要表現(xiàn)為:它能在增加或減少一個或多個傳感器的情況下工作,對傳感器沒有特殊的要求,因此,它具有很強的容錯性、很好的開放性、融合中心處理代價小,較短的處理時間等特點。同時由于處理的數(shù)據(jù)量較小,信息通信量小,抗干擾能力強,還能有效的反映環(huán)境或目標各個側(cè)面的不同類型信息。 由于是最高級別的融合,需要以前面級別的融合結(jié)果作為輸入,所以預處理的
7、代價非常高。文章理解 本文中,我們提出一種在空間域?qū)嵭械牟⑶疫m合多聚焦圖像的融合。直觀的想法是圖像被人們理解為區(qū)域或?qū)ο蠹墑e用來代替像素級別。這包含三個步驟:圖像的分割、區(qū)域的明確計算和融合圖像的構(gòu)建。 第一步,通過簡單的求均值的方法合并兩個源圖像。 第二步,被融合的圖像使用歸一化分割(Ncut)方法分割,根據(jù)這個結(jié)果圖像被劃分開。 第三步,兩個源圖像相匹配的區(qū)域使用空間頻率的方法相融合。實驗方案1、Region segmentation using normalized cuts (基于歸一化分割方法的區(qū)域分割)被分割的圖像是由點集組成的,節(jié)點之間的相互聯(lián)系就構(gòu)成了加權(quán)無向圖G = (V,E
8、)。我們給出 normalized cuts (Ncut)的定義: 其中, 表示所有從節(jié)點A到節(jié)點B的連接, 表示從節(jié)點A到所有結(jié)點的連接。)V ,B(assoc)B,A(cut)V ,A(assoc)B,A(cut)B,A(NcutBt ,Au)t ,u(W)B,A(cutVt ,Au)t ,u(W)V ,A(assoc 計算流程 (1)定義一個給定的圖像和權(quán)重函數(shù)的特征描述矩陣; (2)假定一個加權(quán)圖G=(V,E),計算邊緣權(quán)值,得出的W和D的信息矩陣的W表達式如下: X(i)為節(jié)點i的位置空間,F(xiàn)(i)=I(i)為強度值,矩陣D是NN的對角矩陣,對角線上的d(i)=W(i,j); (3)
9、解答(D-W)X=DX特征向量的最小特征值; (4)使用特征向量找出第二小的特征值,并找出劃分的點以便于把Ncut的值減小至最低范圍; (5)檢查Ncut的值,最簡單的是依據(jù)第一個計算特征向量的柱狀圖,然后計算在最大值和最小值之間的二進特征向量的比率,在實驗中,設(shè)置一個像上述的比率閾值,小于閾值的特征向量是不穩(wěn)定的(本實驗設(shè)置閾值為0.06)。 我們還可以按照第(2)進一步的細化。2、Spatial frequency(空間頻率)空間頻率源于人們的目視系統(tǒng),表明在一個圖像中的全部活動程度,一個圖像塊的空間頻率定義如下: 假定一個像素為MN的圖像,行頻率RF(row frequencies),列
10、頻率CF(column frequencies),則 F(m,n)是圖像F在位置(m,n)的像素灰度值圖像的總的空間頻率:3、Multifocus image fusion using regions clarity (區(qū)域明確的多聚焦圖像融合) 融合的過程(1)獲得檢錄圖像A和B的臨時融合圖像平均值;(2)使用歸一化的分割算法把臨時融合圖像分割為幾個區(qū)域;(3)使用第(2)步的結(jié)論劃分圖像A和B;(4)計算每一個劃分的A和B區(qū)域的空間頻率;(5)比較兩個源圖像相匹配的區(qū)域空間頻率,以決定哪一部分用于構(gòu)建融合圖像, 是第i個區(qū)域的融合圖像, 和 是圖像A和B的第i個區(qū)域的空間頻率。iRoFAi
11、SFBiSF (6)挑選所有相融后的區(qū)域組建最后的圖像。 如果有三個或更多的源圖像,使用第(2)步的結(jié)論劃分所有的源圖像,然后計算每個區(qū)域的空間頻率,選擇具有最大值的空間頻率,最后按照(6)重建所有區(qū)域相融后的圖像。4、Experimental results(實驗處理) 通過對不同源融合圖像組合的比較得出我們實驗的好壞,這里有三種方法可供我們選擇: a.wavelet-based fusion method(基于小波的融合方法) b.Region-based activity measurement(基于區(qū)域的放射性活度測量) 用于反映已分解系數(shù)的活動程度,系數(shù)是通過選擇最大值組合成的。 c.Window-based verification(基于窗口的驗證) 本文的圖像融合是由normalized cuts algorithm和wavelet-based approach來完成的。 本文設(shè)定參數(shù)為:103010r,.,.XI 評價指標 本文使用 和交互信息(mutual info
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 二零二五年股票代持與反洗錢義務(wù)合同3篇
- 二零二五年駕駛員勞務(wù)派遣與車輛充電樁油耗管理服務(wù)合同3篇
- 二零二五版戶外拓展訓練特色課程開發(fā)與推廣合同3篇
- 展會展位搭建服務(wù)合同(2篇)
- 二零二五年老舊小區(qū)改造建筑工程大包施工合同3篇
- 二零二五年建筑工程造價咨詢與風險管理合同6篇
- 二零二五版文化娛樂產(chǎn)業(yè)合同管理版權(quán)保護與收益分成合同3篇
- 二零二五年度電梯安全宣傳公益活動策劃與執(zhí)行合同3篇
- 二零二五版建筑工地勞務(wù)人員勞動爭議調(diào)解與仲裁合同3篇
- 2024年鐵塔項目環(huán)境影響評價合同3篇
- 醫(yī)院手術(shù)室醫(yī)院感染管理質(zhì)量督查評分表
- 心內(nèi)電生理導管及器械
- 稱量與天平培訓試題及答案
- 超全的超濾與納濾概述、基本理論和應(yīng)用
- 2020年醫(yī)師定期考核試題與答案(公衛(wèi)專業(yè))
- 2022年中國育齡女性生殖健康研究報告
- 各種靜脈置管固定方法
- 消防報審驗收程序及表格
- 教育金規(guī)劃ppt課件
- 呼吸機波形分析及臨床應(yīng)用
- 常用緊固件選用指南
評論
0/150
提交評論