1、電子科技高等院校光電信息學(xué)院21年5月6日，彭真明Email: pengzm_，第九章影像融合與應(yīng)用，C9 image fusion and智能運輸系統(tǒng)application，主要內(nèi)容，信息融合概要影像融合概要圖像配準(zhǔn)方法影像融合方法融合效果評價，主要內(nèi)容信息融合概要影像融合概要圖像配準(zhǔn)方法圖像融合效果評價，1 數(shù)據(jù)融合技術(shù)是隨著雷達(dá)信息處理和C3I系統(tǒng)的發(fā)展而發(fā)展起來的。 綜合各種數(shù)據(jù)源、篩選、關(guān)聯(lián)、識別，得到戰(zhàn)場態(tài)勢圖，進(jìn)行態(tài)勢威脅和判別，制定作戰(zhàn)行動方案，作為指揮家決策參考。 數(shù)據(jù)集成的過程是各種消息源的處理、控制、決策的一體化過程。 命令、c3I命令、控制、通信、智能信息。 3I系統(tǒng)是

2、1953年首先在美國開發(fā)和成立的。 由于對提高軍隊的軍隊指揮能力和作戰(zhàn)能力有重要作用，受到世界各國的重視。 c4ic3i計算機(jī)、一、信息融合概要、2 .什么是影像融合？ 影像融合將兩個或多個圖像合并成具有特定算法的一個新圖像。 融合結(jié)果可利用兩個(或多個)圖像的時空相關(guān)性和信息互補(bǔ)，使得融合后獲得的圖像可以對場景進(jìn)行更全面、更清晰的描述，從而有利于人眼的識別和機(jī)器的自動檢測。 一、信息融合概況、起源： 20世紀(jì)70年代初，3 .影像融合技術(shù)的研究現(xiàn)狀和發(fā)展，一、信息融合概況，20世紀(jì)70年代初，美國研究機(jī)構(gòu)發(fā)現(xiàn)利用計算機(jī)技術(shù)融合多個獨立的聲納信號后，可以自動檢測敵艦的位置。 這個嘗試作為獨立的

3、技術(shù)首先在軍事應(yīng)用中受到歡迎。 發(fā)展： 1980年代的20世紀(jì)末，3 .影像融合技術(shù)的研究現(xiàn)狀和發(fā)展；一、信息融合的概況；1980年代以后，信息融合技術(shù)研究活躍起來的國際上，有關(guān)信息融合的專題論文等數(shù)量相當(dāng)多的影像融合在軍事和民間等多個領(lǐng)域得到了廣泛應(yīng)用。 完美： 20世紀(jì)末，3 .從影像融合技術(shù)的研究現(xiàn)狀和發(fā)展、一、信息融合概況、其研究領(lǐng)域壟斷范圍的廣泛性、多傳感器數(shù)據(jù)形式的多樣性和融合處理的多樣性和復(fù)雜性出發(fā)，信息融合理論從來沒有形成系統(tǒng)的理論框架和有效的通用融合模式和算法。 大部分研究對特定應(yīng)用領(lǐng)域的問題進(jìn)行了開展。國內(nèi)出版物、工具書、國內(nèi)出版物、1象征等，數(shù)字成像融合，西安交通大學(xué)出版

4、社，2005年2枚永生等，天基多源遙感信息融合理論算法和應(yīng)用系統(tǒng)，科學(xué)出版社，2005年3韓崇昭等，多源信息融合，清華高等院校出版社，2005年4那彥，焦李成等， 基于多極限分辨率分析理論的影像融合方法(碩士研究生系列教材)西安電子科技高等院校出版社、2008年5月李振華等、影像融合理論與應(yīng)用、高等教育出版社、2008年6月胡良梅等、基于信息融合的圖像理解方法研究、合肥工業(yè)大學(xué)出版社、2007. 7郭雷、李光暉等、圖像融合、電子工業(yè)出版社、 2008年8月劉衛(wèi)光、圖像信息融合與識別、電子工業(yè)出版社、2008年4 .影像融合應(yīng)用領(lǐng)域、一、信息融合簡介、近年來影像融合技術(shù)發(fā)展迅速，遙感、安全導(dǎo)航儀

5、表、醫(yī)學(xué)影像分析、反恐檢查、環(huán)保、交通監(jiān)測、清晰圖像重構(gòu)、災(zāi)害檢測與、醫(yī)學(xué)影像分析：一、信息融合概要、一、信息融合概要、醫(yī)學(xué)影像分析：PET、CT、Fused image、遙感遙測：一、信息融合概要、Spatial、Spectral、panchromatic X1=X； 地圖1=地圖； 支持(2，2，1 )映像(x1)顏色標(biāo)題(電視圖像) x，映像=im讀取(e 3360 fusion _ imir _ 002.BMP ) x2=x； 地圖2=地圖； 子打印(2，2，2 )映像(x2)顏色映射(映射2 )標(biāo)題(紅外成像) c1，l1=波德里克2 (x 1，1，系統(tǒng)度量4 ) c 2，l2=波德

6、里克2 (x 2，1， sym metrix4) c=0.5* (1.2* c 10.8 * c2) xx=波特2 (c，l1)， symmetrix4)、輔導(dǎo)(2、2、3 )映像(xx )標(biāo)題(融合結(jié)果1 ) csize1=尺寸(c1) fori=13360 csize1c1(I )=0.8* c1(I )結(jié)束csize2=尺寸(c1) C2 (j )端點c=0.6* (c1c2) XXX=波形2 (c，l2，sym公制4 )子打印(2，2， 4) image(XXX) title (融合結(jié)果2 )、小波單尺度分解融合示例、四、影像融合方法、Panchromatic Image、多規(guī)模圖像、

7、basis 3360 ihstransandfilteringinth Ehlers Fusion，四，影像融合方法原始panchromaticimage，Panchromatic Spectrum，4，影像融合方法，4，Ehlers Fusion，過濾型Panchromatic Spectrum， 過濾器設(shè)置效果過濾圖案圖形，快速圖像，空間域效果，過濾圖案圖形規(guī)范，和， 過濾器設(shè)置效果過濾圖案圖形，快速圖像，空間域效果，過濾圖案圖形規(guī)范，和， 過濾設(shè)置效果過濾模式化學(xué)圖像、快速圖像、空間域效果、主要內(nèi)容、信息融合概述影像融合概述圖像配準(zhǔn)方法影像融合方法融合效果評估、五、融合效果評估、 采用各

8、種方法融合后的影像質(zhì)量，需要客觀評價，評價方法大致分為主觀評價定量評價、以人的主觀感覺做評估融合圖像效果。 由于受人的視覺感知特性、心理狀態(tài)、感興趣的目標(biāo)差異等因素的影響，用主觀評價方法客觀地做評估影像融合效果非常困難。 五、融合效果評價、各種方法融合后的影像質(zhì)量需要客觀評價，評價方法可以大致劃分為主觀評價定量評價、定量評價可以客觀定量分析影像融合質(zhì)量，用不同的評價指標(biāo)區(qū)分融合結(jié)果的優(yōu)劣。 其中：五，融合效果評價，一般定量評價采用的指標(biāo)：1，熵：2，交叉熵：3，互信息量：4，空間頻率：影像融合實例不同的小波，能量法：(a )可見光圖像(b )紅外圖像，五，融合效果評價，(c) Haar小波(d

9、) W5/3小波，(e)Daubechies9/7小波，圖(a )是花木可見光圖像，沒有目標(biāo)的圖(b )是該場景的紅外成像，隱藏的手槍(營銷對象)清晰可見，融合的目的是提高圖像的信息量。 由圖(c )、(d )、(e )可知，融合后，目標(biāo)和目標(biāo)的背景被良好地保持。 五、融合效果評價表可知，用Daubechies9/7小波進(jìn)行融合實驗得到的融合圖像具有更多的信息量，與原始圖像對應(yīng)的像素差異最小，相關(guān)更強(qiáng)，細(xì)節(jié)更豐富，因此綜合指標(biāo)最佳五、融合效果評價、定量評價指標(biāo)：附件：影像融合發(fā)展方向，1、配準(zhǔn)方法研究，2、融合方法研究，3、快速并行算法研究、新的相似標(biāo)準(zhǔn)(Hausdorff距離)、柔性配準(zhǔn)方法等。 例如，脈沖耦合神經(jīng)網(wǎng)絡(luò)(PCNN )法、Kalman濾波、第二、三代小波變換法和新的特征融合技