CN114445314B 一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì) (杭州??低晹?shù)字技術(shù)股份有限公司)_第1頁(yè)
CN114445314B 一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì) (杭州??低晹?shù)字技術(shù)股份有限公司)_第2頁(yè)
CN114445314B 一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì) (杭州海康威視數(shù)字技術(shù)股份有限公司)_第3頁(yè)
CN114445314B 一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì) (杭州??低晹?shù)字技術(shù)股份有限公司)_第4頁(yè)
CN114445314B 一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì) (杭州??低晹?shù)字技術(shù)股份有限公司)_第5頁(yè)
已閱讀5頁(yè),還剩43頁(yè)未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

(19)國(guó)家知識(shí)產(chǎn)權(quán)局(12)發(fā)明專利公司地址310051浙江省杭州市濱江區(qū)阡陌路555號(hào)務(wù)所(普通合伙)11413專利代理師項(xiàng)京孫翠賢介質(zhì)見(jiàn)光圖像和目標(biāo)紅外圖像之間的亮度差分特征證了融合圖像的質(zhì)量的前提下獲得了顏色準(zhǔn)確2獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;其中,所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差異;基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述對(duì)應(yīng)關(guān)系為差分特征與融合權(quán)重呈反相關(guān)關(guān)系;根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像;所述根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖,包括:對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道分別進(jìn)行低通濾波,得到可見(jiàn)光亮度特征圖像和紅外亮度特征圖像;計(jì)算所述可見(jiàn)光亮度特征圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的像素點(diǎn)之間的亮度差值的絕對(duì)值,得到以所述絕對(duì)值為像素值的圖像作為亮度差分特征圖。2.根據(jù)權(quán)利要求1所述的方法,其特征在于,在所述對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)基于所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的預(yù)設(shè)顏色以及每個(gè)像素點(diǎn)的R、G、B值,確定每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù);根據(jù)所述融合后的圖像的亮度和所述目標(biāo)可見(jiàn)光圖像的亮度,確定所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù);基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)、每個(gè)像素點(diǎn)的R、G、B值和3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述基于所述融合后的圖像的每個(gè)像素點(diǎn)針對(duì)所述融合后的圖像的每個(gè)像素點(diǎn),根據(jù)該像素點(diǎn)的每個(gè)顏色通道的灰度值、亮度參數(shù)以及最大灰度值與該通道的灰度值的差值中的最小值和該像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù),計(jì)算該像素點(diǎn)的每個(gè)顏色通道對(duì)應(yīng)的校正值;4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像,計(jì)算所述目標(biāo)紅外圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的各個(gè)像素點(diǎn)之間亮度3通道的像素值之差,得到紅外圖像細(xì)節(jié)紋理圖層;根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。5.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn)的Y值和所述第一融合權(quán)重的乘積、所述目標(biāo)可見(jiàn)光圖像中與該像素點(diǎn)位置相同的像素點(diǎn)的Y值和所述第二融合權(quán)重的乘積以及所述紅外圖像細(xì)節(jié)紋理圖層與該像素點(diǎn)位置相同的像素點(diǎn)的像素值進(jìn)行求和,得到的和值作為融合后的該位置處的像素點(diǎn)的Y值,以及,基于融合后的該位置處的像素點(diǎn)的Y值與所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)Y值的比值作為亮度增益,并將所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)U、V值與亮度增益的乘積分別確定為融合后的該位置處的像素點(diǎn)的U、V值,得到融合后的圖像。6.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融針對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn),如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值不大于預(yù)設(shè)差分閾值,確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重為目標(biāo)權(quán)重值;如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值大于所述預(yù)設(shè)差分閾值,基于所述像素值以及預(yù)設(shè)權(quán)重函數(shù),確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述預(yù)設(shè)權(quán)重函數(shù)表示第一融合權(quán)重在所述目標(biāo)權(quán)重值的基礎(chǔ)上,隨著所述像素值的遞增而線性遞減。圖像獲取模塊,用于獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;差分特征確定模塊,用于根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;其中,所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差異;第一權(quán)重確定模塊,用于基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述對(duì)應(yīng)關(guān)系為差分特征與融合權(quán)重呈反相關(guān)關(guān)系;第二權(quán)重確定模塊,用于根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重;圖像融合模塊,用于基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像;低通濾波子模塊,用于對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道分別進(jìn)行低通濾波,得到可見(jiàn)光亮度特征圖像和紅外亮度特征圖像;差分特征計(jì)算子模塊,用于計(jì)算所述可見(jiàn)光亮度特征圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的像素點(diǎn)之間的亮度差值的絕對(duì)值,得到以所述絕對(duì)值為像素值的圖像作為亮度差分特征圖。48.一種電子設(shè)備,其特征在于,包括處理器、通信接口、存儲(chǔ)器和通信總線,其中,處理器,通信接口,存儲(chǔ)器通過(guò)通信總線完成相互間的通信;存儲(chǔ)器,用于存放計(jì)算機(jī)程序;處理器,用于執(zhí)行存儲(chǔ)器上所存放的程序時(shí),實(shí)現(xiàn)權(quán)利要求1-6任一所述的方法步驟。9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其特征在于,所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)內(nèi)存儲(chǔ)有計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-6任一所述的方法步驟。5技術(shù)領(lǐng)域[0001]本發(fā)明涉及圖像處理技術(shù)領(lǐng)域,特別是涉及一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。背景技術(shù)[0002]城市道路卡口系統(tǒng)是在城市出入口和收費(fèi)站等卡口處通過(guò)安裝攝像頭對(duì)過(guò)往車(chē)輛進(jìn)行自動(dòng)實(shí)時(shí)拍攝與記錄的系統(tǒng)。為了使拍攝的畫(huà)面更清楚,城市道路卡口系統(tǒng)通常會(huì)在拍攝過(guò)往車(chē)輛時(shí)采用爆閃燈補(bǔ)光,因此,爆閃燈帶來(lái)的光污染問(wèn)題越來(lái)越普遍。為了避免光污染,如何在低照度場(chǎng)景下提升成像質(zhì)量[0003]目前通常是通過(guò)同時(shí)拍攝同一場(chǎng)景的紅外圖像和可見(jiàn)光圖像,利用紅外圖像的高信噪比的特點(diǎn),對(duì)紅外圖像和可見(jiàn)光圖像進(jìn)行融合得到亮度較高的融合圖像,這樣可以降[0004]然而,對(duì)于一些紅外反射特性差異較大的物體,紅外圖像和可見(jiàn)光圖像融合后得到的融合圖像會(huì)存在一定的色彩失真??梢酝ㄟ^(guò)整體限制紅外圖像的亮度在融合圖像中的權(quán)重校正融合圖像的色彩失真。但是限制權(quán)重會(huì)導(dǎo)致無(wú)法保證融合圖像的高信噪比及信息量最大化,即會(huì)導(dǎo)致融合圖像質(zhì)量較差。也就是說(shuō),目前無(wú)法在保證融合圖像的質(zhì)量的前提發(fā)明內(nèi)容[0005]本發(fā)明實(shí)施例的目的在于提供一種圖像融合方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì),以在保證融合圖像的質(zhì)量的前提下,獲得顏色準(zhǔn)確的融合圖像。[0007]獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;[0008]根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;其中,所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差異;[0009]基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述對(duì)應(yīng)關(guān)系為差分特征與融合權(quán)重呈反相關(guān)關(guān)系;[0010]根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重;[0011]基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0012]可選的,在所述對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到[0013]根據(jù)所述融合后的圖像的各個(gè)像素點(diǎn)的R、G、B值,確定每個(gè)像素點(diǎn)對(duì)應(yīng)的預(yù)設(shè)顏6[0014]基于所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的預(yù)設(shè)顏色以及每個(gè)像素點(diǎn)的R、G、B值,確定每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù);[0015]根據(jù)所述融合后的圖像的亮度和所述目標(biāo)可見(jiàn)光圖像的亮度,確定所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù);[0016]基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)、每個(gè)像素點(diǎn)的R、G、B值和每個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù),對(duì)該像素點(diǎn)的R、G、B值進(jìn)行校正,得到校正后的融合圖[0017]可選的,所述基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)、每個(gè)像素點(diǎn)的R、G、B值和每個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù),對(duì)該像素點(diǎn)的R、G、B值進(jìn)行校正,得到校正后的融合圖像,包括:[0018]針對(duì)所述融合后的圖像的每個(gè)像素點(diǎn).根據(jù)該像素點(diǎn)的每個(gè)顏色通道的灰度值、亮度參數(shù)以及最大灰度值與該通道的灰度值的差值中的最小值和該像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù),計(jì)算該像素點(diǎn)的每個(gè)顏色通道對(duì)應(yīng)的校正值;[0019]將該像素點(diǎn)的每個(gè)顏色通道的灰度值分別減去對(duì)應(yīng)的校正值,得到校正后的融合圖像。[0020]可選的,所述根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖,包括:[0021]對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道分別進(jìn)行低通濾波,得到可見(jiàn)光亮度特征圖像和紅外亮度特征圖像;[0022]計(jì)算所述可見(jiàn)光亮度特征圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的像素點(diǎn)之間的亮度差值的絕對(duì)值,得到以所述絕對(duì)值為像素值的圖像作為亮度差分特征圖。[0023]可選的,所述基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像,包括:[0024]計(jì)算所述目標(biāo)紅外圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的各個(gè)像素點(diǎn)之間亮度通道的像素值之差,得到紅外圖像細(xì)節(jié)紋理圖層;[0025]根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0026]可選的,所述根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像,包括:[0027]對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn)的Y值和所述第一融合權(quán)重的乘積、所述目標(biāo)可見(jiàn)光圖像中與該像素點(diǎn)位置相同的像素點(diǎn)的Y值和所述第二融合權(quán)重的乘積以及所述紅外圖像細(xì)節(jié)紋理圖層與該像素點(diǎn)位置相同的像素點(diǎn)的像素值進(jìn)行求和,得到的和值作為融合后的該位置處的像素點(diǎn)的Y值,以及,基于融合后的該位置處的像素點(diǎn)的Y值與所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)Y值的比值作為亮度增益,并將所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)U、V值與亮度增益的乘積分別確定為融合后的該位置處的像素點(diǎn)的U、V值,得到融合后的圖像。[0028]可選的,所述基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)7應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重,包括:[0029]針對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn),如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值不大于預(yù)設(shè)差分閾值,確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重為目標(biāo)權(quán)重值;[0030]如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值大于所述預(yù)設(shè)差分閾值,基于所述像素值以及預(yù)設(shè)權(quán)重函數(shù),確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述預(yù)設(shè)權(quán)重函數(shù)表示第一融合權(quán)重在所述目標(biāo)權(quán)重值的基礎(chǔ)上,隨著所述像素值的遞增而線性遞減。[0032]圖像獲取模塊,用于獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;[0033]差分特征確定模塊,用于根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;其中,所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差異;[0034]第一權(quán)重確定模塊,用于基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述對(duì)應(yīng)關(guān)系為差分特征與融合權(quán)重呈反相關(guān)關(guān)系;[0035]第二權(quán)重確定模塊,用于根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重;[0036]圖像融合模塊,用于基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0037]第三方面,本發(fā)明實(shí)施例提供了一種電子設(shè)備,包括處理器、通信接口、存儲(chǔ)器和[0039]處理器,用于執(zhí)行存儲(chǔ)器上所存放的程序時(shí),實(shí)現(xiàn)上述第一方面任一所述的方法[0040]第四方面,本發(fā)明實(shí)施例提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)內(nèi)存儲(chǔ)有計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述第一方面任一所述的方法步驟。[0041]本發(fā)明實(shí)施例有益效果:[0042]采用本發(fā)明實(shí)施例提供的方法,獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重;基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。即可以通過(guò)亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重,根據(jù)第一融合權(quán)重計(jì)算得到目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重,可以根據(jù)第一融合權(quán)重以及第二融合權(quán)重,對(duì)目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像對(duì)應(yīng)位置的每個(gè)像素點(diǎn)進(jìn)行融合,使得到的融合后的圖像中每個(gè)像素點(diǎn)中來(lái)自目標(biāo)紅外圖像的亮度和來(lái)自目標(biāo)可見(jiàn)光圖像的亮度達(dá)到最佳比例。由于亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外8圖像之間的反射特性差異,差分特征與融合權(quán)重呈反相關(guān)關(guān)系,因此對(duì)于紅外反射特性差異較大的區(qū)域,可以通過(guò)降低該區(qū)域中各個(gè)像素點(diǎn)在目標(biāo)紅外圖像中對(duì)應(yīng)的像素點(diǎn)的第一融合權(quán)重的值,減少融合圖像中該區(qū)域圖像來(lái)自紅外圖像的亮度,進(jìn)而避免了融合圖像中該區(qū)域圖像的色彩失真,對(duì)于紅外反射特性差異較小的區(qū)域,可以通過(guò)提升該區(qū)域中各個(gè)像素點(diǎn)在目標(biāo)紅外圖像中對(duì)應(yīng)的像素點(diǎn)的第一融合權(quán)重的值,增加融合圖像中該區(qū)域圖像來(lái)自紅外圖像的亮度,提升融合圖像中該區(qū)域圖像的亮度,即本發(fā)明實(shí)施例提供的方法可以在保證融合圖像的質(zhì)量的前提下,獲得顏色準(zhǔn)確的融合圖像。融合后的圖像既具有可見(jiàn)光所具有的顏色信息,又具有紅外光圖像所具有的高信噪比的優(yōu)點(diǎn),因此,采用本發(fā)明實(shí)施例提供的方法可在低照度場(chǎng)景下獲得清晰的彩色圖像。[0043]當(dāng)然,實(shí)施本發(fā)明的任一產(chǎn)品或方法并不一定需要同時(shí)達(dá)到以上所述的所有優(yōu)附圖說(shuō)明[0044]為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案,下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹,顯而易見(jiàn)地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講,還可以根據(jù)這些附圖獲得其他的實(shí)施[0045]圖1為可見(jiàn)光圖像、紅外圖像與融合圖像的一種示意圖;[0046]圖2為可見(jiàn)光圖像、紅外圖像與融合圖像的另一種示意圖;[0047]圖3為本發(fā)明實(shí)施例提供的圖像融合方法的一種流程圖;[0048]圖4為紅外圖像與可見(jiàn)光圖像的一種對(duì)比示意圖;[0049]圖5為紅外圖像與可見(jiàn)光圖像的另一種對(duì)比示意圖;[0050]圖6為紅外圖像與可見(jiàn)光圖像的又一種對(duì)比示意圖;[0051]圖7為本發(fā)明實(shí)施例提供的獲得亮度差分特征圖的一種示意圖;[0052]圖8為本發(fā)明實(shí)施例提供的一種差分特征映射示意圖;[0053]圖9為本發(fā)明實(shí)施例提供的對(duì)融合后的圖像進(jìn)行偏色校正的一種流程圖;[0054]圖10為本發(fā)明實(shí)施例提供的校正后的融合圖像的一種示意圖;[0055]圖11為本發(fā)明實(shí)施例提供的圖像融合裝置的一種結(jié)構(gòu)示意圖;[0056]圖12為本發(fā)明實(shí)施例提供的圖像融合裝置的另一種結(jié)構(gòu)示意圖;[0057]圖13為本發(fā)明實(shí)施例提供的電子設(shè)備的結(jié)構(gòu)示意圖。具體實(shí)施方式[0058]下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述,顯然,所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例,而不是全部的實(shí)施例?;诒景l(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員基于本申請(qǐng)所獲得的所有其他實(shí)施例,都屬于本發(fā)明保護(hù)的范圍。[0059]由于爆閃燈帶來(lái)的光污染問(wèn)題越來(lái)越普遍,為了避免光污染,目前城市道路卡口系統(tǒng)通常會(huì)降低爆閃燈的強(qiáng)度,在低照度場(chǎng)景拍攝過(guò)往車(chē)輛的圖像。然而低照度場(chǎng)景下的成像質(zhì)量較差。為了提升低照度場(chǎng)景下的成像質(zhì)量,目前通常是通過(guò)同時(shí)拍攝同一場(chǎng)景的9紅外圖像和可見(jiàn)光圖像,對(duì)紅外圖像和可見(jiàn)光圖像進(jìn)行融合得到亮度較高的融合圖像。[0060]由于可見(jiàn)光圖像具有顏色信息,紅外圖像具有高信噪比等特點(diǎn),因此在低照度場(chǎng)景下可以將紅外圖像和可見(jiàn)光圖像融合得到清晰的彩色圖像——融合圖像。但是對(duì)于一些具有紅外反光材料的物體,將紅外圖像和可見(jiàn)光圖像融合所得到的融合圖像往往會(huì)出現(xiàn)色彩失真的問(wèn)題。圖1為可見(jiàn)光圖像、紅外圖像與融合圖像的一種示意圖見(jiàn)光圖像101與紅外圖像102融合得到融合圖像103,由于車(chē)身具有紅外反光特性(圖1中車(chē)輛外殼顏色為紅色),因此得到的融合圖像103中車(chē)身顏色與真實(shí)顏色相比存在顏色失真的問(wèn)題。[0061]為了避免融合圖像出現(xiàn)顏色失真的問(wèn)題,一些方法可以通過(guò)整體限制紅外圖像的亮度在融合圖像中的權(quán)重校正融合圖像的色彩失真。圖2為可見(jiàn)光圖像、紅外圖像與融合圖像的另一種示意圖,如圖2所示,圖2中車(chē)身具有紅外反光特性(圖2中車(chē)輛外殼顏色為紅色),將圖2中可見(jiàn)光圖像201與紅外圖像202進(jìn)行融合得到融合圖像203,并且在進(jìn)行圖像融合時(shí)整體限制了紅外圖像202的亮度在融合圖像203中的權(quán)重,因此,所得到的融合圖像203的色彩失真問(wèn)題得到了一定程度的解決,然而,由于整體限制了紅外圖像202的亮度在融合圖像203中的權(quán)重,因此所得到的融合圖像203的亮度受到了影響,融合圖像203的信噪比及信息量也受到了限制,圖像質(zhì)量較差。也就是說(shuō),目前利用紅外圖像和可見(jiàn)光圖像融合所得到的融合圖像存在一定的色偏問(wèn)題或者對(duì)紅外亮度信息利用不足的問(wèn)題,即目前無(wú)法在保證融合圖像的質(zhì)量的前提下,獲得顏色準(zhǔn)確的融合圖像。[0062]為了在保證融合圖像的質(zhì)量的前提下,獲得顏色準(zhǔn)確的融合圖像,本發(fā)明實(shí)施例提供了提供一種圖像融合方法、裝置、電子設(shè)備、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)以及計(jì)算機(jī)程序產(chǎn)[0063]本發(fā)明實(shí)施例所提供的圖像融合方法可以應(yīng)用于任何可以進(jìn)行圖像處理的電子以對(duì)圖像進(jìn)行濾波和圖像融合等處理。[0064]圖3為本發(fā)明實(shí)施例提供的圖像融合方法的一種流程圖,如圖3所示,所述方法包[0065]S301,獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像。[0066]S302,根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖。[0067]其中,所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差異。[0068]S303,基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重。[0069]其中,所述對(duì)應(yīng)關(guān)系為差分特征與融合權(quán)重呈反相關(guān)關(guān)系。[0070]S304,根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重。[0071]S305,基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0072]采用本發(fā)明實(shí)施例提供的方法,獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重;基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。即可以通過(guò)亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重,根據(jù)第一融合權(quán)重計(jì)算得到目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重,可以根據(jù)第一融合權(quán)重以及第二融合權(quán)重,對(duì)目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像對(duì)應(yīng)位置的每個(gè)像素點(diǎn)進(jìn)行融合,使得到的融合后的圖像中每個(gè)像素點(diǎn)中來(lái)自目標(biāo)紅外圖像的亮度和來(lái)自目標(biāo)可見(jiàn)光圖像的亮度達(dá)到最佳比例。由于亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差異,差分特征與融合權(quán)重呈反相關(guān)關(guān)系,因此對(duì)于紅外反射特性差異較大的區(qū)域,可以通過(guò)降低該區(qū)域中各個(gè)像素點(diǎn)在目標(biāo)紅外圖像中對(duì)應(yīng)的像素點(diǎn)的第一融合權(quán)重的值,減少融合圖像中該區(qū)域圖像來(lái)自紅外圖像的亮度,進(jìn)而避免了融合圖像中該區(qū)域圖像的色彩失真,對(duì)于紅外反射特性差異較小的區(qū)域,可以通過(guò)提升該區(qū)域中各個(gè)像素點(diǎn)在目標(biāo)紅外圖像中對(duì)應(yīng)的像素點(diǎn)的第一融合權(quán)重的值,增加融合圖像中該區(qū)域圖像來(lái)自紅外圖像的亮度,提升融合圖像中該區(qū)域圖像的亮度,即本發(fā)明實(shí)施例提供的方法可以在保證融合圖像的質(zhì)量的前提下,獲得顏色準(zhǔn)確的融合圖像。融合后的圖像既具有可見(jiàn)光所具有的顏色信息,又具有紅外光圖像所具有的高信噪比的優(yōu)點(diǎn),因此,采用本發(fā)明實(shí)施例提供的方法可在低照度場(chǎng)景下獲得清晰的彩色圖像。[0073]本發(fā)明實(shí)施例中,可以針對(duì)同一被拍攝場(chǎng)景,使用紅外攝像機(jī)和可見(jiàn)光攝像機(jī)同時(shí)拍攝該場(chǎng)景的圖像,得到目標(biāo)紅外圖像和目標(biāo)可見(jiàn)光圖像。[0074]或者,也可以通過(guò)雙傳感器相機(jī)拍攝被拍攝場(chǎng)景,得到該場(chǎng)景的紅外圖像和可見(jiàn)光圖像。雙傳感器相機(jī)采用兩顆星光級(jí)圖像傳感器,其中一顆傳感器通過(guò)紅外補(bǔ)光并對(duì)紅外光波段感光獲取紅外圖像,提供亮度信息,另外一顆傳感器對(duì)可見(jiàn)光波段感光獲取可見(jiàn)光圖像,提供環(huán)境顏色信息和亮度信息。具體的,可以預(yù)設(shè)快門(mén)增益光圈值,通過(guò)雙傳感器相機(jī)抓拍被拍攝場(chǎng)景,獲取可見(jiàn)光圖像和紅外光圖像,經(jīng)圖像信號(hào)處理和圖像配準(zhǔn),可以得“U”和“V”表示色度和濃度。[0075]紅外圖像對(duì)于同一顏色的亮度表現(xiàn)不一致,風(fēng)格迥異。圖4為紅外圖像與可見(jiàn)光圖像的一種對(duì)比示意圖,圖5為紅外圖像與可見(jiàn)光圖像的另一種對(duì)比示意圖,圖6為紅外圖像與可見(jiàn)光圖像的又一種對(duì)比示意圖。圖4中包括可見(jiàn)光圖像401和紅外圖像402,圖5中包括可見(jiàn)光圖像501和紅外圖像502,圖6中包括可見(jiàn)光圖像601和紅外圖像602。圖4、圖5和圖6中圖像502和紅外圖像602中,有的明亮有的暗淡。并且,可見(jiàn)光圖像601中人物衣服上的條紋在紅外圖像602中不可見(jiàn),黑色安全帶在紅外圖像中均變?yōu)榛疑H绻麑?duì)紅外圖像對(duì)于同一顏色的亮度表現(xiàn)不一致的特點(diǎn)不加以區(qū)分,勢(shì)必會(huì)導(dǎo)致融合得到的圖像產(chǎn)生偏色問(wèn)題。[0076]本發(fā)明實(shí)施例中,利用了可見(jiàn)光圖像和紅外圖像之間的亮度差分特征圖進(jìn)行圖像融合??梢?jiàn)光圖像和紅外圖像之間的亮度差分特征圖可以很好得反映融合圖像中容易偏色11的圖像區(qū)域,因此本發(fā)明實(shí)施例可以利用亮度差分特征圖,在融合圖像時(shí)對(duì)融合圖像中容易偏色的圖像區(qū)域做偏色校正,避免融合后得到的融合圖像出現(xiàn)偏色等顏色失真的問(wèn)題。[0077]圖7為本發(fā)明實(shí)施例提供的獲得亮度差分特征圖的一種示意圖,如圖7所示,對(duì)可見(jiàn)光圖像701和紅外圖像702進(jìn)行差分處理,可以得到對(duì)應(yīng)的亮度差分特征圖703。亮度差分特征圖703中越亮的圖像區(qū)域,紅外圖像702和可見(jiàn)光圖像701中對(duì)應(yīng)的該區(qū)域的紅外反射特性差異越大,越容易產(chǎn)生偏色問(wèn)題,如亮度差分特征圖703中駕駛?cè)藛T的上衣對(duì)應(yīng)的圖像區(qū)域;反之亮度差分特征圖703中越暗的圖像區(qū)域,紅外圖像702和可見(jiàn)光圖像701中對(duì)應(yīng)的該區(qū)域的紅外反射特性差異越小,越不容易產(chǎn)生偏色問(wèn)題,如亮度差分特征圖703中方向盤(pán)對(duì)應(yīng)的圖像區(qū)域。也就是說(shuō),紅外反射較可見(jiàn)光更強(qiáng)烈,在可見(jiàn)光圖像中非常暗的、紅外圖像中非常亮的區(qū)域,對(duì)融合圖像中該區(qū)域進(jìn)行亮度消減可以還原真實(shí)顏色。[0078]在一種可能的實(shí)施方式中,所述根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖,可以包括如下步驟A1-A2:[0079]步驟A1,對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道分別進(jìn)行低通濾波,得到可見(jiàn)光亮度特征圖像和紅外亮度特征圖像。[0080]本實(shí)施方式中,可以選擇能夠消除噪點(diǎn)的濾波器對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道分別進(jìn)行低通濾波,例如,可以選擇尺度為3的高斯濾鏡對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道進(jìn)行局部平滑、消除噪點(diǎn),得到可見(jiàn)光亮度特征圖像和紅外亮度特征圖像:[0082]其中,K(x)為低通保邊濾波器算子,例如高斯濾波算子等,F(xiàn)vis為可見(jiàn)光亮度特征圖像和目標(biāo)紅外圖像中相同位置處的像素點(diǎn),?表示低通濾波操作。[0083]步驟A2,計(jì)算所述可見(jiàn)光亮度特征圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的像素點(diǎn)之間的亮度差值的絕對(duì)值,得到以所述絕對(duì)值為像素值的圖像作為亮度差分特征圖。[0086]其中,abs為取絕對(duì)值的運(yùn)算,diff(x)為所述亮度差分特征圖中像素點(diǎn)x的像素值,F(xiàn)vis(x)為所述可見(jiàn)光亮度特征圖像中與像素點(diǎn)x相同位置處的像素點(diǎn)的亮度通道的像素值,F(xiàn)nir(x)為紅外亮度特征圖像中與像素點(diǎn)x相同位置處的像素點(diǎn)的亮度通道的像素值。[0087]在一種可能的實(shí)施方式中,所述基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重,可以包括如下步驟B1-B2:[0088]步驟B1,針對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn),如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值不大于預(yù)設(shè)差分閾值,確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重為目標(biāo)權(quán)重值。[0089]目標(biāo)權(quán)重值可以根據(jù)實(shí)際的圖像融合場(chǎng)景進(jìn)行具體設(shè)定,通??梢栽O(shè)定為1,即如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值不大于預(yù)設(shè)差分閾值,表示:該像素點(diǎn)和所述可見(jiàn)光圖像中對(duì)應(yīng)的像素點(diǎn)之間的反射特性差異不足以導(dǎo)致融合后的圖像產(chǎn)生偏[0090]步驟B2,如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值大于所述預(yù)設(shè)差分[0092]由于所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之素點(diǎn)在亮度差分特征圖中對(duì)應(yīng)的像素值diff(x)不大于預(yù)設(shè)差分閾值Thresh,則該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重為目標(biāo)權(quán)重值b。如果該像素點(diǎn)在亮度差分特征圖中對(duì)應(yīng)的像素值diff(x)大于預(yù)設(shè)差分閾值Thresh,由于預(yù)設(shè)權(quán)重系數(shù)S小于0,則可以根據(jù)“diff(x)>融合時(shí)對(duì)該區(qū)域直接使用紅外圖像中的亮度,較容易引起偏色導(dǎo)致出現(xiàn)顏色失真的問(wèn)題,像與目標(biāo)可見(jiàn)光圖像中對(duì)應(yīng)位置的像素點(diǎn)x之間的亮度差分特征diff(x)小于等于預(yù)設(shè)差分閾值(Thresh)時(shí),對(duì)目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像進(jìn)行圖像融合得到的融合后的中該位置處的像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重α最高,可以為1;當(dāng)目標(biāo)紅外圖像與目標(biāo)可見(jiàn)光圖像中對(duì)應(yīng)位置的像素點(diǎn)之間的亮度差分特征大于Thresh時(shí),對(duì)目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像進(jìn)行圖像融合得到的融合后的圖像中該位置處的像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重α隨著亮度差分特征的增大而減小,如圖8所示,減小的速率可以用預(yù)設(shè)權(quán)重系數(shù)Slope表示。[0099]在一種可能的實(shí)施方式中,所述基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像,可以包括如下步驟C1-C2:[0100]步驟C1,計(jì)算所述目標(biāo)紅外圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的各個(gè)像素點(diǎn)之間亮度通道的像素值之差,得到紅外圖像細(xì)節(jié)紋理圖層。[0101]具體的,如下述公式所示,可以將所述目標(biāo)紅外圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的各個(gè)像素點(diǎn)之間亮度通道的像素值之差,然后像素值之差再乘以預(yù)設(shè)強(qiáng)弱參[0102]D(x)=nir_det_str.(Y.(x)-Y(x)×[0103]其中,nir_det_str為預(yù)設(shè)強(qiáng)弱參數(shù),預(yù)設(shè)強(qiáng)弱參數(shù)是用于控制融合細(xì)節(jié)疊加的參數(shù),可以根據(jù)實(shí)際應(yīng)用場(chǎng)景進(jìn)行具體設(shè)定,Ynir(x)為所述目標(biāo)紅外圖像中像素點(diǎn)x的亮度通道的像素值,Ynir(x)?K(x)表示對(duì)所述目標(biāo)紅外圖像的亮度通道進(jìn)行低通濾波得到紅外亮度特征圖像,K(x)為低通保邊濾波器算子,D(x)為得到的紅外圖像細(xì)節(jié)紋理圖層與像素點(diǎn)x對(duì)應(yīng)位置處的像素點(diǎn)的像素值。[0104]步驟C2,根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0105]具體的,所述根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像,可以包括:[0106]對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn)的Y值和所述第一融合權(quán)重的乘積、所述目標(biāo)可見(jiàn)光圖像中與該像素點(diǎn)位置相同的像素點(diǎn)的Y值和所述第二融合權(quán)重的乘積以及所述紅外圖像細(xì)節(jié)紋理圖層與該像素點(diǎn)位置相同的像素點(diǎn)的像素值進(jìn)行求和,得到的和值作為融合后的該位置處的像素點(diǎn)的Y值,以及,基于融合后的該位置處的像素點(diǎn)的Y值與所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)Y值的比值作為亮度增益,并將所述目標(biāo)可見(jiàn)光圖像中該得到融合后的圖像。[0107]本發(fā)明實(shí)施例中,目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外光圖像的YUV數(shù)據(jù)中,“Y”表示明亮[0108]本發(fā)明實(shí)施例中,所述根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重,可以包括:將1減去所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重所得的差值,作為該像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重。[0109]例如,可以將目標(biāo)可見(jiàn)光圖像的Y通道和目標(biāo)紅外圖像Y通道進(jìn)行亮度加權(quán)融合,并與紅外圖像細(xì)節(jié)紋理圖層D進(jìn)行疊加,得到融合后的圖像的Y通道:素點(diǎn)x位置相同的像素點(diǎn)的Y值,(1-a(x))為目標(biāo)可見(jiàn)光圖像中與像素點(diǎn)x位置相同的像素[0112]然后,可以基于融合后的該位置處的像素點(diǎn)的Y值與所述目標(biāo)可見(jiàn)光圖像中該位[0118]在一種可能的實(shí)施方式中,圖9為本發(fā)明實(shí)施例提供的對(duì)融合后的圖像進(jìn)行偏色可以確定該像素點(diǎn)的顏色為R、G、B值中最小的值對(duì)應(yīng)的顏色;如果第一差值等于第二差值,則可以確定該像素點(diǎn)的顏色為R、G、B值中最小的值對(duì)應(yīng)的顏色或?yàn)镽、G、B值中最大的值對(duì)應(yīng)的顏色。G值在像素點(diǎn)的R、G、B值中排序最大,則該G值對(duì)應(yīng)的顏色為綠色,如果像素點(diǎn)的G值在像素B值中排序最大,則該B值對(duì)應(yīng)的顏色為藍(lán)色,如果像素點(diǎn)的B值在像素點(diǎn)的R、G、B值中排序值按照大小進(jìn)行排序?yàn)椋篟(100)>G(80)>B(20)。最大值為R值,最小值為B值,中間值為G值。然后計(jì)算R值與G值之間的第一差值為20,計(jì)算G值與B值之間的第二差值為60,可以得到第一差值20小于第二差值60,表示該像素點(diǎn)x1的顏色更靠近最小值B值對(duì)應(yīng)的顏色,而B(niǎo)值按照大小進(jìn)行排序?yàn)椋篟(255)>G(20)>B(10)。最大值為R值,最小值為B值,中間值為G值。然后計(jì)算R值與G值之間的第一差值為235,計(jì)算G值與B值之間的第二差值為10,可以得到第一差值235大于第二差值10,表示該像素點(diǎn)x2的顏色更靠近最大值R值對(duì)應(yīng)的顏色,而R值在值。然后計(jì)算B值與G值之間的第一差值為95,計(jì)算G值與R值之間的第二差值也為95,可以得到第一差值95等于第二差值95,表示該像素點(diǎn)x3的顏色既可以被劃分為R、G、B值中排序最大的B值對(duì)應(yīng)的顏色——藍(lán)色,也可以被劃分為R、G、B值中排序最小的R值對(duì)應(yīng)的顏色——青色(像素點(diǎn)的R值排序最小時(shí)對(duì)應(yīng)的顏色為青色)。[0126]S902,基于所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的預(yù)設(shè)顏色以及每個(gè)像素點(diǎn)的R、[0127]具體的,本發(fā)明實(shí)施例中,可以采用如下公式確定每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參示像素點(diǎn)x對(duì)應(yīng)的預(yù)設(shè)顏色,scale(x)為像素點(diǎn)x對(duì)應(yīng)的偏色校正參數(shù),max表示取最大值的述已經(jīng)確定像素點(diǎn)x1對(duì)應(yīng)的預(yù)設(shè)顏色為黃色,則可以得到像素點(diǎn)x1對(duì)應(yīng)的偏色校正參數(shù)scale(x1)=med(I(x),I?(x),I?(x))-min(I(x),I?[0131]S903,根據(jù)所述融合后的圖像的亮度和所述目標(biāo)可見(jiàn)光圖像的亮度,確定所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù)。[0132]具體的,本實(shí)施方式中可以采用如下公式,確定所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù):[0134]其中,k(x)為像素點(diǎn)x對(duì)應(yīng)的亮度參數(shù),Yfus(x)為融合后的圖像中像素點(diǎn)x的Y值,Yvis(x)為目標(biāo)可見(jiàn)光圖像中與像素點(diǎn)x位置相同的像素點(diǎn)的Y值。[0135]S904,基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)、每個(gè)像素點(diǎn)的合圖像。[0136]在一種可能的實(shí)施方式中,所述基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色行校正,得到校正后的融合圖像的步驟,具體可以包括如下步驟D1-D2:[0137]步驟D1,針對(duì)所述融合后的圖像的每個(gè)像素點(diǎn),根據(jù)該像素點(diǎn)的每個(gè)顏色通道的灰度值、亮度參數(shù)以及最大灰度值與該通道的灰度值的差值中的最小值和該像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù),計(jì)算該像素點(diǎn)的每個(gè)顏色通道對(duì)應(yīng)的校正值。[0139]具體的,可以將該像素點(diǎn)的每個(gè)顏色通道的灰度值、亮度參數(shù)以及最大灰度值與該通道的灰度值的差值中的最小值,與該像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)之間的乘積作為該像素點(diǎn)的每個(gè)顏色通道對(duì)應(yīng)的校正值?;蛘撸部梢韵扔?jì)算將該像素點(diǎn)的每個(gè)顏色通道的灰度值、亮度參數(shù)以及最大灰度值與該通道的灰度值的差值中的最小值,與該像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)之間的乘積,然后將乘積除以每個(gè)通道的最大灰度值(255)后得到的值作為該像素點(diǎn)的每個(gè)顏色通道對(duì)應(yīng)的校正值。[0140]步驟D2,將該像素點(diǎn)的每個(gè)顏色通道的灰度值分別減去對(duì)應(yīng)的校正值,得到校正后的融合圖像。[0141]具體的,本發(fā)明實(shí)施例中,可以采用如下公式,基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)、每個(gè)像素點(diǎn)的R、G、B值和每個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù)為像素點(diǎn)x對(duì)應(yīng)的偏色校正參數(shù)。[0144]其中,像素點(diǎn)x的R通道的灰度值“I(x)”、亮度參數(shù)“k(x)”以及最大灰度值與該通道的灰度值的差值“255-I(x)”中的最小值“min(255-I(x),I(x),k(x))”,和該像素點(diǎn)x對(duì)應(yīng)的偏色校正參數(shù)scale(x)的乘積再除以最大灰度值255后得到的“min(255-I(x),I(x),k(x))*scale(x)/255”,為像素點(diǎn)x的R通道對(duì)應(yīng)的校正值;同樣的方式可以得到:“min(255-I?(x),I?(x),k(x))*scale(x)/255”為像素點(diǎn)x的G通道對(duì)應(yīng)的校正值,“min(255-I(x),I(x),k(x))*scale(x)/255”,為像素點(diǎn)x的B通道對(duì)應(yīng)的校正值。[0145]像素點(diǎn)x的每個(gè)顏色通道的灰度值分別減去對(duì)應(yīng)的校正值,可以得到每個(gè)通道對(duì)得到對(duì)應(yīng)的校正后的灰度值后,可以得到校正后的融合圖像。[0146]圖10為本發(fā)明實(shí)施例提供的校正后的融合圖像的一種示意圖,如圖10所示,采用本發(fā)明實(shí)施例提供的圖像融合方法,將低照度的目標(biāo)可見(jiàn)光圖像1001和目標(biāo)紅外圖像1002進(jìn)行融合,并對(duì)融合后的圖像進(jìn)行偏色校正,得到校正后的融合圖像1003。可以看出,校正后的融合圖像1003和目標(biāo)紅外圖像1002的亮度和風(fēng)格非常相似,即校正后的融合圖像1003還充分利用了目標(biāo)紅外圖像1002的亮度信息,并且通過(guò)偏色校正操作,校正后的融合圖像1003具有明亮清晰且不偏色的特點(diǎn)。[0147]采用本發(fā)明實(shí)施例提供的方法,對(duì)融合后的圖像進(jìn)行偏色校正,對(duì)融合后的圖像進(jìn)一步進(jìn)行顏色還原,最終得到的校正后的融合圖像可以在較大程度上避免顏色失真問(wèn)題,并且,校正后的融合圖像的亮度和目標(biāo)紅外圖像亮度非常相似,充分利用了目標(biāo)紅外圖像的亮度信息,具有明亮清晰且不偏色的特點(diǎn)。[0148]相應(yīng)于上述圖像融合方法,本發(fā)明實(shí)施例還提供了一種圖像融合裝置,下面對(duì)本發(fā)明實(shí)施例所提供的圖像融合裝置進(jìn)行介紹。圖11為本發(fā)明實(shí)施例提供的圖像融合裝置的[0149]圖像獲取模塊1101,用于獲取目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像;[0150]差分特征確定模塊1102,用于根據(jù)所述目標(biāo)可見(jiàn)光圖像的亮度和所述目標(biāo)紅外圖像的亮度,確定所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的亮度差分特征圖;其中,所述亮度差分特征圖用于表征所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像之間的反射特性差[0151]第一權(quán)重確定模塊1103,用于基于所述亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定所述目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述對(duì)應(yīng)關(guān)系為差分特征與融合權(quán)重呈反相關(guān)關(guān)系;[0152]第二權(quán)重確定模塊1104,用于根據(jù)所述第一融合權(quán)重,計(jì)算得到所述目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重;[0153]圖像融合模塊1105,用于基于所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0154]可見(jiàn),采用本發(fā)明實(shí)施例提供的裝置,可以通過(guò)亮度差分特征圖以及預(yù)設(shè)的差分特征與融合權(quán)重之間的對(duì)應(yīng)關(guān)系,確定目標(biāo)紅外圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重,根據(jù)第一融合權(quán)重計(jì)算得到目標(biāo)可見(jiàn)光圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的第二融合權(quán)重,可以根據(jù)第一融合權(quán)重以及第二融合權(quán)重,對(duì)目標(biāo)可見(jiàn)光圖像和目標(biāo)紅外圖像對(duì)應(yīng)位置的每個(gè)像素點(diǎn)進(jìn)行融合,使得到的融合后的圖像中每個(gè)像素點(diǎn)中來(lái)自目標(biāo)紅外圖像的亮度和來(lái)自目標(biāo)可見(jiàn)光圖像的亮度達(dá)到最佳比例,對(duì)于紅外反射特性差異較大的區(qū)域,可以通過(guò)降低該區(qū)域中各個(gè)像素點(diǎn)在目標(biāo)紅外圖像中對(duì)應(yīng)的像素點(diǎn)的第一融合權(quán)重的值,減少融合圖像中該區(qū)域圖像來(lái)自紅外圖像的亮度,進(jìn)而避免了融合圖像中該區(qū)域圖像的色彩失真,對(duì)于紅外反射特性差異較小的區(qū)域,可以通過(guò)提升該區(qū)域中各個(gè)像素點(diǎn)在目標(biāo)紅外圖像中對(duì)應(yīng)的像素點(diǎn)的第一融合權(quán)重的值,增加融合圖像中該區(qū)域圖像來(lái)自紅外圖像的亮度,提升融合圖像中該區(qū)域圖像的亮度,即本發(fā)明實(shí)施例提供的裝置可以在保證融合圖像的質(zhì)量的前提下,獲得顏色準(zhǔn)確的融合圖像。融合后的圖像既具有可見(jiàn)光所具有的顏色信息,又具有紅外光圖像所具有的高信噪比的優(yōu)點(diǎn),因此,采用本發(fā)明實(shí)施例提供的裝置可在低照度場(chǎng)景下獲得清晰的彩色圖像。[0156]色偏校正模塊120個(gè)像素點(diǎn)對(duì)應(yīng)的預(yù)設(shè)顏色;基于所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的預(yù)設(shè)顏色以及每個(gè)所述目標(biāo)可見(jiàn)光圖像的亮度,確定所述融合后的圖像的各個(gè)像素點(diǎn)對(duì)應(yīng)的亮度參數(shù);基于所述融合后的圖像的每個(gè)像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù)、每個(gè)像素點(diǎn)的R、G、B值和每個(gè)像素[0157]可選的,所述色偏校正模塊1201,具體用于針對(duì)所述融合后的圖像的每個(gè)像素點(diǎn),根據(jù)該像素點(diǎn)的每個(gè)顏色通道的灰度值、亮度參數(shù)以及最大灰度值與該通道的灰度值的差值中的最小值和該像素點(diǎn)對(duì)應(yīng)的偏色校正參數(shù),計(jì)算該像素點(diǎn)的每個(gè)顏色通道對(duì)應(yīng)的校正值;將該像素點(diǎn)的每個(gè)顏色通道的灰度值分別減去對(duì)應(yīng)的校正值,得到校正后的融合圖像。[0159]低通濾波子模塊(圖中未示出),用于對(duì)所述目標(biāo)可見(jiàn)光圖像的亮度通道和所述目標(biāo)紅外圖像的亮度通道分別進(jìn)行低通濾波,得到可見(jiàn)光亮度特征圖像和紅外亮度特征圖[0160]差分特征計(jì)算子模塊(圖中未示出),用于計(jì)算所述可見(jiàn)光亮度特征圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的像素點(diǎn)之間的亮度差值的絕對(duì)值,得到以所述絕對(duì)值為像素值的圖像作為亮度差分特征圖。[0162]紋理圖層計(jì)算子模塊(圖中未示出),用于計(jì)算所述目標(biāo)紅外圖像和所述紅外亮度特征圖像中對(duì)應(yīng)位置的各個(gè)像素點(diǎn)之間亮度通道的像素值之差,得到紅外圖像細(xì)節(jié)紋理圖[0163]融合子模塊(圖中未示出),用于根據(jù)所述紅外圖像細(xì)節(jié)紋理圖層、所述第一融合權(quán)重以及所述第二融合權(quán)重,對(duì)所述目標(biāo)可見(jiàn)光圖像和所述目標(biāo)紅外圖像進(jìn)行圖像融合,得到融合后的圖像。[0164]可選的,所述融合子模塊,具體用于對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn)的Y值和所述第一融合權(quán)重的乘積、所述目標(biāo)可見(jiàn)光圖像中與該像素點(diǎn)位置相同的像素點(diǎn)的Y值和所述第二融合權(quán)重的乘積以及所述紅外圖像細(xì)節(jié)紋理圖層與該像素點(diǎn)位置相同的像素點(diǎn)的像素值進(jìn)行求和,得到的和值作為融合后的該位置處的像素點(diǎn)的Y值,以及,基于融合后的該位置處的像素點(diǎn)的Y值與所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)Y值的比值作為亮度增益,并將所述目標(biāo)可見(jiàn)光圖像中該位置處的像素點(diǎn)U、V值與亮度增益的乘積分別確定為融合后的該位置處的像素點(diǎn)的U、V值,得到融合后的圖像。[0165]可選的,所述第一權(quán)重確定模塊1103,具體用于針對(duì)所述目標(biāo)紅外圖像的每個(gè)像素點(diǎn),如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值不大于預(yù)設(shè)差分閾值,確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重為目標(biāo)權(quán)重值;如果該像素點(diǎn)在所述亮度差分特征圖中對(duì)應(yīng)的像素值大于所述預(yù)設(shè)差分閾值,基于所述像素值以及預(yù)設(shè)權(quán)重函數(shù),確定該像素點(diǎn)對(duì)應(yīng)的第一融合權(quán)重;其中,所述預(yù)設(shè)權(quán)重函數(shù)表示第一融合權(quán)重在所述目標(biāo)權(quán)重值的基礎(chǔ)上,隨著所述像素值的遞增而線性遞減。[0166]可見(jiàn),采用本發(fā)明實(shí)施例提供的裝置,對(duì)融合后的圖像進(jìn)行偏色校正,對(duì)融合后的圖像進(jìn)一步進(jìn)行顏色還原,最終得到的校正后的融合圖像可以在較大程度上避免顏色失真問(wèn)題,并且,校正后的融合圖像的亮度和目標(biāo)紅外圖像亮度非常相似,充分利用了目標(biāo)紅外圖像的亮度信息,具有明亮清晰且不偏色的特點(diǎn)。[0167]本發(fā)明實(shí)施例還提供了一種電子設(shè)備,如圖13所示,包括處理器1301、通信接口1302、存儲(chǔ)器1303和通信總線1304,其中,處理器1301,通信接口1302,存儲(chǔ)器1303通過(guò)通信總線1304完成相互間的通信,[0168]存儲(chǔ)器1303,用于存放計(jì)算機(jī)程序;[0169]處理器1301,用于執(zhí)行存儲(chǔ)器1303上所存放的程序時(shí),實(shí)現(xiàn)任一所述圖像融合方法的步驟。[0170]上述電子設(shè)備提到的通信總線可以是外設(shè)部件互連標(biāo)準(zhǔn)(PeripheralComponentArchitecture,EISA)總線等。該通信總線可以分為地址總線、數(shù)據(jù)總線、控制總線等。為便于表示,圖中僅用一條粗線表示,但并不表示僅有一根總線或一種類型的總線。[0171]通信接口用于上述電子設(shè)備與其他設(shè)備之間的通信。[0172]存儲(chǔ)器可以包括隨機(jī)存取存儲(chǔ)器(RandomAccessMemory,RAM),也可以包括非易失性存儲(chǔ)器(Non-VolatileMemory,NVM),例如至少一個(gè)磁盤(pán)存儲(chǔ)器。可選的,存儲(chǔ)器還可以是至少一個(gè)位于遠(yuǎn)離前述處理器的存儲(chǔ)裝置。[0173]上述的處理器可以是通用處理器,包括中央處理器(CentralProcessingUnit,CPU)、網(wǎng)絡(luò)處理器(NetworkProcesso

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

評(píng)論

0/150

提交評(píng)論