一種基于梯度傳遞的可見光與紅外圖像融合方法
【技術領域】
[0001] 本發明設及一種可見光與紅外圖像的融合算法，具體地說，本發明設及一種基于 梯度傳遞的可見光與紅外圖像融合的方法。
【背景技術】
[0002] 在過去的五十年間，光學傳感器技術的得到了迅猛的發展。但是單一的光學傳感 器不可能完全反映圖像特征，采用不同的傳感器的多傳感器數據處理技術與圖像處理技術 正成為人們研究的熱點。其中圖像融合技術能夠在充分分析不同傳感器圖像特性的基礎 上，結合不同傳感器圖像的優勢特性，形成對場景和目標更全面、更可靠、更精確的描述。
[0003] 圖像處理和圖像融合技術可W有效地解決該一問題。紅外成像系統抗干擾能力 強，隱蔽性能好，大氣穿透能力強，能夠適應多種特殊場合。紅外成像被動接受探測目標 的紅外熱福射，紅外傳感器將熱福射轉化為電信號，再經過信號處理、圖像處理形成可視圖 像。紅外圖像能夠直接顯示目標和背景的溫度差別，探測到隱藏、偽裝的目標，但成像背景 細節少，分辨率低。可見光傳感器獲取場景的各種反射信息，有較高的時空分辨率，圖像包 含有豐富的幾何和紋理細節W及豐富的色彩信息。但在天氣惡劣的情況下，成像效果較差， 穿透能力弱，會存在有些重要目標丟失的情況。也就成了紅外與可見光圖像融合的主要目 標。
[0004] 目前，包括小波融合與拉普拉斯金子塔在內的傳統融合方法在融合過程中將可見 光圖像與紅外圖像的不同特征都采用相同的融合策略，在融合過程中可見光圖像與紅外圖 像的權重相同，并沒有根據不同的成像特性采用不同的融合策略。例如，紅外圖像能夠直接 顯示目標和背景的溫度差別，其主要特點在于其灰度達標目標的溫度，可見光的圖像的特 點主要在于他的梯度信息給出了場景的邊緣紋理信息。可見光圖像與紅外圖像融合應該綜 合各種傳感器額優點，集合可見光的細節和紅外的高灰度目標，所W在圖像融合過程中，對 于紅外圖像，應該保護其灰度信息，對于可見光圖像，應該保護其梯度信息。
【發明內容】
[0005] 本發明的目的在于提供一種基于梯度傳遞的可見光圖像與紅外圖像的融合方法， 方法根據保留紅外圖像灰度信息W及保留可見光圖像的梯度信息構建融合圖像的最優化 目標函數，并通過求解最優化問題得到融合后的圖像。
[0006] 本發明的技術方案如下：
[0007] -種基于梯度傳遞的可見光圖像與紅外圖像的圖像融合方法。包括W下步驟：
[0008] (1)通過紅外傳感器W及可見光傳感器，分別獲取相同視場、相同分辨率的紅外圖 像矩陣U與可見光圖像矩陣V;
[0009] (2)W保留紅外圖像的亮度信息W及可見光圖像的紋理信息為 準則，將圖像融合過程轉化為最優化問題，將圖像融合轉化為最優化問題： x* = argm、iii{|x_U| +；l|Vx_Vy|}，其中▽表示梯度算子，Vx表示對X用梯度算子 進行計算，Vv隸示對V用梯度算子進行計算，I I表示圖像矩陣的1范數算子，X為矩陣變 量，afg mjn { '[表示使得括號內的函數取得最小值時矩陣變量X的取值，巧為融合后的圖 像矩陣，A為融合度因子，是大于0的常數，|x-u|表示融合后圖像與紅外圖像之間的亮度 差異，|Vx-VV|表示融合后圖像與可見光圖像之間的梯度差異；
[0010]做求解所述最優化問題，得到融合后圖像矩陣X*，具體包括W下過程：生成矩陣 變量y的標準的1范數全變分最優化目標函數
，y 梯度傳遞圖像矩陣變量，y*為最優梯度傳遞圖像矩陣；用1范數全變分最小化方法求解得 到所述最優差值矩陣y* ;計算得到所述融合后圖像矩陣X* ;x* = y*+V。
[0011] 本發明的融合方法能夠有效將可見光圖像和紅外圖像相融合，融合后的圖像信息 更豐富，不僅融合了可見光圖像的梯度紋理信息，而且保留了紅外圖像的灰度信息，能夠反 映景物的溫度信息。
【附圖說明】
[0012] 圖1為本發明基于梯度傳遞的紅外與可見光圖像融合方法流程圖。
[0013]圖2示出待融合的紅外圖像。
[0014]圖3示出待融合的可見光圖像。
[0015]圖4示出經過本發明融合方法融合后的圖像。
【具體實施方式】
[0016]下面結合附圖和實施例對本發明進行進一步說明。如圖1所示，本發明基于梯度 傳遞的紅外圖像與可將光圖像融合算法包括W下步驟：
[0017] (1)通過紅外傳感器W及可見光傳感器，分別獲取相同視場、相同分辨率的紅外圖 像矩陣U與可見光圖像矩陣V;
[001引（2) W保留紅外圖像的亮度信息W及可見光圖像的紋理信息為 準則，將圖像融合過程轉化為最優化問題，將圖像融合轉化為最優化問題： x*二a巧嗎n{|x-U| +；l|▽x-▽V|}，其中v衆示梯度算子，M表示圖像矩陣的l范數 算子，X為矩陣變量，afg mjn 表示使得括號內的函數取得最小值時矩陣變量X的取值， 巧為融合后的圖像矩陣，A為融合度因子，是大于0的常數，|x-u|表示融合后圖像與紅外 圖像之間的亮度差異，|Vx-W|:表示融合后圖像與可見光圖像之間的梯度差異；
[0019] (3)求解所述最優化問題，得到融合后圖像矩陣巧，具體包括W下子步驟：
[0020] 生成差值矩陣y的標準的1范數全變分最優化目標函數；
Iy梯度傳遞圖像矩陣變量，y*為最優梯度傳遞 圖像矩陣，其中|Vy|的計算過程為
，m和n分 別表示所述可見光圖像矩陣的行數和列數，i表示第i個像素點，Vfy;表示對所述圖像 矩陣y的第i個像素點求水平方向上的一階差分信號，具體來說vfy=y,. -y,.w， 表示對所述梯度傳遞圖像矩陣變量y的第i個像素點求水平方向上的一階差分信號 - 5^,1，當i位于圖像的最后一列或最后一行時，r(i)和ba)等于i，否則ra) 和ba)分別表示像素點i右邊和下面的相鄰像素點，y;、y,w、ybW分別表示所述梯度傳遞 圖像矩陣變量y在像素點i、r(i)、b(i)位置處的灰度值。
[0021] 用1范數全變分最小化方法求解得到所述最優差值矩陣y* ;
[0022] 計算得到所述融合后圖像矩陣巧；x* =y*+V。
[002引如圖2所示，其為通過紅外傳感器獲取得到的紅外圖像。
[0024] 如圖3所示，其為通過可見光傳感器獲取得到的可見光圖像。
[0025] 圖4是經過本發明融合方法處理后得到的紅外圖像與可見光圖像的融合圖像，可 W看到融合后的圖像在紅外圖像的灰度信息基礎上融合了可將光圖像的紋理細節。
【主權項】
1. 一種基于梯度傳遞的可見光與紅外圖像融合方法，其特征在于，包括以下步驟： (1) 對相同場景分別獲取相同分辨率大小的紅外圖像矩陣U與可見光圖像矩陣V; (2) 將圖像融合轉化為最優化問題：取值，X*為融合后的圖像矩陣，A為融合度因子，是大于O的常數； (3) 求解所述最優化問題，得到融合后圖像矩陣x*。2. 根據權利要求1所述的一種基于梯度傳遞的可見光與紅外圖像融合方法，其特征在 于，所述求解最優化問題，得到融合后圖像x*，具體包括以下過程：圖像矩陣變量y的取值，y*為梯度傳遞圖像矩陣； 用1范數全變分最小化方法求解得到所述梯度傳遞圖像矩陣y* ; 計算得到所述融合后圖像矩陣X* :x* =y*+V。
【專利摘要】本發明公開了一種基于梯度傳遞的可見光與紅外圖像融合方法，包括以下步驟：分別獲取紅外圖像矩陣與可見光圖像矩陣；以保留紅外圖像的亮度信息以及可見光圖像的紋理信息為準則，將圖像融合過程轉化為最優化問題；通過求解所述最優化問題，得到融合后圖像。本發明的融合方法能夠有效將可見光圖像和紅外圖像相融合，融合后的圖像信息更豐富，不僅融合了可見光圖像的梯度紋理信息，而且能夠反映景物的溫度信息。
【IPC分類】G06K9/62
【公開號】CN104966108
【申請號】CN201510416252
【發明人】馬佳義, 樊凡, 馬泳, 黃珺
【申請人】武漢大學
【公開日】2015年10月7日
【申請日】2015年7月15日