專利名稱：一種多視角拍攝進行孔徑合成成像方法
技術領域：
本發明涉及一種多視角拍攝進行準確孔徑合成圖像的方法，屬于圖像處理技術領域。
背景技術：
在傳統成像系統中，相機的景深隨對焦距離的增加而增加，隨光圈的增加而減小。為了達到某些特殊拍攝效果，如突出表現某一感興趣的物體，需要采用較小的景深成像系統。而相機和目標物體間的距離往往是 不能改變的，即對焦距離固定，這種情況下，可以采用大光圈(孔徑)的相機獲取小景深成像效果。相機的光圈越大就越能更多的記錄從不同方向發出的光線。但是相機的光圈不能過大，過大的光圈將使鏡頭的像差畸變等急劇增加。為了解決這個問題，可以利用普通相機多視角拍攝目標物體，對拍攝得到的圖像進行計算合成，達到孔徑合成成像的效果。在這種多視角拍攝的孔徑合成成像系統中，成像景深范圍極小。如果感興趣的物體位于成像系統對焦面上，則其合成孔徑圖像清晰，而處于景深外的物體，由于其彌散斑直徑正比于孔徑大小，將會離焦虛化，從而達到突出感興趣目標的目的。這種孔徑合成成像系統中，一般采用單相機或者相機陣列對目標場景進行多視角拍攝的圖像采集。為提高合成孔徑圖像的清晰度和準確度，需要對每個相機采集的圖像進行幾何校正，因為拍攝過程中各相機視角存在位置偏差。之后將幾何校正之后的圖像用于目標圖像合成的重采樣。在已有技術中，孔徑合成的主要方法是利用平面相機陣列獲取多視角圖像。假設所有相機的光心都位于同一平面上，利用平面視差法標定相機間的相對位置。根據視差和目標深度及相機間相對位置的關系，對圖像進行整像素平移，以抵消目標在不同視角拍攝造成的視差，即將所有圖像對焦至目標平面。將所有對焦至目標平面的圖像進行疊加和平均，這樣位于對焦平面上的物體清晰，而處在對焦平面外的物體由于視差將會虛化彌散，達到突出感興趣目標的效果。因此，在現有的多視角拍攝進行孔徑合成成像的技術中，存在以下缺點在實際安裝中難以嚴格達到所有拍攝角度的相機光心位于同一平面；對原始圖像序列進行整像素的平移以對焦到感興趣的平面忽略了其視差存在非整像素的可能性，降低了合成孔徑圖像的清晰度；對所有對焦后的圖像進行疊加平均相當于對原始圖像進行低通濾波，損失了目標圖像的高頻細節信息。
發明內容
本發明的目的是為了解決上述問題，提出一種多視角拍攝進行孔徑合成成像方法，提高感興趣目標圖像的對比度和清晰度。—種多視角拍攝進行孔徑合成成像方法，包括以下幾個步驟步驟一采用平面射影變換，對原始圖像序列進行坐標變換，重采樣合成對焦到非感興趣平面的圖像序列；
步驟二 根據方差閾值法，對對焦到非感興趣平面的像點進行識別，并在原始圖像序列里去除非感興趣目標平面Π的像點；步驟三根據平面射影變換，對去除非感興趣目標的原始圖像序列進行坐標變換；步驟四綜合所有經變換后的圖像坐標，重采樣合成感興趣目標平面，得的目標圖像；本發明的優點在于(I)本發明通過多次平面射影變換的方法，準確地對感興趣目標平面進行透視成像，校正了平面相機陣列的安裝誤差，提高了感興趣目標的對比度和清晰度。(2)本發明通過采用對多張圖像重采樣的方法，盡量保留了感興趣目標的高頻細節信息，進一步提高感興趣目標的圖像清晰度。
圖I是本發明的具體實施方式
提供的多視角成像系統示意圖；圖2是本發明的具體實施方式
提供的多視角拍攝的原始圖像序列其中的一張；圖3是本發明的具體實施方式
提供的采用現有技術方案的孔徑合成圖像；圖4是本發明的具體實施方式
提供的采用本發明技術方案的孔徑合成圖像圖；圖5是本發明的具體實施方式
提供的多視角拍攝進行孔徑合成成像算法的流程圖。
具體實施例方式下面將結合附圖和實施例對本發明作進一步的詳細說明。一種多視角拍攝進行孔徑合成成像方法，流程如圖5所示，包括以下幾個步驟步驟一采用平面射影變換，對原始圖像序列進行坐標變換，重采樣合成對焦到非感興趣平面的圖像序列；對不同視角的原始圖像序列進行平面射影變換，將所有圖像對焦到非感興趣目標平面Π上,具體為
權利要求
1.一種多視角拍攝進行孔徑合成成像方法，其特征在于，包括以下幾個步驟 步驟一采用平面射影變換，對原始圖像序列進行坐標變換，重采樣合成對焦到非感興趣平面的圖像序列； 對不同視角的原始圖像序列進行平面射影變換，將所有圖像對焦到非感興趣目標平面Π上，具體為 3 =Hm* y, I J |_ I 其中[Xi Ii 1]7是相機陣列中第i個相機所獲得的包含感興趣目標場景的原始圖像齊次坐標，其坐標單位為像素，Hni是原始圖像對焦到非感興趣平面Π的平面射影矩陣，[xni yni 1]T是原始圖像坐標，[Xi Yi 1]Τ為經平面射影變換Hni對應的齊次坐標； 取第i張原始圖像，將平面射影變換后的坐標[xni yni 1]τ進行雙線性重采樣，得到·原始圖像對焦到非感興趣目標平面Π的圖像Ini ； 同理，對其它原始圖像序列進行上述操作，得到對焦到非感興趣目標平面的圖像序列； 步驟二 根據方差閾值法，對對焦到非感興趣平面的像點進行識別，并在原始圖像序列里去除非感興趣目標平面Π的像點； 采用方差閾值法判斷非感興趣目標平面Π的坐標在對焦到非感興趣目標平面Π的圖像序列Ipi的坐標[X。。y。。1]τ;則非感興趣目標平面Π的坐標在第i張原始圖像的坐標[X(K;iYoci 1]T 為—λ·; =Hw· y c i J L1 其中在原圖1中將坐標[X(K;i yoci 1]7的鄰域整像素全部剔除，即灰度設置為0，生成在原圖基礎上去除非感興趣目標平面Π的圖像Γ i； 當非感興趣目標為覆蓋了一定的深度范圍時，判斷所有深度非感興趣平面是否全部去除，如果是，則進入步驟三，否則，返回步驟一，在合成目標圖像之前，反復使用步驟一、二，逐次消除各深度平面內的非感興趣目標； 步驟三根據平面射影變換，對去除非感興趣目標的原始圖像序列進行坐標變換； 對去除非感興趣目標的圖像Γ i進行平面射影變換，對焦到目標平面上； _χ·] Γχ-；jw =Hobll* y't I J I 其中Htjbji是圖像I' 3寸焦到目標的平面射影矩陣，[Xtjbji y(Aji 1]τ是圖像Γ i坐標[Xi Ii I] T經目標平面射影變換對應的齊次坐標；步驟四綜合所有經變換后的圖像坐標，重采樣合成感興趣目標平面，得的目標圖像；通過上述步驟得到N組去除非感興趣目標且對焦到目標平面的坐標[Xtjbjl yobJ1 l]Tr··[xobJi Yobji 1]T，··· [XobjN YobjN 1]T，對這N組坐標數據進行雙線性重采樣,合成對焦到目標平面的圖像，最后，得到目標圖像； 當目標物體有一定的深度范圍時，判斷感興趣目標物體各個深度平面的目標圖像是否全部獲取，如果是，得到目標物體在各深度處的合成孔徑切片圖像，對各切片圖像進行圖像融合，得到被遮攔目標物體的完整合成大孔徑圖像；否則，返回步驟三。
2.根據權利要求I所述的一種多視角拍攝進行孔徑合成成像方法，其特征在于，所述的步驟一中，Hni由第i個相機的視角和對焦到非感興趣目標平面的視角的相對位置共同決定，計算Hni采用計算機視覺中的直接線性變換。
全文摘要
本發明公開了一種多視角拍攝進行孔徑合成成像方法，屬于圖像處理技術領域，包括以下幾個步驟步驟一采用平面射影變換，對原始圖像序列進行坐標變換，重采樣合成對焦到非感興趣平面的圖像序列；步驟二根據方差閾值法，對對焦到非感興趣平面的像點進行識別，并在原始圖像序列里去除非感興趣目標平面∏的像點；步驟三根據平面射影變換，對去除非感興趣目標的原始圖像序列進行坐標變換；步驟四綜合所有經變換后的圖像坐標，重采樣合成感興趣目標平面，得的目標圖像；本發明通過多次平面射影變換的方法，準確地對感興趣目標平面進行透視成像，校正了平面相機陣列的安裝誤差，提高了感興趣目標的對比度和清晰度。
文檔編號G06T7/00GK102968784SQ20121039390
公開日2013年3月13日 申請日期2012年10月17日 優先權日2012年10月17日
發明者袁艷, 顏玉慧, 蘇麗娟 申請人:北京航空航天大學