本申請涉及電子設備技術領域,尤指一種圖片處理方法及裝置。
背景技術:
目前,移動終端提供的拍照功能越來越受到人們的青睞。
相關技術中,移動終端可將已拍攝的多張圖片進行全景拼接形成全景圖片,但所形成的全景圖片在拼接處的邊角部分容易存在明顯瑕疵,效果很差,不僅造成用戶使用上的不便,而且大大降低了用戶體驗。
針對相關技術中移動終端全景拼接所形成的全景圖片存在明顯瑕疵的技術問題,目前尚未提出有效的解決方案。
技術實現要素:
為了解決上述技術問題,本發明實施例提供了一種圖片處理方法及裝置。
本發明實施例提供了:
一種圖片處理方法,應用于移動終端,包括:
分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
分別對所述多張圖片進行畸變矯正處理;
將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
其中,分別對所述多張圖片進行畸變矯正處理,包括:
分別對所述多張圖片進行圖像分析,得到所述多張圖片的特征信息;
根據所述多張圖片的特征信息,分別采用對應的畸變矯正算法對所述多張圖片進行畸變矯正處理。
其中,所述進行全景拼接處理,包括:
分別對所述多張圖片進行投影變換,得到與所述多張圖片相對應的多個圖像;
分別提取所述多個圖像的特征點;
從所述多個圖片的特征點中找到各所述圖像之間的特征匹配點;
基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片。
其中,基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片,包括:
基于各所述圖像之間的特征匹配點進行配準;
所述配準之后,合成所述多個圖像,得到全景圖像;
基于所述全景圖像生成所述全景圖片。
其中,所述得到所述對象的全景圖片之后,還包括:
顯示所述全景圖片。
一種圖片處理裝置,應用于移動終端,包括:
拍攝模塊,用于分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
畸變矯正模塊,用于分別對所述多張圖片進行畸變矯正處理;
拼接模塊,用于將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
其中,還包括:圖像分析模塊,用于分別對所述多張圖片進行圖像分析,得到所述多張圖片的特征信息;所述畸變矯正模塊,具體用于根據所述多張圖片的特征信息,分別采用對應的畸變矯正算法對所述多張圖片進行畸變矯正處理。
其中,所述拼接模塊,具體用于:分別對所述多張圖片進行投影變換,得到與所述多張圖片相對應的多個圖像;分別提取所述多個圖像的特征點;從所述多個圖片的特征點中找到各所述圖像之間的特征匹配點;基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片。
其中,還包括:顯示模塊,用于顯示所述全景圖片。
一種圖片處理裝置,包括:處理器和存儲器,應用于移動終端,所述存儲器存儲有計算機可執行指令,所述計算機可執行指令被所述處理器執行時實現如下方法:
分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
分別對所述多張圖片進行畸變矯正處理;
將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
本發明實施例提供了一種圖片處理方法及裝置,在全景拼接處理之前,分別對每張圖片進行畸變矯正處理,消除畸變導致的非人為造成的圖片與圖片之間的對不齊現象,使全景拼接時圖片更利于配準,從而解決了相關技術中全景拼接容易出現拼接效果差的問題,提升了移動終端的用戶體驗。
附圖說明
附圖用來提供對本發明技術方案的進一步理解,并且構成說明書的一部分,與本申請的實施例一起用于解釋本發明的技術方案,并不構成對本發明技術方案的限制。
圖1為實現本發明各個實施例一可選的移動終端的硬件結構示意圖;
圖2為如圖1所示的移動終端的無線通信系統示意圖;
圖3為本發明實施例圖片處理方法流程示意圖;
圖4為本發明實施例圖片處理方法的具體實現流程示意圖;
圖5為本發明實施例圖片處理裝置的組成結構示意圖。
本發明目的的實現、功能特點及優點將結合實施例,參照附圖做進一步說明。
具體實施方式
應當理解,此處所描述的具體實施例僅僅用以解釋本發明,并不用于限定本發明。
現在將參考附圖描述實現本發明各個實施例的移動終端。在后續的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發明的說明,其本身并沒有特定的意義。因此,"模塊"與"部件"可以混合地使用。
移動終端可以以各種形式來實施。例如,本發明中描述的終端可以包括諸如移動電話、智能電話、筆記本電腦、數字廣播接收器、PDA(個人數字助理)、PAD(平板電腦)、PMP(便攜式多媒體播放器)、導航裝置等等的移動終端以及諸如數字TV、臺式計算機等等的固定終端。下面,假設終端是移動終端。然而,本領域技術人員將理解的是,除了特別用于移動目的的元件之外,根據本發明的實施方式的構造也能夠應用于固定類型的終端。
圖1為實現本發明各個實施例的移動終端的硬件結構示意。
移動終端100可以包括無線通信單元110、A/V(音頻/視頻)輸入單元120、用戶輸入單元130、感測單元140、輸出單元150、存儲器160、接口單元170、控制器180和電源單元190等等。圖1示出了具有各種組件的移動終端,但是應理解的是,并不要求實施所有示出的組件。可以替代地實施更多或更少的組件。將在下面詳細描述移動終端的元件。
無線通信單元110通常包括一個或多個組件,其允許移動終端100與無線通信系統或網絡之間的無線電通信。例如,無線通信單元可以包括廣播接收模塊111、移動通信模塊112、無線互聯網模塊113、短程通信模塊114和位置信息模塊115中的至少一個。
廣播接收模塊111經由廣播信道從外部廣播管理服務器接收廣播信號和/或廣播相關信息。廣播信道可以包括衛星信道和/或地面信道。廣播管理服務器可以是生成并發送廣播信號和/或廣播相關信息的服務器或者接收之前生成的廣播信號和/或廣播相關信息并且將其發送給終端的服務器。廣播信號可以包括TV廣播信號、無線電廣播信號、數據廣播信號等等。而且,廣播信號可以進一步包括與TV或無線電廣播信號組合的廣播信號。廣播相關信息也可以經由移動通信網絡提供,并且在該情況下,廣播相關信息可以由移動通信模塊112來接收。廣播信號可以以各種形式存在,例如,其可以以數字多媒體廣播(DMB)的電子節目指南(EPG)、數字視頻廣播手持(DVB-H)的電子服務指南(ESG)等等的形式而存在。廣播接收模塊111可以通過使用各種類型的廣播系統接收信號廣播。特別地,廣播接收模塊111可以通過使用諸如多媒體廣播-地面(DMB-T)、數字多媒體廣播-衛星(DMB-S)、數字視頻廣播-手持(DVB-H),前向鏈路媒體(MediaFLO@)的數據廣播系統、地面數字廣播綜合服務(ISDB-T)等等的數字廣播系統接收數字廣播。廣播接收模塊111可以被構造為適合提供廣播信號的各種廣播系統以及上述數字廣播系統。經由廣播接收模塊111接收的廣播信號和/或廣播相關信息可以存儲在存儲器160(或者其它類型的存儲介質)中。
移動通信模塊112將無線電信號發送到基站(例如,接入點、節點B等等)、外部終端以及服務器中的至少一個和/或從其接收無線電信號。這樣的無線電信號可以包括語音通話信號、視頻通話信號、或者根據文本和/或多媒體消息發送和/或接收的各種類型的數據。
無線互聯網模塊113支持移動終端的無線互聯網接入。該模塊可以內部或外部地耦接到終端。該模塊所涉及的無線互聯網接入技術可以包括WLAN(無線LAN)(Wi-Fi)、Wibro(無線寬帶)、Wimax(全球微波互聯接入)、HSDPA(高速下行鏈路分組接入)等等。
短程通信模塊114是用于支持短程通信的模塊。短程通信技術的一些示例包括藍牙TM、射頻識別(RFID)、紅外數據協會(IrDA)、超寬帶(UWB)、紫蜂TM等等。
位置信息模塊115是用于檢查或獲取移動終端的位置信息的模塊。位置信息模塊的典型示例是GPS(全球定位系統)。根據當前的技術,GPS模塊115計算來自三個或更多衛星的距離信息和準確的時間信息并且對于計算的信息應用三角測量法,從而根據經度、緯度和高度準確地計算三維當前位置信息。當前,用于計算位置和時間信息的方法使用三顆衛星并且通過使用另外的一顆衛星校正計算出的位置和時間信息的誤差。此外,GPS模塊115能夠通過實時地連續計算當前位置信息來計算速度信息。
A/V輸入單元120用于接收音頻或視頻信號。A/V輸入單元120可以包括相機121和麥克風1220,相機121對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態圖片或視頻的圖像數據進行處理。處理后的圖像幀可以顯示在顯示單元151上。經相機121處理后的圖像幀可以存儲在存儲器160(或其它存儲介質)中或者經由無線通信單元110進行發送,可以根據移動終端的構造提供兩個或更多相機1210。麥克風122可以在電話通話模式、記錄模式、語音識別模式等等運行模式中經由麥克風接收聲音(音頻數據),并且能夠將這樣的聲音處理為音頻數據。處理后的音頻(語音)數據可以在電話通話模式的情況下轉換為可經由移動通信模塊112發送到移動通信基站的格式輸出。麥克風122可以實施各種類型的噪聲消除(或抑制)算法以消除(或抑制)在接收和發送音頻信號的過程中產生的噪聲或者干擾。
用戶輸入單元130可以根據用戶輸入的命令生成鍵輸入數據以控制移動終端的各種操作。用戶輸入單元130允許用戶輸入各種類型的信息,并且可以包括鍵盤、鍋仔片、觸摸板(例如,檢測由于被接觸而導致的電阻、壓力、電容等等的變化的觸敏組件)、滾輪、搖桿等等。特別地,當觸摸板以層的形式疊加在顯示單元151上時,可以形成觸摸屏。
感測單元140檢測移動終端100的當前狀態,(例如,移動終端100的打開或關閉狀態)、移動終端100的位置、用戶對于移動終端100的接觸(即,觸摸輸入)的有無、移動終端100的取向、移動終端100的加速或減速移動和方向等等,并且生成用于控制移動終端100的操作的命令或信號。例如,當移動終端100實施為滑動型移動電話時,感測單元140可以感測該滑動型電話是打開還是關閉。另外,感測單元140能夠檢測電源單元190是否提供電力或者接口單元170是否與外部裝置耦接。感測單元140可以包括接近傳感器1410將在下面結合觸摸屏來對此進行描述。
接口單元170用作至少一個外部裝置與移動終端100連接可以通過的接口。例如,外部裝置可以包括有線或無線頭戴式耳機端口、外部電源(或電池充電器)端口、有線或無線數據端口、存儲卡端口、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機端口等等。識別模塊可以是存儲用于驗證用戶使用移動終端100的各種信息并且可以包括用戶識別模塊(UIM)、客戶識別模塊(SIM)、通用客戶識別模塊(USIM)等等。另外,具有識別模塊的裝置(下面稱為"識別裝置")可以采取智能卡的形式,因此,識別裝置可以經由端口或其它連接裝置與移動終端100連接。接口單元170可以用于接收來自外部裝置的輸入(例如,數據信息、電力等等)并且將接收到的輸入傳輸到移動終端100內的一個或多個元件或者可以用于在移動終端和外部裝置之間傳輸數據。
另外,當移動終端100與外部底座連接時,接口單元170可以用作允許通過其將電力從底座提供到移動終端100的路徑或者可以用作允許從底座輸入的各種命令信號通過其傳輸到移動終端的路徑。從底座輸入的各種命令信號或電力可以用作用于識別移動終端是否準確地安裝在底座上的信號。輸出單元150被構造為以視覺、音頻和/或觸覺方式提供輸出信號(例如,音頻信號、視頻信號、警報信號、振動信號等等)。輸出單元150可以包括顯示單元151、音頻輸出模塊152、警報單元153等等。
顯示單元151可以顯示在移動終端100中處理的信息。例如,當移動終端100處于電話通話模式時,顯示單元151可以顯示與通話或其它通信(例如,文本消息收發、多媒體文件下載等等)相關的用戶界面(UI)或圖形用戶界面(GUI)。當移動終端100處于視頻通話模式或者圖像捕獲模式時,顯示單元151可以顯示捕獲的圖像和/或接收的圖像、示出視頻或圖像以及相關功能的UI或GUI等等。
同時,當顯示單元151和觸摸板以層的形式彼此疊加以形成觸摸屏時,顯示單元151可以用作輸入裝置和輸出裝置。顯示單元151可以包括液晶顯示器(LCD)、薄膜晶體管LCD(TFT-LCD)、有機發光二極管(OLED)顯示器、柔性顯示器、三維(3D)顯示器等等中的至少一種。這些顯示器中的一些可以被構造為透明狀以允許用戶從外部觀看,這可以稱為透明顯示器,典型的透明顯示器可以例如為TOLED(透明有機發光二極管)顯示器等等。根據特定想要的實施方式,移動終端100可以包括兩個或更多顯示單元(或其它顯示裝置),例如,移動終端可以包括外部顯示單元(未示出)和內部顯示單元(未示出)。觸摸屏可用于檢測觸摸輸入壓力以及觸摸輸入位置和觸摸輸入面積。
音頻輸出模塊152可以在移動終端處于呼叫信號接收模式、通話模式、記錄模式、語音識別模式、廣播接收模式等等模式下時,將無線通信單元110接收的或者在存儲器160中存儲的音頻數據轉換音頻信號并且輸出為聲音。而且,音頻輸出模塊152可以提供與移動終端100執行的特定功能相關的音頻輸出(例如,呼叫信號接收聲音、消息接收聲音等等)。音頻輸出模塊152可以包括揚聲器、蜂鳴器等等。
警報單元153可以提供輸出以將事件的發生通知給移動終端100。典型的事件可以包括呼叫接收、消息接收、鍵信號輸入、觸摸輸入等等。除了音頻或視頻輸出之外,警報單元153可以以不同的方式提供輸出以通知事件的發生。例如,警報單元153可以以振動的形式提供輸出,當接收到呼叫、消息或一些其它進入通信(incomingcommunication)時,警報單元153可以提供觸覺輸出(即,振動)以將其通知給用戶。通過提供這樣的觸覺輸出,即使在用戶的移動電話處于用戶的口袋中時,用戶也能夠識別出各種事件的發生。警報單元153也可以經由顯示單元151或音頻輸出模塊152提供通知事件的發生的輸出。
存儲器160可以存儲由控制器180執行的處理和控制操作的軟件程序等等,或者可以暫時地存儲己經輸出或將要輸出的數據(例如,電話簿、消息、靜態圖像、視頻等等)。而且,存儲器160可以存儲關于當觸摸施加到觸摸屏時輸出的各種方式的振動和音頻信號的數據。
存儲器160可以包括至少一種類型的存儲介質,所述存儲介質包括閃存、硬盤、多媒體卡、卡型存儲器(例如,SD或DX存儲器等等)、隨機訪問存儲器(RAM)、靜態隨機訪問存儲器(SRAM)、只讀存儲器(ROM)、電可擦除可編程只讀存儲器(EEPROM)、可編程只讀存儲器(PROM)、磁性存儲器、磁盤、光盤等等。而且,移動終端100可以與通過網絡連接執行存儲器160的存儲功能的網絡存儲裝置協作。
控制器180通常控制移動終端的總體操作。例如,控制器180執行與語音通話、數據通信、視頻通話等等相關的控制和處理。另外,控制器180可以包括用于再現(或回放)多媒體數據的多媒體模塊1810,多媒體模塊1810可以構造在控制器180內,或者可以構造為與控制器180分離。控制器180可以執行模式識別處理,以將在觸摸屏上執行的手寫輸入或者圖片繪制輸入識別為字符或圖像。
電源單元190在控制器180的控制下接收外部電力或內部電力并且提供操作各元件和組件所需的適當的電力。
這里描述的各種實施方式可以以使用例如計算機軟件、硬件或其任何組合的計算機可讀介質來實施。對于硬件實施,這里描述的實施方式可以通過使用特定用途集成電路(ASIC)、數字信號處理器(DSP)、數字信號處理裝置(DSPD)、可編程邏輯裝置(PLD)、現場可編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、被設計為執行這里描述的功能的電子單元中的至少一種來實施,在一些情況下,這樣的實施方式可以在控制器180中實施。對于軟件實施,諸如過程或功能的實施方式可以與允許執行至少一種功能或操作的單獨的軟件模塊來實施。軟件代碼可以由以任何適當的編程語言編寫的軟件應用程序(或程序)來實施,軟件代碼可以存儲在存儲器160中并且由控制器180執行。
至此,己經按照其功能描述了移動終端。下面,為了簡要起見,將描述諸如折疊型、直板型、擺動型、滑動型移動終端等等的各種類型的移動終端中的滑動型移動終端作為示例。因此,本發明能夠應用于任何類型的移動終端,并且不限于滑動型移動終端。
如圖1中所示的移動終端100可以被構造為利用經由幀或分組發送數據的諸如有線和無線通信系統以及基于衛星的通信系統來操作。
現在將參考圖2描述其中根據本發明的移動終端能夠操作的通信系統。
這樣的通信系統可以使用不同的空中接口和/或物理層。例如,由通信系統使用的空中接口包括例如頻分多址(FDMA)、時分多址(TDMA)、碼分多址(CDMA)和通用移動通信系統(UMTS)(特別地,長期演進(LTE))、全球移動通信系統(GSM)等等。作為非限制性示例,下面的描述涉及CDMA通信系統,但是這樣的教導同樣適用于其它類型的系統。
參考圖2,CDMA無線通信系統可以包括多個移動終端100、多個基站(BS)270、基站控制器(BSC)275和移動交換中心(MSC)280。MSC280被構造為與公共電話交換網絡(PSTN)290形成接口。MSC280還被構造為與可以經由回程線路耦接到基站270的BSC275形成接口。回程線路可以根據若干己知的接口中的任一種來構造,所述接口包括例如E1/T1、ATM,IP、PPP、幀中繼、HDSL、ADSL或xDSL。將理解的是,如圖2中所示的系統可以包括多個BSC2750。
每個BS270可以服務一個或多個分區(或區域),由多向天線或指向特定方向的天線覆蓋的每個分區放射狀地遠離BS270。或者,每個分區可以由用于分集接收的兩個或更多天線覆蓋。每個BS270可以被構造為支持多個頻率分配,并且每個頻率分配具有特定頻譜(例如,1.25MHz,5MHz等等)。
分區與頻率分配的交叉可以被稱為CDMA信道。BS270也可以被稱為基站收發器子系統(BTS)或者其它等效術語。在這樣的情況下,術語"基站"可以用于籠統地表示單個BSC275和至少一個BS270。基站也可以被稱為"蜂窩站"。或者,特定BS270的各分區可以被稱為多個蜂窩站。
如圖2中所示,廣播發射器(BT)295將廣播信號發送給在系統內操作的移動終端100。如圖1中所示的廣播接收模塊111被設置在移動終端100處以接收由BT295發送的廣播信號。在圖2中,示出了幾個全球定位系統(GPS)衛星300。衛星300幫助定位多個移動終端100中的至少一個。
在圖2中,描繪了多個衛星300,但是理解的是,可以利用任何數目的衛星獲得有用的定位信息。如圖1中所示的GPS模塊115通常被構造為與衛星300配合以獲得想要的定位信息。替代GPS跟蹤技術或者在GPS跟蹤技術之外,可以使用可以跟蹤移動終端的位置的其它技術。另外,至少一個GPS衛星300可以選擇性地或者額外地處理衛星DMB傳輸。
作為無線通信系統的一個典型操作,BS270接收來自各種移動終端100的反向鏈路信號。移動終端100通常參與通話、消息收發和其它類型的通信。特定基站270接收的每個反向鏈路信號被在特定BS270內進行處理。獲得的數據被轉發給相關的BSC275。BSC提供通話資源分配和包括BS270之間的軟切換過程的協調的移動管理功能。BSC275還將接收到的數據路由到MSC280,其提供用于與PSTN290形成接口的額外的路由服務。類似地,PSTN290與MSC280形成接口,MSC與BSC275形成接口,并且BSC275相應地控制BS270以將正向鏈路信號發送到移動終端100。
實施例一
如圖3所示,本實施例提供了一種圖片處理方法,應用于移動終端,可以包括:
步驟301,分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
這里,所述對象可以是景物、人物、靜物等任何可以拍攝圖片的物體。
步驟302,分別對所述多張圖片進行畸變矯正處理;
步驟303,將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
本實施例中,在全景拼接處理之前,分別對每張圖片進行畸變矯正處理,消除畸變導致的非人為造成的圖片與圖片之間的對不齊現象,使全景拼接時圖片更利于配準,從而解決了相關技術中全景拼接容易出現拼接效果差的問題,提升了移動終端的用戶體驗。
在一些實現方式中,分別對所述多張圖片進行畸變矯正處理,包括:分別對所述多張圖片進行圖像分析,得到所述多張圖片的特征信息;根據所述多張圖片的特征信息,分別采用對應的畸變矯正算法對所述多張圖片進行畸變矯正處理。如此,可通過圖像分析算法分析各個圖片的特點,進而根據不同圖片特點選取不同的畸變矯正處理算法進行處理。例如,可以通過圖像分析得到所述多張圖片的亮度特征,再根據亮度特征選擇適合的畸變矯正處理算法對圖片進行畸變矯正。
實際應用中,本實施例中的畸變矯正算法可以是基于特征點的邊角畸變矯正算法、基于灰度插值的邊角畸變矯正等。本實施例中,可以使用仿射變換的畸變矯正,同時通過調整算法順序,可以增加單個圖像畸變矯正的算法復雜度,從而提升效果。
下面舉例說明畸變矯正算法的具體實現過程,如下方法僅為示例,本申請不局限于此算法。
一般情況下圖像存在各種畸變現象,最普遍的是徑向畸變,切向畸變。那么消除徑向畸變、切向畸變的一般流程如下:
(1):參數介紹:dx,dy分別為鏡頭x,y方向上的焦距;
<u0,v0>為鏡頭光軸和圖像平面的交點;
K1,k2為鏡頭徑向畸變參數;
P1,p2為鏡頭切向畸變參數;
w,h為圖像寬,高
(2):矯正流程(圖像逆向投影——目標圖像到原圖像(O)):
第一步:假設一張目標圖像A,寬高分別為w,h。該圖像不存在畸變,圖像的每個像素灰度值都是255(可以理解為這就是一張白紙)
第二步:把第一步圖像A的像素坐標轉換為物理坐標,參數已知,下面公式(1)中(u,v)對應A的每個像素點坐標,(x,y)為(u,v)轉換后的物理坐標,得到一個物理坐標系下的圖像B。
第三步:對圖像B進行加畸變操作,參數已知,(x’,y’)為圖像B每一個像素坐標點,通過如下式(2)進行變化,其中,(x”,y”)則為對(x’,y’)進行加畸變操作得到的帶有畸變的坐標,這樣就得到一副有畸變的圖像C。
x″=x′·(1+k1·r2+k2·r4)+2·p1·x′·y′+p2·(r2+2x′2)
y″=y′·(1+k1·r2+k2·r4)+p1·(r2+2·y′2)+2·p2·x′·y′ (2)
第四步:執行第二步的逆向操作,把圖像C轉換到像素坐標系下的帶有畸變的圖像D,參考下面公式(3)濾除不合理的坐標點。
第五步:到第四步獲取到了帶畸變的圖像D,同時保存該步驟獲取的浮點型結果,根據浮點結果定義4個加權的坐標m1,m2,m3,m4,即從圖像A變換到圖像D的過程中,每一個點經過一系列變換都對應著4個加權的坐標。
第六步:根據逆向變換原理,目標圖像A變換得到的四個加權坐標都在原圖像O上一一對應,利用原圖像的四個加權坐標對圖像A進行填充,最后即得到消除畸變的目標圖像。
在一些實現方式中,步驟303中的進行全景拼接處理,可以通過如下過程實現:分別對所述多張圖片進行投影變換,得到與所述多張圖片相對應的多個圖像;分別提取所述多個圖像的特征點;從所述多個圖片的特征點中找到各所述圖像之間的特征匹配點;基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片。
實際應用中,圖像拼接的關鍵兩步是:配準(registration)和融合(blending)。配準的目的是根據幾何運動模型,將圖像注冊到同一個坐標系中;融合則是將配準后的圖像合成為一張大的拼接圖像。本實施例中,基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片,可以包括:基于各所述圖像之間的特征匹配點進行配準;所述配準之后,合成所述多個圖像,得到全景圖像;基于所述全景圖像生成所述全景圖片。
實際應用中,由于每幅圖像是相機在不同角度下拍攝得到的,所以他們并不在同一投影平面上,如果對重疊的圖像直接進行無縫拼接,會破壞實際景物的視覺一致性。所以需要先對圖像進行投影變換,再進行拼接。實際應用中,可以采用平面投影、柱面投影、立方體投影和球面投影等方式進行投影變換。
在一些實現方式中,為便于用戶查看,在得到全景圖片之后,還可以包括:顯示所述全景圖片。實際應用中,可以通過移動終端的觸摸屏顯示所述全景圖片。
除此之外,還可以在得到全景圖片之后,將所述全景圖片保存至預定存儲空間,方便用戶隨時查看。該預定存儲空間可以是移動終端默認設置的用于存儲圖片的空間,也可以是用戶自行設定的存儲空間。實際應用中,該存儲空間可以是移動終端中存儲器、內存等中的一塊區域。
下面以手機為例詳細說明本實施例中圖片處理方法的具體實現過程。
如圖4所示,圖片處理的具體實現過程可以包括如下步驟:
步驟401,用戶啟動手機中的相機,并選擇全景拍攝;
步驟402,相機進入全景拍攝,采用全景拍攝對應的拍攝參數隨著用戶移動手機進行多角度拍攝,獲取到當前景物的多張圖片:圖片1、圖片2、圖片3、……、圖片N,該多張圖片分別對應當前景物的不同角度,該多張圖片可滿足圖片全景拼接的要求,即視角首尾連接。
步驟403,手機分別對上述多種圖片(即圖片1、圖片2、圖片3、……、圖片N)進行畸變矯正處理,消除畸變導致的非人為造成的圖片與圖片之間的對不齊現象,使圖片更加利于配準;
步驟404,手機將畸變矯正處理后的圖片1、圖片2、圖片3、……、圖片N進行全景拼接,得到當前景物的全景圖片;
步驟405,通過所述手機的觸摸屏顯示所述全景圖片;
步驟406,用戶選中所述全景圖片并點擊保存,手機將所述全景圖片保存至指定的存儲空間。
通過本實施例中圖4所示的圖片處理方法僅為示例,實際應用中也可以采用其他具體實現方式來實現本實施例的上述方法,對此,本文不作限制。
實施例二
如圖5所示,本實施例提供一種圖片處理裝置,應用于移動終端,可包括:
拍攝模塊51,用于分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
畸變矯正模塊52,用于分別對所述多張圖片進行畸變矯正處理;
拼接模塊53,用于將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
其中,上述裝置還可以包括:圖像分析模塊54,用于分別對所述多張圖片進行圖像分析,得到所述多張圖片的特征信息;所述畸變矯正模塊52,具體可用于根據所述多張圖片的特征信息,分別采用對應的畸變矯正算法對所述多張圖片進行畸變矯正處理。
其中,所述拼接模塊53,具體可用于:分別對所述多張圖片進行投影變換,得到與所述多張圖片相對應的多個圖像;分別提取所述多個圖像的特征點;從所述多個圖片的特征點中找到各所述圖像之間的特征匹配點;基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片。
這里,所述拼接模塊53,具體可用于通過如下方式基于各所述圖像之間的特征匹配點進行圖像拼接:基于各所述圖像之間的特征匹配點進行配準;所述配準之后,合成所述多個圖像,得到全景圖像;基于所述全景圖像生成所述全景圖片。
其中,上述裝置還可以包括:顯示模塊55,用于顯示所述全景圖片。如此,便于用戶查看全景圖片。
本實施例中的上述裝置,在全景拼接處理之前,分別對每張圖片進行畸變矯正處理,消除畸變導致的非人為造成的圖片與圖片之間的對不齊現象,使全景拼接時圖片更利于配準,從而解決了相關技術中全景拼接容易出現拼接效果差的問題,提升了用戶體驗。
本實施例的上述裝置可配置在移動終端,執行實施例一所述方法,其具體實現細節可參照實施例一,不再贅述。其中,拍攝模塊51、畸變矯正模塊52、拼接模塊53、圖像分析模塊54、顯示模塊55分別可以是軟件、硬件或兩者的結合。需要說明的是,本實施例提供的上述裝置中的畸變矯正模塊52、拼接模塊53、圖像分析模塊54可以設置在圖1中移動終端的控制器180中或相機121中,拍攝模塊51可以為圖1中移動終端的照相121中,顯示模塊55可以是圖1中移動終端的顯示單元151。
實施例三
本實施例中,提供一種圖片處理裝置,包括:處理器和存儲器,應用于移動終端,所述存儲器存儲有計算機可執行指令,所述計算機可執行指令被所述處理器執行時實現如下方法:
分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
分別對所述多張圖片進行畸變矯正處理;
將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
在一些實現方式中,所述計算機可執行指令被所述處理器執行時實現上述方法時可執行如下操作:分別對所述多張圖片進行圖像分析,得到所述多張圖片的特征信息;根據所述多張圖片的特征信息,分別采用對應的畸變矯正算法對所述多張圖片進行畸變矯正處理。
在一些實現方式中,所述計算機可執行指令被所述處理器執行時實現上述方法時可執行如下操作:通過全球定位系統GPS采集當前地理位置的經緯度信息;通過陀螺儀采集當前拍攝的仰視角度信息;根據所述經緯度信息和仰視角度信息,確定星軌中心軸線相對于當前地理位置的角度。
在一些實現方式中,所述計算機可執行指令被所述處理器執行時實現上述方法時可執行如下操作:分別對所述多張圖片進行投影變換,得到與所述多張圖片相對應的多個圖像;分別提取所述多個圖像的特征點;從所述多個圖片的特征點中找到各所述圖像之間的特征匹配點;基于各所述圖像之間的特征匹配點進行圖像拼接,得到所述全景圖片。
在一些實現方式中,所述計算機可執行指令被所述處理器執行時實現上述方法時可執行如下操作:基于各所述圖像之間的特征匹配點進行配準;所述配準之后,合成所述多個圖像,得到全景圖像;基于所述全景圖像生成所述全景圖片。
在一些實現方式中,所述計算機可執行指令被所述處理器執行時實現上述方法時還可執行如下操作:得到所述對象的全景圖片之后,顯示所述全景圖片。
本實施例中的上述裝置,在全景拼接處理之前,分別對每張圖片進行畸變矯正處理,消除畸變導致的非人為造成的圖片與圖片之間的對不齊現象,使全景拼接時圖片更利于配準,從而解決了相關技術中全景拼接容易出現拼接效果差的問題,提升了用戶體驗。
本實施例的上述裝置可配置在移動終端,執行實施例一所述方法,其具體實現細節可參照實施例一,不再贅述。
實施例四
此外,本申請實施例還提供一種計算機可讀存儲介質,存儲有計算機可執行指令,所述計算機可執行指令被執行時實現下述方法:
分別從多個角度拍攝同一對象,獲取所述對象的多張圖片;
分別對所述多張圖片進行畸變矯正處理;
將畸變矯正處理后的所述多張圖片進行全景拼接處理,得到所述對象的全景圖片。
本實施例中的計算機可讀存儲介質可應用于移動終端中,在全景拼接處理之前,分別對每張圖片進行畸變矯正處理,消除畸變導致的非人為造成的圖片與圖片之間的對不齊現象,使全景拼接時圖片更利于配準,從而解決了相關技術中全景拼接容易出現拼接效果差的問題,提升了用戶體驗。
可選地,在本實施例中,上述存儲介質可以包括但不限于:U盤、只讀存儲器(ROM,Read-Only Memory)、隨機存取存儲器(RAM,Random Access Memory)、移動硬盤、磁碟或者光盤等各種可以存儲程序代碼的介質。
可選地,在本實施例中,處理器根據存儲介質中已存儲的程序代碼執行上述實施例的方法步驟。
可選地,本實施例中的具體示例可以參考上述實施例中的描述,本實施例在此不再贅述。
需要說明的是,在本文中,術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。
上述本發明實施例序號僅僅為了描述,不代表實施例的優劣。
通過以上的實施方式的描述,本領域的技術人員可以清楚地了解到上述實施例方法可借助軟件加必需的通用硬件平臺的方式來實現,當然也可以通過硬件,但很多情況下前者是更佳的實施方式。基于這樣的理解,本發明的技術方案本質上或者說對現有技術做出貢獻的部分可以以軟件產品的形式體現出來,該計算機軟件產品存儲在一個存儲介質(如ROM/RAM、磁碟、光盤)中,包括若干指令用以使得一臺終端設備(可以是手機,計算機,服務器,空調器,或者網絡設備等)執行本發明各個實施例所述的方法。
以上僅為本發明的優選實施例,并非因此限制本發明的專利范圍,凡是利用本發明說明書及附圖內容所作的等效結構或等效流程變換,或直接或間接運用在其他相關的技術領域,均同理包括在本發明的專利保護范圍內。