專利名稱：一種電視節目中掛角廣告的提取方法及裝置的制作方法
技術領域：
本發明涉及圖像處理領域，尤其涉及一種電視節目中掛角廣告的提取方法和裝置。
背景技術：
近年來，電視已經遍布千家萬戶，看電視成為了人們日常消遣、娛樂所必不可少的方式。隨著電視廣播技術的迅速發展，電視頻道以及相應的電視節目的數量出現了爆炸式的增長。在播放電視節目的同時，在電視畫面周邊插播廣告進行宣傳的方法也已經被很多電視頻道所采用。現有電視畫面的廣告檢測方法中，由于掛角廣告與臺標同為畫面元素，故常 采用對臺標的檢測方法提取掛角廣告。現有技術通常采用基于全局匹配的識別方法來識別臺標，這種識別方法雖然對大部分臺標的識別效果還可以，但掛角廣告在電視畫面中的位置、形狀、色彩、亮度等信息各異，故對掛角廣告未必適用。具體的，現在常用的臺標檢測方法有幀差法和模型統計法。幀差法通過分析圖像幀進行廣告檢測，由于臺標區域相鄰兩幀的顏色相對不變，背景區域的顏色相對變化較大，因此在臺標區域差值較小，非臺標區域差值大，利用閾值即可將臺標和非臺標區域分割開來。但該方法對不透明的臺標檢測效果較好，而對掛角廣告之類的半透明或動畫等類型的臺標檢測效果較差，且容易受圖像噪聲的影響。模型統計法也是建立在幀差法的基礎上，由于臺標區域此較固定，非臺標區域變化較大，一般通過幀間差統計各像素根據時間變化的統計模型，并根據統計模型判斷新的像素是否屬于臺標。但掛角廣告的樣式繁多，對新樣本無法確定，沒有統一的模板。因此，電視畫面中的掛角廣告提取難度較大，在視頻進行二次利用時，往往無法有效地就掛角廣告區域填充像素，形成無廣告的視頻資源。
發明內容
本發明的實施例提供了一種電視節目中掛角廣告的提取方法和裝置，解決傳統的提取方式對掛角廣告效果較差的問題。為達到上述目的，采用如下技術方案一種視頻中掛角廣告的提取方法，包括分析檢測視頻中的各關鍵幀，根據關鍵幀提取視頻中的穩定區域；對所述穩定區域進行跟蹤，檢測所述穩定區域時序上的變化情況；根據所述變化情況從所述穩定區域中提取掛角廣告。優選的，所述分析檢測視頻中的各關鍵幀時，基于視頻內容對視頻進行分析，將視頻分割為各鏡頭；分別對每個鏡頭中的各圖像幀進行提取，得到對應的各關鍵幀。優選的，所述基于視頻內容對視頻進行分析時，
提取視頻中各圖像幀之間的幀間差，從而提取中視頻中的轉換邊界；根據所述轉換邊界將視頻進行分割，得到各鏡頭。優選的，所述對每個鏡頭中的各圖像幀進行提取時，按序列讀入鏡頭中的各圖像幀，將各圖像幀由RGB顏色空間分別轉換為HSV空間；分別計算相鄰兩圖像幀HSV顏色空間的相似度；當HSV顏色空間的相似度大于相似閾值時,將對應的圖像幀作為所述鏡頭對應的關鍵中貞。優選的，所述根據關鍵幀提取視頻中的穩定區域時， 將各關鍵巾貞分別轉化為売度圖像，統計各売度圖像中每一像素在時序上最大売度值和最小亮度值，統計亮度變化穩定的區域作為視頻中的穩定區域。優選的，所述將各關鍵幀分別轉化為亮度圖像前，根據既定閾值去除各關鍵幀邊緣的黑邊。優選的，所述檢測所述穩定區域時序上的變化情況時，根據穩定區域中亮度值時序上的變化閾值調整穩定區域的大小。本發明還公開了一種視頻中掛角廣告的提取裝置，包括分析單元，用于分析檢測視頻中的各關鍵幀，根據關鍵幀提取視頻中的穩定區域；跟蹤單元，用于對所述穩定區域進行跟蹤，檢測所述穩定區域時序上的變化情況；提取單元，用于根據所述變化情況從所述穩定區域中提取掛角廣告。優選的，所述分析單元分析檢測視頻中的各關鍵幀時，基于視頻內容對視頻進行分析，將視頻分割為各鏡頭；分別對每個鏡頭中的各圖像幀進行提取，得到對應的各關鍵幀。優選的，所述跟蹤單元檢測所述穩定區域時序上的變化情況時，根據穩定區域中亮度值時序上的變化閾值調整穩定區域的大小。本發明實施例提供的一種電視節目中掛角廣告的提取方法和裝置，通過根據視頻中的各鏡頭分別提取各關鍵巾貞，并對關鍵巾貞中的穩定區域進行跟蹤，從而提取出掛角廣告。本發明分別在各鏡頭所屬的場景中分別對關鍵幀進行分析、跟蹤，不但不易受圖像噪聲的影響，而且充分適應了掛角廣告在電視畫面中的位置、形狀、色彩、亮度等的多樣性特點，從而將電視畫面中的掛角廣告有效提取，進而將掛角廣告區域填充像素，制作無廣告的視頻資源。
圖I為本發明實施例一提供的一種電視節目中掛角廣告的提取方法的流程圖；圖2為本發明實施例一提供的一種電視節目中掛角廣告的提取方法中分析檢測視頻中的各關鍵幀時的流程圖；圖3為本發明實施例一提供的一種電視節目中掛角廣告的提取方法中對視頻進行分析時的流程圖4為本發明實施例一提供的一種電視節目中掛角廣告的提取方法中對每個鏡頭中的各圖像幀進行提取時的流程圖；圖5為本發明實施例二提供的一種電視節目中掛角廣告的提取裝置的模塊結構圖。
具體實施例方式下面結合附圖對本發明實施例一種電視節目中掛角廣告的提取方法和裝置進行詳細描述。在過去的二十年時間里，電視廣告發展很快，出現了各式各樣的廣告，有的廣告喜聞樂見，但有的廣告卻招致詬病，其中掛角廣告就屬于招致詬病的一類。本方面主要解決電視畫面中掛角廣告提取的問題。掛角廣告主要存在中國大陸的電視節目中，國外的電視節目中相對較少發現。現有電視畫面往往將臺標或logo提取完 畢后填充像素，使電視畫面中自動消除臺標。由于掛角廣告主要位于電視畫面的邊角位置，其位置大小相對固定，且有一定的持續時間，掛角廣告一般色彩鮮艷，且大部分為不透明的logo。本發明即將掛角廣告作為一種特殊的logo，實現掛角廣告的提取。本發明公開了一種視頻中掛角廣告的提取方法，如圖I所示，包括步驟10、分析檢測視頻中的各關鍵幀，根據關鍵幀提取視頻中的穩定區域；在視頻分析領域中，鏡頭是組成視頻的基本單元和進行視頻序列分析的基礎。鏡頭分割的好壞直接影響到最終關鍵幀的提取結果。例如，視頻通常跨若干鏡頭，同一組鏡頭內，圖像內容變化很小。因此通過鏡頭分割，可提供一組廣告的持續鏡頭數和關鍵幀的信肩、O優選的，所述分析檢測視頻中的各關鍵幀時，如圖2所示，包括如下步驟步驟101、基于視頻內容對視頻進行分析，將視頻分割為各鏡頭；優選的，如圖3所示，所述基于視頻內容對視頻進行分析時，步驟101a、提取視頻中各圖像幀之間的幀間差，從而提取中視頻中的轉換邊界；本實施例中，采用滑動窗口對視頻中的相鄰幀進行圖像檢索，根據相鄰幀圖像變化和差異性統計相鄰幀之間的幀間差。將相鄰幀對應的顏色局部累積直方圖與圖像幀的紋理相結合，分別在相鄰幀中進行掃描，從而統計出相鄰幀的幀間差。從各圖像幀之間的幀間差中按梯度閾值統計出幀間差較大時對應的圖像幀,則所述圖像幀對應視頻中的轉換邊界。步驟101b、根據所述轉換邊界將視頻進行分割，得到各鏡頭。按轉換邊界將視頻進行分割，相鄰兩轉換邊界對應的視頻內容為鏡頭。步驟102、分別對每個鏡頭中的各圖像幀進行提取，得到對應的各關鍵幀。優選的，如圖4所示，所述對每個鏡頭中的各圖像幀進行提取時，步驟102a、按序列讀入鏡頭中的各圖像幀，將各圖像幀由RGB顏色空間分別轉換為HSV空間；步驟102b、分別計算相鄰兩圖像幀HSV顏色空間的相似度；步驟102c、當HSV顏色空間的相似度大于相似閾值時，將對應的圖像幀作為鏡頭對應的關鍵幀。
本實施例中，對每個鏡頭中的各圖像幀進行提取時，對每個鏡頭提取一幀圖像作為關鍵幀，用于穩定區域判斷的初始化條件。采用基于顏色直方圖的方法進行鏡頭分割，即從第I幀關鍵幀開始，采用循環過程完成以下步驟I.讀入第i幀圖像幀pk，將第i幀圖像幀pk由RGB顏色空間轉換為HSV顏色空間；2.在HSV顏色空間中，依據顏色空間HSV中H，S通道分別計算HS空間顏色直方圖—t ；3.計算當前圖像幀直方圖/^《和上一圖像幀直方圖的相似度Sim(k，k_l)
[
權利要求
1.一種視頻中掛角廣告的提取方法，其特征在于，包括 分析檢測視頻中的各關鍵幀，根據關鍵幀提取視頻中的穩定區域； 對所述穩定區域進行跟蹤，檢測所述穩定區域時序上的變化情況； 根據所述變化情況從所述穩定區域中提取掛角廣告。
2.根據權利要求I所述的方法，其特征在于所述分析檢測視頻中的各關鍵幀時， 基于視頻內容對視頻進行分析，將視頻分割為各鏡頭； 分別對每個鏡頭中的各圖像幀進行提取，得到對應的各關鍵幀。
3.根據權利要求2所述的方法，其特征在于所述基于視頻內容對視頻進行分析時， 提取視頻中各圖像幀之間的幀間差，從而提取中視頻中的轉換邊界； 根據所述轉換邊界將視頻進行分割，得到各鏡頭。
4.根據權利要求2所述的方法，其特征在于所述對每個鏡頭中的各圖像幀進行提取時， 按序列讀入鏡頭中的各圖像幀，將各圖像幀由RGB顏色空間分別轉換為HSV空間； 分別計算相鄰兩圖像幀HSV顏色空間的相似度； 當HSV顏色空間的相似度大于相似閾值時，將對應的圖像幀作為所述鏡頭對應的關鍵幀。
5.根據權利要求I所述的方法，其特征在于所述根據關鍵幀提取視頻中的穩定區域時， 將各關鍵幀分別轉化為亮度圖像，統計各亮度圖像中每一像素在時序上最大亮度值和最小亮度值，統計亮度變化穩定的區域作為視頻中的穩定區域。
6.根據權利要求5所述的方法，其特征在于所述將各關鍵幀分別轉化為亮度圖像前，根據既定閾值去除各關鍵幀邊緣的黑邊。
7.根據權利要求I或5所述的方法，其特征在于所述檢測所述穩定區域時序上的變化情況時，根據穩定區域中亮度值時序上的變化閾值調整穩定區域的大小。
8.一種視頻中掛角廣告的提取裝置，其特征在于，包括 分析單元，用于分析檢測視頻中的各關鍵幀，根據關鍵幀提取視頻中的穩定區域； 跟蹤單元，用于對所述穩定區域進行跟蹤，檢測所述穩定區域時序上的變化情況； 提取單元，用于根據所述變化情況從所述穩定區域中提取掛角廣告。
9.根據權利要求8所述的裝置，其特征在于所述分析單元分析檢測視頻中的各關鍵幀時， 基于視頻內容對視頻進行分析，將視頻分割為各鏡頭； 分別對每個鏡頭中的各圖像幀進行提取，得到對應的各關鍵幀。
10.根據權利要求8所述的裝置，其特征在于所述跟蹤單元檢測所述穩定區域時序上的變化情況時，根據穩定區域中亮度值時序上的變化閾值調整穩定區域的大小。
全文摘要
本發明實施例公開了一種電視節目中掛角廣告的提取方法和裝置，屬于圖像處理領域。方法包括分析檢測視頻中的各關鍵幀，根據關鍵幀提取視頻中的穩定區域；對所述穩定區域進行跟蹤，檢測所述穩定區域時序上的變化情況；根據所述變化情況從所述穩定區域中提取掛角廣告。本發明通過分別在各鏡頭所屬的場景中分別對關鍵幀進行分析、跟蹤，不但不易受圖像噪聲的影響，而且充分適應了掛角廣告在電視畫面中的位置、形狀、色彩、亮度等的多樣性特點，從而將電視畫面中的掛角廣告有效提取，進而將掛角廣告區域填充像素，制作無廣告的視頻資源。
文檔編號G06T7/00GK102831611SQ201210297749
公開日2012年12月19日 申請日期2012年8月21日 優先權日2012年8月21日
發明者徐洪偉 申請人:北京捷成世紀科技股份有限公司