專利名稱：尋找節(jié)目開始和結(jié)束段的增強(qiáng)電子廣播節(jié)目指南的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及使用電子廣播節(jié)目指南(“EPG”)，結(jié)合從廣播信號中提取或產(chǎn)生的其它標(biāo)志數(shù)據(jù)，檢測廣播視頻信號中節(jié)目開始和結(jié)束時間的方法和系統(tǒng)。
電視用戶常常使用電視廣播節(jié)目指南來選擇要觀看和/或記錄的節(jié)目。近年來，電視指南已經(jīng)可提供電子形式，即通常包括關(guān)于要播放節(jié)目的開始時間、結(jié)束時間、頻道或電臺的信息的電子廣播節(jié)目指南(“EPG”)。
現(xiàn)代的EPG允許電視接收機(jī)裝置的用戶從該EPG選擇要觀看或記錄的節(jié)目，并把開始時間、結(jié)束時間、頻道或電臺選擇下載到接收機(jī)。然后當(dāng)節(jié)目廣播時，接收機(jī)可控制觀看和/或記錄裝置開啟并轉(zhuǎn)到所選擇的節(jié)目。
當(dāng)前技術(shù)狀況存在的一個問題是EPG存儲的時間通常只是近似的，并且最后一刻的計劃改變或延遲會導(dǎo)致用戶所選擇的節(jié)目遲于EPG中安排的時間開始和結(jié)束。
作為一種示例情況，用戶想記錄“彼得·潘”。EPG顯示“彼得·潘”在星期一的“周一晚間足球”之后開始?！爸芤煌黹g足球”安排在11:30PM EST結(jié)束。實際上，足球賽進(jìn)入加時賽并且一直到11:45PM EST才結(jié)束，因而“彼得·潘”的時間間隙移動了15分鐘。
根據(jù)當(dāng)前技術(shù)狀況控制記錄裝置的接收機(jī)會發(fā)送信號通知記錄裝置在11:30PM開始記錄并且在12:00AM結(jié)束記錄。足球比賽的最后15分鐘會被記錄，接著是“彼得·潘”的前15分鐘。“彼得·潘”的后15分鐘不會被記錄。
針對先有技術(shù)的需要，本發(fā)明在實施例中提供了一種處理電子廣播節(jié)目信息的目錄的方法，其中所述目錄包含關(guān)于節(jié)目的信息，該信息包括節(jié)目的開始時間和結(jié)束時間，并且節(jié)目由從該節(jié)目中搜集的特征數(shù)據(jù)來表示。
所述方法包括在節(jié)目的開始時間從視頻節(jié)目中獲取表示特征數(shù)據(jù)的值。接著，在目錄中存儲在節(jié)目的開始時間從視頻段中獲取的表示特征數(shù)據(jù)的值。
然后，從節(jié)目的結(jié)束時間從視頻段中獲取表示特征數(shù)據(jù)的值，并且把此值存儲到EPG目錄中。當(dāng)用戶選擇EPG目錄中列出的節(jié)目時，把表示來自開始和結(jié)束時間的特征數(shù)據(jù)的值復(fù)制給裝置。接著，監(jiān)控電子節(jié)目輸入視頻數(shù)據(jù)，搜索與EPG中所列出的開始和結(jié)束時間的特征的匹配。
當(dāng)所選頻道的視頻輸入中的特征數(shù)據(jù)與來自節(jié)目開始時間的特征數(shù)據(jù)匹配時，裝置開始所選節(jié)目的觀看或記錄或其它使用動作。
在另一實施例中，裝置則把表示從節(jié)目結(jié)束時間來自視頻序列的特征數(shù)據(jù)的值與表示來自視頻輸入的特征數(shù)據(jù)的值進(jìn)行比較。當(dāng)表示來自節(jié)目結(jié)束時間的特征數(shù)據(jù)的值與表示來自視頻輸入的特征的值匹配時，裝置結(jié)束對該節(jié)目的使用。
本發(fā)明的另一個實施例描述了用于處理電子廣播節(jié)目信息的目錄的系統(tǒng)，其中所述目錄包括關(guān)于節(jié)目的信息，其中存儲了節(jié)目的開始時間和結(jié)束時間，以及其中節(jié)目由從所述節(jié)目搜集的特征數(shù)據(jù)來表示。所述系統(tǒng)包括節(jié)目的視頻信號源和可工作地連接到所述視頻信號源的處理器。所述處理器還連接到電子廣播節(jié)目指南、用戶選擇裝置以及邏輯輸出裝置。所述處理器配置為執(zhí)行本文所述的方法，接受來自用戶選擇裝置的用戶廣播節(jié)目選擇以及來自EPG的節(jié)目開始和結(jié)束特征數(shù)據(jù)、節(jié)目頻道選擇以及開始與結(jié)束時間。然后，處理器操作所連接的監(jiān)視器以便開始和結(jié)束節(jié)目顯示，如本文中的方法所述。
在另一實施例中，處理器操作節(jié)目記錄裝置而不是監(jiān)視器。
圖1是采用EPG和信號特征來控制記錄和/或顯示裝置的系統(tǒng)的框圖。
圖2表示采用DCT方法的塊標(biāo)志提取的實例。
提供以下描述使本領(lǐng)域的任何普通技術(shù)人員能夠?qū)崿F(xiàn)和使用本發(fā)明。最佳實施例的各種修改對于本領(lǐng)域的技術(shù)人員是顯而易見的，并且在不背離本發(fā)明的精神和范圍以及所附權(quán)利要求書的前提下，本文的公開可適用于其它實施例和應(yīng)用。因此，本發(fā)明并不限于所述實施例，而是具有與本文的公開的最廣范圍相一致。
本發(fā)明通過允許產(chǎn)生表示來自節(jié)目開頭和結(jié)尾的幀的標(biāo)志并存儲在EPG目錄中，解決EPG開始時間通常只是近似值的問題。當(dāng)用戶從EPG中選擇要觀看或記錄的節(jié)目時，檢索這些標(biāo)志。然后，采用本發(fā)明的系統(tǒng)監(jiān)視該頻道，在接近(從EPG)安排播放該節(jié)目的時間開始。當(dāng)通過監(jiān)視頻道產(chǎn)生的標(biāo)志與EPG中存儲的標(biāo)志匹配時，系統(tǒng)就知道開始顯示和/或記錄節(jié)目。
類似地，系統(tǒng)可繼續(xù)監(jiān)視以尋找表示節(jié)目結(jié)束的標(biāo)志，以便在適當(dāng)時間結(jié)束顯示和/或記錄。或者，系統(tǒng)可中斷監(jiān)視一直到接近安排的節(jié)目結(jié)束時間。
本發(fā)明的另一實施例可以處理節(jié)目的開始和/或結(jié)束標(biāo)志事先未提供的情況，例如可以是現(xiàn)場廣播、體育、天氣或新聞的情況。在此實施例中，顯示/記錄裝置可在EPG中安排開始廣播之前一小段時間開始緩存所選擇的頻道或電臺。EPG也不斷地受到監(jiān)視，并且廣播設(shè)備盡快地在EPG中插入開始和/或結(jié)束標(biāo)志。然后顯示/記錄裝置可從其緩沖器中定位開始標(biāo)志的點(diǎn)開始顯示/記錄，并且在找到結(jié)束標(biāo)志的位置結(jié)束顯示/記錄。
本發(fā)明的另一方面涉及所選節(jié)目的顯示，而又一個方面涉及所選節(jié)目的記錄。
另外一些實施例涉及表示標(biāo)志的特征數(shù)據(jù)的值，標(biāo)志通過使用節(jié)目幀中的特征組合來產(chǎn)生，而另一實施例采用從節(jié)目幀中產(chǎn)生的彩色直方圖。
在本發(fā)明的另一實施例中，表示從所述節(jié)目中搜集的特征數(shù)據(jù)的值是根據(jù)從節(jié)目的一個或多個幀中搜集的隱含字幕數(shù)據(jù)產(chǎn)生的。
在本發(fā)明的另一實施例中，表示節(jié)目的特征的值是為幀的DCT值塊產(chǎn)生的標(biāo)志。
在本發(fā)明的另一實施例中，表示節(jié)目的特征的值是采用一個或多個幀的音頻產(chǎn)生的標(biāo)志。
在本發(fā)明的另一實施例中，表示節(jié)目的特征的值是從以上實施例的組合中產(chǎn)生的標(biāo)志。
如下所述，有許多可能的特征可包括節(jié)目開始和結(jié)束標(biāo)志。
DCT幀標(biāo)志幀標(biāo)志表示是為幀中具有相似值的DCT塊的各分組導(dǎo)出的，即，幀標(biāo)志是從幀內(nèi)的區(qū)域標(biāo)志導(dǎo)出的。
如本文所述，各區(qū)域標(biāo)志是從塊標(biāo)志導(dǎo)出的。定性地看，幀標(biāo)志包含關(guān)于表示可識別對象的視頻幀中重要區(qū)域的信息。然后，此幀的標(biāo)志可用于檢索這一部分的視頻。
提取塊、區(qū)域和幀標(biāo)志根據(jù)DC和最高AC系數(shù)值，從幀中的各塊導(dǎo)出標(biāo)志。接著，采用具有相似標(biāo)志的塊的大小和位置，以便導(dǎo)出區(qū)域標(biāo)志。
圖2表示塊標(biāo)志提取的實例，其中，塊標(biāo)志為8位長，其中的3位專用于DC 2’，5位專用于AC 1’值。標(biāo)志的DC部分是通過確定DC值在指定值范圍(例如-2400到2400)內(nèi)的位置來導(dǎo)出的。該范圍分成預(yù)先選擇的數(shù)目的間隔。當(dāng)3位專用于DC值時，可使用多達(dá)8個間隔。根據(jù)應(yīng)用類型，可以更改整個標(biāo)志的大小，以便容納更多的間隔，從而得到更精細(xì)粒度的表示。為各個間隔指定了從DC值范圍到標(biāo)志的DC部分的預(yù)定義映射。
把各AC值與閾值進(jìn)行比較。如果該值大于閾值，則把AC標(biāo)志中的相應(yīng)比特設(shè)置為1。在導(dǎo)出各幀的塊標(biāo)志之后，確定具有類似值的塊標(biāo)志的區(qū)域。各區(qū)域由共用類似塊標(biāo)志的兩個或兩個以上塊構(gòu)成。在此過程中，采用區(qū)域增長方法來隔離圖像中的區(qū)域。
通常，區(qū)域增長方法采用像素顏色和鄰域概念以檢測區(qū)域。這里，用塊標(biāo)志作為增長區(qū)域的基礎(chǔ)。然后，為各區(qū)域指定區(qū)域標(biāo)志區(qū)域標(biāo)志(m塊標(biāo)志，區(qū)域尺寸，Rx，Ry)，其中Rx和Ry是該區(qū)域的中心的坐標(biāo)。各個區(qū)域粗略地對應(yīng)于圖像中的對象。
通過DCT塊的最重要分組(區(qū)域)來表示所選擇的幀。從一幀中導(dǎo)出n-字長的標(biāo)志，其中n確定重要區(qū)域的數(shù)量(由應(yīng)用來定義)并且字由預(yù)定數(shù)目的字節(jié)組成。各幀可由若干重要區(qū)域來表示。一種可能的實現(xiàn)是限制圖像中區(qū)域的數(shù)量并且只保持最大的區(qū)域。因為多個區(qū)域表示一幀，通過根據(jù)區(qū)域的塊標(biāo)志、尺寸和位置來選擇相似區(qū)域的數(shù)量，可以調(diào)整幀間的相似性。把各區(qū)域按區(qū)域尺寸來分類，然后選擇最大的n個區(qū)域標(biāo)志作為幀的表示幀(區(qū)域標(biāo)志1，...區(qū)域標(biāo)志n)。這里應(yīng)當(dāng)指出，這種關(guān)鍵幀的表示是基于圖像的視覺外觀，而不是試圖描述圖像的任何語義。
幀匹配為了尋找視頻序列的開始或結(jié)束，幀比較程序?qū)⒁曨l幀F(xiàn)”標(biāo)志與來自EPG的標(biāo)志進(jìn)行比較。按照它們的大小來比較它們各自的區(qū)域標(biāo)志幀差＝∑|區(qū)域尺寸’-區(qū)域尺寸”|對于幀標(biāo)志中具有相同質(zhì)心的區(qū)域能夠計算幀差。在這種情況下，要考慮到對象的位置以及顏色內(nèi)容來產(chǎn)生標(biāo)志?；蛘?，存在這樣的情況，當(dāng)位置不相關(guān)時，只需要比較區(qū)域尺寸而忽略區(qū)域位置。如果幀差為0，來自匹配幀的位置信息可用于以信號表示視頻序列的開始或結(jié)束。
其它幀標(biāo)志類型標(biāo)志可由其它低級幀特征產(chǎn)生。標(biāo)志可利用幀中特征的組合來產(chǎn)生，例如當(dāng)前和前面和/或后面的幀的平均絕對差(“MAD”)。幀的亮度、幀所用的比特率、幀是隔行的還是逐行的以及幀是采用16∶9還是4∶3格式，所有這些類型的信息都可任意組合而用來識別幀，并且開發(fā)的檢索過程類似于上述使用的過程。
標(biāo)志還可從以下各項產(chǎn)生亮度總值、量化器標(biāo)度、當(dāng)前比特率、X方向的場移動平均值、亮度差值(與連續(xù)的幀之間)、字母框值、邊緣點(diǎn)的總數(shù)、視頻文本框的總數(shù)和信息以及面部的總數(shù)和信息。
彩色直方圖不采用上述標(biāo)志，可以計算幀的彩色直方圖并把它用作標(biāo)志。彩色直方圖可由來自任何色彩空間的任何數(shù)量的倉位構(gòu)成。
隱含字幕隱含字幕數(shù)據(jù)也可用作標(biāo)志。觸發(fā)字可存儲在EPG中并且比較提取的隱含字幕文本以便如上所述地尋找開始和結(jié)束。
組合以上各項的任何組合可用于標(biāo)記視頻信號的幀或段。
圖1描述用于控制視頻信號1承載的給定節(jié)目的顯示和/或記錄的系統(tǒng)內(nèi)的各種交互作用。帶有用戶控制裝置3的用戶2查詢電子廣播節(jié)目指南4以便從其目錄5中選擇要記錄的節(jié)目。包括開始和結(jié)束時間以及標(biāo)志的關(guān)于所選節(jié)目的數(shù)據(jù)被發(fā)送到接收裝置6的處理器。然后，處理器6監(jiān)視輸入視頻信號1，搜尋所選節(jié)目的開始時間的標(biāo)志。當(dāng)找到該標(biāo)志時，處理器6控制記錄/顯示裝置7，以便記錄或顯示所選節(jié)目。
同樣，然后處理器6可以繼續(xù)監(jiān)視視頻信號1以搜尋所選節(jié)目結(jié)束的標(biāo)志。當(dāng)找到該標(biāo)志時，處理器6可控制顯示/記錄裝置7停止該節(jié)目的記錄和/或顯示。
現(xiàn)在轉(zhuǎn)到圖2，它描述了塊標(biāo)志提取的實例。給定視頻幀的DCT塊8具有值陣列。這些值由DC值9和最高有效的AC值10表示。DC值由8位塊標(biāo)志11中的3位表示。AC值由剩余的5位表示。
音頻從一個或多個幀中搜集的音頻信息也可用作標(biāo)志。音頻標(biāo)志可包括諸如音調(diào)(例如，最高、最低、中間、平均、峰值數(shù)量等)、平均振幅、平均能量、帶寬和Mel頻率倒譜系數(shù)(MFCC)峰值的信息。這種標(biāo)志可以是從視頻段的前5秒提取的單個對象段的形式。作為另一個實例，音頻標(biāo)志可以是從跟隨各個標(biāo)識的視頻剪輯的指定時段中提取的音頻標(biāo)志組{A1，A2，...An}。
當(dāng)然，如本領(lǐng)域中眾所周知的，有很多從視頻幀中獲得幀標(biāo)志的方法。因此，當(dāng)描述本發(fā)明的最佳實施例的同時，只要不背離本發(fā)明的真實精神，本領(lǐng)域的技術(shù)人員可以作出其它變動和修改，并且本發(fā)明意在包括所有處于以下權(quán)利要求書范圍之內(nèi)的這些變動和修改。
權(quán)利要求
1.一種處理包括關(guān)于至少一個節(jié)目的信息的電子廣播節(jié)目信息的目錄(5)的方法，所述信息包括所述至少一個節(jié)目的開始時間和結(jié)束時間，所述方法包括在所述開始時間獲取表示所述至少一個節(jié)目的特征數(shù)據(jù)的第一值；在所述目錄(5)中存儲所述第一值；在所述結(jié)束時間獲取表示所述至少一個節(jié)目的特征數(shù)據(jù)的第二值；在所述目錄(5)中存儲所述第二值節(jié)目；當(dāng)用戶(2)選擇所述至少一個節(jié)目供帶節(jié)目輸入的裝置(6)使用時，把所述第一值和所述第二值拷貝到所述裝置(7)中；以及把所述第一值和第二值與從所述節(jié)目輸入(1)獲得的相應(yīng)值進(jìn)行比較，從而確定所述使用的開始和結(jié)束時間。
2.如權(quán)利要求1所述的方法，其特征在于，所述第一值表示緊接所述至少一個節(jié)目前面的節(jié)目的結(jié)尾的特征數(shù)據(jù)。
3.如權(quán)利要求2所述的方法，其特征在于，所述信息包括暫時緊接在前面的節(jié)目的所述結(jié)束時間，表示在所述開始時間所述至少一個節(jié)目的特征數(shù)據(jù)的第二值，比較所述第一值和從所述節(jié)目輸入獲得的相應(yīng)值，以便確定所述暫時緊接在前面的節(jié)目結(jié)束的時間，以及比較所述第二值和從所述節(jié)目輸入獲得的相應(yīng)值，以便確定所述使用的開始時間。
4.如權(quán)利要求1、2或3所述的方法，其特征在于，所述節(jié)目由視頻信號源(1)傳送。
5.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是利用所述節(jié)目的幀中的特征組合而產(chǎn)生的標(biāo)志。
6.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是從所述節(jié)目的幀中產(chǎn)生的彩色直方圖。
7.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是根據(jù)從所述節(jié)目的幀中搜集的隱含字幕數(shù)據(jù)來產(chǎn)生的。
8.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是從所述節(jié)目的一個或多個幀的音頻部分中產(chǎn)生的。
9.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是為幀的離散余弦值塊產(chǎn)生的標(biāo)志。
10.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是從低級特征中獲得的。
11.如權(quán)利要求1或2所述的方法，其特征在于，表示所述DCT塊的特征的所述值是為幀的DCT值塊產(chǎn)生的標(biāo)志。
12.如權(quán)利要求1或2所述的方法，其特征在于，表示從所述節(jié)目搜集的特征數(shù)據(jù)的所述值是從低級特征中獲得的。
13.一種用于處理電子廣播節(jié)目信息的目錄(5)的系統(tǒng)，其中所述目錄(5)包括關(guān)于節(jié)目的信息，其中存儲了所述節(jié)目的開始時間和結(jié)束時間，其中所述節(jié)目由從所述節(jié)目中搜集的特征數(shù)據(jù)來表示，所述系統(tǒng)包括所述節(jié)目的視頻信號源(1)；以及可工作地連接到所述視頻信號源的處理器(6)，所述處理器連接到電子廣播節(jié)目指南(4)，而且連接到用戶選擇裝置(3)和邏輯輸出裝置；所述處理器配置成從所述用戶選擇裝置(3)獲取用戶廣播節(jié)目選擇；從包含所述目錄(5)的所述電子廣播節(jié)目指南(4)中獲取所述特征數(shù)據(jù)、節(jié)目頻道選擇以及節(jié)目開始和結(jié)束時間；在接近所述節(jié)目開始時間時監(jiān)視所述視頻信號源(1)，比較所述特征數(shù)據(jù)和從視頻信號源(1)產(chǎn)生的免費(fèi)贈送的特征數(shù)據(jù)；以及(a)當(dāng)所述特征數(shù)據(jù)和從視頻信號源(1)產(chǎn)生的所述免費(fèi)贈送的特征數(shù)據(jù)相等時，把邏輯輸出裝置設(shè)置為“真”，并停止執(zhí)行所述比較；或者(b)否則，把邏輯輸出裝置設(shè)置為“假”并且繼續(xù)執(zhí)行對視頻信號源(1)的所述比較。
14.如權(quán)利要求13所述的系統(tǒng)，其特征在于還包括在接近所述節(jié)目結(jié)束時間時監(jiān)視所述視頻信號源(1)，比較所述特征數(shù)據(jù)和從視頻信號源(1)產(chǎn)生的免費(fèi)贈送的特征數(shù)據(jù)；以及(a)當(dāng)所述特征數(shù)據(jù)與從視頻信號源(1)產(chǎn)生的所述免費(fèi)贈送的特征數(shù)據(jù)相等時，把邏輯輸出裝置設(shè)置為“假”，并停止執(zhí)行所述比較；或者(b)否則，把邏輯輸出裝置設(shè)置為“真”并且繼續(xù)執(zhí)行對視頻信號源(1)的所述比較。
15.如權(quán)利要求13所述的系統(tǒng)，其特征在于，所述處理器(6)還可工作地連接到裝置(7)，以便進(jìn)一步處理所述節(jié)目，所述邏輯輸出裝置的“真”值使所述處理器將所述裝置(7)接通至所述節(jié)目的頻道上。
16.如權(quán)利要求15所述的系統(tǒng)，其特征在于還包括所述邏輯輸出裝置的“假”值使所述處理器(6)關(guān)閉所述裝置以進(jìn)行其它處理。
17.一種計算機(jī)程序產(chǎn)品，當(dāng)執(zhí)行所述計算機(jī)程序產(chǎn)品時，使可編程裝置能夠起到權(quán)利要求1中定義的系統(tǒng)的作用。
全文摘要
一種處理電子廣播節(jié)目信息的目錄的方法，其中目錄包括關(guān)于節(jié)目的信息，包括節(jié)目的開始時間和結(jié)束時間，節(jié)目由從所述節(jié)目中搜集的特征數(shù)據(jù)來表示，其中所述處理包括監(jiān)視廣播節(jié)目視頻輸入，以便尋找來自節(jié)目的開始和/或結(jié)束時間的特征數(shù)據(jù)，從而控制節(jié)目的顯示和/或記錄。
文檔編號H04B1/06GK1513260SQ02811221
公開日2004年7月14日 申請日期2002年6月3日 優(yōu)先權(quán)日2001年6月6日
發(fā)明者N·迪米特羅瓦, L·阿格尼霍特里, T·F·M·麥吉, M 麥吉, N 迪米特羅瓦, 衲嶧秈乩 申請人:皇家菲利浦電子有限公司