專利名稱:存取元數據的簡化方法和裝置的制作方法
技術領域:
本發明涉及存取與包含多媒體數據的文件或所述文件的一部分相聯系的元數據的簡化方法和裝置,尤其是描述所述多媒體數據的內容和/或在包含多媒體數據的多個文件中查找所述文件或文件部分的方法和裝置,其中元數據最初與所述的多媒體數據多路復用。
關于光記錄有相同的數字目前在一個單面單層的DVD盤中能存儲5GByte,而作為當前的DVD記錄器的后繼者的DVR記錄器將允許在一個相應的盤中存儲高達35GByte。而且,每一面可以使用二層甚至多層并且可以將這些應用于光盤的兩面。最后,能夠將多個光盤組合在一個專用盒中。
由于不再可能僅僅通過查看錄像帶/光盤和其封面上的某些標注來在用戶的書架上找到音像制品,這種龐大的數據量需要新的方法去組織音像制品,也需要新的查找內容的方法和存取特定音像制品的方法。對這個問題的一個可能的解決方案是使用記錄的內容的所謂元數據,元數據定義為關于數據的數據。
元數據可以嵌入在多媒體內容自身之中。比如,ISO/IEC13818-1所確定的MPEG-2系統標準定義了與音頻和視頻流多路復用的節目說明信息(PSI)。同樣,用于數字電視信號的傳輸的DVB標準確定了符合MPEG-2傳輸流多路復用的DVB中包括的服務信息(DVB-SI)。
Cecarelli等人在MULTIMEDIA COMPUTING AND SYSTEM,1999年的IEEE INTERNATIONAL CONFERENCE IN FLORENCE,ITALY,1999年6月7-11日,LOS ALAMITOS,CA,USA,IEEE COMPUT.SOC,US,1999年6月7日的多媒體計算與系統的第1082-1085,XP010342599,ISBN0-7695-0253-9”發表的“家庭多媒體系統有關個人視頻圖書館”一文中描述了一個系統,在該系統中,從多媒體內容中抽出元數據并與多媒體內容分開存儲在多媒體數據庫管理系統(MM-DBMS)中。所描述的系統將多媒體內容存儲在磁帶上并將MM-DBMS數據庫存儲在硬盤上。這個辦法的目標是基于歸檔系統的硬盤,在其中,抽取的元數據一直存儲在該裝置中,而不是通過可移動媒體用于元數據交換,像光記錄所要求的那樣。
因此,本發明要解決的問題是使多路復用到多媒體內容本身的元數據信息更易于供自動或電子存取使用,尤其是供基于元數據的查找,瀏覽或顯現引擎使用。
根據本發明,元數據從多媒體內容多路復用分組中抽取出來。將抽取的元數據集合在一起并且分析它們以產生元數據實體,該實體通過參考內容本身來修正。從得到的元數據實體和內容參考對中形成描述符流并將之與包含多媒體內容的文件分開存儲。
按這種方法,附加在多媒體內容上的元數據允許進行高效,快速自動地進行內容標注,內容定位和自動或電子存取。
有利之處在于,本發明能夠用來存取尋址記錄在存儲媒介上的一個文件或文件部分的元數據。在這種情況下,在包括多媒體內容的文件的記錄期間完成對元數據的處理。尤其是,對于記錄的MPEG-2傳輸流的數據,允許存取元數據而無須重新分析整個流。
可以在文件或文件部分的記錄過程中完成對元數據的處理。這樣做的優點在于基于元數據的查找立即就可以使用元數據。
然而,也可以方便地在記錄過程之后在脫機通道中完成對元數據的處理,例如,如果將MPEG傳輸流照原樣記錄而未多路分解該基本流。
此外,也可以方便地通過從另一個信息源中檢索的元數據,比如通過由服務提供商經因特網傳輸的元數據來完成從多媒體內容多路復提取的元數據。
另外,可以通過來自用戶的輸入,例如利用鍵盤來補充從多媒體內容多路復用抽取的元數據。這樣允許用戶進行個人標注。
由以下的描述會得到本發明更有利的實施例。
圖1表示包含元數據的分開描述符流的處理過程。
圖1中,符合包括多媒體數據和DVB-SI數據的MPEG-2傳輸流DVBTS的DVB表示多媒體內容多路復用。多媒體數據可以包括任意的數據,尤其是音頻和視頻數據。DVB-SI數據包括帶有描述符的元數據,該描述符封裝在SI部分和SI表之中并且可能被展寬以跨過多個MPEG-2傳輸分組,在傳輸流多路復用中該描述符不必連續。更詳細的參考資料見MPEG-2系統標準ISO/IEC 13818-1。
記錄引擎RE從MPEG-2傳輸分組中收集所有屬于給定的DVB-SI描述符的數據字節并且記下MPEG-2傳輸流中DVB-SI描述符變為有效的位置參考。存儲描述符數據和開始位置參考。經常收集描述符指的是替換(更新)一個已經在以前的同一個MPEG-2傳輸流找到的描述符。這意味著前一個描述符變為無效。然后記錄引擎在已經存儲的前一個DVB-SI描述符的開始位置參考旁存儲結束位置參考。
在MPEG-2傳輸流的末尾,記錄引擎核查所有存儲的DVB-SI描述符并向每一個到目前為止還沒有失效的描述符存儲結束位置。開始位置參考和結束位置參考以及存儲的MPEG-2傳輸流本身的參考構成了所謂的內容參考或內容定位器。排列所有的描述符和內容參考對以構成描述符流DS,該描述符流由存儲系統SS與MPEG-2傳輸流DVBTS分開存儲。為達到此目的,可以使用任何的存儲系統,比如光存儲裝置或硬盤驅動器。通常,描述符流DS和MPEG-2傳輸流DVBTS分別存儲在同一個存儲媒介上的相應的分開的文件DSF,DVBTSF中。然而,為了某些應用,將它們存儲在不同的存儲媒介中也是很有用的。
以后可以通過描述符和內容參考對來修正描述符流。除MPEG-2以外的其它信息源OMS可以用來檢索元數據。尤其是可以通過自動特征抽取來產生元數據,在圖中用虛線箭頭來表示,或者可以從因特網下載元數據。也可以使用用戶界面UI來添加用戶標注UA,所述的用戶界面包括圖形顯示器和一些諸如遙控,或鍵盤之類的手工輸入裝置或聲音輸入裝置。用戶界面也可以用來發起元數據查詢MQ,比如存取一個特定的多媒體文件或者存儲的DVB傳輸流文件中包括的場景。
元數據查詢的結果,即,相應的描述符和內容參考對返回給用戶界面UI,尤其是如果查詢的結果導致一個以上的命中。為通知用戶查詢結果,可以使用相應的顯示器,比如顯示查找到的文件的表或使用聲音輸出。在用戶從多個找到的文件中選出一個文件后,就向回放引擎PE提供所選擇的文件的內容參考以便回放包括由內容參考CR描述的請求文件的DVB傳輸流。
然而,如果作為對查詢的回應,僅僅找到了一個文件,可將內容參考CR和包括找到的文件的相應DVB傳輸流直接提供給回放引擎PE以便跳過用戶選擇過程。
與修正完整的描述符和內容參考對不同,還可以只更新,修改或替換描述符或者內容參考。
還可以通過完全獨立于上述的記錄引擎的過程產生描述符流。如果多媒體內容沒有攜帶嵌入的元數據,還能夠以相同的格式存儲描述符流,但是從帶外的數據(比如,用戶標注,因特網下載,特征提取)產生描述符和內容參考對。
描述符流中的描述符還可以用不同的編碼來存儲。例如,將DVB-SI描述符從它們的二進制編碼轉換為XML編碼是很有益的。其它的傳輸編碼或存儲編碼可以保留。
對一些DVB-SI描述符(比如,EPG數據)來說,弄清是它們從哪一個表中得來或從何種環境中抽取出的是非常重要的。在這些情況下,將該背景信息與描述符,內容參考對一起存儲是很有益的。
本發明有以下優點分開存儲的描述符流允許通過基于元數據的查找,瀏覽或顯現引擎來方便,快速地存取元數據信息。
分開的描述符流可以作為多媒體多路復用存儲在同一個盤中。如果該盤是可互換的媒介(比如,光盤),那么存儲在描述符流中的抽取的元數據就與存儲的多媒體內容一起變得可以進行互換。這意味著抽取的元數據和多媒體數據形成了可互換的包。
除了存儲在同一個盤上,或作為替換,分開的描述符流也可以存儲在不同的或多個不同的盤上以允許互換抽取的元數據。對于歸檔功能和其它種類的元數據處理過程來說這樣做是很有利的。
與基于Cecarelli等人所描述的多媒體數據庫管理系統(MM-DBMS)的系統相比,所提出的在記錄期間直接存儲描述符流有以下優點。與MM-DBMS的插入操作通常涉及的插入和索引開銷相比,它消耗的系統性能更少,比如由于實時性的限制。如果MM-DBMS的數據庫要存儲在可互換的媒介上,那么在插入盤期間的數據庫輸入操作和彈出盤期間的數據庫輸出操作就會禁止。換句話說,該公知的MM-DBMS可能不適合可互換的媒介。
只要傳輸多媒體多路復用中的DVB-SI描述符,它們就變為有效。它們既可以在通過有著相同的描述符類型但有著不同值的描述符的傳輸時變為無效,也可以在傳輸結束時變為無效。有了允許加入有效性信息(開始,結束)的描述符流使用起來更方便。
來源不同的描述符可能會有不同的編碼。分開描述符流的存儲為描述符提供了一種具有統一編碼的方法(例如,XML)。
可以通過脫機過程來產生描述符或作為帶外的數據來傳輸描述符。分開的描述符流提供了一種將所有這些描述符一起存儲的可能性。
本發明可以用于各種各樣的電子多媒體內容標注或內容定位,例如,與DVR標準化,元數據,內容標注,內容定位,個人視頻錄像機,個人數字錄像(音)機,光存儲器,硬盤存儲器,家庭服務器,網絡存儲器相聯系。
權利要求
1.一種簡化存取與包含多媒體數據的文件或所述的文件的一部分相聯系的元數據,尤其是描述所述多媒體數據的和/或在包含多媒體數據的多個文件中查找所述文件或文件部分的方法,其中元數據最初與所述的多媒體數據進行多路復用,其特征在于從多媒體內容多路復用(DVBTS)中抽取元數據;收集抽取的元數據;分析收集的元數據以形成元數據實體;通過對內容自身的參考來修正元數據實體;從得到的元數據實體和內容參考對形成描述符流(DS);將所述描述符流(DSF)與包括多媒體內容的文件分開存儲(SS)。
2.根據權利要求1中所述的方法,其特征在于包括多媒體內容的文件或文件部分記錄在存儲媒介中(SS)并且其中使用元數據來尋址所述記錄的文件或文件部分(DVBTS)。
3.根據權利要求2中所述的方法,其特征在于在文件或文件部分的記錄過程中完成對元數據的處理。
4.根據權利要求2中所述的方法,其特征在于在記錄過程之后在脫機通道中完成對元數據的處理。
5.根據權利要求1到4中任何一項權利要求所述的方法,其特征在于,由從另一個信息源(OMS)檢索的元數據來完善從多媒體內容多路復用中抽取的元數據。
6.根據權利要求1到4中任何一項權利要求所述的方法,其特征在于,通過來自用戶的輸入,比如使用鍵盤(UI)來自補充從多媒體內容多路復用中抽取的元數據。
7.根據權利要求1到6中任何一項權利要求所述的方法,其特征在于,多媒體數據和元數據的所述多路復用與符合MPEG-2傳輸流(DVBTS)的DVB相對應,并且多路復用到多媒體內容中的元數據與DVB-SI信息相對應。
8.一種簡化存取與包含多媒體數據的文件或所述的文件的一部分相聯系的元數據,尤其是描述所述多媒體數據的內容和/或在包含多媒體數據的多個文件中查找所述文件或文件部分的裝置,其中元數據與所述的多媒體數據多路復用,其特征在于從多媒體內容多路復用(DVBTS)中抽取元數據的裝置;收集抽取的元數據的裝置;分析和處理收集的元數據以形成元數據實體的裝置;通過對內容自身的參考來修正元數據實體的裝置;從得到的元數據實體和內容參考對中形成描述符流(DS)的裝置;將所述描述符流(DSF)與包括多媒體內容的文件分開存儲(SS)的裝置。
全文摘要
可獲得的個人視頻記錄存儲媒介容量持續增長。可以用元數據來組織這些記錄,查找內容和存取特定的記錄。如果元數據嵌入在多媒體內容自身之中,象與音頻流和視頻流多路復用以形成MPEG-2傳輸流的DVB特定服務信息一樣,基于該元數據的查找要求對存儲的全部的多媒體內容進行查找,這樣做效率低并且費時。根據本發明,元數據被收集,分析并處理以形成元數據實體,該實體通過內容本身的參考來修改。由得到的元數據實體和內容參考對來形成描述符流(DS)并將之與包括多媒體內容的文件分開存儲。在這種情況下,對MPEG-2傳輸流來說,可以存取元數據而無須重新分析整個流。
文檔編號H04N5/76GK1393882SQ0212439
公開日2003年1月29日 申請日期2002年6月21日 優先權日2001年6月22日
發明者拉爾夫·奧斯特曼, 李輝, 邁諾爾夫·布拉瓦, 馬克羅·溫特 申請人:湯姆森許可貿易公司