用于在多媒體系統中發送自適應媒體結構的方法和裝置制造方法
【專利摘要】一種根據本發明的用于在多媒體系統中發送自適應媒體結構的方法，包括如下步驟：將媒體片段單元(MFU)以及媒體處理單元(MPU)組合為單一的資源，以及發送包含在CI(組成信息)中的資源，其中，MFU包括代表AU(訪問單元)類型或切片類型的類型信息。
【專利說明】用于在多媒體系統中發送自適應媒體結構的方法和裝置
【技術領域】
[0001] 本發明涉及多媒體系統，特別是在多媒體系統中用于發送自適應媒體組成 (composition)的方法和裝置。
【背景技術】
[0002] 得益于數字技術的發展，廣播和通信融合時代已經到來，從而圖像、音樂和其他娛 樂媒體的消費環境已經通過諸如互聯網協議電視（IPTV)、智能電視等廣播和通信融合媒體 得到擴展。這樣的消費環境已經從用戶通過使用消費媒體來接收用于一個媒體的單向服務 的環境，進步為用戶能夠同時消費各種信息的環境，這得益于終端和通信技術的發展，并且 媒體消費（通過媒體消費消費者只獲得期望的信息）已經變得普遍。
[0003] 均衡約束數學規劃（MathematicalProgrammingwithEquilibrium Constraints，MPEC)-2系統是用于廣播的系統，并定義用于對包括視頻和音頻的媒體和多 個傳輸進行同步的系統。在MPEG-2系統中，自由地將新的節目添加到媒體和刪除現有的 節目，而且媒體以188字節為單位被復用以用于音頻和視頻數據的同步。因此，每當編譯 (make)新的編解碼器時，MPEG-2系統需要解復用以編輯和再現一些節目并且修訂傳輸的 規范。
[0004] MPEG-4系統定義用于存儲文件的系統。在MPEG-4系統中的傳輸數據包括元數 據和媒體數據。元數據定義用于編輯和引用外部資源的數據。與MPEG-2系統不同，對于 MPEG-4系統添加新節目和刪除現有節目并不容易。MPEG-4系統將更新所有元數據。每當 編譯新的編碼器/解碼器（編解碼器）時，像MPEG-2-樣，MPEG-4系統也修訂傳輸的規范。
[0005] 如上所述，傳統多媒體系統不能動態地添加或刪除節目，不能在不了解編解碼器 的情況下在傳送層的傳送過程或存儲層的存儲過程期間處理媒體，并且未提出能夠在傳送 過程和存儲過程中共用的容器格式（containerformat)。
【發明內容】
[0006] 技術問題
[0007] 本發明提供一種在多媒體系統中用于發送自適應媒體組成的方法和裝置，以用于 動態地添加和刪除節目。
[0008] 本發明提供：在多媒體系統中，在不了解編解碼器的情況下用于在傳送或存儲層 中發送自適應媒體組成的方法和裝置。
[0009] 此外，本發明提供一種在多媒體系統中用于發送包括能夠在傳送和存儲中共用的 存儲空間的自適應媒體組成的方法和裝置。
[0010] 技術方案
[0011] 根據本發明的一方面，提供了一種在多媒體系統中發送自適應媒體組成的方法。 該方法包括：將包含在訪問單元（AU)中的媒體片段單元（MFU)以及媒體處理單元（MPU)配 置為一個資源；并且將已配置的資源插入到組成信息（Cl)中并發送該CI，其中，所述MFU 包括指示MFU是與AU類型相對應還是與切片（slice)類型相對應的類型信息。
[0012] 根據本發明的另一方面，提供了一種在多媒體系統中發送自適應媒體組成的方 法。該方法包括：將包含在訪問單元（AU)中的媒體片段單元（MFU)以及包含關于MFU的 數目的信息的媒體處理單元（MPU)配置為一個資源；并且將已配置的資源插入到組成信息 (Cl)中并發送該CI。
[0013] 根據本發明的另一方面，提供了一種在多媒體系統中發送自適應媒體組成的裝 置。該裝置包括：控制器，其將媒體片段單元（MFU)以及媒體處理單元（MPU)配置為一個資 源；以及發送器，其根據所述控制器的控制，將已配置的資源插入到組成信息（Cl)中并發 送該Cl,其中，所述MFU包括指示MFU是與訪問單元（AU)類型相對應還是與切片類型相對 應的類型信息。
[0014] 根據本發明的另一方面，提供了一種在多媒體系統中發送自適應媒體組成的裝 置。該裝置包括：控制器，其將包含在訪問單元（AU)中的媒體片段單元（MFU)以及包含關 于MFU的數目的信息的媒體處理單元（MPU)配置為一個資源；以及發送器，其根據所述控制 器的控制，將已配置的資源插入到組成信息（Cl)中并發送該CI。
[0015] 技術效果
[0016] 本發明提出在不了解編解碼器的情況下能夠在傳送或存儲層中處理媒體的自適 應媒體組成。
【專利附圖】
【附圖說明】
[0017] 根據結合附圖的以下詳細描述，本發明的實施例的以上和其他方面、特征和優點 將更加明顯，在附圖中：
[0018] 圖1示出根據本發明當需要MPU和MFU的設計時的操作；
[0019] 圖2示出根據本發明的第三實施例的使用EDC和開始碼的操作；
[0020] 圖3示出根據本發明的第四實施例的使用MPU之內的資源標識符和序列號的邏輯 資源配置；
[0021] 圖4示出根據本發明的第五實施例的在封閉G0P(cl〇SedG0P)中提供呈現信息的 方法,在該封閉GOP中，IDR畫面、B畫面和P畫面按解碼次序排列；
[0022] 圖5示出根據本發明的第五實施例的在封閉GOP中提供解碼次序的方法，在該封 閉GOP中IDR畫面、B畫面和P畫面根據呈現次序來排列；
[0023] 圖6示出根據本發明的第五實施例的在開放G0P(openG0P)中提供呈現次序信息 的方法，在該開放GOP中CRA畫面、B畫面和P畫面根據解碼次序來排列；
[0024] 圖7示出根據本發明的第五實施例的在開放GOP中提供解碼次序信息的方法，在 該封閉GOP中CRA畫面、B畫面和P畫面根據呈現次序來排列；
[0025] 圖8示出根據本發明的第六實施例的在MPU組成中查找在其處執行再現的時間并 且執行再現的方法；
[0026] 圖9示出根據本發明的第八實施例的MPU框的組成；
[0027] 圖10示出根據本發明的第九實施例的mfu_Box(mfu框）的組成；
[0028] 圖11示出根據本發明的第十實施例的mpu_Box(mpu框）和mfu_Box(mfu框）的 組成；
[0029] 圖12是示出根據本發明的實施例的用于生成然后發送自適應媒體組成的發送裝 置的配置的框圖；以及
[0030] 圖13是示出根據本發明的實施例的用于接收媒體內容的接收裝置的配置的框 圖。
【具體實施方式】
[0031] 下文中，將參照附圖描述本發明的各實施例。在以下描述中，將只對理解根據本發 明的操作所需的部分進行描述，并且除了這些部分之外的其他部分將省略，以便不會模糊 本發明的主題。
[0032] 本發明的主要主題是：提供媒體片段單元（MFU)和媒體處理單元（MPU)的設計以 及使用該MFU和MPU進行傳送和存儲的操作，從而從多媒體系統中動態地添加和刪除節目、 在不了解編解碼器的情況下在傳送或存儲層中發送自適應媒體組成、以及提供包括能夠對 傳送和存儲共用的容器格式的自適應媒體組成。因此，將詳細描述根據本發明的實施例的 一種用于在多媒體系統中發送/接收自適應媒體組成的方法和裝置。
[0033] 為了幫助理解本發明，貫穿本說明書使用的多個傳送單元的概念將在下文中描 述。
[0034] 術語"切片"可以指在帶形（bandshape)中劃分一個幀的劃分單元。
[0035] 術語"訪問單元（AU) "可以指如下傳送單元：當與一個幀相對應的媒體數據被編 碼時，該傳送單元定義編碼的媒體數據的長度。
[0036] 術語"媒體片段單元（MFU) "小于或等于該AU并且可以指能夠由任意媒體解碼器 獨立地解碼（或消費）的傳送單元。
[0037] 術語"媒體處理單元（MPU) "為包括至少一個MFU的傳送單元，并且可以指包括諸 如時間信息、重要性以及隨機訪問位置（RAP)信息的各種功能信息中的至少一個的復合媒 體內容的傳送單元。
[0038] 術語"資源（asset) "為包括至少一個MPU的傳送單元，并且可以指接收單元結構 的傳送單元，所述單元結構適用于包括諸如音頻、視頻、文本、文件、微件（widget)等的各 種類型的多媒體源（即，多媒體數據）的屬性以配置復合媒體內容。
[0039] 目前為止已討論的封裝層和傳送層的操作如下。
[0040] 首先，在編解碼器層中配置的編碼的媒體數據被編碼到網絡抽象層單元（Network AbstractionLayerUnit,NALU)中，并被發送到MPEG媒體傳輸（MMT)層（或更低層）。
[0041] MMT層將編碼的媒體數據配置在MFU的傳送單元中然后配置在MPU的傳送單元中， 以便配置一個資源。
[0042] 資源包括多個資源，并被配置為由表示資源之間的關系的MMT-組成信息（Cl)在 時間上/空間上表示和消費，然后資源被發送到接收器一側。通過信令消息，MMT-CI被周 期性地發送到接收器一側，從而接收器一側通過該MMT-CI能夠知道哪些內容正在被廣播 或者能夠被再現。
[0043] 接收器一側參照通過傳送層周期性地發送的MMT-CI，從多個資源中只提取和使用 必要的資源。
[0044] [表 1]
[0045]
【權利要求】
1. 一種在多媒體系統中發送自適應媒體組成的方法，所述方法包括： 將包含在訪問單元（AU)中的媒體片段單元（MFU)以及媒體處理單元（MPU)配置為一 個資源；并且 將已配置的資源插入到組成信息（CI)中并發送該CI， 其中，所述MFU包括指示MFU是對應于AU類型還是對應于切片類型的類型信息。
2. 如權利要求1所述的方法，其中配置MFU包括： 當所述MFU對應于AU類型時，將所述MFU配置為不包含：指示在AU之內所述MFU的優 先級的優先級信息，以及指示所述MFU與其他MFU之間的依賴關系的依賴計數器信息。
3. 如權利要求1所述的方法，其中配置MFU包括： 當所述MFU不是對應于AU類型時，將所述MFU配置為在MFU的組成信息中包含：指示 在AU之內所述MFU的優先級的優先級信息，以及指示所述MFU與其他MFU之間的依賴關系 的依賴計數器信息。
4. 如權利要求1所述的方法，其中當所述MFU不是對應于AU類型時，所述類型信息包 括所述MFU在AU之內所處的位置信息。
5. -種在多媒體系統中發送自適應媒體組成的方法，所述方法包括： 將包含在訪問單元（AU)中的媒體片段單元（MFU)以及包括關于MFU的數目的信息的 媒體處理單元（MPU)配置為一個資源；并且 將已配置的資源插入到組成信息（CI)中并發送該CI。
6. 如權利要求5所述的方法，其中所述MPU包括MFU中的每個的標識信息。
7. 如權利要求5所述的方法，其中所述MFU包括檢測MFU的邊界的開始碼信息以及驗 證有效性的錯誤檢測代碼（EDC)信息。
8. 如權利要求5所述的方法，其中所述MPU包括所述資源的標識信息和MPU的序列號 中的至少一個。
9. 如權利要求5所述的方法，其中所述MPU包括：指示包含在MPU中的媒體數據是包 含時間屬性還是非時間屬性的屬性信息。
10. 如權利要求5所述的方法，其中所述MPU包括所述AU的呈現時間信息和解碼時間 信息中的至少一個。
11. 如權利要求5所述的方法，其中所述MPU包括解碼器設置信息。
12. 如權利要求11所述的方法，其中所述解碼器設置信息包括序列參數集（SPS)和圖 像參數集（PPS)中的至少一個。
13. -種用于在多媒體系統中發送自適應媒體組成的裝置，所述裝置包括： 控制器，其將媒體片段單元（MFU)以及媒體處理單元（MPU)配置為一個資源；以及 發送器，其根據所述控制器的控制，將已配置的資源插入到組成信息（CI)中并發送該 CI， 其中，所述MFU包括指示MFU是對應于訪問單元（AU)類型還是對應于切片類型的類型 信息。
14. 如權利要求13所述的裝置，其中當MFU對應于AU類型時，所述控制器將所述MFU 配置為不包含：指示在AU之內所述MFU的優先級的優先級信息，以及指示所述MFU與其他 MFU之間的依賴關系的依賴計數器信息。
15. 如權利要求13所述的裝置，其中當MFU不是對應于AU類型時，所述控制器進行配 置以在所述MFU的組成信息中包含：指示在AU之內所述MFU的優先級的優先級信息，以及 指示所述MFU與其他MFU之間的依賴關系的依賴計數器信息。
16. -種用于執行權利要求5至12之一所述的方法的裝置。
【文檔編號】H04N21/2362GK104380754SQ201380033666
【公開日】2015年2月25日 申請日期:2013年7月1日 優先權日:2012年6月29日
【發明者】柳誠烈, 樸勍模, 黃承吾, 宋在涓 申請人:三星電子株式會社