專利名稱:屏幕控制方法及其設備的制作方法
技術領域:
本發明涉及一種屏幕控制方法、屏幕控制設備,特別涉及一種包含語義瀏覽功能的屏幕控制方法、屏幕控制設備。
背景技術:
具有情節的視頻圖像節目如電影、電視劇和記錄片,通過廣播節目如地面波/衛星廣播和CATV(Community Antenna Television,有線電視),網絡系統如因特網,或通過DVD和其它數據包介質,作為商品進行提供。觀看者通過購買它們獲得所需的這種視頻圖像節目。這種視頻圖像節目被稱作并處理為視頻圖像標題。
在觀看這種具有情節的視頻圖像標題時,在觀看視頻圖像標題的特征視頻圖像之前觀看一下預覽不僅對了解內容有用,而且為決定是否購買特征視頻圖像提供有效參考。因此,在用于當前視頻圖像播放器和DVD播放器的一些影碟介質上,預先準備好的、可讀的預覽視頻圖像與特征視頻圖像進行分開記錄。
另外,一些DVD影碟介質提供有引入每個段落內容的概要視頻圖像,并且允許直接訪問指定段落的開始點的功能。
而且,將多個視頻圖像標題作為一個庫存儲在家庭服務器上近來已成為可能。使具有用于標題選擇的靜止圖像和影片圖像的縮略圖的瀏覽器可用作在計算機上操作的系統已經進行過嘗試,并且已有一些這種瀏覽器被提供。
然而,在預覽圖作為與特征視頻圖像分開準備的短視頻圖像如上所述記錄在影碟介質上的結構中,預覽視頻圖像的場景和特征視頻圖像的場景沒有相互對應,并且沒有讓觀看者直接轉到特征視頻圖像中與在預覽視頻圖像中找到的場景對應的位置,并且在那個位置觀看特征視頻圖像的功能。
傳統上,附隨于各種介質的預覽視頻圖像的圖像并不一定包含在特征視頻圖像內,因此即使當觀看者在預覽視頻圖像中發現感興趣的視頻圖像部分,觀看者也不能在對應位置回放特征視頻圖像。
甚至在上述影碟介質中提供的,引入每個段落內容的概要視頻圖像并且允許直接訪問指定段落的開始點的功能,也不能滿足用戶在掌握整個特征視頻圖像的流動的同時從所需位置觀看特征視頻圖像的需要。
同時,具有用于選擇多個視頻圖像標題的縮略圖的瀏覽器沒有用于顯示情節的流程和構架的結構,因此并不一定適合用來提供對當前所顯示視頻圖像或靜止圖像的將來發展的充分了解。
而且,通常,傳統的接收/回放設備如電視接收器、視頻圖像播放器和DVD播放器既沒有用于顯示情節的流動和發展的結構,也沒有允許選擇任意回放位置的功能。
發明內容
考慮到本領域技術的上述狀況,本發明的一個目的是提供一種屏幕控制方法、屏幕控制設備,它們顯示整個情節的流動和發展,并且允許選擇任意回放位置,而且還允許在特征視頻圖像和預覽視頻圖像之間進行自由切換。
為了解決如上所述的傳統技術問題,本發明的一種屏幕控制方法,應用于在屏幕上顯示由連續視頻圖像組成的特征視頻圖像的連續視頻圖像顯示階段,和在屏幕上順序顯示通過摘取特征視頻圖像的預定部分獲取的多個所摘取視頻圖像集的所摘取視頻圖像顯示階段,包括如下步驟在所摘取視頻圖像顯示階段,顯示至少具有第一視頻圖像顯示區域、第一視頻圖像變化顯示區域和第一切換輸入區域的第一屏幕;在第一視頻圖像顯示區域內,顯示包括多個根據當前視頻圖像記錄位置進行回放的所摘取視頻圖像集的預覽視頻圖像;在第一視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖、附加在圖上位于與每個所摘取視頻圖像對應的視頻圖像記錄位置的標志、和一個游標,該游標隨著時間的流逝不斷更新當前顯示在第一視頻圖像顯示區域內的所摘取視頻圖像的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置;在第一切換輸入區域內顯示第一按鈕,它允許輸入一個指令來在停止和保留當前視頻圖像記錄位置的同時從第一屏幕切換到在連續視頻圖像顯示階段中顯示的第二屏幕;在連續視頻圖像顯示階段,顯示至少具有第二視頻圖像顯示區域、第二視頻圖像變化顯示區域和第二切換輸入區域的第二屏幕;在第二視頻圖像顯示區域內,顯示根據當前視頻圖像記錄位置進行回放的特征視頻圖像;在第二視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和一個游標,該游標隨著時間的流逝不斷更新當前顯示在第二視頻圖像顯示區域內的特征視頻圖像的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到特征視頻圖像的任意視頻圖像記錄位置;在第二切換輸入區域內顯示第二按鈕,該第二按鈕允許輸入一個指令來在停止和保留當前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕;和根據每個在第一按鈕或第二按鈕顯示期間輸入的指令,在所摘取視頻圖像顯示階段和連續視頻圖像顯示階段之間進行切換,以顯示第一屏幕或第二屏幕。
本發明的一種屏幕控制設備,適合用于在連續視頻圖像顯示階段顯示第二屏幕,其中,連續視頻圖像顯示階段將由連續視頻圖像組成的特征視頻圖像作為第二屏幕進行顯示,及在所摘取視頻圖像顯示階段顯示第一屏幕,其中,所摘取視頻圖像顯示階段將通過摘取特征視頻圖像的預定部分獲取的多個所摘取視頻圖像集作為第一屏幕進行順序顯示,包括用于在第一屏幕中至少顯示第一視頻圖像顯示區域、第一視頻圖像變化顯示區域和第一切換輸入區域的裝置;用于在第一視頻圖像顯示區域內,顯示包括多個根據當前視頻圖像記錄位置進行回放的所摘取視頻圖像集的預覽視頻圖像的裝置;用于在第一視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和附加在圖上位于與每個所摘取視頻圖像對應的視頻圖像記錄位置的標志的裝置;用于顯示游標的裝置,該游標附加在視頻圖像變化圖上,隨著時間的流逝不斷更新當前顯示在第一視頻圖像顯示區域內的所摘取視頻圖像的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置;用于在第一切換輸入區域內顯示第一按鈕的裝置,該按鈕允許輸入一個指令來在停止和保留當前視頻圖像記錄位置的同時從第一屏幕切換到在連續視頻圖像顯示階段中顯示的第二屏幕;用于在第二屏幕中至少布置第二視頻圖像顯示區域、第二視頻圖像變化顯示區域和第二切換輸入區域的裝置;用于在第二視頻圖像顯示區域內,顯示根據當前視頻圖像記錄位置進行回放的特征視頻圖像的裝置;用于在第二視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖的裝置;用于顯示游標的裝置,該游標附加在視頻圖像變化圖上,隨著時間的流逝不斷更新當前顯示在第二視頻圖像顯示區域內的特征視頻圖像中的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到特征視頻圖像中的任意視頻圖像記錄位置;用于在第二切換輸入區域內顯示第二按鈕的裝置,該第二按鈕允許輸入一個指令來在停止和保留在指令時當前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕;和用于根據每個在第一按鈕或第二按鈕顯示期間輸入的指令,在所摘取視頻圖像顯示階段和連續視頻圖像顯示階段之間進行切換,以顯示第一屏幕或第二屏幕的裝置。
圖1是本發明的視頻圖像回放設備的一個實施例的結構方框圖;圖2是圖1所示的語義瀏覽器裝置的結構方框圖;圖3示出本發明的視頻圖像回放設備的狀態轉換;圖4是示出本發明的視頻圖像回放設備的一個實施例的每個操作階段和每個控制屏幕的結構的說明圖;圖5是本發明的視頻圖像回放設備的一個實施例的操作流程圖;圖6示出一個在視頻圖像標題選擇階段顯示的示例性屏幕;圖7示出一個在預覽視頻圖像模式選擇階段顯示的示例性屏幕;圖8示出一個在視頻圖像瀏覽觀看階段顯示的示例性屏幕;圖9是示出語義圖結構的說明圖;圖10是標記處理基本部分的結構方框圖;圖11是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖12是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖13是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖14是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖15是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖16是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖17是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;圖18是本發明的視頻圖像回放設備的另一個實施例的操作流程圖;
圖19是示出應用于本發明的語義代碼的示例性結構的說明圖;圖20A到20C示意性地示出一個使用語義代碼產生概要視頻圖像的示例;圖21A到21G示意性地示出一個使用語義代碼產生多個概要視頻圖像的示例;圖22示意性地示出另一個使用語義代碼產生概要視頻圖像的示例;圖23A到23F示意性地示出一個使用語義代碼產生多個常規版本的示例。
具體實施例方式
現在將結合附圖對本發明的優選實施例進行詳細的描述。下面的實施例是一些用于實現本發明基本結構和效果的優選實施例,因此可能存在適于技術構造的各種限制。然而,需要說明的是,除非下面說明中特別指出之外,本發明的范圍不限于這些實施例。
通過在語義瀏覽屏幕內顯示語義圖,其中,語義圖在通過具有GUI(graphical user interface,圖形用戶接口)功能的瀏覽界面觀看具有特定情節的視頻圖像標題如電影、電視劇或記錄片,或其預覽視頻圖像時,能夠幫助直觀地掌握情節的平靜化和復雜化,并且能夠幫助輕松地掌握情節和事件的發展,從而通過語義瀏覽屏幕實現用戶和系統之間信息的交互式發送和接收,本發明提供一種允許新型交互式視頻圖像瀏覽如檢索預定的內容部分或交替回放預覽視頻圖像和特征視頻圖像的方法、設備和記錄介質。
在描述實施例之前,先進行術語的定義和說明。照例,下面術語包括本發明的技術構造。因此,每個術語僅應用于本發明,并且它的意思可能與在傳統技術中使用的不同。
鏡頭是連續影片圖像的最小單位。它等同于電影的一個膠片鏡頭。鏡頭可能是不連續的,包括通過分裂一個場景和靜止圖像的鏡頭而產生的多個鏡頭。片斷(segment)可以作為比鏡頭更低的層次進行定義。
場景是幾個鏡頭的集合,并且是構成情節語義的影片圖像單位。
記錄位置信息是表示記錄介質上記錄的場景和鏡頭在記錄介質上的記錄位置的信息。它包括所有與記錄位置相關的信息,如絕對扇區號、絕對軌道號、時間代碼、絕對記錄號等。
特征視頻圖像是構成每個視頻圖像標題(例如,一個廣播節目或一個電影/電視劇)的多個場景和鏡頭的集合,并且在時間廣度上跨越視頻圖像標題的開始到結束。通過廣播節目或通過網絡發布的視頻圖像標題或在盒式磁帶或基于數據包的記錄介質如光盤中記錄并提供的視頻節目標題通常由這種特征視頻圖像構成。
所摘取視頻圖像是從特征視頻圖像部分摘取的視頻圖像,并且預覽視頻圖像是與目的對應的短視頻圖像如摘要,它通過連接這種所摘取視頻圖像而構成。也就是,預覽視頻圖像至少包括一個通過從構成特征視頻圖像的場景和鏡頭中摘取并連接語義評價值和視頻圖像特征評價值中的一個或兩者滿足預定條件的這種場景和鏡頭而產生的視頻圖像。
因此,預覽視頻圖像可以通過僅連接從特征視頻圖像中摘取的所摘取場景,或通過僅連接從特征視頻圖像中摘取的所摘取鏡頭,或通過以混合方式連接從特征視頻圖像中摘取的所摘取鏡頭和場景,進行構成。與構成預覽視頻圖像相同的視頻圖像一定存在于特征視頻圖像。
也就是,構成預覽視頻圖像的所摘取場景和所摘取鏡頭與構成特征視頻圖像的場景和鏡頭一一對應。在本發明中,這種特性用于執行預覽視頻圖像和特征視頻圖像之間的自由切換,即瀏覽。
模式是與每個應用或目的對應的預覽視頻圖像的類型。因此,如果存在多個應用和目的類型,那么就存在多個模式類型。
這種模式可以是梗概模式,精彩場面模式、關鍵詞模式、面向演員模式等。對于一個特征視頻圖像,存在多種類型的預覽視頻圖像,如梗概模式的預覽視頻圖像、精彩場面模式的預覽視頻圖像、關鍵詞模式的預覽視頻圖像和面向演員模式的預覽視頻圖像。
視頻圖像的語義評價是對情節中視頻圖像的影響的評價。語義評價通過評價器進行,或者按照預定標準自動進行。在這個評價中視頻圖像的評價作為視頻圖像的語義評價信息進行提供。視頻圖像的語義評價信息是索引值的一種模式。
因此,在本發明中,視頻圖像的語義評價信息處理為“所提供條件”。
雖然視頻圖像的語義評價信息通常為每個場景作提供,但是它也可以為每個鏡頭作提供。
視頻圖像特征評價是對視頻圖像的特征的評價,例如,對存在/不存在演員講話和特殊效果如強聲學效果的評價。視頻圖像特征的評價值作為視頻圖像特征評價信息進行提供。視頻圖像的特征評價信息是索引值的一種模式。
該評價通過評價器進行,或者評價值按照預定標準進行自動計算。作為選擇,評價器驗證存在/不存在一個或多個視頻圖像特征項,并且根據作為所提供條件的該存在/不存在信息,評價值進行自動計算。
雖然視頻圖像的特征評價信息通常是為每個鏡頭提供的,但是它也可以為每個場景作提供。
元信息是與每個視頻圖像標題(例如,一個廣播節目或一個電影/電視劇)相關的信息集合。元信息通過聯合如下信息(1)、(2)和(3)而構成。
(1)特征視頻圖像評注信息1.1)對整個特征視頻圖像的介紹性或說明性文本的文本數據、靜止圖像數據或音頻數據;和1.2)對通過連接多個場景而構成的每個段落的介紹性或說明性文本的文本數據、靜止圖像數據或音頻數據;(2)鏡頭/場景信息2.1)構成特征視頻圖像的每個鏡頭的記錄位置信息;2.2)每個場景的記錄位置信息;2.3)每個鏡頭的評價值和屬性信息;和2.4)每個場景的評價值和屬性信息;(3)關聯信息3.1)場景號和構成場景的每個鏡頭的鏡頭號之間的鏈接信息;和3.2)對每個場景、每個鏡頭或場景和鏡頭的混合物隨視頻圖像的變化各個評價值的綜合值。
除信息(1)、(2)和(3)之外,元信息還可以包括如下信息(4)的至少一項。
(4)記帳指令信息4.1)包括對整個特征視頻圖像作為一個單元進行記帳的記帳級別的指令信息;4.2)包括對特征視頻圖像按照計量價格,即按照引入數量(時間長度)或回放時間長度進行記帳的記帳級別的指令信息;4.3)包括對整個特征視頻圖像按照段落、場景或鏡頭進行記帳的記帳級別的指令信息;4.4)包括對從特征視頻圖像處理而來的視頻圖像(例如,預覽視頻圖像)進行記帳的記帳級別的指令信息;和
4.5)包括對元信息自身進行記帳的記帳級別的指令信息;元信息通過下面語義分值或語義代碼作舉例說明。
語義分值(semantic score)是采用表形式的信息,在該表中,語義評價值(場景分值)作為所提供條件與構成視頻圖像標題的特征視頻圖像的所有場景關聯在一起,同時視頻圖像特征評價值(鏡頭分值)與所有鏡頭或至少部分鏡頭關聯在一起,并且這些信息至少與每個場景和每個鏡頭的記錄位置信息或時間流逝信息(時間代碼)關聯在一起,并作為各自項進行記錄。另外,每個場景和每個鏡頭的各種屬性也記錄在這個表中。
根據語義分值的內容,對應的場景從特征視頻圖像進行摘取,并且鏡頭從所摘取的場景中進行選擇并連接,以組織預覽視頻圖像。另外,還執行記帳操作。
采用這種方式,語義分值是特征視頻圖像的元信息的一種類型。它用作構成下面將要描述的交互式語義瀏覽屏幕,它允許從特征視頻圖像編輯和自動生成預覽視頻圖像,并且直觀地表示情節過程。
語義代碼是采用代碼形式的信息,它通過選擇至少部分語義分值的所有項,并對其內容進行編碼而構成。因此,例如,在語義代碼中,所選場景中所選鏡頭的記錄位置信息或時間流逝信息和視頻圖像特征評價的結果作為各自代碼進行描述。這種信息可以容易地通過網絡進行發布。
這種語義代碼作為每個視頻圖像標題的元信息進行編輯,并且為通過視頻圖像回放設備執行自動生成預覽視頻圖像和直觀表示情節過程的交互式瀏覽提供有效的數據代碼。例如,根據語義代碼,對特征視頻圖像的對應鏡頭進行摘取和連接,以形成預覽視頻圖像。另外,還執行記帳操作。
階段是表示本發明的視頻圖像回放方法的每個處理過程,或本發明的視頻圖像回放設備的每個操作狀態的概念。階段之間進行轉換。存在視頻圖像標題引入記錄階段、視頻圖像標題選擇階段、預覽視頻圖像模式選擇階段、視頻圖像瀏覽觀看階段、特征視頻圖像觀看階段和記帳階段。
語義瀏覽是在回放預覽視頻圖像或特征視頻圖像時允許用戶指定任意回放位置或移到任意回放位置,并且在任意時候在預覽視頻圖像和特征視頻圖像之間進行切換/轉換的功能。而且,語義瀏覽包括允許用戶為預覽視頻圖像更新閾值和設置任意公開級別的功能。
語義瀏覽根據使用如后所述的語義瀏覽屏幕的用戶的輸入進行執行。特別,它使用后面所述的語義瀏覽器軟件(語義瀏覽器裝置)通過后面所述的選擇按鈕和語義圖進行執行。
語義瀏覽器屏幕是與語義瀏覽功能相關的屏幕,并且是為每個階段提供的控制屏幕。因此,它有多個屏幕結構。例如,在作為顯示在視頻圖像瀏覽觀看階段的控制屏幕的語義瀏覽屏幕中,將顯示后面所述的一個窗口、多個選擇按鈕和一個語義圖(主圖和放大圖)。在該窗口中,顯示縮略圖、預覽視頻圖像和特征視頻圖像。
語義圖主要顯示在作為顯示在視頻圖像瀏覽觀看階段的控制屏幕的語義瀏覽屏幕內。語義圖用于以時間系列圖的形式在屏幕上顯示對情節的復雜化或平靜化預先進行任意設置的每個場景的評價值(即,索引值的一個示例)。情節的過程或事件的發展以圖的形式進行顯示。語義圖由主圖、游標和放大圖構成。
主圖是語義圖的主要部分,并且以分段圖的形式顯示通過以預定次序順序綜合各個鏡頭或場景的索引值而產生的值。
放大圖是以放大視圖的形式顯示主圖局部的圖。放大圖作為分段圖進行顯示。比例能由用戶進行任意指定。
用戶可以在主圖和放大圖上指定任意位置。語義瀏覽根據至少指定位置信息進行執行。
瀏覽界面功能是在語義瀏覽過程中執行基于用戶和系統之間的指令和顯示的信息的交互式發送和接收的操作,或管理這個操作的功能。瀏覽界面功能至少通過用于在屏幕上顯示圖標、按鈕和圖并且檢測/鑒別來自操作圖標、按鈕和圖的用戶的輸入的軟件(瀏覽界面裝置)進行實現。
語義瀏覽器軟件(語義瀏覽器裝置)適于實現語義瀏覽,并且作為計算機可讀/可執行程序構成,包括瀏覽界面功能(瀏覽界面裝置)的軟件、語義瀏覽屏幕(控制屏幕)的管理軟件,和各種處理裝置的控制軟件。
在描述本發明的視頻圖像回放設備的結構之前,先參照圖3概要說明一下本發明的視頻圖像回放方法。
在本發明的視頻圖像回放方法中,視頻圖像信號處理過程包括與處理階段對應的多個階段。控制屏幕為各個階段進行顯示,并且處理通過這些控制屏幕進行。這些階段之間進行轉換。
各個階段表示本發明的視頻圖像回放設備的操作中的各個階段。
如圖3所示,這些階段是視頻圖像標題引入記錄階段Ph1,在此階段,從外界引入各種視頻圖像標題的特征視頻圖像,并且將它們記錄到大容量存儲單元;視頻圖像標題選擇階段Ph2,在此階段,用戶從所引入的各種視頻圖像標題中選擇所需視頻圖像;預覽視頻圖像模式選擇階段Ph3,在此階段,用戶選擇對所選視頻圖像標題的所需預覽視頻圖像模式,并且觀看預覽視頻圖像;視頻圖像瀏覽觀看階段Ph4,在此階段,執行各種類型的視頻圖像瀏覽,并且更新摘取條件;特征視頻圖像全屏觀看階段Ph5,在此階段,以全屏方式觀看特征視頻圖像;和記帳階段Ph6,在此階段,對特征視頻圖像和預覽視頻記帳進行記帳。
需要說明的是,圖3的階段架構是一個示例,因此省略或另增一個或多個階段,是可能的。例如,在已經完成從外界引入視頻圖像標題并且立即確定所選視頻圖像標題的情況下,就可以忽略視頻圖像標題引入記錄階段Ph1和視頻圖像標題選擇階段Ph2。類似地,在系統不要執行記帳的情況下,就可以忽略記帳階段Ph6。
在視頻圖像標題引入記錄階段Ph1,顯示第一階段控制屏幕G1,它是用于該階段操作的控制屏幕。在第一階段控制屏幕G1中,提供有一個用于標題引入指令輸入i1的按鈕,以接收來自用戶的標題引入指令輸入i1。根據由此接收的指令輸入i1,該階段轉到用于讓用戶選擇視頻圖像標題的視頻圖像標題選擇階段Ph2。
在引入視頻圖像標題時系統要執行記帳的情況下,該階段轉到記帳階段Ph6。然后,當記帳處理開始或結束時,該階段再次轉到視頻圖像標題引入記錄階段Ph1。
在視頻圖像標題選擇階段Ph2,顯示第二階段控制屏幕G2,它是用于該階段操作的控制屏幕。在第二階段控制屏幕G2中,提供有一個用于標題選擇指令輸入i2的按鈕,以接收來自用戶的標題選擇指令輸入。在接收到標題選擇指令輸入之后,該階段轉到預覽視頻圖像模式選擇階段Ph3。
在用戶想要在視頻圖像標題選擇階段Ph2選擇標題之后立即觀看特征視頻圖像的情況下,用戶能輸入一個指令,以轉到特征視頻圖像全屏觀看階段Ph5。當作出該指令輸入時,該階段轉到特征視頻圖像全屏觀看階段Ph5。
在選擇視頻圖像標題時系統要執行記帳的情況下,該階段轉到記帳階段Ph6。然后,當記帳處理開始或結束時,該階段再次轉到視頻圖像標題選擇階段Ph2。
在預覽視頻圖像模式選擇階段Ph3,顯示第三階段控制屏幕G3,它是用于該階段操作的控制屏幕。該階段接受來自視頻圖像瀏覽觀看階段Ph4的轉換。
在第三階段控制屏幕G3中,提供有一個用于視頻圖像顯示的窗口,和一個用于指令輸入i3的按鈕,以接收指令輸入i3。
當用戶在觀看第三階段控制屏幕G3時,輸入所需預覽視頻圖像的模式指定輸入i31時,由指定輸入i31(參見圖2)指示的模式的預覽視頻圖像顯示在該窗口內。該預覽視頻圖像根據為每個模式預定的缺省閾值進行組織和回放。
在用戶觀看預覽視頻圖像和購買視頻圖像標題的情況下,用戶作出用作購買指令和觀看階段指令的輸入i32。然后,該階段轉到記帳階段Ph6,并執行記帳。此后,該階段轉到視頻圖像瀏覽觀看階段Ph4或特征視頻圖像全屏觀看階段Ph5。
用作購買指令和觀看階段指令的輸入i32是通過單擊屏幕上“S.圖”按鈕(參見圖7)來作出的。
通常,觀看預覽視頻圖像是免費的。然而,在系統要為回放預覽視頻圖像執行記帳的情況下,該階段轉到記帳階段Ph6。然后,當記帳處理開始或結束時,該階段再次轉到預覽視頻圖像模式選擇階段Ph3。
在視頻圖像瀏覽觀看階段Ph4,顯示第四階段控制屏幕G4,它是用于該階段操作的控制屏幕,并且接收指令輸入i4。在第四階段控制屏幕G4中,提供有一個用于回放和顯示特征視頻圖像或預覽視頻圖像的窗口和一個作為本發明特征的語義圖的顯示區域。在語義圖中,顯示有一個圖表、剪輯位置和一個游標。圖標顯示整個特征視頻圖像的流動。剪輯位置表示圖表中預覽視頻圖像的每個模式的多個剪輯位置。游標在隨時間的流逝進行移動時顯示當前回放位置。而且,游標可以移動到圖表中的所需位置。
除上述之外,在第四階段控制屏幕G4中,還提供有各種用于指令輸入i4的按鈕和用于視頻圖像回放的開始、暫停、繼續、停止、倒帶、快進等操作的視頻圖像控制按鈕。通過作出各種指令輸入i4,用戶可以享受各種瀏覽和觀看(特征視頻圖像和預覽視頻圖像的瀏覽),后面將對此作詳細描述。
當指示回放預覽視頻圖像時,該模式的預覽視頻圖像在窗口內進行回放。如果在回放預覽視頻圖像期間存在游標移動輸入,那么可以確定指示從那個模式的預覽視頻圖像的一部分轉到另一部分進行瀏覽。因此,在轉到相應部分之后,繼續回放那個模式的預覽視頻圖像。通過在窗口內回放預覽視頻圖像期間單擊窗口內部,所回放視頻圖像可以擴展到整個屏幕。
當指示回放特征視頻圖像時,特征視頻圖像將在窗口內進行回放。如果在該回放期間存在游標移動輸入,那么可以確定指示從特征視頻圖像的一部分轉到另一部分進行瀏覽。因此,在轉到相應部分之后,繼續回放特征視頻圖像。通過單擊屏幕上的“整個視頻圖像”按鈕(圖8),執行特征視頻圖像的回放。另外,通過在窗口內回放特征視頻圖像期間單擊窗口內部,所回放視頻圖像可以擴展到整個屏幕。
在視頻圖像瀏覽觀看階段Ph4,根據來自用戶的指令輸入,可以作出用于更新(限制或緩和)作為預覽視頻圖像的對應模式的視頻圖像摘取條件的“閾值”的輸入。
當輸入更新“閾值”時,“閾值”進行更新,并且基于新“閾值”的那個模式的預覽視頻圖像進行回放。
同時,如果指令輸入i4的內容是指示從預覽視頻圖像到特征視頻圖像的切換瀏覽,或指示從特征視頻圖像到預覽視頻圖像的切換瀏覽,窗口內的視頻圖像在保持當前回放位置的同時,每次均進行切換。
如果指令輸入i4的內容是指示特征視頻圖像全屏顯示,該階段從瀏覽階段轉到特征視頻圖像全屏觀看階段Ph5。通過在回放整個視頻圖像時單擊窗口內的任意位置,發出特征視頻圖像全屏顯示的指令。
如果指令輸入i4的內容是指示返回到預覽視頻圖像模式選擇階段Ph3,該階段轉到預覽視頻圖像模式選擇階段Ph3。
在特征視頻圖像全屏觀看階段Ph5,特征視頻圖像在整個屏幕上進行顯示。
在如上所述該階段直接從視頻圖像標題選擇階段Ph2轉換而來的情況下,該階段轉到用于記帳處理的記帳階段Ph6。當記帳處理開始或結束時,該階段再次轉到特征視頻圖像全屏觀看階段Ph5。
在特征視頻圖像全屏觀看階段Ph5,接收用于開始瀏覽的指令或用于返回到視頻圖像標題引入記錄階段Ph1的指令的指令輸入i5。如果指令輸入i5的內容是指示開始瀏覽,該階段保持其上所提供的當前回放位置信息,轉到視頻圖像瀏覽觀看階段Ph4。
如果指令輸入i5的內容是指示返回到視頻圖像標題引入記錄階段Ph1,那么停止當前回放,并且該階段轉到視頻圖像標題引入記錄階段Ph1。
現在對本發明的視頻圖像回放設備的一個實施例進行描述。
圖1是本發明的視頻圖像回放設備的一個實施例的結構方框圖。圖2是圖1所示的語義瀏覽器裝置的結構方框圖。
如圖1所示,本發明的視頻圖像回放設備VP1具有語義瀏覽器裝置C1、接收區C10、記錄/回放電路C11、高速存儲單元C12、驅動機制C13、解密區C14、顯示單元C15、遠端控制器C16和記帳區C18。
另外,視頻圖像回放設備VP1還能包括驅動機制C19和預讀存儲器C20。
驅動機制C13具有讀寫頭和轉動機制區。大容量存儲介質M1如DVD+RAM這樣的可重寫DVD介質在驅動機制C13上進行載入,以記錄和回放數據。
大容量存儲介質M1是一種記錄介質,在其上,記錄或可記錄視頻圖像信號(在本發明中,為方便起見,與視頻圖像相關的信號和與音頻相關的信號統稱為“視頻圖像信號),和與視頻圖像信號的記錄位置相關的記錄位置信息。具有對記錄位置信息進行記錄的格式的光學記錄介質或帶狀或盤狀磁性記錄介質適合用作該記錄介質。
這種記錄位置信息以光盤/光磁盤介質或硬盤介質的扇區號或軌道號的形式進行記錄。記錄位置信息在回放時作為當前地址進行輸出,并且在確定需要開始回放的目標地址時進行搜索。
在視頻圖像磁帶介質中,與斜向軌道相關的絕對軌道號或時間代碼可訪問地記錄在斜向軌道或縱向軌道上。
在驅動機制C19中,數據載體單元如內存棒或內存卡單元進行載入。
語義瀏覽器裝置C1在各種預覽模式下從特征視頻圖像自動生成預覽視頻圖像并執行回放。另外,語義瀏覽器裝置C1執行瀏覽如預覽視頻圖像和特征視頻圖像的鏈接回放,并且執行各種控制操作。語義瀏覽器裝置C1的結構和操作將在后面參照圖2進行描述。
接收區C10連接到網絡系統如因特網和無線廣播如衛星數字廣播或地面波數字廣播或有線廣播如CATV的廣播系統,并且接收各種視頻圖像標題的特征視頻圖像及其元信息數據。接收區C10由調諧電路或AGC電路、檢波電路,和多路信號分離器組成。
接收區C10,由來自語義瀏覽器C1的控制信號進行控制,分離已經執行接收處理的數據,并將數據發送到記錄/回放電路C11。
元信息為每個視頻圖像標題進行準備,并且包含用于指定視頻圖像標題的數據、對構成視頻圖像標題的每個鏡頭的鏡頭評價值(即,鏡頭分值)、對每個場景的場景評價值(即,場景分值)、每個鏡頭的時間代碼、每個場景的時間代碼、屬于每個場景的鏡頭列表、視頻圖像標題的縮略圖數據和對視頻圖像標題的屬性和記帳信息。
元信息數據作為通過以代碼的形式組織這些數據而產生的語義代碼進行提供。
現在將對用在本發明中的作為元信息的一個示例的語義代碼的結構和使用進行描述。
圖19是以數據邏輯結構的形式示出作為元信息的語義代碼的結構的說明圖。
語義代碼由與頭信息相關的代碼(A)、包括與視頻圖像標題評注信息相關的代碼的特征視頻圖像信息(B)和包括特征視頻圖像的鏡頭/場景信息的主代碼(C)。具體地說,包括與視頻圖像標題評注信息相關的代碼的特征視頻圖像信息(B)是用于指定特征視頻圖像的信息,并且主代碼(C)包括與鏡頭或場景相關的預定信息。
A.頭信息a1與程序相關的通用信息(程序名、程序代碼、廣播頻道、廣播日期和時間、程序種類等),和特征視頻圖像信息的項010的地址指針q1或特征視頻圖像信息的項011的地址指針q2a2屬性的項信息000=屬性的存在/不存在標志001=應用或預覽模式a3用于執行主代碼選擇指令的選擇指令信息;根據該選擇指令信息,可以選擇性指定主代碼(C)中的一個或兩個或更多場景文件(C1)。
B.特征視頻圖像信息010=整個特征視頻圖像的介紹性或說明性文本的文本數據、靜止圖像數據(縮略圖數據)或音頻數據011=通過連接多個場景而構成的每個段落的介紹性或說明性文本的文本數據、靜止圖像數據(縮略圖數據)或音頻數據
C.主代碼一個場景文件、一個鏡頭文件和一個關聯文件記錄在主代碼中。
C1.場景文件;為每個場景記錄如下信息020=場景號#和指針p021=場景評價值Sn022=時間代碼(開始點ts,結束點te)C2.鏡頭文件;為每個鏡頭記錄如下信息030=鏡頭號#031=鏡頭評價值Sh,其它屬性(應用等)032=時間代碼(開始點ts,結束點te)該時間代碼032可以指定一個鏡頭的一個部分。例如,在僅指定開始點ts和結束點te其中一個或開始點ts和結束點te具有相同值的情況下,顯示一幅靜止圖像。
C3.關聯文件040=場景號Sn#和鏡頭號Sh#的鏈接數據在這種情況下,包含在場景號Sn#的一個場景中的多個鏡頭的鏡頭號Sh#1、Sh#2等鏈接到該場景號。該鏈接數據040是以加權排序次序或時間次序的鏈接數據,并且可以使用“null”表示忽略。
另外,如下所述的與記帳指令相關的代碼G可以進行連接。
G.記帳指令代碼050=包含對整個特征視頻圖像作為一個單元進行記帳的記帳級別的指令信息;051=包含對特征視頻圖像按照計量價格,即按照引入數量(時間長度)或回放時間長度進行記帳的記帳級別的指令信息;052=包含對整個特征視頻圖像按照段落、場景或鏡頭進行記帳的記帳級別的指令信息;053=包含對從特征視頻圖像處理而來的視頻圖像(例如,預覽視頻圖像)進行記帳的記帳級別的指令信息;054=包含對元信息自身進行記帳的記帳級別的指令信息;在上述描述中,具有不同意思的多個鏡頭可以根據鏡頭評價值031的在場人員屬性描述包含到鏈接數據040中。
另外,為了節省語義代碼的數據量,鏡頭文件C2的數據可以限制到僅為包含在具有預定或更高場景評價值021(在場景文件內)的場景中的鏡頭。
作為鏡頭文件C2的數據,可以包括所有場景020的所有鏡頭030和這些鏡頭的評價值031。特別,作為授權數據,它是有效的。
在場景文件C1中,每個場景評價值021和時間代碼022與該場景的場景號020相關聯。隸屬于該場景號020的指針p表示關聯文件C3的對應鏈接數據040的首地址。
采用這種數據結構,由于要進行選擇的場景通過檢查場景評價值021進行確定,隸屬于該場景號020的指針p能夠使場景快速進入到相應鏈接數據040。
在鏈接數據040中,如果對于一個場景號Sn#存在多個鏡頭號Sh#n(n=1,2,...),在產生語義代碼時,最好根據鏡頭評價值031對多個鏡頭號進行排序,并且將它們作為鏈接數據040進行記錄。
采用這種數據結構,當從場景號020的場景中選擇代表性鏡頭時,使用場景號020的指針p和排列在鏈接數據040中的鏡頭號Sh#n的鏡頭的首鏡頭可以完成關聯文件C3中到相應鏈接數據040的跳轉。因此,降低了鏡頭選擇時間。
而且,根據所選鏡頭號,開始點ts和結束點te從與鏡頭文件C2中的鏡頭號一致的鏡頭030的對應時間代碼032進行讀出。根據該時間代碼032,對應鏡頭視頻圖像從特征視頻圖像中進行摘取。
另外,在通過調整預覽視頻圖像的時間長度而要從場景號020的一個場景選擇兩個或多個鏡頭的情況下,可以跳轉到相應鏈接數據040,并且從排列在鏈接數據040中的鏡頭中的首鏡頭順序取出必要數目的鏡頭。因此,可以降低鏡頭選擇時間。
上述技術用于在根據場景評價值選擇場景之后選擇屬于對應場景的鏡頭和用于摘取從開始點到結束點的鏡頭視頻圖像。然而,除此之外,上述技術還可以用于摘取每個場景的視頻圖像。在每個場景的視頻圖像的情況下,根據場景文件C1中的場景評價值021選擇場景,并且讀出那個場景的時間代碼022(開始點ts和結束點te)。根據該時間代碼022,從特征視頻圖像摘取對應場景視頻圖像。類似地,它可以用于以混合方式摘取場景視頻圖像和鏡頭視頻圖像。
例如,對于如圖20A所示的特征視頻圖像,其中多個鏡頭a、b、c、d、e、f和g構成概要視頻圖像,構成概要視頻圖像的多個鏡頭a、b、c、d、e、f和g在鏡頭文件C3中定義,并且根據用于執行主代碼選擇指令的選擇指令信息a3選擇的、主代碼中的場景文件C1和鏡頭文件C2通過關聯文件C3相互關聯,如圖20B所示。因此,概要視頻圖像(a,e,g)可以如圖20C構成。在這種情況下,用于關聯場景文件A1和鏡頭a、用于關聯場景文件A2和鏡頭e和用于關聯場景文件A3和鏡頭g的定義在關聯文件C3中作出。
當提供多個場景文件C1、鏡頭文件C2和關聯文件C3時,可以從同一標題中產生多個概要視頻圖像。例如,對于如圖21A所示的特征視頻圖像,其中多個鏡頭a、b、c、d、e、f和g構成每個演員的精彩場面概要,并且構成每個演員的精彩場面概要的多個鏡頭a、b、c、d、e、f和g在鏡頭文件C3中定義,并且根據用于執行主代碼選擇指令的選擇指令信息a3選擇的、主代碼(C)中的三個場景文件C1和鏡頭文件C2通過關聯文件C3相互關聯,如圖21B到21D所示。因此,演員A、B和C的精彩場面概要(a,e,g),(b,f,g)和(c,d,g)分別如圖21E到21G構成。在這種情況下,用于關聯構成演員A的精彩場面概要(a,e,g)的鏡頭a、e和g和場景A1、A2和A3,用于關聯構成演員B的精彩場面概要(b,f,g)的鏡頭b、f和g和場景B1、B2和B3,和用于關聯構成演員C的精彩場面概要(c,d,g)的鏡頭c、d和g和場景C1、C2和C3的定義在關聯文件C3中作出。
由于如圖22所示多個關聯文件C3和鏡頭文件C2被一個場景文件C1提供,因此可以產生具有各種不同特征的概要,例如根據記帳級別實現時間和內容的區分。
由于多個關聯文件被一個場景文件C1提供,因此可以產生各種不同的特征視頻圖像版本。具體地說,受限模式的選項通過頭信息的a3(屬性項信息)進行提供,并且通過使用主代碼的C1(場景文件)、C2(鏡頭文件)和C3(關聯文件)的描述數據,在忽略不要顯示部分的同時,執行回放。主代碼的C1(場景文件)、C2(鏡頭文件)和C3(關聯文件)指定不要顯示的部分。由于觀看者在購買標題時進行選擇和指定,因此提供具有相同特征視頻圖像數據,而適合觀看者年齡、宗教和其他條件的內容成為可能。例如,對于如圖23A所示的特征視頻圖像,其中多個鏡頭a、b、c根據國家或文化的不同、或收視率,進行選擇性的限定,多個鏡頭a、b、c在鏡頭文件C3中定義,并且根據用于執行主代碼選擇指令的選擇指令信息a3選擇的、主代碼(C)中的一個場景文件C1和一個鏡頭文件C2通過多個關聯文件C3相互關聯,如圖23B所示。因此,各種不同的特征視頻圖像版本可以如圖23C到23F進行產生。
在這種情況下,用于關聯由場景文件C1定義的特征視頻圖像的場景和鏡頭a且置空與鏡頭b和c的關聯的關聯文件A、用于關聯由場景文件C1定義的特征視頻圖像的場景和鏡頭b且置空與鏡頭a和c的關聯的關聯文件B、用于關聯由場景文件C1定義的特征視頻圖像的場景和鏡頭c且置空與鏡頭a和b的關聯的關聯文件C和用于置空由場景文件C1定義的特征視頻圖像的場景與所有鏡頭a、b和c的關聯的關聯文件D在關聯文件C3中進行定義。
視頻圖像語義評價方法用來評價場景。例如,表示情節復雜化的場景具有(+)值,而表示平靜化的場景具有(-)值,并且度由絕對值0.1到1.0的實數值表示。復雜化意味著新問題的出現和由此產生的人物心理復雜化。平靜化意味著問題的解決和由此產生的人物心理釋放和宣泄。
大多數電影和電視節目的預覽顯示表示復雜化的場景,如問題的出現和新情景或新人物關系的發展,以吸引觀眾,而不顯示表示平靜化的場景如問題的解決和結論。因此,作為場景選擇的缺省閾值,反映復雜化場景的場景評價值Sn(+)設為Sn(+)≥0.6,并且反映平靜化場景的場景評價值Sn(-)設為Sn(-)≤-0.8。在電影或電視節目的情況下,情節環境的說明或劇情的開始在介紹部分進行寬松的提供。因此,介紹部分的缺省閾值降低0.1點,從而反映復雜化場景的場景評價值Sn(+)設為Sn(+)≥0.5,并且反映平靜化場景的場景評價值Sn(-)設為Sn(-)≤-0.7。
在場景評價值Sn因此作為實數值進行提供的情況下,峰值場景的位置要通過一個算法進行計算。
場景評價值還可以作為二進制值(0,1)進行提供。在這種情況下,Sn=1表示高分值場景和峰值場景。通過將場景評價值作為二進制值(0,1)進行提供,數據結構和算法處理可以得到簡化。另外,可以進行顯示的視頻圖像部分能夠在發送方進行清晰的定義。場景評價值Sn=1的意思是不需要根據語義分值,但是能由發送方進行有意選擇。例如,考慮到肖像權和收視率發送方不想顯示的場景即使具有高場景分值,也要從概要視頻圖像中進行刪除。相反,也存在考慮到市場發送方想顯示但其語義分值低的場景。
場景評價值Sn還可以作為整數值(0,1,2,3)進行提供。在這種情況下,Sn=1表示高分值場景,Sn=2表示峰值場景,并且Sn=3表示戲劇性場景。由于場景評價值Sn在此作為整數值(0,1,2,3)進行提供,因此可以指定鏡頭中的必要表現秒數和位置,并且根據場景類型改變到鏡頭文件C2的鏈接。
而且,場景評價值Sn還可以作為表示公開級別的整數值(0,1,2,3,4)進行提供。在這種情況下,通過用在發送方編碼階段進行簡單等級劃分而產生的整數值(0,1,2,3,4)取代計算分值,然后選擇與公開級別對應的場景,可以降低執行時的負擔。等級還可以考慮高分值場景、峰值場景和戲劇性場景進行劃分。
在通過摘取部分特征視頻圖像(即來自特征視頻圖像的鏡頭視頻圖像)組織預覽視頻圖像的情況下,例如,在從兩小時的特征視頻圖像中產生一到兩分鐘的概要視頻圖像的情況下,如果實際上使用特征視頻圖像的鏡頭或場景,那么就不可能采用很多剪輯。因此,在編碼階段,鏡頭文件C2規定鏡頭中可以公開的部分。因此,發送方可以在鏡頭中選擇性地只提供真正想顯示的剪輯。很多用作商業預覽的視頻圖像剪輯的長度為一到兩秒或更少,并且包含緊張場面的視頻圖像。這些只是從幾秒到幾十秒的特征視頻圖像鏡頭剪輯出的一部分。通常,鏡頭的開頭經常包含說明性或介紹性視頻圖像并且鏡頭的結束部分經常包含最打動人心的表演或問題的解決。因此,作為一個用于從鏡頭或場景自動摘取概要視頻圖像的算法,從結束處剪輯出一部分所規定秒數是有效的。
記錄/回放電路C11將視頻圖像標題,從接收區C10輸入的數據,的元信息數據發送到高速存儲單元C12,并且使高速存儲單元C12記錄元信息數據。記錄/回放電路C11將視頻圖像標題的特征視頻圖像發送到驅動機制C13。該特征視頻圖像數據通過驅動機制C13中提供的讀/寫頭記錄并存儲到大容量存儲介質M1上。
記錄/回放電路C11還將從接收區C10輸入的視頻圖像標題的特征視頻圖像數據直接發送到解密區C14,或者通過驅動機制C13從大容量存儲介質M1讀出特征視頻圖像,并且將它發送到解密區C14。
而且,記錄/回放電路C11還將單獨從接收區C10輸入的視頻圖像標題的元信息數據作為數據C11a直接發送到語義瀏覽器裝置C1,或者從高速存儲單元C12讀出元信息數據,并且將它作為數據C11a發送到語義瀏覽器裝置C1。
高速存儲單元C12由具有高速尋位屬性的,中等存儲能力的硬性磁盤單元構成,并且存儲每個視頻圖像標題的元信息數據mdt1、mdt2、...mdt6。視頻圖像標題的元信息數據mdt1、mdt2、...mdt6如上所述通過記錄/回放電路C11從接收區C10進行輸入。
作為選擇,元信息數據mdt1、mdt2、...mdt6通過下面將要描述的驅動機制C19、語義瀏覽器裝置C1和記錄/回放電路C11從存儲元信息數據mdt1、mdt2、...mdt6的內存棒M2進行輸入。
輸入到高速存儲單元C12的元信息數據mdt1、mdt2、...mdt6作為元信息文件進行記錄。這些元信息文件能自由地進行讀取和更新。
分散元信息數據并且將元信息中每個視頻圖像標題的縮略圖等的圖像數據等作為縮略圖組sdt1到sdt6進行記錄和存儲,也是可能的。
而且,如果大容量存儲介質M1和驅動機制C13適于高速訪問,將元信息數據mdt1、mdt2、...mdt6與特征視頻圖像數據一起記錄和存儲到大容量存儲介質M1上而忽略高速存儲單元C12是可能的。
在每個元信息數據不包含如縮略圖的圖像數據的情況下,使用半導體內存如DRAM或閃存是可能的。
驅動機制C13在其中載入或內置大容量存儲介質M1,并且具有從大容量存儲介質M1讀出作為回放信號的、根據記錄位置信息進行訪問的視頻圖像信號的功能。
在大容量存儲介質M1是光盤介質如DVD或硬性磁盤介質如HDD的情況下,提供有轉動驅動系統的機制如馬達和讀寫頭,并且它們響應來自語義瀏覽器裝置C1的控制信號動作,以將從記錄/回放電路C11接收的記錄數據寫到大容量存儲介質M1,或將所讀出的數據輸出到記錄/回放電路C11。
例如,在回放的情況下,當前地址在回放期間根據來自讀/寫頭的輸出信號不斷地進行輸出,并且一接收到從外界輸入的目標地址,讀/寫頭就移動到該地址位置。
解密區C14通過記錄/回放電路C11接收經過加密的特征視頻圖像數據,編輯特征視頻圖像,以產生解密特征視頻圖像數據,并且將解密特征視頻圖像數據輸出到語義瀏覽器裝置C1。解密區C14由一個通過未示出的中央處理器(微計算機)讀取和執行的程序構成,并且響應來自語義瀏覽器裝置C1的控制指令(沒有顯示)動作。
語義瀏覽器裝置C1由一個可通過未示出的中央處理器(微計算機)讀取和執行的程序構成。語義瀏覽器裝置C1發出控制指令C1d到接收區C10,以控制視頻圖像信息的引入,并且發出一條控制指令到驅動機制C13,以控制對大容量存儲介質M1的訪問。另外,語義瀏覽器裝置C1發出一條控制指令和信號C11a到記錄/回放電路C11,以通過記錄/回放電路C11間接控制高速存儲單元C12。
而且,語義瀏覽器裝置C1通過記錄/回放電路C11接受由接收區C10接收和分離的元信息數據和信號C11a,或者接受記錄在高速存儲單元C12的元信息和信號C11a。語義瀏覽器裝置C1還接受來自解密區C14的解密特征視頻圖像數據,并且根據從遠端控制器C16接收的輸入信號C16a將特征視頻圖像或預覽視頻圖像顯示在顯示單元C15上。
預覽視頻圖像是具有預覽功能的視頻圖像,其中,連接從特征視頻圖像數據摘取的預定部分的所摘取視頻圖像。
另外,語義瀏覽器裝置C1發出控制指令C1e到記帳區C18,以執行在回放特征視頻圖像或預覽視頻圖像之前的批量記帳,或執行基于特征視頻圖像或預覽視頻圖像的回放時間或回放次數的計量價格(meter-rate)記帳。
語義瀏覽器裝置C1將預覽視頻圖像數據作為信號C1b臨時記錄到由閃存等構成的預讀存儲器C20,并且以特定時間差重新讀取預覽視頻圖像。語義瀏覽器裝置C1因此執行先進先出的控制,從而能夠消除連接視頻圖像部分時的視頻圖像的中斷。
在上述描述中,元信息數據從接收區C10進行接收,或從高速存儲單元C12進行取出。然而,通過驅動機制C19作為信號M2a取出記錄在內存棒M2上的元信息也是可能的。
也能將從接收區C10接收的元信息數據記錄和保存到能夠寫的內存棒。
下面將參照圖2對語義瀏覽器裝置C1的結構和操作進行詳細描述。語義瀏覽器裝置C1(具體地說,語義瀏覽器軟件)包含GUI功能,并且適合用于通過廣播程序或通過因特網接受作為語義代碼的元信息數據,將元信息數據記錄到能高速訪問的介質如硬盤或DVD,回放語義代碼和從特征視頻圖像自動產生的梗概模式、精彩場面模式或每個演員模式的預覽視頻圖像,回放特征視頻圖像,允許特征視頻圖像和預覽視頻圖像之間的瀏覽,和執行上述各種類型的記帳。
如圖2所示,語義瀏覽器裝置C1具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、標題引入裝置Pg3、標題控制裝置Pg4、縮略圖回放裝置Pg5、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8、游標控制裝置Pg9,和預覽/特征視頻圖像切換裝置Pg10。
語義瀏覽器裝置C1還具有記帳控制裝置Pg11,用于控制執行對特征視頻圖像或預覽視頻圖像的批量記帳或根據常規視頻圖像或預覽視頻圖像的回放時間或回放次數執行計量價格記帳的記帳區C18(圖1)。
語義瀏覽器裝置C1還具有預讀控制裝置Pg12,用于執行圖像數據的先進先出控制,以通過消除所摘取場景連接部分視頻圖像的中斷,平滑視頻圖像的流動,其中,中斷現象可能在回放預覽視頻圖像時在DVD播放器等中不連續訪問扇區上的所摘取場景的情況下出現。預讀控制裝置Pg12控制預讀存儲器C20(圖1)。
語義瀏覽器裝置C1還具有標記插入/檢索裝置Pg13,用于在特征視頻圖像或預覽視頻圖像的所需記錄位置插入一個標記和執行所插入標記位置的回放。
現在將對上述每個裝置進行描述。
瀏覽界面裝置Pg1在電源打開時或通過從OS(operating system,操作系統)提供的激勵信號進行觸發,并且在顯示單元C15(圖1)上顯示開始語義瀏覽屏幕(沒有顯示),它是與開始對應的缺省屏幕。然后,瀏覽界面裝置Pg1等待用戶使用開始語義瀏覽屏幕上的按鈕進行輸入。當用戶作出輸入后,瀏覽界面裝置Pg1提供各個裝置的界面,它們將在后面進行描述。瀏覽界面裝置Pg1還執行與各個裝置的數據發送/接受,并且發出控制指令。
在下面的描述中,將闡明瀏覽界面裝置Pg1的功能細節。
顯示屏幕組織裝置Pg2接收解密特征視頻圖像、預覽視頻圖像和縮略圖。顯示屏幕組織裝置Pg2從瀏覽界面裝置Pg1接收布局指令,并且使顯示單元C15顯示所指示構成的屏幕。
解密特征視頻圖像從解密區C14進行提供,并且縮略圖被從對其進行存儲的大容量存儲介質M1或高速存儲單元單元C12進行提供。
預覽視頻圖像作為在尋位時間之前和之后或在由于出現等待時間的空閑時間間斷發送的視頻圖像,或作為通過預讀控制裝置Pg12消除空閑時間的視頻圖像,從大容量存儲介質M1進行接收。
標題引入裝置Pg3根據由用戶輸入的視頻圖像標題引入指令i1,從瀏覽界面裝置Pg1接收由瀏覽界面裝置Pg1組織的引入指令信息,并且將由接收區C10接收的特征視頻圖像(影片圖像和聲音)和縮略圖(靜止圖像),以及元信息(數據)引入其中。標題引入裝置Pg3將特征視頻圖像和縮略圖記錄到大容量存儲介質M1,并且將元信息存儲到高速存儲單元C12。
作為替換,標題引入裝置Pg3將特征視頻圖像記錄到大容量存儲介質M1,并且將其中含有縮略圖的元信息存儲到高速存儲單元C12。
所記錄或存儲的元信息通過瀏覽界面裝置Pg1進行讀出。
來自任何提供系統,如CATV、因特網廣播或數據包系統,和無線廣播節目如地面波廣播或衛星廣播的視頻圖像都可以用作視頻圖像標題。
標題控制裝置Pg4將一個觸發信號發送到縮略圖回放裝置Pg5,以指示顯示視頻圖像標題。標題控制裝置Pg4通過瀏覽界面裝置Pg1接收來自用戶的視頻圖像標題選擇輸入i2,并且將所選標題信息發送到預覽視頻圖像組織裝置Pg7。
一接收到來自標題控制裝置Pg4的觸發信號,縮略圖回放裝置Pg5就讀出記錄在大容量存儲介質M1或高速存儲單元C12上的縮略圖,并且將縮略圖發送到顯示屏幕組織裝置Pg2。
特征視頻圖像回放控制裝置Pg6從瀏覽界面裝置Pg1接收特征視頻圖像回放指令,或通過預覽/特征視頻圖像切換裝置Pg10接收來自用戶的預覽/特征視頻圖像切換指令i43,并且從游標控制裝置Pg9接收當前或指定回放位置信息。在此之后,特征視頻圖像回放控制裝置Pg6向驅動機制C13發送一個用于控制從與指定回放位置對應的時間代碼(即,記錄位置信息)回放特征視頻圖像的信號。
預覽視頻圖像組織裝置Pg7從標題控制裝置Pg4接收所選標題信息,然后通過瀏覽界面裝置Pg1接收來自用戶的預覽視頻圖像模式指令i31,并且還從瀏覽界面裝置Pg1接收所選視頻圖像標題的語義代碼(即,元信息)。根據其中所提供的預定視頻圖像摘取條件,預覽視頻圖像組織裝置Pg7選擇構成視頻圖像標題的相應模式的所摘取視頻圖像(鏡頭或場景)。預覽視頻圖像組織裝置Pg7將時間碼(即,記錄位置信息)發送到預覽視頻圖像回放控制裝置Pg8,并且將記帳數據發送到記帳控制裝置Pg11。
視頻圖像摘取條件根據預定算法從“閾值”導出。預定算法包含在預覽視頻圖像組織裝置Pg7中。
閾值從瀏覽界面裝置Pg1提供的語義代碼中取出。通常,缺省值用作“閾值”。然而,如果“閾值”由用戶進行了更新,所更新的“閾值”被取出并使用。
預覽視頻圖像回放控制裝置Pg8從預覽視頻圖像組織裝置Pg7接收時間代碼,然后通過預覽/特征視頻圖像切換裝置Pg10接收來自用戶的預覽/特征視頻圖像切換指令i43,并且從游標控制裝置Pg9接收當前或指定時間代碼。在此之后,預覽視頻圖像回放控制裝置Pg8向驅動機制C13順序發送一個用于從指定時間代碼部分回放特征視頻圖像的控制信號。
游標控制裝置Pg9通過瀏覽界面裝置Pg1從用戶接收游標移動輸入i24,并且還從瀏覽界面裝置Pg1接收語義代碼中每個鏡頭或每個場景的記錄位置信息。游標控制裝置Pg9將游標位置的場景或鏡頭的時間代碼發送到預覽視頻圖像回放控制裝置Pg8或特征視頻圖像回放控制裝置Pg6。
預覽/特征視頻圖像切換裝置Pg10通過瀏覽界面裝置Pg1從用戶接收預覽/特征視頻圖像切換指令i43,并且將當前時間代碼發送到特征視頻圖像回放控制裝置Pg6或預覽視頻圖像回放控制裝置Pg8。
記帳控制裝置Pg11從特征視頻圖像回放控制裝置Pg6接收對特征視頻圖像的記帳數據,或從預覽視頻圖像組織裝置Pg7接收對預覽視頻圖像的記帳數據。根據所接收數據的內容,記帳控制裝置Pg11向記帳區C18發送一個控制指令,以對特征視頻圖像或預覽視頻圖像執行批量記帳或計量價格記帳。
除上述處理之外,瀏覽界面裝置Pg1將所接受的語義代碼(包括缺省“閾值”)存儲到緩沖內存。而且,在視頻圖像瀏覽觀看階段Ph4一接收到來自用戶的“閾值”更新輸入i44,瀏覽界面裝置Pg1就更新臨時存儲在緩沖內存中的“閾值”。
除上述處理之外,一接收到來自用戶的購買指令和觀看階段指令輸入i32,瀏覽界面裝置Pg1就通過特征視頻圖像回放控制裝置Pg6將記帳數據發送到記帳控制裝置Pg11,并且將控制指令發送到特征視頻圖像回放控制裝置Pg6、預覽視頻圖像回放控制裝置Pg8、游標控制裝置Pg9和預覽/特征視頻圖像切換裝置Pg10,以為視頻圖像瀏覽提供屏幕或為特征視頻圖像全部顯示回放提供屏幕。
在特征視頻圖像全部顯示回放期間一接收到來自用戶的瀏覽開始指令i5,瀏覽界面裝置Pg1就將控制指令發送到特征視頻圖像回放控制裝置Pg6、預覽視頻圖像回放控制裝置Pg8、游標控制裝置Pg9和預覽/特征視頻圖像切換裝置Pg10,以為視頻圖像瀏覽提供屏幕。
一接收到來自用戶的特征視頻圖像全部顯示指令i45,瀏覽界面裝置Pg1就將控制指令發送到顯示屏幕組織裝置Pg2,以提供特征視頻圖像全屏顯示。
現在對視頻圖像回放設備VP1的操作進行描述。
當用戶使用開始語義瀏覽屏幕上的按鈕,并且輸入對來自廣播節目或網絡系統的視頻圖像的引入指令i1時,瀏覽界面裝置Pg1接收該指令,并且將屏幕更新到視頻圖像標題引入記錄階段Ph1的語義瀏覽屏幕(如圖3和4所示的控制屏幕G1)。然后,瀏覽界面裝置Pg1將視頻圖像標題引入指令信息發送到標題引入裝置Pg3。
一接收到視頻圖像標題引入指令信息,標題引入裝置Pg3就將控制信號發送到接收區C10,并且將由接收區C10接收的特征視頻圖像(影片圖像、聲音和縮略圖(靜止圖像)),和元信息(數據)引入其中。標題引入裝置Pg3將特征視頻圖像和縮略圖發送到驅動機制C13,并且將它們記錄到大容量存儲介質M1。標題引入裝置Pg3將元信息發送并記錄到高速存儲單元C12。
例如,當重復視頻圖像標題的上述引入時,視頻圖像標題六種類型的特征視頻圖像vdt1到vdt6和它們各自的縮略圖sdt1到sdt6存儲到大容量存儲介質M1上。
視頻圖像標題六種類型的元信息mdt1到mdt6記錄在高速存儲單元C12中。元信息并不一定與特征視頻圖像一起進行進入,而可以在與引入特征視頻圖像的引入不同的時候或通過不同的系統進行引入。
在元信息中也能包含縮略圖。在這種情況下,縮略圖存儲到高速存儲單元C12中。
然后,當用戶通過來自視頻圖像標題引入記錄階段Ph1的屏幕G1(圖3)的遠端控制器輸入指示顯示視頻圖像標題時,瀏覽界面裝置Pg1接受該指令,然后轉到視頻圖像標題選擇階段Ph2,并且將一個指令發送到標題控制裝置Pg4。標題控制裝置Pg4激勵縮略圖回放裝置Pg5。
縮略圖回放裝置Pg5驅動驅動機制C13,然后讀出記錄在大容量存儲介質M1上的縮略圖sdt1到sdt6,并且將縮略圖sdt1到sdt6發送到顯示屏幕組織裝置Pg2。在縮略圖sdt1到sdt6記錄在高速存儲單元C12中的情況下,縮略圖回放裝置Pg5從高速存儲單元C12讀出縮略圖,并且將它們發送到顯示屏幕組織裝置Pg2。
顯示屏幕組織裝置Pg2將所輸入的縮略圖sdt1到sdt6分發到各個窗口,并且通過瀏覽界面裝置Pg1將它們顯示到顯示單元C15上。采用這種方式,屏幕以各個視頻圖像標題的縮略圖(靜止圖像)出現在六個窗口內的方式進行顯示。該屏幕是視頻圖像標題選擇階段Ph2的屏幕(即,如圖3、4和6所示的屏幕G2)。
然后,當用戶從該屏幕輸入對所需視頻圖像標題的選擇輸入i2時,瀏覽界面裝置Pg1接收所選標題信息,并且在屏幕上保持并顯示所選標題信息。
當用戶(使用圖6中顯示的“梗概”、“精彩場面”等按鈕)輸入那個視頻圖像標題的預覽視頻圖像模式的指令i31時,瀏覽界面裝置Pg1轉到預覽視頻圖像模式選擇階段Ph3。然后,瀏覽界面裝置Pg1根據所選標題信息從高速存儲單元C12將對應視頻圖像標題的元信息引入其中,并且將與指定模式相關的數據(例如,對該視頻圖像標題準備兩個演員的演員模式)和視頻圖像標題的介紹性短文本(文本信息)顯示到顯示單元C15上。視頻圖像標題可以為每個模式進行提供。
該屏幕是預覽視頻圖像模式選擇階段Ph3的屏幕(即如圖3、4和7所示的屏幕G3)。
在該屏幕中,顯示有模式選擇/顯示按鈕(圖7所示的“梗概”、“精彩場面”等按鈕)和其他按鈕(例如,圖7所示的“S.圖”按鈕或控制按鈕),一個窗口(如圖7所示顯示sdt1的區域)和一段介紹性短文本(圖7所示的txt1)。
在此階段,尚未開始回放預覽視頻圖像。視頻圖像標題的靜止圖像顯示在屏幕上的窗口內。模式選擇/顯示按鈕中,與在前階段指定的模式對應的按鈕被高亮顯示。
然后,當用戶操作控制按鈕,以進行開始回放預覽視頻圖像的輸入時,開始該模式下的預覽視頻圖像的回放,并且預覽視頻圖像的影片圖像在該窗口內進行顯示。
通常,對預覽視頻圖像的回放不執行記帳。然而執行依賴于系統的記帳是可能的。
當操作在模式選擇/顯示按鈕中不同于與在前階段指定的模式對應的高亮顯示按鈕的按鈕時,在前階段指定的模式被取消,并且自動切換到新的操作模式。因此,也可能進行后面模式下的預覽視頻圖像的回放。
當用戶由此觀看視頻圖像標題的預覽視頻圖像,然后決定購買視頻圖像標題的特征視頻圖像,并且通過使用相應按鈕輸入用于指定視頻圖像瀏覽觀看階段Ph4或特征視頻圖像全屏觀看階段Ph5作為觀看階段的輸入i32時,階段從預覽視頻圖像模式選擇階段Ph3轉到視頻圖像瀏覽觀看階段Ph4或特征視頻圖像全屏觀看階段Ph5。
例如,為了在決定購買時轉到視頻圖像瀏覽觀看階段Ph4,用戶操作相應按鈕(在圖7中,“s.圖”按鈕)。作為替換,為了在決定購買時轉到特征視頻圖像全屏觀看階段Ph5,用戶操作相應按鈕(在圖7中,“面具(mask)”按鈕)。
當作出向視頻圖像瀏覽觀看階段Ph4的轉換時,將顯示視頻圖像瀏覽觀看階段Ph4的語義瀏覽屏幕(圖3、4和8所示的屏幕G4)。該屏幕G4包括一個所選模式確認按鈕、一個用于顯示預覽特征圖像或特征視頻圖像的窗口、整個特征視頻圖像的語義圖、預覽視頻圖像的位置,和一個游標。該屏幕G4顯示在顯示單元C15上。
下面將參照圖5的流程對視頻圖像瀏覽觀看階段Ph4的操作進行描述。
瀏覽界面裝置Pg1將選擇模式信息和元信息發送到預覽視頻圖像組織裝置Pg7。預覽視頻圖像組織裝置Pg7從元信息讀出閾值(步驟S1),并且讀出每個鏡頭或每個場景的索引值(步驟S2)。預覽視頻圖像組織裝置Pg7從鏡頭或場景當中摘取與閾值匹配的鏡頭或場景(步驟S3),并且登記所摘取鏡頭或所摘取場景(步驟S4)。該處理對所有鏡頭或場景進行執行(步驟S5)。
瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值(步驟S6),并且在屏幕上將綜合結果作為視頻圖像標題的語義圖進行顯示(步驟S7)。
然后,在語義圖中與由預覽視頻圖像組織裝置Pg7登記的每個所摘取場景或所摘取鏡頭對應的位置上置放一個標志(步驟S8)。同時,在起始位置上顯示可滑動游標。
如果用戶將游標移動到語義圖上的所需位置,語義圖上的位置由游標控制裝置Pg9進行指定(步驟S9)。如果用戶不移動游標,起始位置被認作指定位置。
然后,瀏覽界面裝置Pg1等待根據來自用戶的回放開始指令i41開始回放預覽視頻圖像或開始回放特征視頻圖像(步驟S10)。
如果根據回放開始指令i41輸入用于回放特征視頻圖像的指令,瀏覽界面裝置Pg1將一個控制信號發送到特征視頻圖像回放控制裝置Pg6,并且在游標位置開始回放解密特征視頻圖像。同時,特征視頻圖像回放控制裝置Pg6將一個控制信號發送到記帳控制裝置Pg11。根據該控制指令,記帳控制裝置Pg11指示記帳區C18執行記帳處理,從而對特征視頻圖像的這次回放執行批量記帳或計量價格記帳(步驟S11)。
然后,在監控特征視頻圖像是否已經結束(步驟S12)并且監控預覽/特征視頻圖像切換指令i43是否輸入(步驟S13)的同時,在步驟S11繼續回放特征視頻圖像。
如果特征視頻圖像結束(步驟S12),則操作結束。
如果輸入預覽/特征視頻圖像切換指令i43(步驟S13),預覽/特征視頻圖像切換裝置Pg10確定它是在當前位置之后回放預覽視頻圖像的指令,并且指示預覽視頻圖像回放控制裝置Pg8轉到步驟S16(步驟S14)。因此,執行從特征視頻圖像到預覽視頻圖像的瀏覽。
另一方面,如果在步驟S10根據回放開始指令i41輸入預覽回放開始指令i41,預覽視頻圖像組織裝置Pg7將離游標位置最近的所摘取鏡頭的時間代碼發送到預覽視頻圖像回放控制裝置Pg8,其中,時間代碼從元信息中進行讀出。預覽視頻圖像回放控制裝置Pg8將一個用于指示回放該時間代碼的場景的指令發送到驅動機制C13,并且還將一個激勵信號發送到解密區C14。
由驅動機制C13讀出并回放的信號由解密區C14進行解密,并且由預讀控制裝置Pg12進行緩沖。然后該信號由顯示屏幕組織裝置Pg2組織為窗口大小,并且通過瀏覽界面裝置Pg1顯示在顯示單元C15的屏幕的窗口內(步驟S16)。
如果預覽視頻圖像的公開級別適于記帳,預覽視頻圖像組織裝置Pg7將預覽記帳信號發送到記帳控制裝置Pg11。根據該預覽記帳信號,記帳控制裝置Pg11指示記帳區C18執行記帳處理(步驟S16)。
然后,在監控預覽視頻圖像是否已經結束(步驟S17)并且還監控預覽/特征視頻圖像切換指令i43是否輸入(步驟S18)的同時,在步驟S16繼續回放預覽視頻圖像。
如果預覽視頻圖像結束(步驟S17),則操作結束。
如果輸入預覽/特征視頻圖像切換指令i43(步驟S18),預覽/特征視頻圖像切換裝置Pg10確定它是在當前位置之后回放特征視頻圖像的指令,并且轉到步驟S11,以將當前時間代碼輸入到特征視頻圖像回放控制裝置Pg6(步驟S19)。
同時,停止預覽視頻圖像組織裝置Pg7的操作。在此之后,繼續執行特征視頻圖像的回放。
因此,執行從預覽視頻圖像到特征視頻圖像的瀏覽。
如果用戶在上述過程中輸入游標移動指令i42,將執行中斷處理,以進入步驟S9。游標控制裝置Pg9在回放特征視頻圖像的情況下將與那個位置對應的鏡頭的時間代碼發送到特征視頻圖像回放控制裝置Pg6,或者在回放預覽視頻圖像的情況下將時間代碼發送到預覽視頻圖像回放控制裝置Pg8。
特征視頻圖像回放控制裝置Pg6向驅動機制C13發送一個從所更新時間代碼回放的指令。由于正在回放特征視頻圖像,沒有必要將激勵信號重新發送到解密區C14。隨后的特征視頻圖像回放操作類似于上述操作。
作為替換,預覽視頻圖像回放控制裝置Pg8向驅動機制C13發送一個從離所更新時間代碼最近的所摘取鏡頭回放的指令。隨后的預覽視頻圖像回放操作類似于上述操作。
本實施例的視頻圖像回放設備VP1的結構和操作如上所述。下一步,將對屏幕控制設備和方法的一個實施例進行描述。
本實施例的屏幕控制設備包括在前面實施例中所描述的,由計算機可讀/執行程序構成的語義瀏覽器裝置C1和用于讀取和執行該程序的微計算機(沒有顯示)。
語義瀏覽器裝置C1作為第二屏幕顯示包括連續視頻圖像的特征視頻圖像,并且作為第一屏幕顯示包括通過摘取特征視頻圖像的預定部分而獲取的多個所摘取視頻圖像集的預覽視頻圖像。
在第一屏幕中,至少顯示有第一視頻圖像顯示區域、第一視頻圖像變化顯示區域和第一切換輸入區域。在這種情況下,顯示屏幕組織裝置Pg2根據由圖2所示的預覽視頻圖像組織裝置Pg7和預覽視頻圖像回放控制裝置Pg8選擇和回放的結果在第一視頻圖像顯示區域顯示預覽視頻圖像。
在第一視頻圖像變化顯示區域內,瀏覽界面裝置Pg1布置并顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和附加在視頻圖像變化圖上位于與每個所摘取視頻圖像對應的視頻圖像記錄位置的標志。
另外,在第一視頻圖像變化顯示區域內,當瀏覽界面裝置Pg1發送信息到游標控制裝置Pg9時,一個表示當前所顯示預覽視頻圖像的當前視頻圖像記錄位置的游標附加在視頻圖像變化圖上,并且隨著時間流逝不斷更新。
該游標移動到任意位置,以響應來自用戶的游標移動輸入i42。具體地說,當瀏覽界面裝置Pg1將游標移動信息發送到游標控制裝置Pg9,以響應游標移動輸入i42時,游標控制裝置Pg9根據該游標移動信息控制當前位置。
而且,瀏覽界面裝置Pg1在第一切換輸入區域內顯示第一按鈕,該按鈕用于輸入一個指令,來在指定時刻停止和保留當前視頻圖像記錄位置的同時,從第一屏幕切換到在連續視頻圖像顯示階段顯示的第二屏幕。該按鈕的操作結果由預覽/特征視頻圖像切換裝置Pg10進行處理。
類似地,在第二屏幕中,至少顯示有第二視頻圖像顯示區域、第二視頻圖像變化顯示區域和第二切換輸入區域。在這種情況下,顯示屏幕組織裝置Pg2根據由特征視頻圖像回放控制裝置Pg6回放的結果在第二視頻圖像顯示區域內顯示特征視頻圖像。
在第二視頻圖像變化顯示區域內,瀏覽界面裝置Pg1顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖。
根據用戶指令,能夠在顯示在第二視頻圖像變化顯示區域內的視頻圖像變化圖中與每個所摘取視頻圖像對應的視頻圖像記錄位置上附加并顯示一個標志。
另外,在第二視頻圖像變化顯示區域內,當瀏覽界面裝置Pg1發送信息到游標控制裝置Pg9時,一個表示當前所顯示特征視頻圖像的當前視頻圖像記錄位置的游標附加在視頻圖像變化圖上,并且隨著時間流逝不斷更新。
該游標移動到任意位置,以響應來自用戶的游標移動輸入i42。具體地說,當瀏覽界面裝置Pg1將游標移動信息發送到游標控制裝置Pg9,以響應游標移動輸入i42時,游標控制裝置Pg9根據該游標移動信息控制當前位置。
而且,瀏覽界面裝置Pg1在第二切換輸入區域內顯示第二按鈕,該按鈕用于輸入一個指令,來在指定時刻停止和保留當前所顯示特征視頻圖像的記錄位置的同時,從第二屏幕切換到顯示預覽視頻圖像的第一屏幕。該按鈕的操作結果由預覽/特征視頻圖像切換裝置Pg10進行處理。
采用這種方式,瀏覽界面裝置Pg1根據在第一按鈕或第二按鈕顯示期間輸入的每個指令,在所摘取視頻圖像顯示階段和特征視頻圖像之間進行切換,從而顯示第一屏幕或第二屏幕。
采用上述構成,在所摘取視頻圖像顯示階段,特征視頻圖像的視頻圖像記錄位置的變化通過顯示在第一視頻圖像變化顯示區域內的視頻圖像變化圖進行顯示,從而提供整個特征視頻圖像的結構。通過在與每個所摘取視頻圖像對應的視頻圖像記錄位置上將標志附加在視頻圖像變化圖上,各個所摘取視頻圖像在整個特征視頻圖像中的關系得以清晰。
另外,通過視頻圖像變化圖上游標的自動移動,隨著正在第一視頻圖像顯示區域內顯示的所摘取視頻圖像的時間流逝,不斷更新移動當前位置,從而視頻圖像變化圖上當前位置的移動狀態得以清晰。
而且,如果游標移動到視頻圖像變化圖上的任意位置,那么參考與視頻圖像變化圖上的那個位置對應的鏡頭或場景的記錄位置信息,并且在第一視頻圖像顯示區域內順序回放離記錄位置信息最近的所摘取視頻圖像。
當操作第一按鈕而輸入一個指令時,停止并保持由游標指示的當前位置,并且從預覽視頻圖像的當前所顯示第一屏幕切換到顯示特征視頻圖像的第二屏幕。因此,執行與所保持游標位置對應的特征視頻圖像的回放和顯示。
類似地,在連續圖像顯示階段,特征視頻圖像的視頻圖像記錄位置的變化通過顯示在第二視頻圖像變化顯示區域內的視頻圖像變化圖進行顯示,從而提供整個特征視頻圖像的結構。
另外,通過視頻圖像變化圖上游標的自動移動,隨著正在第二視頻圖像顯示區域內顯示的特征視頻圖像的時間流逝,不斷更新移動當前位置,從而視頻圖像變化圖上當前位置的移動狀態得以清晰。
而且,如果游標移動到視頻圖像變化圖上的任意位置,那么參考與視頻圖像變化圖上的那個位置對應的鏡頭或場景的記錄位置信息,并且在第二視頻圖像顯示區域內順序回放對應特征視頻圖像的記錄位置之后的視頻圖像。
當操作第二按鈕而輸入一個指令時,停止并保持由游標指示的當前位置,并且從當前所顯示的第二屏幕切換到顯示預覽視頻圖像的第一屏幕。因此,執行離所保持游標位置最近的所摘取視頻圖像的回放和顯示。
采用這種方式,當操作第一按鈕或第二按鈕而輸入指令時,在停止并保持那個時刻由游標指示的當前位置的同時,在顯示預覽視頻圖像的第一屏幕和顯示特征視頻圖像的第二屏幕之間進行切換。
上面對本發明的視頻圖像回放設備VP1的屏幕控制的結構和方法進行了描述。下面將對主屏幕的結構進行描述。
圖4是示出視頻圖像回放設備VP1的每個操作階段和每個控制屏幕的結構的說明圖。圖6到8示出示例性主屏幕。
如圖4所示,在視頻圖像標題引入記錄階段Ph1,顯示用于內容歸檔的控制屏幕G1。當引入完所需視頻圖像標題時,將切換到視頻圖像標題選擇階段Ph2。
圖6示出圖4中在視頻圖像標題選擇階段Ph2顯示的控制屏幕G2的一個示例。在屏幕的中央有六個窗口,其中顯示各個視頻圖像標題的縮略圖sdt1到sdt6。通過用光標指向和單擊每個窗口的上端部分或通過十鍵輸入,執行所需視頻圖像標題的選擇。
在圖6的顯示中,具有縮略圖sdt3的第三視頻圖像標題被選擇。
在窗口內雙擊將產生在該階段Ph2生成回放開始輸入i41的效果。因此,通過瀏覽界面裝置Pg1的處理,將立即切換到特征視頻圖像全屏觀看階段Ph5,并且開始該視頻圖像標題的全屏回放。
如果通過單擊窗口的上端部分選擇視頻圖像標題,然后選擇上面第二行一個預覽視頻圖像模式選擇按鈕,將在確認間隔之后自動切換到預覽視頻圖像模式選擇階段Ph3。
作為替換,能夠以預設形式構成預覽視頻圖像模式。在這種情況下,一選擇視頻圖像標題,就自動切換到預覽視頻圖像模式選擇階段Ph3。
圖7示出圖4中在預覽視頻圖像模式選擇階段Ph3顯示的語義瀏覽屏幕G3的一個示例。當“面具”選作視頻圖像標題時,顯示該屏幕。該視頻圖像標題的名稱“面具”顯現在最上行,并且模式選擇/顯示按鈕(圖7中的“梗概”、“精彩場面”等)排列在第二和第三行的左邊。
而且該視頻圖像標題“面具”的縮略圖sdt1顯現在第三行右邊的窗口內,并且該視頻圖像標題“面具”的介紹性文本txt1出現在底行。
在該階段,尚未開始回放預覽視頻圖像,并且顯示在屏幕窗口中的縮略圖sdt1是視頻圖像標題“面具”的靜止圖。模式選擇/顯示按鈕中,與在視頻圖像標題選擇階段Ph2指定的模式對應的按鈕,即圖7中的“梗概”按鈕被高亮顯示。
模式選擇/顯示按鈕自身具有顯示效果。在視頻圖像標題選擇階段Ph2選擇的模式的按鈕發亮,因此,用戶可以確認所選模式。
然后,當用戶操作屏幕窗口內的控制按鈕,以作出開始回放預覽視頻圖像的輸入時,開始回放該模式的預覽視頻圖像,并且視頻圖像標題“面具”的“梗概”模式的預覽視頻圖像的影片圖像顯示在該窗口內。
如果在回放預覽視頻圖像期間在窗口內單擊,預覽視頻圖像將在整個屏幕上進行顯示。如果在該全屏回放期間在屏幕內單擊,窗口將重新出現,并恢復最初屏幕。
通常,對預覽視頻圖像的該回放不執行記帳。然而,能夠采用執行記帳的系統。
當操作模式選擇/顯示按鈕中與高亮顯示“梗概”不同的其它按鈕時,在前階段指定的“梗概”模式被取消,并且自動切換到最新操作的“高亮顯示”模式。因此,在后面模式下回放預覽視頻圖像成為可能。
采用這種方式,模式可以通過操作模式選擇/顯示按鈕進行改變。窗口中縮略圖的顯示可以為每個模式進行改變。
當用戶由此在該屏幕上觀看所需模式的預覽視頻圖像,或觀看各種模式的預覽視頻圖像,然后決定購買,并操作“S1.圖”按鈕時,屏幕將轉到視頻圖像瀏覽觀看階段Ph4。
作為替換,當用戶決定購買并操作“面具”按鈕時,將產生在該階段Ph3生成回放開始輸入i41(圖2)的效果。通過瀏覽界面裝置Pg1的處理,將立即切換到特征視頻圖像全屏觀看階段Ph5,并且開始該視頻圖像標題的全屏回放。
當切換到視頻圖像瀏覽觀看階段Ph4時,顯示如圖8所示的、視頻圖像瀏覽觀看階段Ph4的語義瀏覽屏幕G4。圖9是示出語義瀏覽屏幕G4中的語義圖的說明圖。
語義瀏覽屏幕G4的最上行是標題顯示區,其中顯示內容“面具”的標題名稱、類型和日期,并提供有“后退”按鈕。第二行的左邊和第三行的左邊是對每個模式Md4的回放按鈕區,其中提供有用于預覽模式的“梗概”、“精彩場面”、“關鍵詞”、“演員A1”、“演員A2”和“演員A3”按鈕和用于回放特征視頻圖像的“整個視頻圖像”按鈕。通過操作這些按鈕,對狀態顯示和回放區域進行限制。例如,通過操作“梗概”按鈕,顯示參照圖20A到20C描述的概要視頻圖像。通過操作“演員A1”、“演員A2”和“演員A3”按鈕選擇性地顯示參照圖21A到21G描述的、對各個演員的精彩場面摘要的概要視頻圖像。
第二行的右邊是影片播放按鈕區,其中排列五個用于影片控制的功能按鈕。這些按鈕用于選擇各個功能如回放。這些按鈕將從最左邊按鈕開始依次進行描述。
“回放”按鈕如果在停止期間選擇并執行該按鈕,將在回放階段的開始處開始回放。如果在暫停期間選擇并執行該按鈕,將在暫停時間點上開始回放。
“暫停”按鈕如果在回放期間選擇并執行該按鈕,顯示影片在那個時間點上的靜止圖像。
“停止”按鈕如果在回放或暫停期間選擇并執行該按鈕,顯示標題的靜止圖像(起始狀態)。
“返回”按鈕如果在回放期間選擇并執行該按鈕,將返回到當前所回放場景的開始處重新開始回放。如果多次單擊該執行按鈕,將回退與單擊次數對應的場景,并在所到達場景的開始處開始回放。在預覽模式的情況下,場景經常是不連續的,并且對包含在該模式下的場景進行計數。如果在暫停期間選擇并執行該按鈕,將按照與回放情況下相同的規則移動所顯示場景,并且顯示相應場景開始處的靜止圖像。如果在停止期間選擇并執行該按鈕,不執行任何操作。
“快進”按鈕如果在回放期間選擇并執行該按鈕,將跳到當前所回放場景的下一場景開始處開始回放。如果多次單擊該執行按鈕,將跳過與單擊次數對應的場景,并在所到達場景的開始處開始回放。在預覽模式的情況下,場景經常是不連續的,并且對包含在該模式下的場景進行計數。如果在暫停期間選擇并執行該按鈕,將按照與回放情況下相同的規則移動所顯示場景,并且顯示相應場景開始處的靜止圖像。如果在停止期間選擇并執行該按鈕,不執行任何操作。
通過遠端控制器或鍵盤選擇和執行這些按鈕,開始對應階段的回放。如果在一個回放階段暫停之后,選擇并執行另一個回放階段,將在暫停場景的位置開始新階段的回放(參見圖4的狀態轉換)。根據設置,屏幕上的按鈕數目可以通過直接在遠端控制器上提供按鈕進行減少。
在第三行的右邊,影片屏幕區MV在窗口內進行提供。
特征視頻圖像或預覽視頻圖像在該窗口內進行顯示。在執行回放按鈕之前的起始狀態,顯示作為視頻圖像標題封面的縮略靜止圖。
在第四行的左邊,提供有與各個預覽視頻圖像模式對應的所摘取場景顯示選擇按鈕(剪輯顯示按鈕)Mds。如果在回放特征視頻圖像期間,單擊任意視頻圖像模式的剪輯顯示按鈕,該模式的所摘取場景的位置能以在底行提供的語義圖SGR上的豎條進行顯示。通過參照語義圖SGR向左和向右移動游標滑動器區,可以從最喜歡的場景繼續觀看特征視頻圖像。也就是,回放位置可以進行設置。
在底行,顯示圖9所示的語義圖SGR。
語義圖SGR包括通過沿著時間變化綜合各個場景或鏡頭的索引值(例如,評價值)而產生的、表示視頻圖像標題的情節過程的、作為分段圖的主圖MGr、表示視頻圖像當前回放位置和具有用于移動的滑動器部分的游標Cur(圖9中,頂端的三角形部分);和以豎條形式表示的、用于指示包括在預覽視頻圖像模式下的所摘取場景的位置的所摘取場景豎條Exs。
主圖MGr的橫坐標表示作為單位的特征視頻圖像的場景,縱坐標表示評價值,即場景分值,的綜合值。以電影“面具”作為實際例子,1小時34分鐘35秒的特征視頻圖像劃分為150個場景,并且主圖MGr的最大值為9.8。
作為所提供條件的場景分值具有從-1到0和進一步到1范圍內分布的負和正值。在語義評價為復雜化的情況下,場景分值具有正值。相反,在語義評價為平靜化的情況下,場景分值具有負值。因此,以銳角向右上升意味著場景的大幅度復雜化,而以銳角向右下降意味著場景的大幅度平靜化。
標志置于主圖MGr的主峰值上。
構成主峰值的向上斜坡和向下斜坡大致表示包括在情節中的一個事件。從圖的峰值到谷底的樣式,掌握情節的介紹部分(介紹)、各種事件的發展(發展)、高潮(變化)和結局(結束)。這些峰值可以解釋如下。到第一峰值的向上斜坡對應介紹部分(介紹)。隨后的多個峰值表示事件的發展(發展)。到最后峰值的向上斜坡標識高潮(變化),而在最后峰值之后的部分表示結局(結束)。從圖的尖銳向上和向下斜坡,可以預料情節的戲劇性發展。從長的向上斜坡,可以預料大事件的緊張增加和發展。從長的向下斜坡,可以想到大事件的暫停和問題的解決。
主圖MGr的橫坐標可以表示場景開始或結束點的時間代碼,而不是場景。通過在橫坐標上顯示時間代碼,圖中場景的間距(inclination)將相對改變,但是在縱坐標上向上和向下斜坡的關系和值不發生改變。可以類似于上述解釋對該圖進行解釋。
游標Cur隨著視頻圖像的回放發生移動,并且顯示包含在當前所顯示視頻圖像中的場景位置。通過向左和向右滑動游標頂部的滑動器部分,可以在觀看主圖MGr時選擇任意場景。
如果在回放特征視頻圖像期間滑動游標,回放位置將進行更新,并且在滑動結束點的游標位置繼續回放。如果在暫停期間執行類似操作,將顯示在滑動結束點的游標位置的靜止圖。
另一方面,如果在回放預覽視頻圖像期間執行類似操作,將在操作結束點的游標位置的場景或其后最近的場景繼續回放預覽視頻圖像。如果在暫停期間執行類似操作,將顯示在操作結束點的游標位置的場景或其后最近的場景的靜止圖。
為了顯示當前時間點的詳細信息,可以提供一個放大圖Elg,它以預定比例顯示游標位置周圍部分的部分放大視圖。在圖8中,所顯示的是比例為6的放大圖。在這種情況下,豎向游標保持固定,而后面的圖隨回放的進行移動到左邊。放大圖和游標的交叉點與主圖中與游標的交叉點保持一致。
通過使用用于預覽視頻圖像的所摘取場景顯示選擇按鈕Mds,可以選擇要顯示在主圖MGr上的預覽視頻圖像的所摘取場景的顯示模式。所摘取場景顯示模式的類型與預覽視頻圖像回放模式一致。在圖8所示的示例中,準備有“梗概”、“精彩場面”、“關鍵詞”、“演員A1(Jim Carey)”、“演員A2(C.Diaz)”和“演員A3(P.Rigato)”模式。
在預覽視頻圖像和特征視頻圖像之間瀏覽時,可以從預覽視頻圖像的回放位置切換到對應特征視頻圖像進行回放,和從特征視頻圖像的回放位置切換到對應預覽視頻圖像進行回放。具體地說,如下操作被執行。
通過在預覽視頻圖像回放期間單擊“暫停”按鈕,然后單擊“整個視頻圖像”按鈕,可以切換到特征視頻圖像從預覽視頻圖像的當前所回放場景的開始處進行連續回放。
類似地,通過在特征視頻圖像回放期間單擊“暫停”按鈕,然后單擊一個預覽回放按鈕Md4,可以切換到屬于特征視頻圖像的當前所回放場景的預覽視頻圖像場景或其后最近的場景進行回放。
另外,通過在回放一個模式的預覽視頻圖像期間單擊“暫停”按鈕,然后單擊另一個按鈕,將執行類似操作。例如,存在這樣的情況在“梗概”模式下中途執行回放之后,單擊“暫停”按鈕,然后單擊“演員2”模式的預覽回放按鈕。
在這種情況下,暫停的場景可能不包括在后一預覽模式,即本例中的“演員2”模式的預覽視頻圖像的場景中。在這種情況下,切換到屬于暫停場景之后的最近場景的“演員2”模式的預覽視頻圖像場景進行回放。
在回放整個視頻圖像時,單擊影片屏幕區MV的任意位置將產生在該階段Ph4生成回放開始輸入i41(圖2)的效果。通過瀏覽界面裝置Pg1的處理,將立即切換到特征視頻圖像全屏觀看階段Ph5,并且開始該視頻圖像標題的全屏回放。因此,在全屏上觀看特征視頻圖像是可能的。另外,在全屏回放期間單擊任意位置,就能返回到圖8的瀏覽屏幕。
如上所述,根據本發明,在觀看具有情節的視頻圖像標題如電影、電視劇和記錄片等時,通過語義圖可以直觀地把握情節復雜化和平靜化的流動,并且通過在掌握整個情節的發展和事件的發展時觀看影片圖像可以提高欣賞水平。
通過預覽視頻圖像和特征視頻圖像之間的瀏覽功能,例如,通過預覽視頻圖像掌握情節的梗概,然后精細地觀看所需部分的特征視頻圖像,或通過僅連續回放必要部分的特征視頻圖像場景,然后通過預覽視頻圖像概要地觀看其它部分,可以實現欣賞基于情節特征的視頻圖像標題的新方法。
由于各種模式的預覽視頻圖像能進行選擇,因此可以根據觀看者的喜好,執行標題選擇和視頻圖像檢索。由于屬于預覽視頻圖像的場景必定包括在特征視頻圖像中,因此能夠從預覽視頻圖像的所需部分轉到對應那部分的特征視頻圖像。
通過在觀看語義圖時移動游標滑動器,視頻圖像可以快速移動到情節流動中的所需部分。
而且,通過在視頻圖像瀏覽觀看階段Ph4觀看時改變語義分值的閾值,可以調整每個模式的預覽視頻圖像的時間,并且可以使用根據用戶的喜好的預覽視頻圖像,如更詳細的預覽視頻圖像或簡單的短時間預覽視頻圖像。
下一步,作為本發明的一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為圖2所示的語義瀏覽器裝置進行工作的程序。
數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置C1的功能,因此不作進一步的詳細描述。
現在對標記功能進行描述。
圖10是示出本發明的一個實施例的視頻圖像信息記錄設備的標記處理基本部分的結構的方框圖。在該圖中沒有顯示與前面實施例相同的部分。
如圖10所示,本實施例的視頻圖像信息記錄設備VR1含有瀏覽界面裝置Pg1,具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值;游標控制裝置Pg9,用于指定圖中的任意位置;標記插入輸入裝置PgI8,用于將圖中的指定位置用作插入標記的位置;和標記插入/檢索裝置Pg13,用于將至少與圖中作為標記位置的指定位置對應的記錄位置信息額外記錄到元信息。
現在對標記插入功能進行描述。由瀏覽界面裝置Pg1’順序綜合索引值而產生的語義圖在屏幕上進行顯示。用戶移動由游標控制裝置Pg9管理的游標,并且將游標停在用戶想要插入標記的所需位置。當用戶在該狀態下操作標記插入輸入裝置PgI8,以產生用于標記插入的輸入iS時,與語義圖上的游標位置對應的時間代碼由標記插入/檢索裝置Pg13作為標記位置額外記錄到元信息,并且該標記位置保存到內存棒或高速存儲單元。與標記位置相關的記錄位置信息在任意時候進行讀出。
如圖10所示,本發明的能夠檢測標記的視頻圖像回放設備含有瀏覽界面裝置Pg1’,具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值;游標控制裝置Pg9,用于指定圖中的任意位置;標記檢索輸入裝置PgI9,用于指示檢索一個標記;和標記插入/檢索裝置Pg13,用于將標記位置從保存在內存棒或高速存儲單元中的元信息讀出。
現在對標記檢測功能進行說明。
當用戶在瀏覽界面裝置Pg1正在顯示語義圖的狀態下從標記檢索輸入裝置PgI9作出用于標記檢索的輸入i9時,標記插入/檢索裝置Pg13讀出內存棒M2中的元信息文件,并且檢索標記的時間代碼。然后標記插入/檢索裝置Pg13將該時間代碼輸入到特征視頻圖像回放控制裝置Pg6或預覽視頻圖像回放控制裝置Pg8,以從標記位置執行特征視頻圖像或預覽視頻圖像的回放。
而且,標記的時間代碼從標記插入/檢索裝置Pg13輸入到瀏覽界面裝置Pg1’,并且瀏覽界面裝置Pg1’使用適當標志在當前所顯示的語義圖上顯示標記位置。當在這種狀態下指示開始回放時,游標將由游標控制裝置Pg9移動到標記位置,并且開始回放。
本發明的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為如下裝置進行工作的程序瀏覽界面裝置Pg1’,具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值;游標控制裝置Pg9,用于指定圖上的任意位置;標記插入輸入裝置PgI8,用于將圖中的指定位置用作插入標記的位置;和標記插入/檢索裝置Pg13,用于將至少與圖上作為標記位置的指定位置對應的記錄位置信息額外記錄到元信息。
數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于上述視頻圖像信息記錄設備的標記處理功能,因此不作進一步的詳細描述。
本發明的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為如下裝置進行工作的程序瀏覽界面裝置Pg1’,具有界面功能并且作為語義圖顯示特征視頻圖像的各個鏡頭或場景的記錄位置信息和通過根據含有各個鏡頭或場景的索引值的元信息順序綜合各個鏡頭或場景的索引值而獲得的值;游標控制裝置Pg9,用于指定圖上的任意位置;標記檢索輸入裝置PgI9,用于指示檢索一個標記;和標記插入/檢索裝置Pg13,用于將標記位置從保存在內存棒或高速存儲單元中的元信息讀出。
數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于上述視頻圖像信息回放設備的標記檢索功能,因此不作進一步的詳細描述。
因此,根據本發明,當提供標記功能時,由用戶標記的場景用插入其中的標記進行存儲,并且可以用來在以后進行檢索和回放。
下面,將對本發明的視頻圖像回放設備的幾個其它實施例順序進行描述。下面實施例的視頻圖像回放設備能夠回放通過以預定次序連接多個鏡頭或場景而產生的特征視頻圖像。這些視頻圖像回放設備具有不同結構的語義瀏覽器設備C1,但是具有類似于參照圖1描述的整個方框結構。
因此,下面描述限于對在這些設備中提供的每個語義瀏覽器裝置的結構和操作的描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖11所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8、游標控制裝置Pg9、預覽/特征視頻圖像切換裝置Pg10和記帳控制裝置Pg11。下面將參照圖11對這些裝置每一個的功能和操作進行描述。
在圖11的流程圖中,瀏覽界面裝置Pg1從元信息取出各個鏡頭或場景的索引值(步驟S24),然后綜合各個鏡頭或場景的索引值(步驟S25),并且在屏幕上作為視頻圖像標題的語義圖顯示該綜合值(步驟S26)。
然后,用于指定每個所摘取鏡頭或所摘取場景的信息從元信息進行讀出(步驟S27),并且在語義圖中與所摘取場景或鏡頭對應的位置置放一個標志(步驟S28)。
如果用戶將游標移到語義圖上的所需位置,語義圖上的位置由游標控制裝置Pg9進行指定(步驟S29)。
然后,瀏覽界面裝置Pg1等待來自用戶的、指示開始回放預覽視頻圖像的輸入或指示開始回放特征視頻圖像的輸入(步驟S30)。
如果輸入用于回放特征視頻圖像的指令,瀏覽界面裝置Pg1將一個控制指令發送到特征視頻圖像回放控制裝置Pg6,并且在游標當前位置開始回放解密特征視頻圖像。同時,特征視頻圖像回放控制裝置Pg6將一個控制指令發送到記帳控制裝置Pg11。根據該控制指令,記帳控制裝置Pg11指示記帳區C18執行記帳處理,從而為特征視頻圖像的這次回放執行批量記帳或計量價格記帳(步驟S31)。
然后,在監控特征視頻圖像是否已經結束(步驟S32)并且還監控預覽/特征視頻圖像切換指令是否輸入(步驟S33)的同時,在步驟S31繼續回放特征視頻圖像。
如果特征視頻圖像結束(步驟S32),則操作結束。
如果輸入預覽/特征視頻圖像切換指令i43(步驟S33),預覽/特征視頻圖像切換裝置Pg10確定它是在當前位置之后回放預覽視頻圖像的指令,并且指示預覽視頻圖像回放控制裝置Pg8轉到步驟S36(步驟S34)。因此,執行從特征視頻圖像到預覽視頻圖像的瀏覽。
另一方面,如果在步驟S30輸入預覽回放開始指令,預覽視頻圖像組織裝置Pg7將離游標位置最近的所摘取鏡頭的時間代碼發送到預覽視頻圖像回放控制裝置Pg8,其中,時間代碼從元信息中進行讀出。預覽視頻圖像回放控制裝置Pg8將一個用于指示回放該時間代碼的場景的指令發送到驅動機制C13,并且還將一個激勵信號發送到解密區C14。
由驅動機制C13讀出并回放的信號由解密區C14進行解密,并且由預讀控制裝置Pg12進行緩沖。然后該信號由顯示屏幕組織裝置Pg2組織為窗口大小,并且通過瀏覽界面裝置Pg1顯示在顯示單元C15的屏幕的窗口內(步驟S36)。
如果預覽視頻圖像的公開級別適合用于記帳,預覽視頻圖像組織裝置Pg7將預覽記帳信號發送到記帳控制裝置Pg11。根據該預覽記帳信號,記帳控制裝置Pg11指示記帳區C18執行記帳處理(步驟S36)。
然后,在監控預覽視頻圖像是否已經結束(步驟S37)并且還監控預覽/特征視頻圖像切換指令i43是否已有輸入(步驟S38)的同時,在步驟S36繼續回放預覽視頻圖像。
如果預覽視頻圖像結束(步驟S37),則操作結束。
如果輸入預覽/特征視頻圖像切換指令i43(步驟S38),預覽/特征視頻圖像切換裝置Pg10確定它是在當前位置之后回放特征視頻圖像的指令,并且轉到步驟S31,以將當前時間代碼輸入到特征視頻圖像回放控制裝置Pg6(步驟S39)。同時,停止預覽視頻圖像組織裝置Pg7的操作。在此之后,繼續執行特征視頻圖像的回放。
因此,執行從預覽視頻圖像到特征視頻圖像的瀏覽。
如果用戶在上述過程中輸入游標移動指令,將執行中斷處理,以進入步驟S29。游標控制裝置Pg9在回放特征視頻圖像的情況下將與該位置對應的鏡頭的時間代碼發送到特征視頻圖像回放控制裝置Pg6,或者在回放預覽視頻圖像的情況下將時間代碼發送到預覽視頻圖像回放控制裝置Pg8。
因此,可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產生的語義圖,從而可以顯現整個特征視頻圖像的結構。
而且,通過參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息在圖中與所摘取鏡頭或場景對應的位置顯示一個標志,所摘取鏡頭或場景在整個特征視頻圖像中的位置關系能夠得以清晰。
另外,如果用戶指定語義圖上的任意位置,并且指示回放特征視頻圖像,與那個位置對應的場景或鏡頭將被指定,并且參考指定場景或鏡頭的時間代碼從該記錄位置執行特征視頻圖像的回放。如果在特征視頻圖像回放期間,用戶指示回放所摘取鏡頭和場景,當前回放將切換到所摘取鏡頭或場景在當前回放記錄位置之后進行回放。
另一方面,如果用戶指定圖中表示所摘取鏡頭或場景的標志,并且指示回放所摘取鏡頭或場景,與那個位置對應的所摘取場景或鏡頭將被指定,并且參考指定所摘取場景或鏡頭的記錄位置信息從該記錄位置回放所摘取場景或鏡頭。如果在所摘取場景或鏡頭回放期間,用戶指示回放特征視頻圖像,當前回放將切換到特征視頻圖像在當前回放記錄位置之后進行回放。
通過交替執行指定圖中的任意位置并指示回放特征視頻圖像,和指定表示所摘取鏡頭或場景的標志并指示回放所摘取鏡頭或場景,可以執行特征視頻圖像和所摘取視頻圖像之間的瀏覽。另外,通過重復這些指定和指示,瀏覽進行重復執行。
作為本發明的另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖11的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖12所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8、游標控制裝置Pg9。下面將參照圖12對這些裝置每一個的功能和操作進行描述。
在圖12的流程圖中,在視頻圖像瀏覽觀看階段Ph4一接收到來自用戶的“閾值”更新輸入i44(步驟S40),瀏覽界面裝置Pg1就更新閾值(步驟S41)。
用戶作出這種“閾值”更新輸入的時間最好在語義圖顯示在屏幕上的視頻圖像瀏覽觀看階段Ph4。這是因為顯示在屏幕上的語義圖讓用戶能夠掌握整個特征視頻圖像的流動,然后設置適當的“閾值”。這并不限于本實施例,而同樣適用于其它實施例。
然后,預覽視頻圖像組織裝置Pg7從包含鏡頭或場景的時間代碼和為每個鏡頭或每個場景預設的索引值的元信息讀出每個鏡頭或場景的索引值(步驟S42),然后檢查索引值是否與閾值一致(步驟S43),并且將索引值與閾值一致的鏡頭或場景作為所摘取鏡頭或場景進行登記(步驟S44)。該處理對所有鏡頭或場景進行執行(步驟S45)。
同時,瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值,并且在屏幕上將綜合結果作為視頻圖像標題的語義圖進行顯示。
然后,在語義圖中與由預覽視頻圖像組織裝置Pg7登記的每個所摘取場景或鏡頭對應的位置上置放一個標志(步驟S46)。
如果用戶將游標移動到語義圖上標志中的所需標志,語義圖上的位置由游標控制裝置Pg9進行指定(步驟S47)。根據來自游標控制裝置Pg9的指令,特征視頻圖像回放控制裝置Pg6或預覽視頻圖像回放控制裝置Pg8在指定標志位置之后順序回放標志部分。
因此,可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產生的語義圖,從而可以顯現整個特征視頻圖像的結構。
而且,通過參考作為所提供條件從元信息提供的,所摘取鏡頭或場景的索引值根據所更新的閾值確定要摘取的鏡頭或場景,然后在圖中與所摘取鏡頭或場景對應的位置顯示一個標志,所摘取鏡頭或場景在整個特征視頻圖像中的位置關系能夠得以清晰。
如果圖中的一個標志被指定,與該標志對應的所摘取鏡頭或場景的記錄位置可以根據時間代碼進行指定,并且與特征視頻圖像中的記錄位置對應的部分視頻圖像能以預定次序進行順序回放。
而且,由于閾值是根據指令進行修改的,因此用戶設置任意閾值是可能的。因此,通過設置嚴格或寬松的閾值,用戶可以調節要摘取的鏡頭或場景的總數,從而可以調節所摘取視頻圖像的回放時間。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖12的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖13所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8和游標控制裝置Pg9。下面將參照圖13對這些裝置每一個的功能和操作進行描述。
在圖13的流程圖中,預覽視頻圖像組織裝置Pg7從元信息讀出閾值(步驟S50),并且讀出每個鏡頭或場景的索引值(步驟S51),然后從各個鏡頭或場景當中僅摘取索引值與閾值一致的鏡頭或場景(步驟S52),并且登記所摘取鏡頭或所摘取場景(步驟S53)。該處理對所有鏡頭或場景執行(步驟S54)。
同時,瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值,并且在屏幕上將綜合結果作為視頻圖像標題的語義圖進行顯示。
然后,在語義圖中與由預覽視頻圖像組織裝置Pg7登記的每個所摘取場景或所摘取鏡頭對應的位置上置放一個標記(步驟S55)。
如果用戶將游標移動到語義圖上標志中的所需標志,語義圖上的位置由游標控制裝置Pg9進行指定(步驟S56)。根據來自游標控制裝置Pg9的指令,特征視頻圖像回放控制裝置Pg6或預覽視頻圖像回放控制裝置Pg8在指定標志位置之后順序回放標志部分(步驟S57)。
因此,可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產生的語義圖,從而可以顯現整個特征視頻圖像的結構。而且,通過參考作為所提供條件從元信息提供的所摘取鏡頭或場景的索引值,根據所更新的閾值確定要摘取的鏡頭或場景,然后在圖中與所摘取鏡頭或場景對應的位置顯示一個標志,所摘取鏡頭或場景在整個特征視頻圖像中的位置關系能夠得以清晰。
如果圖中的一個標志被指定,與該標志對應的所摘取鏡頭或場景的記錄位置可以根據時間代碼進行指定,并且與特征視頻圖像中的該記錄位置對應的部分視頻圖像能以預定次序進行順序回放。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖13的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖14所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8和游標控制裝置Pg9。下面將參照圖14對這些裝置每一個的功能和操作進行描述。
在圖14的流程圖中,瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值(步驟S60),并且在屏幕上將綜合結果作為視頻圖像標題的語義圖進行顯示(步驟S61)。
在這種情況下,瀏覽界面裝置Pg1從元信息讀出用于指定所摘取鏡頭或場景的信息(步驟S62),然后,在語義圖中與由預覽視頻圖像組織裝置Pg7登記的每個所摘取場景或鏡頭對應的位置上置放一個標志(步驟S63)。
如果用戶將游標移動到語義圖上標志中的所需標志,語義圖上的位置由游標控制裝置Pg9進行指定(步驟S64)。根據來自游標控制裝置Pg9的指令,特征視頻圖像回放控制裝置Pg6或預覽視頻圖像回放控制裝置Pg8在指定標志位置之后順序回放標志部分(步驟S65)。
因此,可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產生的語義圖,從而可以顯現整個特征視頻圖像的結構。
而且,通過參考作為所提供條件從元信息提供的,用于指定所摘取鏡頭或場景的信息根據所指定的閾值確定要摘取的鏡頭或場景,然后在語義圖中與所摘取鏡頭或場景對應的位置顯示一個標志,所摘取鏡頭或場景在整個特征視頻圖像中的位置關系能夠得以清晰。
如果語義圖上的一個標志被指定,與該標志對應的所摘取鏡頭或場景的記錄位置可以根據時間代碼進行指定,并且與特征視頻圖像中的該記錄位置對應的部分視頻圖像能以預定次序進行順序回放。
因此,通過參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息,在圖中與所摘取鏡頭或場景對應的位置顯示一個標志,所摘取鏡頭或場景在整個特征視頻圖像中的位置關系能夠得以清晰。
如果圖中的一個標志被指定,與該標志對應的所摘取鏡頭或場景的記錄位置可以根據時間代碼進行指定,并且與特征視頻圖像中的該記錄位置對應的部分視頻圖像能以預定次序進行順序回放。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖14的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖15所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8和游標控制裝置Pg9。下面將參照圖15對這些裝置每一個的功能和操作進行描述。
在圖15的流程圖中,瀏覽界面裝置Pg1綜合從元信息取出的各個鏡頭或場景的索引值(步驟S70),并且在屏幕上將綜合結果作為視頻圖像標題的語義圖進行顯示(步驟S71)。
如果用戶將游標移動到語義圖上的所需位置,語義圖上的位置由游標控制裝置Pg9進行指定(步驟S72)。根據來自游標控制裝置Pg9的指令,特征視頻圖像回放控制裝置Pg6或預覽視頻圖像回放控制裝置Pg8在指定標志位置之后順序回放視頻圖像(步驟S73)。
因此,可以在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產生的語義圖,從而可以顯現整個特征視頻圖像的結構。
如果語義圖上的特定位置被指定,與該位置對應的視頻圖像部分的記錄位置可以根據時間代碼進行指定,并且特征視頻圖像或預覽視頻圖像能從與該記錄位置對應的部分進行順序回放。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖15的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖16所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8。下面將參照圖16對這些裝置每一個的功能和操作進行描述。
在圖16的流程圖中,一接收到來自用戶的閾值更新輸入(步驟S80),瀏覽界面裝置Pg1就更新閾值(步驟S81)。
然后,預覽視頻圖像組織裝置Pg7從包含鏡頭或場景的時間代碼和為每個鏡頭或每個場景預設的索引值的元信息讀出各個鏡頭或場景的索引值(步驟S82),然后檢查索引值是否與閾值一致(步驟S83),并且將索引值與閾值一致的鏡頭或場景作為所摘取鏡頭或場景進行登記(步驟S84)。該處理對所有鏡頭或場景進行執行(步驟S85)。
然后,預覽視頻圖像組織裝置Pg7讀出所登記的所摘取鏡頭或場景的時間代碼(步驟S86),并且預覽視頻圖像回放控制裝置Pg8以預定次序順序回放和顯示從特征視頻圖像摘取的、與時間代碼對應的部分的視頻圖像(步驟S87)。
因此,要摘取的鏡頭或場景可以參考作為所提供條件從元信息提供的所摘取鏡頭或場景的索引值,根據所輸入的所更新閾值進行確定,并且所摘取視頻圖像可以通過指定所摘取鏡頭或場景的時間代碼進行順序回放。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖16的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖17所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8。下面將參照圖17對這些裝置每一個的功能和操作進行描述。
在圖17的流程圖中,預覽視頻圖像組織裝置Pg7從包含閾值、鏡頭或場景的時間代碼和為各個鏡頭或場景預設的索引值的元信息讀出閾值(步驟90),然后讀出各個鏡頭或場景的索引值(步驟S91),然后檢查索引值是否與閾值一致(步驟S92),并且將索引值與閾值一致的鏡頭或場景作為所摘取鏡頭或場景進行登記(步驟S93)。該處理對所有鏡頭或場景執行(步驟S94)。
然后,預覽視頻圖像組織裝置Pg7讀出所登記的所摘取鏡頭或場景的時間代碼(步驟S95),并且預覽視頻圖像回放控制裝置Pg8以預定次序順序回放和顯示從特征視頻圖像摘取的、與該時間代碼對應的部分的視頻圖像(步驟S96)。
因此,要摘取的鏡頭或場景可以參考作為所提供條件從元信息提供的所摘取鏡頭或場景的索引值、根據所指定的閾值進行確定,并且所摘取視頻圖像可以通過指定所摘取鏡頭或場景的時間代碼進行順序回放。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖17的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
作為本發明另一個實施例的視頻圖像回放設備的語義瀏覽器裝置具有如下結構,并且它的操作流程圖如圖18所示。
該語義瀏覽器裝置至少具有瀏覽界面裝置Pg1、顯示屏幕組織裝置Pg2、特征視頻圖像回放控制裝置Pg6、預覽視頻圖像組織裝置Pg7、預覽視頻圖像回放控制裝置Pg8。下面將參照圖18對這些裝置每一個的功能和操作進行描述。
在圖18的流程圖中,預覽視頻圖像組織裝置Pg7從包含鏡頭或場景的時間代碼和用于指定所摘取鏡頭或場景的信息的元信息讀出所摘取鏡頭或場景的時間代碼(步驟S100),預覽視頻圖像回放控制裝置Pg8以預定次序順序回放從特征視頻圖像摘取的、與時間代碼對應的部分的視頻圖像(步驟S101)。
因此,要摘取的鏡頭或場景可以參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息進行確定,并且所摘取視頻圖像可以通過指定所摘取鏡頭或場景的時間代碼進行順序回放。
作為本發明另一個實施例的一種計算機可讀記錄介質,其中記錄有一個用于使計算機作為按照圖18的流程圖操作的語義瀏覽器裝置進行工作的程序。數據載體單元如活動盤或內存棒和只讀半導體存儲器芯片(ROM芯片)可以用作該記錄介質。
當該計算機可讀記錄介質由計算機進行讀取和執行時產生的功能類似于語義瀏覽器裝置的上述功能,因此不作進一步的詳細描述。
同時,雖然驅動機制C13作為內置設備顯示在圖1中,但是它不限于這種內置設備,并且還能作為具有大容量存儲介質的外部單元連接到一個獨立的家庭服務器,并且作為家用設備進行應用。而且,驅動機制不僅可以連接到這種家庭服務器,還可以通過網絡如公用電話線連接到遠端的專用服務器。
用于獲取特征視頻圖像及其相關的元信息的方法舉例如下1.通過接收數字廣播,同時或分開獲取特征視頻圖像文件和附隨元信息。
2.通過網絡如因特網下載獲取元信息。
3.通過數據包介質系統一次性獲取特征視頻圖像和附隨元信息。
4.通過廣播系統或數據包介質系統獲取特征視頻圖像,并且從數據載體內存單元(例如,內存棒、內存卡或內存片)或通過數據包介質系統單獨獲取元信息。
在通過廣播系統接收元信息的情況下,要接收和獲取的元信息臨時記錄到高速存儲單元等中,并且通過使用該所記錄元信息,從記錄在大容量存儲介質或數據包介質如DVD上的特征視頻圖像摘取預定部分,從而獲取預覽視頻圖像。
通過廣播系統接收特征視頻圖像及其附隨元信息,然后實時地從特征視頻圖像摘取預覽視頻圖像,并且記錄所摘取預覽視頻圖像而不在屏幕上顯示是適當的。然而,接收特征視頻圖像、實時摘取預覽視頻圖像并在屏幕上顯示所摘取視頻圖像是不適當的。這是因為在屏幕上顯示所摘取視頻圖像不適合用于在實時摘取中準備各種模式的預覽視頻圖像。由于摘取依賴于特征視頻圖像在時間上的流動,因此不存在在屏幕上顯示預覽視頻圖像時頻繁出現的搜索和空閑時間的概念。另外,最好不要要求預覽視頻圖像和空閑時間具有與特征視頻圖像的視頻圖像時間相同的時間范圍。
因此,在通過廣播系統同時接收特征視頻圖像和元信息的情況下,最好將特征視頻圖像和元信息臨時記錄到記錄裝置中,并且使用特征視頻圖像和元信息獨立組織和回放預覽視頻圖像。
如上面所進行的詳細描述,本發明的視頻圖像回放設備或方法用于將各個鏡頭或場景的索引值作為元信息進行提供。因此,整個特征視頻圖像的結構可以通過在屏幕上顯示通過順序綜合各個鏡頭或場景的索引值而產生的圖進行顯示。
如果本發明的視頻圖像回放設備或方法參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息,在通過順序綜合各個鏡頭或場景的索引值而產生的圖中與所摘取鏡頭或場景對應的位置顯示一個標志,所摘取鏡頭或場景在整個特征視頻圖像中的位置關系能夠通過這些標記得以清晰。
如果本發明的視頻圖像回放設備或方法參考作為所提供條件從元信息提供的、用于指定所摘取鏡頭或場景的信息,指定在回放所摘取視頻圖像時要回放的所摘取鏡頭或場景,所摘取鏡頭或場景的記錄位置可以根據作為所提供條件從元信息提供的記錄位置信息進行指定,并且與特征視頻圖像中的記錄位置對應的各個所摘取視頻圖像能以預定次序進行順序回放。
特別,當圖上一個為所摘取鏡頭或場景提供的標志由用戶進行指定時,與該標志對應的所摘取鏡頭或場景的記錄位置可以根據作為所提供條件從元信息提供的記錄位置信息進行指定,并且與特征視頻圖像中的記錄位置對應的各個部分視頻圖像能以預定次序進行順序回放。
如果本發明的視頻圖像回放設備或方法在回放特征視頻圖像時指定通過順序綜合各個鏡頭或場景的索引值而產生的圖上的任意位置,在特征視頻圖像的對應位置之后的視頻圖像可以參考圖上與指定位置對應的鏡頭或場景的記錄位置信息,根據作為所提供條件從元信息提供的記錄位置信息進行順序回放。
如果本發明的視頻圖像回放設備或方法在圖上顯示表示所摘取鏡頭或場景的標志,并且用戶指定圖上的任意位置并指示回放特征視頻圖像,在那個位置之后的特征視頻圖像將進行回放。如果在特征視頻圖像回放期間用戶指定一個標志,并且指示回放所摘取鏡頭或場景,特征視頻圖像的回放將切換到所摘取鏡頭或場景在當前位置之后進行回放。如果用戶指定圖中一個表示所摘取鏡頭或場景的標志,并且指示對其的回放,在那個位置之后的所摘取鏡頭或場景將進行回放。如果在所摘取鏡頭或場景回放期間用戶指示回放特征視頻圖像,回放將切換到特征視頻圖像在當前位置之后進行回放。
采用上述結構,如果用戶指定圖上的任意位置,并且指示回放特征視頻圖像,與那個位置對應的場景或鏡頭將被指定,并且參考指定場景或鏡頭的記錄位置信息從該記錄位置對特征視頻圖像進行回放。如果用戶在特征視頻圖像回放期間指示回放所摘取鏡頭和場景,特征視頻圖像的回放將切換到所摘取鏡頭或場景在當前回放記錄位置之后進行回放。從而,可以執行特征視頻圖像和所摘取視頻圖像之間的有效瀏覽。
另一方面,如果用戶指定圖中一個表示所摘取鏡頭或場景的標志,并且指示回放所摘取鏡頭或場景,與那個位置對應的所摘取場景或鏡頭將被指定,并且參考所指定的所摘取場景或鏡頭的記錄位置信息從該記錄位置回放所摘取鏡頭或場景。而且,如果用戶在所摘取鏡頭或場景回放期間指示回放特征視頻圖像,所摘取鏡頭或場景的回放將切換到特征視頻圖像在當前回放記錄位置之后進行回放。從而,可以執行特征視頻圖像和所摘取視頻圖像之間的有效瀏覽。
如果本發明的視頻圖像回放設備或方法參考作為所提供條件從元信息提供的各個鏡頭或場景的索引值,根據指定閾值將索引值達到閾值的鏡頭或場景確定為所摘取鏡頭或場景,通過設置嚴格或寬松的閾值,可以調節要摘取的鏡頭或場景的類型或總數。
作為替換,如果視頻圖像回放設備或方法根據來自用戶的指令改變閾值,用戶可以設置任意閾值。從而,通過任意設置嚴格或寬松的閾值,可以調節要摘取的鏡頭或場景的類型或總數。因此,所摘取視頻圖像的類型或回放能以所需方式進行調節。
如果本發明的視頻圖像信息記錄設備或方法在屏幕上顯示一個顯現通過順序綜合作為所提供條件從元信息提供的各個鏡頭或場景的索引值而產生的值的圖,并且由用戶指定圖中的任意位置作為插入標記的位置,至少與屏幕上的指定位置對應的記錄位置信息將作為標記位置額外記錄到元信息。因此,標記可以插入到任意視頻圖像中。由于該標記位置是額外記錄到元信息并作保存的,因此它可以在任意時候進行讀出。
本發明的視頻圖像回放設備或方法用于檢索元信息、讀出作為所記錄標記位置的記錄位置信息,并且從該記錄位置回放視頻圖像。因此,在檢測到插入在任意位置的標記之后,視頻圖像從那個部分進行回放和顯示。
另外,本發明的視頻圖像回放設備或方法用于執行對特征視頻圖像或所摘取視頻圖像的批量記帳或計量價格記帳。因此,可以消除不執行記帳的缺陷,并且合理的記帳成為可能。
從上述描述可以清楚地看到,根據本發明,在回放視頻圖像期間在圖上確認整個視頻圖像的變化時能夠移到所需部分并觀看所需視頻圖像,并且自由地執行特征視頻圖像和所摘取視頻圖像之間的瀏覽。
因此,不僅可以提供便于決定購買或選擇視頻圖像標題的功能,還可以提供便于觀看所選和所購買視頻圖像標題的瀏覽功能。
另外,由于對特征視頻圖像和所摘取視頻圖像執行各種類型的記帳,便于視頻圖像標題提供方和用戶方的高信賴記帳處理能以顯著的效果實現。
權利要求
1.一種屏幕控制方法,應用于在屏幕上顯示由連續視頻圖像組成的特征視頻圖像的連續視頻圖像顯示階段,和在屏幕上順序顯示通過摘取特征視頻圖像的預定部分獲取的多個所摘取視頻圖像集的所摘取視頻圖像顯示階段,每一個所摘取視頻圖像集由多個所摘取視頻圖像組成,該方法包括如下步驟在所摘取視頻圖像顯示階段,顯示至少具有第一視頻圖像顯示區域、第一視頻圖像變化顯示區域和第一切換輸入區域的第一屏幕;在第一視頻圖像顯示區域內,顯示包括多個根據當前視頻圖像記錄位置進行回放的所摘取視頻圖像集的預覽視頻圖像;在第一視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖、附加在圖上位于與每個所摘取視頻圖像對應的視頻圖像記錄位置的標志、和一個游標,該游標隨著時間的流逝不斷更新當前顯示在第一視頻圖像顯示區域內的所摘取視頻圖像的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置;在第一切換輸入區域內顯示第一按鈕,該第一按鈕允許輸入一個指令來在停止和保留當前視頻圖像記錄位置的同時從第一屏幕切換到在連續視頻圖像顯示階段中顯示的第二屏幕;在連續視頻圖像顯示階段,顯示至少具有第二視頻圖像顯示區域、第二視頻圖像變化顯示區域和第二切換輸入區域的第二屏幕;在第二視頻圖像顯示區域內,顯示根據當前視頻圖像記錄位置進行回放的特征視頻圖像;在第二視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和一個游標,該游標隨著時間的流逝不斷更新當前顯示在第二視頻圖像顯示區域內的特征視頻圖像中的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到特征視頻圖像的任意視頻圖像記錄位置;在第二切換輸入區域內顯示第二按鈕,該第二按鈕允許輸入一個指令來在停止和保留當前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕;和根據每個在第一按鈕或第二按鈕顯示期間輸入的指令,在所摘取視頻圖像顯示階段和連續視頻圖像顯示階段之間進行切換,以顯示第一屏幕或第二屏幕。
2.一種屏幕控制設備,適合用于在連續視頻圖像顯示階段顯示第二屏幕,其中,連續視頻圖像顯示階段將由連續視頻圖像組成的特征視頻圖像作為第二屏幕進行顯示,及在所摘取視頻圖像顯示階段顯示第一屏幕,其中,所摘取視頻圖像顯示階段將通過摘取特征視頻圖像的預定部分獲取的多個所摘取視頻圖像集作為第一屏幕進行順序顯示,該設備包括用于在第一屏幕中至少顯示第一視頻圖像顯示區域、第一視頻圖像變化顯示區域和第一切換輸入區域的裝置;用于在第一視頻圖像顯示區域內,顯示包括多個根據當前視頻圖像記錄位置進行回放的所摘取視頻圖像集的預覽視頻圖像的裝置;用于在第一視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖和附加在圖上位于與每個所摘取視頻圖像對應的視頻圖像記錄位置的標志的裝置;用于顯示游標的裝置,該游標附加在視頻圖像變化圖上,隨著時間的流逝不斷更新當前顯示在第一視頻圖像顯示區域內的所摘取視頻圖像中的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到所摘取視頻圖像的任意一個中的任意視頻圖像記錄位置;用于在第一切換輸入區域內顯示第一按鈕的裝置,該第一按鈕允許輸入一個指令來在停止和保留當前視頻圖像記錄位置的同時從第一屏幕切換到在連續視頻圖像顯示階段中顯示的第二屏幕;用于在第二屏幕中至少布置第二視頻圖像顯示區域、第二視頻圖像變化顯示區域和第二切換輸入區域的裝置;用于在第二視頻圖像顯示區域內,顯示根據當前視頻圖像記錄位置進行回放的特征視頻圖像的裝置;用于在第二視頻圖像變化顯示區域內,顯示顯現特征視頻圖像的視頻圖像記錄位置變化的視頻圖像變化圖的裝置;用于顯示游標的裝置,該游標附加在視頻圖像變化圖上,隨著時間的流逝不斷更新當前顯示在第二視頻圖像顯示區域內的特征視頻圖像中的當前視頻圖像記錄位置,并且允許從當前視頻圖像記錄位置移到特征視頻圖像中的任意視頻圖像記錄位置;用于在第二切換輸入區域內顯示第二按鈕的裝置,該按鈕允許輸入一個指令來在停止和保留在指令時的當前視頻圖像記錄位置的同時從第二屏幕切換到在所摘取視頻圖像顯示階段顯示的第一屏幕;和用于根據每個在第一按鈕或第二按鈕顯示期間輸入的指令,在所摘取視頻圖像顯示階段和連續視頻圖像顯示階段之間進行切換,以顯示第一屏幕或第二屏幕的裝置。
全文摘要
從接收區(C10)讀取的主視頻(vdt)和縮略圖(sdt)記錄在大容量存儲介質上(M1),并且元信息(mdt)記錄在高速存儲器(C12)上。根據元信息(mdt),語義瀏覽裝置(C1)在編輯預覽視頻時從主視頻摘取部分視頻。而且根據元信息(mdt),在屏幕上顯示語義圖和當前位置。如果發生位置指定輸入,主視頻或預覽視頻從指定位置進行再現。如果發生瀏覽指定輸入,語義瀏覽裝置(C1)瀏覽主視頻及其預覽視頻,并且只瀏覽主視頻或預覽視頻。記帳區(C18)執行記賬。
文檔編號H04N5/781GK1553706SQ200410031529
公開日2004年12月8日 申請日期2000年2月24日 優先權日1999年2月24日
發明者高橋靖 申請人:索尼公司