一種多媒體多信息同步重現的方法及其應用
【技術領域】
[0001]本發明涉及一種不同類型信息同步重現的方法，特別是一種多媒體多信息同步重現的方法及其運用。
【背景技術】
[0002]在對同時涉及聲音、圖像與文字和行蹤、行為這些信息在內的多媒體多信息的集合進行存儲、回放和檢索、查詢時，目前需要使用多種軟、硬件設備系統以及手段和方法才能達到目的。
[0003]一、常見的多媒體多信息集合包括:
(一)、公安部關于機動車駕駛證領、考過程所包含的信息:
1.1、不少于兩個通道的實時視頻信息；
1.2、考車駕駛室內的實時音頻信息；
1.3、監控中心考試員與考生的實時對話信息；
1.4、考車行駛過程的實時位置信息；
1.5、考生考試時所使用的考試車輛即考車的信息；
1.6、負責監考某個考生的考試員的信息；
1.7、正在進行考試的考生信息；
1.8、考生的考試成績及其評判依據；
1.9、對考生進行扣分評定時必須記錄的實時音頻和視頻信息、考車即時所處位置、當時即時時刻等實時信息。
[0004]1.10、其它的國家標準沒有明確規定的并在某些考場認為又需要附加的某些信息，如考生報名、學習、考試的過程以下一些信息:
1.101、對報名學習機動車駕駛技能的人員以及駕駛員和其他人員的體檢過程進行監督所要記錄的信息:
1.102、監督體檢過程的音頻、視頻信息；
1.103、體檢人與被體檢人的信息；
1.104、體檢單位的信息；
1.105、體檢結果的信息。
[0005](二)、對機動車的安全、技術性能的檢驗過程進行監督所要記錄的信息:
2.1、監督及年檢過程的音頻、視頻信息；
2.2、機動車年檢時需提供的相關信息；
2.3、年檢單位及檢驗員、引車員的信息；
2.4、檢驗結果的信息。
[0006](三)、各種事故現場的處理需要涉及到的信息:
3.1、現場勘探過程的音頻、視頻信息；
3.2、勘探、測量人員及產生的現場信息； 3.3、現場處理單位和負責當時現場處理的人員的信息；
3.4、現場處理結果的信息。
[0007](四)、其它各種實時監控過程需要涉及到的一些信息:
4.1、對運鈔車、危險物品運輸車等執行特種任務的車輛的日常監督、實時跟蹤過程產生音頻、視頻和實時時間、行駛軌跡及相關的調度、管理等信息；
4.2、需要用聲音、圖像等手段嚴把產品監督檢驗過程各相應階段的相關信息；
4.3、車輛上牌及4S店服務監督時需要管理的各種信息；
4.4、銀行業務流程監控過程必須的有關信息；
4.5、為用于作憑證使用的音、像、圖片及其對應的所有其它資料。
[0008]二、現有多媒體多信息同步重現的方法:
在對同時涉及聲音、圖像與文字和行蹤、行為這些信息在內的多媒體多信息的集合進行存儲、回放和檢索、查詢時，目前是采用下列眾多技術進行集成的:
1、通過音頻、視頻采集與記錄系統來對聲音、圖像進行同步采集與記錄；
2、通過電腦數據庫系統來對非聲音、非圖像的信息進行記錄；
3、在對多媒體多信息進行朔源時，使用相應聲音、圖像播放器進行回放或復原的，對非聲音、非圖像的信息則是通過數據庫查詢系統進行搜索、查詢與顯示的，對被監控對象當時所對應的即時時刻所處位置是綜合應用數據庫查詢系統和虛擬技術進行模擬顯示和還原的。
[0009]三、現有多媒體多信息同步重現的方法的缺點:
(一)在對過程信息進行朔源時，同時須要使用多種沒有在時間問題上存在有能夠同時一一對應關聯的系統作手段，因此不管理論上還是實踐中都無法解決回放時聲音、圖像、圖片等信息與對應的非聲音、非圖像、非圖片信息等其它多種信息的同步問題，如:
記錄駕駛人駕駛技能考試過程時需要多個信息集文件，當需要重現視頻和行駛軌跡時，不同步現象尤為明顯突出，只能異步地描繪出來的行駛軌跡與考試車輛實時記錄下來的視頻信號之間的時間差是不確定的，根本無法控制，這樣很容易引起視覺誤差，在有評判扣分點時，使觀察者認為是一種評判錯誤，甚至會導致對正確性產生懷疑或糾紛；
在對需要報名學習機動車駕駛技能的人進行報名前的體檢時，為了杜絕不正之風、防止弄虛作假和確保公平、公證，新標準規定了不允許在受到車管所民警實時監管下的指定設置在車管所內部的體檢機構進行相應的工作，而是讓不能受車管所直接干預的具有體檢資質的中立醫院作為第三方進行體檢的，這時為了確保體檢結果的真實性并實施有效的過程監督，需要結合音、像信息作佐證，這時就會出現在進行監督檢查時重現的這些信息存在明顯的時間異步問題:用文字表示的體檢結果與體檢過程的音、像沒有固定的時間關系。
[0010](二)用目前的數據庫技術對即時時刻發生的靜態信息及動態信息進行存儲時，由于接口的通用性和技術的開放性問題，使得其安全性得不到保障，會很容易地被不法份子篡改，從而破壞了信息數據的真實性。
[0011](三)用目前的數據庫技術對與時間無關的靜態信息及與時間存在著一一對應關系的動態信息進行存儲時，分別保存于多個不同類型的文件當中，因此要查找起來就很麻煩，比較費工、費時，若要同步重現就更加困難，有時時差甚至超過了 10分鐘。
【發明內容】
[0012]本發明的目的在于提供一種多媒體多信息同步重現的方法，以解決已有技術存在的上述問題；利用本發明方法能做到:
①由于多媒體多信息文件被實時地同時保存在同一個文件當中，因此可以保證在查詢時和回放時能夠高度地得到同步，避免了同一時刻發生的事件和現象不能在同一時刻重現回放的非實時性問題；
②把存儲多媒體多信息的多個相關文件數量適當合并在一起，可減少存儲空間的占用量;
③優化傳統的多媒體多信息文件的存儲保存方法，在減少存儲空間的同時也提高了篡改信息的難度；
④提高查詢多媒體多信息的便利性和速度，減少時間的浪費。
[0013]⑤提高多媒體多信息的安全性、保密性，使多媒體多信息文件在流轉、復制及查閱過程不易被泄漏、篡改、刪除。
[0014]為解決上述問題，本發明采用的技術方案是:一種多媒體多信息同步重現的方法，該方法是通過“多信息調制單元”把具有關聯信息關系的多個相關文件或多種信息流合并在一起，然后再通過專用的能夠把多信息同步重現回放出來的播放器來同步再現的方法，該方法包括以下基本步驟:
A、多信息同步記錄步驟:
該步驟是通過“多信息調制單元”的“多信息混合器”把“非音頻、視頻信息”插入到“壓縮前的音頻、視頻流”或“壓縮后的音頻、視頻流或其文件”中，即在“壓縮前的音頻、視頻流”或“壓縮后的音頻、視頻流或其文件”中必需的“視頻幀”或“音頻幀”內嵌入一些攜帶有“非音頻、視頻信息”的“附加信息塊”和/或是在必需的“視頻幀”、“音頻幀”之間創建或者插入一些攜帶有“非音頻、視頻信息”的“附加信息幀”，最終形成新的符合某種壓縮標準要求的音頻、視頻流CMSAV或其文件CMSAVF ；
B、多信息同步重現步驟:
該步驟是通過“多信息同步重現單元”即“多媒體多信息解調單元”將承載有“非音頻、非視頻信息”的表面上看來仍然是符合某種壓縮標準要求的音頻、視頻的“多媒體多信息文件CMSAVF ”經過“多信息文件解調器”后，分別獲得“附加信息塊”、“音頻幀”、“視頻幀”共三種信息集合，之后將作為“多媒體流信息”基本單元的“音頻幀”、“視頻幀”送給“音頻、視頻解碼器或播放器”還原出錄制前的音頻、視頻信息和場景；而對從“多媒體多信息文件CMSAVF”中解調得到的“附加信息塊”再次進行相應的“解調”或稱為“解碼”處理，還原出嵌入到“多媒體多信息文件CMSAVF”中的“非音頻、視頻信息”。
[0015]其進一步技術方案是:所述A、多信息同步記錄步驟中，當搭載“非音頻、非視頻信息”的“流媒體”是多路音頻、視頻信息時，需要它們能夠滿足“同步”的要求，對多路音頻、視頻的同步處理方法是:在A、多信息同步記錄步驟之前增加一個AO 預處理步驟”；
A01、通過數據采集單元的視頻預處理單元將多通道的視頻信息混合成單一通道的視頻信息CVS ；
其方法是:同時采集h個通道的模擬視頻攝像機信號并將其數字化或k個通道的數字視頻攝像機的實時動態視頻信號，最后利用“視頻數字混合器”把它們合并成只需I個通道就能滿足國家標準要求和用戶特殊要求的數字視頻信號CVS供后級綜合處理或簡單的存儲記錄使用；上述h、k的取值范圍是:h=0，l，2，……，24，k=0，l，2，……，24，h+k=l，2，3，……24 ；
A02、通過數據采集單元的音頻預處理單元將多通道的音頻信息混合成單一通道的音頻信息DAS:
其方法是；同時把m個通道來自模擬音頻拾音器的實時音頻模擬信號通過模擬音頻混合電路將其混合成單一通道的模擬音頻信號HAS，然后再進行數字化處理并與η個通道數字音頻拾音器的實時音頻數字信號通過“數字音頻混合器”混合成只需I個通道就可以滿足國家標準要求和用戶特殊要求的單通道數字音頻信號DAS，作為“數字音頻拾音器”和模擬音頻拾音器的信號源，m、η的取值范圍是:m = O，I，2，……，24，n=0，l，2，……，24，m+η = I，2，3，......，24。
[0016]其更進一步技術方案是:所述A、多信息同步記錄步驟中，對單路音頻、視頻信息的處理方法是:先同步地分別對“音頻信息DAS、視頻信息CVS”進行數字化采集，獲得沒有經過壓縮的原始數字音頻、視頻混合信息流AVS的信息流，然后根據不同的同步時差分別采取以下Al或A2兩種方法之一種或是同時采用兩種方法進行處理:
Al:先把同步采集到的數字化“音頻、視頻信息” AVS通過“多信息混合器”插入“非音頻、非視頻信息”，形成對AVS添加了非音頻、非視頻信息后形成的多信息音頻、視頻流MSA