專利名稱：通過視頻會議通信的方法和設備的制作方法
技術領域：
本發明涉及視頻會議通信。
背景技術：
通常，視頻會議使得本地用戶能夠通過語音和視覺與至少一個遠程用戶通信。在此方面，每個用戶使用向他或她顯示該用戶的圖像的至少一個屏幕，以及使用攝像機為其他用戶捕獲他或她自己的圖像。如果用戶彼此間隔很長的距離，則視頻會議通信(尤其是使用衛星的視頻會議通信)會在用戶間產生相對嚴重的不同步問題。這是因為本地用戶的圖像在一段可能相對較長的時間后到達遠程用戶的位置處，該段時間取決于所使用的通信網絡、圖像的編碼、距離，以及用戶之間的語音和圖像傳播速度。結果是用戶不能彼此自然和交互地交談的負面感覺，這阻止了用戶之間的高質量通信。
發明內容
本發明提供了對此問題的解決方案。本發明披露了一種在本地用戶與至少一個遠程用戶之間的視頻會議通信設備，所述設備包括本地屏幕，能夠向所述本地用戶顯示所述遠程用戶的圖像；以及本地圖像傳感器，能夠為所述遠程用戶捕獲所述本地用戶的圖像。根據本發明的一種一般定義，所述設備還包括本地延遲單元，其能夠將選定延遲施加于來自本地圖像傳感器的本地用戶的圖像，本地屏幕能夠向本地用戶顯示由此延遲后的所述本地用戶的圖像，以便在遠程顯示本地用戶的圖像的同時，本地顯示由此延遲后的所述本地用戶的圖像。因此，由于本發明的設備，消除了不同步的負面感覺，因為在遠程顯示本地用戶自己的圖像時，本地用戶具有他或她自己的圖像的本地視圖，這使得他或她能夠實現高質量的視頻會議通信。根據一個實施例，根據屬于由通信網絡、圖像編碼、距離、語音和圖像傳播速度和/ 或經歷的傳輸時間構成的組的元素的技術特征來計算所述延遲。根據另一個實施例，根據所述本地用戶與所述遠程用戶之間的往返傳輸時間來計算所述延遲。根據另一個實施例，實時地、動態地、永久地或以給定步調計算所述延遲。根據另一個實施例，額外考慮傳輸質量，本地顯示所述圖像，這使得在遠程顯示本地用戶自己的圖像時，本地用戶不僅能夠同時而且能夠以相同的質量在本地查看其自己的圖像，這進一步改善了沉浸的感覺。根據另一個實施例，所述設備還包括疊加單元，能夠將由此延遲后的所述本地用戶的圖像與沒有延遲的所述本地用戶的圖像相疊加，這使得所述本地用戶能夠根據所述本地用戶的具有和沒有延遲的圖像之間的差異來調整他或她的行為。
根據另一個實施例，所述設備還包括處理單元，能夠將聲音傳輸中存在的回聲和/ 或本地用戶與遠程用戶之間的傳輸滯后轉換為可視或振動表示。這在音頻會議中也是有利的。本發明的另一個目的是一種在本地用戶與至少一個遠程用戶之間的視頻會議通信方法，所述方法包括向本地用戶提供本地屏幕和本地圖像傳感器，本地屏幕能夠向本地用戶顯示本地用戶的圖像，本地圖像傳感器能夠為遠程用戶捕獲本地用戶的圖像。根據本發明的另一個方面，所述方法還包括以下步驟將選定延遲本地地施加于來自本地圖像傳感器的本地用戶的圖像，并且向所述本地用戶顯示由此延遲后的所述本地用戶的圖像，以便在遠程顯示所述本地用戶的圖像的同時，本地顯示由此延遲后的本地用戶的圖像。根據另一個實施例，所述遠程用戶具備另一通信設備，該設備包括遠程屏幕，能夠向所述遠程用戶顯示所述本地用戶的圖像；遠程圖像傳感器，能夠為所述本地用戶顯示所述遠程用戶的圖像；以及遠程延遲單元，其能夠將選定延遲施加于來自遠程圖像傳感器的遠程用戶的圖像，并且其中向遠程用戶顯示由此延遲后的遠程用戶的圖像，以便在給定時刻向所述遠程用戶顯示的由此延遲后的所述遠程用戶的圖像與在所述時刻向所述本地用戶顯示的所述遠程用戶的圖像相匹配。
在研究以下詳細說明和附圖后，本發明的其他特征和優點將變得顯而易見，這些附圖是圖1示意性地示出了根據現有技術的兩個彼此間隔很長距離的用戶之間的視頻會議通信；圖2示意性地示出了圖1的視頻會議通信，其中根據本發明將延遲施加于本地用戶的圖像；圖3詳細示出了本發明的設備的一個變型實施例；圖4是示出本發明的方法的流程圖；以及圖5示意性地示出了圖2的視頻會議通信，其中所施加的延遲與用戶間的往返時間匹配。
具體實施例方式現在參考圖1，在位于地點2處的本地用戶1與位于遠離地點2 (例如，幾千公里之外)的地點4處的遠程用戶3之間建立視頻會議通信。在一個變型中，在本地用戶1與多個遠程用戶3之間建立視頻會議通信。借助其處理裝置10位于地點2處的通信設備5建立視頻會議通信。在一個變型中，通信設備5的處理裝置10可以位于諸如地點4之類的不同地點。在地點2，通信設備5包括屏幕7，屏幕7能夠以滯后D向本地用戶1顯示遠程用戶3的圖像13。在此，滯后D隨所使用的通信網絡、圖像編碼、距離，以及兩個地點2與4之間的語音和圖像的傳播速度而變化。設備5還包括攝像機9，能夠為遠程用戶3捕獲本地用戶1的圖像II。屏幕7還能夠在參考時間T顯示來自攝像機9的本地用戶1的圖像II。
在地點4，屏幕11可以向遠程用戶3顯示來自通信設備5的本地用戶的圖像II。 以滯后D顯示圖像II，滯后D隨所使用的通信網絡、圖像編碼、距離，以及用戶之間的語音和圖像的傳播速度而變化。屏幕11還顯示由位于地點4處的攝像機13捕獲的遠程用戶3的圖像。經由設備5以等于T+D的時間在屏幕7上顯示此圖像13并以等于T+2D的時間在屏幕11上顯示此圖像13。因此，現有技術的通信設備經歷用戶之間相對較高的不同步的問題。這是因為本地用戶的圖像11在可能較長的滯后D之后到達遠程用戶的位置，而本地用戶并不知曉該滯后D。結果造成用戶不能彼此自然和交互地交談的負面感覺，這阻止了用戶之間的高質量通參考圖2，設備5還包括本地延遲單元12，其能夠將選定延遲R施加于來自本地圖像傳感器9的本地用戶的圖像II。本地屏幕7然后在等于T+R的時間向本地用戶顯示由此延遲后的本地用戶的圖像 II，而遠程屏幕11在等于T+R+D的時間向遠程用戶顯示本地用戶的圖像II，其中D是兩個地點之間的通信滯后。這樣選擇延遲R 在本地顯示遠程用戶的圖像的同時在屏幕7上本地顯示由此延遲后的本地用戶的圖像II。換言之，選擇延遲R，使得在屏幕7上顯示的時間等于T+R的圖像Il和時間等于T+D的圖像13被同步，此處意味著T+R = T+D。同樣，在此選擇延遲R，使得以等于T+D+R的時間在屏幕11上顯示的由此延遲后的本地用戶的圖像Il與以等于T+2D的時間在屏幕11上顯示的遠程用戶的圖像同步，此處意味著 T+R+D = T+D+D。參考圖3，通信設備在地點2處包括延遲單元14，其能夠將選定延遲Rl施加于來自圖像傳感器9的用戶圖像II，并且在經由通信網絡15與地點2相連的地點4處，通信設備包括延遲單元16，能夠將延遲R2施加于來自圖像傳感器13的用戶圖像13。選擇延遲Rl和R2，以便圖像Il和13在屏幕7和11上同步，此處意味著T+R1 = T+D = T+R2。參考圖4，視頻會議通信方法的主要步驟如下。在步驟Si，使用圖像傳感器9和13執行視頻獲取。在步驟S2，估計延遲R和/或延遲Rl和R2。例如，通過測量將圖像從本地地點發送到遠程地點時的時間差來估計所述延遲。 例如，在RTP (實時傳輸協議)分組上執行此測量，并將時鐘與NTP (網絡時間協議)信號同步。在一種變型中，通過測量探測分組到達和例如使用UDP(用戶數據報協議)或 ICMP (互聯網控制消息協議)發送探測分組時的時間差來估計所述延遲。在實際中，實時地、動態地、永久地或以給定步調計算所述延遲。在步驟S3，將由此估計的延遲施加于步驟Sl期間獲得的圖像。在實際中，通過使預定用于全屏幕的分組存儲在存儲器中的持續時間對應于傳輸滯后D來施加所述延遲。在一種變型中，通過更改要發送到解碼圖像的設備的分組的時間標簽來施加所述延遲。
在實際中，在額外考慮傳輸質量(比特率、錯誤率等)的情況下本地地顯示圖像， 這使得在遠程顯示本地用戶自己的圖像時，本地用戶不僅能夠同時而且能夠以相同的質量在本地查看其自己的圖像。在步驟S4，執行在屏幕7和11上顯示圖像的步驟。例如，為了進一步改善視頻會議的質量，所述設備還包括疊加單元，其能夠在每個屏幕7和11上將由此延遲后的用戶圖像與沒有延遲的用戶圖像相疊加，這使得所述用戶能夠根據所述用戶的具有和沒有延遲的圖像之間的差異來調整他或她的行為。根據另一個實施例，所述設備還包括處理單元，其能夠將聲音傳輸中存在的回聲和/或本地用戶與遠程用戶之間的傳輸滯后轉換為可視或振動表示。參考圖5，延遲單元18施加延遲R，延遲R的值是根據兩個地點之間的往返傳輸滯后來計算的，此處R = 2D。因此，屏幕7上顯示的圖像Il和13是同步的并在等于T+2D的時間顯示圖像Il 和13。同樣，屏幕11上顯示的圖像Il和13是同步的并在等于T+2D的時間顯示圖像Il和 13。
權利要求
1.一種在本地用戶(1)與至少一個遠程用戶( 之間的視頻會議設備，所述視頻會議設備包括屏幕(7)，能夠向所述本地用戶⑴顯示所述遠程用戶的圖像(13)；以及圖像傳感器(9)，能夠為所述遠程用戶( 捕獲所述本地用戶的圖像(II)，其特征在于，所述視頻會議設備還包括延遲單元(12、14、16、18)，所述延遲單元(12、14、16、18)能夠將選定延遲 (R)施加于來自本地圖像傳感器的本地用戶⑴的圖像(II)，所述屏幕(7)能夠向本地用戶(1)顯示由此延遲后的本地用戶的圖像，以便在遠程顯示所述本地用戶的圖像的同時本地顯示由此延遲后的本地用戶的圖像。
2.根據權利要求1所述的設備，其中根據屬于由通信網絡、圖像編碼、距離、語音和圖像傳播速度和/或經歷的傳輸時間構成的組的元素的技術特征來計算所述延遲(R)。
3.根據權利要求1所述的設備，其中根據所述本地用戶與所述遠程用戶之間的往返傳輸滯后來計算所述延遲。
4.根據權利要求1所述的設備，其中實時地、動態地、永久地或以給定步調計算所述延遲。
5.根據權利要求1所述的設備，其中額外考慮所述本地用戶與所述遠程用戶之間的傳輸的比特率或錯誤率，本地顯示所述本地用戶的圖像。
6.根據權利要求1所述的設備，其特征在于，所述設備還包括疊加單元，能夠將由此延遲后的本地用戶的圖像與沒有延遲的本地用戶的圖像相疊加，這使得本地用戶能夠根據所述本地用戶的具有和沒有延遲的圖像之間的差異來調整他或她的行為。
7.根據權利要求1所述的設備，其特征在于，所述設備還包括處理單元，能夠將聲音傳輸中存在的回聲和/或本地用戶與遠程用戶之間的傳輸滯后轉換為可視或振動表示。
8.一種在本地用戶與至少一個遠程用戶之間的視頻會議通信方法，所述方法包括向所述本地用戶配備本地屏幕和本地圖像傳感器，所述本地屏幕能夠向所述本地用戶顯示所述本地用戶的圖像，所述本地圖像傳感器能夠為遠程用戶捕獲本地用戶的圖像，其特征在于， 所述方法還包括以下步驟將選定延遲本地地施加于來自本地圖像傳感器的本地用戶的圖像，并且向所述本地用戶顯示由此延遲后的本地用戶的圖像，以便在遠程顯示所述本地用戶的圖像的同時本地顯示由此延遲后的本地用戶的圖像。
9.根據權利要求8所述的方法，其中所述遠程用戶C3)配備有另一通信設備，所述另一設備包括遠程屏幕(11)，能夠向所述遠程用戶顯示所述本地用戶的圖像；遠程圖像傳感器(13)，能夠為所述本地用戶顯示所述遠程用戶的圖像；以及遠程延遲單元(16)，能夠將選定延遲(似)施加于來自所述遠程圖像傳感器的遠程用戶的圖像，并且其中向所述遠程用戶顯示由此延遲后的遠程用戶的圖像，以便在給定時刻向所述遠程用戶顯示的由此延遲后的遠程用戶的圖像與在所述時刻向所述本地用戶顯示的遠程用戶的圖像相匹配。
全文摘要
一種用于本地用戶(1)與至少一個遠程用戶(3)之間的視頻會議的設備，所述設備包括屏幕(7)，能夠向所述本地用戶(1)恢復所述遠程用戶的圖像(I3)；以及圖像傳感器(9)，能夠為所述遠程用戶(3)捕獲所述本地用戶的圖像(I1)。所述設備還包括延遲設施(14)，能夠將選定延遲(R1)施加于源自本地圖像傳感器的所述本地用戶(1)的圖像(I1)，所述屏幕(7)能夠向本地用戶(1)恢復由此延遲后的所述本地用戶的圖像，以便在遠程恢復所述本地用戶的圖像的同時，本地恢復由此延遲后的所述本地用戶的圖像。
文檔編號H04N7/15GK102246520SQ200980149490
公開日2011年11月16日 申請日期2009年12月10日 優先權日2008年12月10日
發明者B·萊克勒克, O·馬爾塞 申請人:阿爾卡特朗訊公司