基于增強現實技術的舞臺表演輔助訓練方法及系統的制作方法
【技術領域】
[0001]本發明涉及增強現實技術領域，具體涉及一種基于增強現實技術的舞臺表演輔助訓練方法及系統。
【背景技術】
[0002]增強現實技術可以將計算機生成的二維或三維數字信息疊加融合到真實的環境中，從而增強使用者在真實環境中的感知能力，加深沉浸感的體驗。增強現實技術的主要特征為定點跟蹤捕捉，虛實物體融合以及即時行為交互。目前，增強現實技術廣泛應用在動作輔助訓練領域，通過移動跟蹤攝像頭的視頻顯示模式，使用者可以從第三視角觀察進行自我訓練的動作糾正，這種方式可以擺脫自我視角觀察的局限性，加大使用者在訓練過程中的視覺自由度，從而提升訓練效果。但是，現有的多視角跟蹤顯示系統缺乏對于動作標準性的實時檢測，從而不利于糾正使用者的動作。
【發明內容】
[0003]本發明的目的在于，提供一種基于增強現實技術的舞臺表演輔助訓練方法及系統，能夠檢測使用者動作的標準性。
[0004]為此目的，一方面，本發明提出一種基于增強現實技術的舞臺表演輔助訓練方法，包括:
[0005]S1、利用第一攝像頭和第二攝像頭分別采集穿戴可穿戴式顯示頭盔的使用者左眼和右眼視野范圍內的真實場景圖像，利用固定第三視角的紅外深度攝像頭采集所述使用者的深度圖像數據，其中，所述第一攝像頭和第二攝像頭固定在所述可穿戴式顯示頭盔的前部，所述可穿戴式顯示頭盔包括第一目鏡和第二目鏡，所述第一目鏡位于所述使用者左眼的前方，所述第二目鏡位于所述使用者右眼的前方；
[0006]S2、從所述深度圖像數據中提取所述使用者的圖像數據和所述使用者的骨骼關節點的位置數據；
[0007]S3、將所述使用者左眼視野范圍內的真實場景圖像與所述使用者的圖像數據及預設的指導者的影像進行融合，得到第一融合影像，將所述使用者右眼視野范圍內的真實場景圖像與所述使用者的圖像數據及所述指導者的影像進行融合，得到第二融合影像；
[0008]S4、利用預設的指導者的骨骼關節點的位置數據和所述使用者的骨骼關節點的位置數據檢測所述使用者的動作是否標準，并在所述使用者的動作不標準時，在所述第一融合影像和第二融合影像上的相應位置進行標識；
[0009]S5、將所述第一融合影像和第二融合影像分別以適合左、右眼觀看的模式同步顯示在所述第一目鏡和第二目鏡中。
[0010]另一方面，本發明提出一種基于增強現實技術的舞臺表演輔助訓練系統，包括:
[0011]第一攝像頭、第二攝像頭、可穿戴式顯示頭盔、提取裝置、融合裝置、檢測裝置和固定第三視角的紅外深度攝像頭；其中，
[0012]所述第一攝像頭，用于采集穿戴所述可穿戴式顯示頭盔的使用者左眼視野范圍內的真實場景圖像，所述第二攝像頭，用于采集所述使用者右眼視野范圍內的真實場景圖像，所述紅外深度攝像頭，用于采集所述使用者的深度圖像數據，其中，所述第一攝像頭和第二攝像頭固定在所述可穿戴式顯示頭盔的前部，所述可穿戴式顯示頭盔包括第一目鏡和第二目鏡，所述第一目鏡位于所述使用者左眼的前方，所述第二目鏡位于所述使用者右眼的前方；
[0013]所述提取裝置，用于從所述深度圖像數據中提取所述使用者的圖像數據和所述使用者的骨骼關節點的位置數據；
[0014]所述融合裝置，用于將所述使用者左眼視野范圍內的真實場景圖像與所述使用者的圖像數據及預設的指導者的影像進行融合，得到第一融合影像，將所述使用者右眼視野范圍內的真實場景圖像與所述使用者的圖像數據及所述指導者的影像進行融合，得到第二融合影像；
[0015]所述檢測裝置，用于利用預設的指導者的骨骼關節點的位置數據和所述使用者的骨骼關節點的位置數據檢測所述使用者的動作是否標準，并在所述使用者的動作不標準時，在所述第一融合影像和第二融合影像上的相應位置進行標識，將所述第一融合影像和第二融合影像分別以適合左、右眼觀看的模式同步顯示在所述第一目鏡和第二目鏡中。
[0016]本發明實施例所述的基于增強現實技術的舞臺表演輔助訓練方法及系統，在將使用者視野范圍內的真實場景圖像與從使用者的深度圖像數據中提取出的使用者的圖像數據及預設的指導者的影像進行融合，得到融合影像的基礎上，利用預設的指導者的骨骼關節點的位置數據和從使用者的深度圖像數據中提取出的使用者的骨骼關節點的位置數據檢測使用者的動作是否標準，并在使用者的動作不標準時，在所述融合影像上的相應位置進行標識，使得使用者能夠實時觀察其動作是否標準，從而有助于使用者對其動作進行實時糾正。
【附圖說明】
[0017]圖1為本發明一種基于增強現實技術的舞臺表演輔助訓練方法一實施例的流程示意圖；
[0018]圖2為本發明可穿戴式顯示頭盔的結構示意圖；
[0019]圖3為本發明一種基于增強現實技術的舞臺表演輔助訓練系統一實施例的結構示意圖。
【具體實施方式】
[0020]為使本發明實施例的目的、技術方案和優點更加清楚，下面將結合本發明實施例中的附圖，對本發明實施例中的技術方案進行清楚地描述，顯然，所描述的實施例是本發明一部分實施例，而不是全部的實施例。基于本發明中的實施例，本領域普通技術人員在沒有做出創造性勞動前提下所獲得的所有其他實施例，都屬于本發明保護的范圍。
[0021]參看圖1，本實施例公開一種基于增強現實技術的舞臺表演輔助訓練方法，包括:
[0022]S1、利用第一攝像頭和第二攝像頭分別采集穿戴可穿戴式顯示頭盔的使用者左眼和右眼視野范圍內的真實場景圖像，利用固定第三視角的紅外深度攝像頭采集所述使用者的深度圖像數據，其中，所述第一攝像頭和第二攝像頭固定在所述可穿戴式顯示頭盔的前部，所述可穿戴式顯示頭盔包括第一目鏡和第二目鏡，所述第一目鏡位于所述使用者左眼的前方，所述第二目鏡位于所述使用者右眼的前方；
[0023]S2、從所述深度圖像數據中提取所述使用者的圖像數據和所述使用者的骨骼關節點的位置數據；
[0024]S3、將所述使用者左眼視野范圍內的真實場景圖像與所述使用者的圖像數據及預設的指導者的影像進行融合，得到第一融合影像，將所述使用者右眼視野范圍內的真實場景圖像與所述使用者的圖像數據及所述指導者的影像進行融合，得到第二融合影像；
[0025]S4、利用預設的指導者的骨骼關節點的位置數據和所述使用者的骨骼關節點的位置數據檢測所述使用者的動作是否標準，并在所述使用者的動作不標準時，在所述第一融合影像和第二融合影像上的相應位置進行標識；
[0026]S5、將所述第一融合影像和第二融合影像分別以適合左、右眼觀看的模式同步顯示在所述第一目鏡和第二目鏡中。
[0027]本發明實施例中，如圖2所示為可穿戴式顯示頭盔的結構圖，X01為可穿戴式顯示頭盔；X02為顯示頭盔前置右眼攝像頭；X03為顯示頭盔前置左眼攝像頭；X04為顯示頭盔前置雙目攝像頭固定組件。
[0028]本發明實施例所述的基于增強現實技術的舞臺表演輔助訓練方法，在將使用者視野范圍內的真實場景圖像與從使用者的深度圖像數據中提取出的使用者的圖像數據及預設的指導者的影像進行融合，得到融合影像的基礎上，利用預設的指導者的骨骼關節點的位置數據和從使用者的深度圖像數據中提取出的使用者的骨骼關節點的位置數據檢測使用者的動作是否標準，并在使用者的動作不標準時，在所述融合影像上的相應位置進行標識，使得使用者能夠實時觀察其動作是否標準，從而有助于使用者對其動作進行實時糾正。
[0029]可選地，在本發明基于增強現實技術的舞臺表演輔助訓練方法的另一實施例中，所述利用預設的指導者的骨骼關節點的位置數據和所述使用者的骨骼關節點的位置數據檢測所述使用者的動作是否標準，包括:
[0030]將所述指導者的骨骼關節點的位置數據與所述使用者的骨骼關節點的位置數據進行空間對準，利用所述使用者的骨骼關節點與所述指導者的相應骨骼關節點的位置數據計算所述使用者的骨骼關節與所述指導者的相應骨骼關節之間的位置誤差；
[0031]將所述位置誤差與預設的誤差閾值進行比較，若所述位置誤差不大于所述預設的誤差閾值，則確定所述使用者的動作標準，否則，確定所述使用者的動作不標準。
[0032]可選地，在本發明基于增強現實技術的舞臺表演輔助訓練方法的另一實施例中，所述利用預設的指導者的骨骼關節點的位置數據和所述使用者的骨骼關節點的位置數據檢測所述使用者的動作是否標準，包括:
[0033]將所述指導者的骨骼關節點的位置數據與所述使用者的骨骼關節點的位置數據進行空間對準，利用所述使用者的骨骼關節點與所述指導者的相應骨骼關節點的位置數據計算所述使用者的骨骼關節點連線與所述指導者的相應骨骼關節點連線之間的角度；
[0034]將所述角度與預設的角度閾值進行比較，若所述角度不大于所述預設的角度閾值，則確定所述使用者的動作標準，否則，確定所述使用者的動作不標準。
[0035]參看圖3，本實施例公開一種基于增強現實技術的舞臺表演輔助訓練系統，包括:
[0036]第一攝像頭1、第二攝像頭2、可穿戴式顯示頭盔3、提取裝置4、融合裝置5、檢測裝置6和固定第三視角的紅外深度攝像頭7 ;其中，
[0037]所述第一攝像頭1，用于采集穿戴所述可穿戴式顯示頭盔3的使用者左眼視野范圍內的真實場景圖像，所述第二攝像頭2，用于采集所述使用者右眼視野范圍內的真實場景圖像，利用紅外深度攝像頭7，用于采集所述使用者的