技術總結
本發明提供一種VR頭戴設備的手勢跟蹤方法,包括以下步驟:采集多個訓練圖像;分離手部深度圖像;標記三維手勢,形成原始點云;計算法向量和曲率,去均值歸一化;搭建CNN網絡,CNN網絡的輸入端分別輸入多法向量、曲率和手部深度圖像,輸出端輸出包括掌心在內的多個關節點的三維坐標;訓練后的CNN網絡作為三維手勢的特征提取器,通過深度攝像頭采集實時動作深度圖像,特征提取器提取并處理實時動作深度圖像中所包含的三維手勢的法向量、曲率和手部深度圖像信息,輸出包含掌心的多個關節點的三維坐標,并對識別出的三維手勢進行跟蹤。還公開一種VR頭戴設備。本發明融合了三維特征信息,具有模型識別率高的優點。
技術研發人員:仇璐;張紹謙;張超
受保護的技術使用者:歌爾科技有限公司
文檔號碼:201611236595
技術研發日:2016.12.28
技術公布日:2017.05.10