基于眼球追蹤控制vr眼鏡操作的手機及方法
【專利摘要】本發明公開一種基于眼球追蹤控制VR眼鏡操作的手機及方法。所述手機包括設置單元設置眼球注視方向與控制VR眼鏡執行相應操作的對應關系，捕獲單元捕獲用戶的臉部圖像并輸出；眼球追蹤單元從捕獲的圖像中識別出用戶的眼球并監測眼球注視方向并輸出；判斷單元判斷眼球注視方向是否處于第一或第二注視方向，在不處于第一或第二注視方向時，判斷單元不動作；在處于第一或第二注視方向時，判斷單元判斷眼球在任一注視方向的停留時間是否達到預設時間，沒有達到預設時間時，判斷單元不輸出控制信號；達到預設時間時，判斷單元輸出控制信號；控制單元根據控制信號控制VR眼鏡執行相應動作，以此實現通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
【專利說明】
基于眼球追蹤控制VR眼鏡操作的手機及方法
技術領域
[0001]本發明涉及穿戴設備領域，特別是涉及一種基于眼球追蹤控制VR眼鏡操作的手機及方法。
【背景技術】
[0002]目前VR眼鏡即“虛擬現實眼鏡"(VirtualReality Glasses)通過手機作為顯示屏，并通過連接手機的控制器或藍牙遙控器等方式來實現對VR眼鏡操作的控制，然而在戴上VR眼鏡后人眼無法看到控制器，用戶對VR眼鏡的操作較為不便，使得用戶體驗較差。
【發明內容】
[0003]本發明主要解決的技術問題是提供一種基于眼球追蹤控制VR眼鏡操作的手機及方法，以通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
[0004]為解決上述技術問題，本發明采用的一個技術方案是:提供一種基于眼球追蹤控制VR眼鏡操作的手機，包括:
[0005]設置單元，用于設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，在所述眼球注視方向處于第一注視方向時，所述相應操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應操作為第二動作；
[0006]捕獲單元，用于捕獲用戶的臉部圖像并將捕獲的圖像輸出；
[0007]眼球追蹤單元，連接所述捕獲單元，用于從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監測眼球注視方向，并將所述眼球注視方向輸出；
[0008]判斷單元，連接所述設置單元，用于從所述設置單元接收眼球注視方向與控制VR眼鏡執行相應操作的對應關系，所述判斷單元還連接所述眼球追蹤單元，用于從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向，在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作;在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預設所述注視方向的停留時間是否達到預設時間，在所述眼球任一預設所述注視方向的停留時間沒有達到預設時間時，所述判斷單元不輸出控制信號;在所述眼球任一預設所述注視方向的停留時間達到預設時間時，所述判斷單元輸出控制信號;及
[0009]控制單元，連接所述判斷單元，用于從所述判斷單元接收所述控制信號并根據所述控制信號控制VR眼鏡執行第一動作或者第二動作。
[0010]其中，所述捕獲單元為手機的攝像頭。
[0011]其中，所述第一注視方向為左邊注視方向，所述第一動作為確認動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。
[0012]其中，所述第一注視方向為右邊注視方向，所述第一動作為確認動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。
[0013]其中，所述預設時間的取值為300毫秒至500毫秒。
[0014]為解決上述技術問題，本發明采用的另一個技術方案是:提供一種基于眼球追蹤控制VR眼鏡操作的方法，包括:
[0015]通過設置單元設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，在所述眼球注視方向處于第一注視方向時，所述相應操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應操作為第二動作；
[0016]通過捕獲單元捕獲用戶的臉部圖像并將捕獲的圖像輸出；
[0017]通過眼球追蹤單元從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監測眼球注視方向，并將所述眼球注視方向輸出；
[0018]通過判斷單元從所述設置單元接收眼球注視方向與控制VR眼鏡執行相應操作的對應關系，還通過所述判斷單元從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向；
[0019]在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作；
[0020]在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預設所述注視方向的停留時間是否達到預設時間；
[0021]在所述眼球任一預設所述注視方向的停留時間沒有達到預設時間時，所述判斷單元不輸出控制信號；
[0022]在所述眼球任一預設所述注視方向的停留時間達到預設時間時，所述判斷單元輸出控制信號;及
[0023]通過控制單元從所述判斷單元接收所述控制信號并根據所述控制信號控制VR眼鏡執行第一動作或者第二動作。
[0024]其中，所述捕獲單元為手機的攝像頭。
[0025]其中，所述第一注視方向為左邊注視方向，所述第一動作為確認動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。
[0026]其中，所述第一注視方向為右邊注視方向，所述第一動作為確認動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。
[0027]其中，所述預設時間的取值為300毫秒至500毫秒。
[0028]本發明的有益效果是:區別于現有技術的情況，本發明的所述基于眼球追蹤控制VR眼鏡操作的手機及方法通過設置單元設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，通過所述捕獲單元捕獲用戶的臉部圖像并將其輸出給所述眼球追蹤單元，以使所述眼球追蹤單元根據接收到的圖像獲得用戶眼球的注視方向，以及通過所述判斷單元輸出控制信號以使所述控制單元控制VR眼鏡執行相應操作，以此實現通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
【附圖說明】
[0029]圖1是本發明的基于眼球追蹤控制VR眼鏡操作的手機的方框圖；
[0030]圖2是本發明的基于眼球追蹤控制VR眼鏡操作的方法的流程圖。
【具體實施方式】
[0031]請參閱圖1，是本發明的基于眼球追蹤控制VR眼鏡操作的手機I的方框圖。如圖1所示，所述基于眼球追蹤控制VR眼鏡操作的手機I包括設置單元110，用于設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，在所述眼球注視方向處于第一注視方向時，所述相應操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應操作為第二動作；捕獲單元120，用于捕獲用戶的臉部圖像并將捕獲的圖像輸出；眼球追蹤單元130，連接所述捕獲單元120，用于從所述捕獲單元120接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監測眼球注視方向，并將所述眼球注視方向輸出；判斷單元140，連接所述設置單元110，用于從所述設置單元110接收眼球注視方向與控制VR眼鏡執行相應操作的對應關系，所述判斷單元140還連接所述眼球追蹤單元130，用于從所述眼球追蹤單元130接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向，在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元140不動作;在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元140判斷所述眼球在任一預設所述注視方向的停留時間是否達到預設時間，在所述眼球任一預設所述注視方向的停留時間沒有達到預設時間時，所述判斷單元140不輸出控制信號;在所述眼球任一預設所述注視方向的停留時間達到預設時間時，所述判斷單元140輸出控制信號;控制單元150，連接所述判斷單元140，用于從所述判斷單元140接收所述控制信號并根據所述控制信號控制VR眼鏡執行第一動作或者第二動作。
[0032]在本實施例中，所述第一注視方向為左邊注視方向，所述第一動作為確認動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作，或者所述第一注視方向也可為右邊注視方向，所述第一動作為確認動作，所述第二注視方向也可為左邊注視方向，所述第二動作為取消動作。
[0033]在其他實施例中，所述第一注視方向或所述第二注視方向也可為上邊方向、下邊方向、左上方向、坐下方向、右上方向或者右下方向中的任何一個，所述第一動作或者所述第二動作也可為前進動作或者返回動作，或者為用戶需要進行的其他操作的動作，或者用戶根據需要對多個注視方向進行組合并對應對多個動作進行組合的操作，用戶可以根據需要通過所述設置單元110進行相應設置。
[0034]在本實施例中，所述手機I作為VR眼鏡的顯示屏，所述手機I中還包括存儲器及處理器，所述設置單元110、所述捕獲單元120、所述眼球追蹤單元130、所述判斷單元140及所述控制單元150存儲在所述存儲器中，所述處理器對所述設置單元110、所述捕獲單元120、所述眼球追蹤單元130、所述判斷單元140及所述控制單元150進行執行，所述手機I中的其他元件及應用程序與通常的手機相同，在此不再贅述。
[0035]在本實施方式中，所述捕獲單元120為手機的前置攝像頭。所述預設時間的取值為300毫秒至500毫秒。
[0036]請參考圖2，是本發明的基于眼球追蹤控制VR眼鏡操作的方法的流程圖。如圖2所示，所述基于眼球追蹤控制VR眼鏡操作的方法包括:
[0037]步驟S1:通過設置單元110設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，在所述眼球注視方向處于第一注視方向時，所述相應操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應操作為第二動作；
[0038]步驟S2:通過捕獲單元120捕獲用戶的臉部圖像并將捕獲的圖像輸出；
[0039]步驟S3:通過眼球追蹤單元130從所述捕獲單元120接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監測眼球注視方向，并將所述眼球注視方向輸出；
[0040]步驟S4:通過判斷單元140從所述設置單元110接收眼球注視方向與控制VR眼鏡執行相應操作的對應關系，還通過所述判斷單元140從所述眼球追蹤單元130接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向；
[0041]步驟S5:在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元140不動作；
[0042]步驟S6:在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元140判斷所述眼球在任一預設所述注視方向的停留時間是否達到預設時間；
[0043]步驟S7:在所述眼球任一預設所述注視方向的停留時間沒有達到預設時間時，所述判斷單元140不輸出控制信號；
[0044]步驟S8:在所述眼球任一預設所述注視方向的停留時間達到預設時間時，所述判斷單元140輸出控制信號;及
[0045]步驟S9:通過控制單元150從所述判斷單元140接收所述控制信號并根據所述控制信號控制VR眼鏡執行第一動作或者第二動作。
[0046]所述基于眼球追蹤控制VR眼鏡操作的手機及方法通過設置單元設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，通過所述捕獲單元捕獲用戶的臉部圖像并將其輸出給所述眼球追蹤單元，以使所述眼球追蹤單元根據接收到的圖像獲得用戶眼球的注視方向，以及通過所述判斷單元輸出控制信號以使所述控制單元控制VR眼鏡執行相應操作，以此實現通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
[0047]以上所述僅為本發明的實施方式，并非因此限制本發明的專利范圍，凡是利用本發明說明書及附圖內容所作的等效結構或等效流程變換，或直接或間接運用在其他相關的技術領域，均同理包括在本發明的專利保護范圍內。
【主權項】
1.一種基于眼球追蹤控制VR眼鏡操作的手機，其特征在于，所述手機包括: 設置單元，用于設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，在所述眼球注視方向處于第一注視方向時，所述相應操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應操作為第二動作； 捕獲單元，用于捕獲用戶的臉部圖像并將捕獲的圖像輸出； 眼球追蹤單元，連接所述捕獲單元，用于從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監測眼球注視方向，并將所述眼球注視方向輸出； 判斷單元，連接所述設置單元，用于從所述設置單元接收眼球注視方向與控制VR眼鏡執行相應操作的對應關系，所述判斷單元還連接所述眼球追蹤單元，用于從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向，在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作;在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預設所述注視方向的停留時間是否達到預設時間，在所述眼球任一預設所述注視方向的停留時間沒有達到預設時間時，所述判斷單元不輸出控制信號;在所述眼球任一預設所述注視方向的停留時間達到預設時間時，所述判斷單元輸出控制信號;及 控制單元，連接所述判斷單元，用于從所述判斷單元接收所述控制信號并根據所述控制信號控制VR眼鏡執行第一動作或者第二動作。2.根據權利要求1所述的基于眼球追蹤控制VR眼鏡操作的手機，其特征在于，所述捕獲單元為手機的攝像頭。3.根據權利要求1所述的基于眼球追蹤控制VR眼鏡操作的手機，其特征在于，所述第一注視方向為左邊注視方向，所述第一動作為確認動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。4.根據權利要求1所述的基于眼球追蹤控制VR眼鏡操作的手機，其特征在于，所述第一注視方向為右邊注視方向，所述第一動作為確認動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。5.根據權利要求1-4任一項所述的基于眼球追蹤控制VR眼鏡操作的手機，其特征在于，所述預設時間的取值為300毫秒至500毫秒。6.—種基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述基于眼球追蹤控制VR眼鏡操作的方法包括: 通過設置單元設置用戶的眼球注視方向與控制VR眼鏡執行相應操作的對應關系，在所述眼球注視方向處于第一注視方向時，所述相應操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應操作為第二動作； 通過捕獲單元捕獲用戶的臉部圖像并將捕獲的圖像輸出； 通過眼球追蹤單元從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監測眼球注視方向，并將所述眼球注視方向輸出； 通過判斷單元從所述設置單元接收眼球注視方向與控制VR眼鏡執行相應操作的對應關系，還通過所述判斷單元從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向； 在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作； 在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預設所述注視方向的停留時間是否達到預設時間； 在所述眼球任一預設所述注視方向的停留時間沒有達到預設時間時，所述判斷單元不輸出控制信號； 在所述眼球任一預設所述注視方向的停留時間達到預設時間時，所述判斷單元輸出控制信號;及 通過控制單元從所述判斷單元接收所述控制信號并根據所述控制信號控制VR眼鏡執行第一動作或者第二動作。7.根據權利要求6所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述捕獲單元為手機的攝像頭。8.根據權利要求6所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述第一注視方向為左邊注視方向，所述第一動作為確認動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。9.根據權利要求6所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述第一注視方向為右邊注視方向，所述第一動作為確認動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。10.根據權利要求6-9任一項所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述預設時間的取值為300毫秒至500毫秒。
【文檔編號】H04M1/725GK105847538SQ201610154213
【公開日】2016年8月10日
【申請日】2016年3月16日
【發明人】金鑫
【申請人】惠州Tcl移動通信有限公司