基于眼球追蹤控制vr眼鏡操作的手機(jī)及方法
【專利摘要】本發(fā)明公開一種基于眼球追蹤控制VR眼鏡操作的手機(jī)及方法。所述手機(jī)包括設(shè)置單元設(shè)置眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，捕獲單元捕獲用戶的臉部圖像并輸出；眼球追蹤單元從捕獲的圖像中識別出用戶的眼球并監(jiān)測眼球注視方向并輸出；判斷單元判斷眼球注視方向是否處于第一或第二注視方向，在不處于第一或第二注視方向時，判斷單元不動作；在處于第一或第二注視方向時，判斷單元判斷眼球在任一注視方向的停留時間是否達(dá)到預(yù)設(shè)時間，沒有達(dá)到預(yù)設(shè)時間時，判斷單元不輸出控制信號；達(dá)到預(yù)設(shè)時間時，判斷單元輸出控制信號；控制單元根據(jù)控制信號控制VR眼鏡執(zhí)行相應(yīng)動作，以此實(shí)現(xiàn)通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
【專利說明】
基于眼球追蹤控制VR眼鏡操作的手機(jī)及方法
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及穿戴設(shè)備領(lǐng)域，特別是涉及一種基于眼球追蹤控制VR眼鏡操作的手機(jī)及方法。
【背景技術(shù)】
[0002]目前VR眼鏡即“虛擬現(xiàn)實(shí)眼鏡"(VirtualReality Glasses)通過手機(jī)作為顯示屏，并通過連接手機(jī)的控制器或藍(lán)牙遙控器等方式來實(shí)現(xiàn)對VR眼鏡操作的控制，然而在戴上VR眼鏡后人眼無法看到控制器，用戶對VR眼鏡的操作較為不便，使得用戶體驗較差。

【發(fā)明內(nèi)容】

[0003]本發(fā)明主要解決的技術(shù)問題是提供一種基于眼球追蹤控制VR眼鏡操作的手機(jī)及方法，以通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
[0004]為解決上述技術(shù)問題，本發(fā)明采用的一個技術(shù)方案是:提供一種基于眼球追蹤控制VR眼鏡操作的手機(jī)，包括:
[0005]設(shè)置單元，用于設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，在所述眼球注視方向處于第一注視方向時，所述相應(yīng)操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應(yīng)操作為第二動作；
[0006]捕獲單元，用于捕獲用戶的臉部圖像并將捕獲的圖像輸出；
[0007]眼球追蹤單元，連接所述捕獲單元，用于從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監(jiān)測眼球注視方向，并將所述眼球注視方向輸出；
[0008]判斷單元，連接所述設(shè)置單元，用于從所述設(shè)置單元接收眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，所述判斷單元還連接所述眼球追蹤單元，用于從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向，在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作;在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預(yù)設(shè)所述注視方向的停留時間是否達(dá)到預(yù)設(shè)時間，在所述眼球任一預(yù)設(shè)所述注視方向的停留時間沒有達(dá)到預(yù)設(shè)時間時，所述判斷單元不輸出控制信號;在所述眼球任一預(yù)設(shè)所述注視方向的停留時間達(dá)到預(yù)設(shè)時間時，所述判斷單元輸出控制信號;及
[0009]控制單元，連接所述判斷單元，用于從所述判斷單元接收所述控制信號并根據(jù)所述控制信號控制VR眼鏡執(zhí)行第一動作或者第二動作。
[0010]其中，所述捕獲單元為手機(jī)的攝像頭。
[0011]其中，所述第一注視方向為左邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。
[0012]其中，所述第一注視方向為右邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。
[0013]其中，所述預(yù)設(shè)時間的取值為300毫秒至500毫秒。
[0014]為解決上述技術(shù)問題，本發(fā)明采用的另一個技術(shù)方案是:提供一種基于眼球追蹤控制VR眼鏡操作的方法，包括:
[0015]通過設(shè)置單元設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，在所述眼球注視方向處于第一注視方向時，所述相應(yīng)操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應(yīng)操作為第二動作；
[0016]通過捕獲單元捕獲用戶的臉部圖像并將捕獲的圖像輸出；
[0017]通過眼球追蹤單元從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監(jiān)測眼球注視方向，并將所述眼球注視方向輸出；
[0018]通過判斷單元從所述設(shè)置單元接收眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，還通過所述判斷單元從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向；
[0019]在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作；
[0020]在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預(yù)設(shè)所述注視方向的停留時間是否達(dá)到預(yù)設(shè)時間；
[0021]在所述眼球任一預(yù)設(shè)所述注視方向的停留時間沒有達(dá)到預(yù)設(shè)時間時，所述判斷單元不輸出控制信號；
[0022]在所述眼球任一預(yù)設(shè)所述注視方向的停留時間達(dá)到預(yù)設(shè)時間時，所述判斷單元輸出控制信號;及
[0023]通過控制單元從所述判斷單元接收所述控制信號并根據(jù)所述控制信號控制VR眼鏡執(zhí)行第一動作或者第二動作。
[0024]其中，所述捕獲單元為手機(jī)的攝像頭。
[0025]其中，所述第一注視方向為左邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。
[0026]其中，所述第一注視方向為右邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。
[0027]其中，所述預(yù)設(shè)時間的取值為300毫秒至500毫秒。
[0028]本發(fā)明的有益效果是:區(qū)別于現(xiàn)有技術(shù)的情況，本發(fā)明的所述基于眼球追蹤控制VR眼鏡操作的手機(jī)及方法通過設(shè)置單元設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，通過所述捕獲單元捕獲用戶的臉部圖像并將其輸出給所述眼球追蹤單元，以使所述眼球追蹤單元根據(jù)接收到的圖像獲得用戶眼球的注視方向，以及通過所述判斷單元輸出控制信號以使所述控制單元控制VR眼鏡執(zhí)行相應(yīng)操作，以此實(shí)現(xiàn)通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
【附圖說明】
[0029]圖1是本發(fā)明的基于眼球追蹤控制VR眼鏡操作的手機(jī)的方框圖；
[0030]圖2是本發(fā)明的基于眼球追蹤控制VR眼鏡操作的方法的流程圖。
【具體實(shí)施方式】
[0031]請參閱圖1，是本發(fā)明的基于眼球追蹤控制VR眼鏡操作的手機(jī)I的方框圖。如圖1所示，所述基于眼球追蹤控制VR眼鏡操作的手機(jī)I包括設(shè)置單元110，用于設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，在所述眼球注視方向處于第一注視方向時，所述相應(yīng)操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應(yīng)操作為第二動作；捕獲單元120，用于捕獲用戶的臉部圖像并將捕獲的圖像輸出；眼球追蹤單元130，連接所述捕獲單元120，用于從所述捕獲單元120接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監(jiān)測眼球注視方向，并將所述眼球注視方向輸出；判斷單元140，連接所述設(shè)置單元110，用于從所述設(shè)置單元110接收眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，所述判斷單元140還連接所述眼球追蹤單元130，用于從所述眼球追蹤單元130接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向，在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元140不動作;在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元140判斷所述眼球在任一預(yù)設(shè)所述注視方向的停留時間是否達(dá)到預(yù)設(shè)時間，在所述眼球任一預(yù)設(shè)所述注視方向的停留時間沒有達(dá)到預(yù)設(shè)時間時，所述判斷單元140不輸出控制信號;在所述眼球任一預(yù)設(shè)所述注視方向的停留時間達(dá)到預(yù)設(shè)時間時，所述判斷單元140輸出控制信號;控制單元150，連接所述判斷單元140，用于從所述判斷單元140接收所述控制信號并根據(jù)所述控制信號控制VR眼鏡執(zhí)行第一動作或者第二動作。
[0032]在本實(shí)施例中，所述第一注視方向為左邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作，或者所述第一注視方向也可為右邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向也可為左邊注視方向，所述第二動作為取消動作。
[0033]在其他實(shí)施例中，所述第一注視方向或所述第二注視方向也可為上邊方向、下邊方向、左上方向、坐下方向、右上方向或者右下方向中的任何一個，所述第一動作或者所述第二動作也可為前進(jìn)動作或者返回動作，或者為用戶需要進(jìn)行的其他操作的動作，或者用戶根據(jù)需要對多個注視方向進(jìn)行組合并對應(yīng)對多個動作進(jìn)行組合的操作，用戶可以根據(jù)需要通過所述設(shè)置單元110進(jìn)行相應(yīng)設(shè)置。
[0034]在本實(shí)施例中，所述手機(jī)I作為VR眼鏡的顯示屏，所述手機(jī)I中還包括存儲器及處理器，所述設(shè)置單元110、所述捕獲單元120、所述眼球追蹤單元130、所述判斷單元140及所述控制單元150存儲在所述存儲器中，所述處理器對所述設(shè)置單元110、所述捕獲單元120、所述眼球追蹤單元130、所述判斷單元140及所述控制單元150進(jìn)行執(zhí)行，所述手機(jī)I中的其他元件及應(yīng)用程序與通常的手機(jī)相同，在此不再贅述。
[0035]在本實(shí)施方式中，所述捕獲單元120為手機(jī)的前置攝像頭。所述預(yù)設(shè)時間的取值為300毫秒至500毫秒。
[0036]請參考圖2，是本發(fā)明的基于眼球追蹤控制VR眼鏡操作的方法的流程圖。如圖2所示，所述基于眼球追蹤控制VR眼鏡操作的方法包括:
[0037]步驟S1:通過設(shè)置單元110設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，在所述眼球注視方向處于第一注視方向時，所述相應(yīng)操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應(yīng)操作為第二動作；
[0038]步驟S2:通過捕獲單元120捕獲用戶的臉部圖像并將捕獲的圖像輸出；
[0039]步驟S3:通過眼球追蹤單元130從所述捕獲單元120接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監(jiān)測眼球注視方向，并將所述眼球注視方向輸出；
[0040]步驟S4:通過判斷單元140從所述設(shè)置單元110接收眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，還通過所述判斷單元140從所述眼球追蹤單元130接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向；
[0041]步驟S5:在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元140不動作；
[0042]步驟S6:在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元140判斷所述眼球在任一預(yù)設(shè)所述注視方向的停留時間是否達(dá)到預(yù)設(shè)時間；
[0043]步驟S7:在所述眼球任一預(yù)設(shè)所述注視方向的停留時間沒有達(dá)到預(yù)設(shè)時間時，所述判斷單元140不輸出控制信號；
[0044]步驟S8:在所述眼球任一預(yù)設(shè)所述注視方向的停留時間達(dá)到預(yù)設(shè)時間時，所述判斷單元140輸出控制信號;及
[0045]步驟S9:通過控制單元150從所述判斷單元140接收所述控制信號并根據(jù)所述控制信號控制VR眼鏡執(zhí)行第一動作或者第二動作。
[0046]所述基于眼球追蹤控制VR眼鏡操作的手機(jī)及方法通過設(shè)置單元設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，通過所述捕獲單元捕獲用戶的臉部圖像并將其輸出給所述眼球追蹤單元，以使所述眼球追蹤單元根據(jù)接收到的圖像獲得用戶眼球的注視方向，以及通過所述判斷單元輸出控制信號以使所述控制單元控制VR眼鏡執(zhí)行相應(yīng)操作，以此實(shí)現(xiàn)通過追蹤眼球控制VR眼鏡的操作，提高用戶體驗。
[0047]以上所述僅為本發(fā)明的實(shí)施方式，并非因此限制本發(fā)明的專利范圍，凡是利用本發(fā)明說明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換，或直接或間接運(yùn)用在其他相關(guān)的技術(shù)領(lǐng)域，均同理包括在本發(fā)明的專利保護(hù)范圍內(nèi)。
【主權(quán)項】
1.一種基于眼球追蹤控制VR眼鏡操作的手機(jī)，其特征在于，所述手機(jī)包括: 設(shè)置單元，用于設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，在所述眼球注視方向處于第一注視方向時，所述相應(yīng)操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應(yīng)操作為第二動作； 捕獲單元，用于捕獲用戶的臉部圖像并將捕獲的圖像輸出； 眼球追蹤單元，連接所述捕獲單元，用于從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監(jiān)測眼球注視方向，并將所述眼球注視方向輸出； 判斷單元，連接所述設(shè)置單元，用于從所述設(shè)置單元接收眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，所述判斷單元還連接所述眼球追蹤單元，用于從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向，在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作;在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預(yù)設(shè)所述注視方向的停留時間是否達(dá)到預(yù)設(shè)時間，在所述眼球任一預(yù)設(shè)所述注視方向的停留時間沒有達(dá)到預(yù)設(shè)時間時，所述判斷單元不輸出控制信號;在所述眼球任一預(yù)設(shè)所述注視方向的停留時間達(dá)到預(yù)設(shè)時間時，所述判斷單元輸出控制信號;及 控制單元，連接所述判斷單元，用于從所述判斷單元接收所述控制信號并根據(jù)所述控制信號控制VR眼鏡執(zhí)行第一動作或者第二動作。2.根據(jù)權(quán)利要求1所述的基于眼球追蹤控制VR眼鏡操作的手機(jī)，其特征在于，所述捕獲單元為手機(jī)的攝像頭。3.根據(jù)權(quán)利要求1所述的基于眼球追蹤控制VR眼鏡操作的手機(jī)，其特征在于，所述第一注視方向為左邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。4.根據(jù)權(quán)利要求1所述的基于眼球追蹤控制VR眼鏡操作的手機(jī)，其特征在于，所述第一注視方向為右邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。5.根據(jù)權(quán)利要求1-4任一項所述的基于眼球追蹤控制VR眼鏡操作的手機(jī)，其特征在于，所述預(yù)設(shè)時間的取值為300毫秒至500毫秒。6.—種基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述基于眼球追蹤控制VR眼鏡操作的方法包括: 通過設(shè)置單元設(shè)置用戶的眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，在所述眼球注視方向處于第一注視方向時，所述相應(yīng)操作為第一動作，在所述眼球注視方向處于第二注視方向時，所述相應(yīng)操作為第二動作； 通過捕獲單元捕獲用戶的臉部圖像并將捕獲的圖像輸出； 通過眼球追蹤單元從所述捕獲單元接收捕獲的圖像并從所述圖像中識別出用戶的眼球并監(jiān)測眼球注視方向，并將所述眼球注視方向輸出； 通過判斷單元從所述設(shè)置單元接收眼球注視方向與控制VR眼鏡執(zhí)行相應(yīng)操作的對應(yīng)關(guān)系，還通過所述判斷單元從所述眼球追蹤單元接收所述眼球注視方向并判斷所述眼球注視方向是否處于第一注視方向或者第二注視方向； 在所述眼球注視方向不處于第一注視方向或者第二注視方向時，所述判斷單元不動作； 在所述眼球注視方向處于第一注視方向或者第二注視方向時，所述判斷單元判斷所述眼球在任一預(yù)設(shè)所述注視方向的停留時間是否達(dá)到預(yù)設(shè)時間； 在所述眼球任一預(yù)設(shè)所述注視方向的停留時間沒有達(dá)到預(yù)設(shè)時間時，所述判斷單元不輸出控制信號； 在所述眼球任一預(yù)設(shè)所述注視方向的停留時間達(dá)到預(yù)設(shè)時間時，所述判斷單元輸出控制信號;及 通過控制單元從所述判斷單元接收所述控制信號并根據(jù)所述控制信號控制VR眼鏡執(zhí)行第一動作或者第二動作。7.根據(jù)權(quán)利要求6所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述捕獲單元為手機(jī)的攝像頭。8.根據(jù)權(quán)利要求6所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述第一注視方向為左邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為右邊注視方向，所述第二動作為取消動作。9.根據(jù)權(quán)利要求6所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述第一注視方向為右邊注視方向，所述第一動作為確認(rèn)動作，所述第二注視方向為左邊注視方向，所述第二動作為取消動作。10.根據(jù)權(quán)利要求6-9任一項所述的基于眼球追蹤控制VR眼鏡操作的方法，其特征在于，所述預(yù)設(shè)時間的取值為300毫秒至500毫秒。
【文檔編號】H04M1/725GK105847538SQ201610154213
【公開日】2016年8月10日
【申請日】2016年3月16日
【發(fā)明人】金鑫
【申請人】惠州Tcl移動通信有限公司