两个人的电影免费视频_国产精品久久久久久久久成人_97视频在线观看播放_久久这里只有精品777_亚洲熟女少妇二三区_4438x8成人网亚洲av_内谢国产内射夫妻免费视频_人妻精品久久久久中国字幕

管理信息顯示的制作方法

文檔序號:12166893閱讀:252來源:國知局
管理信息顯示的制作方法與工藝

本公開要求于2014年9月15日提交的美國專利申請No.14/486,360的優(yōu)先權(quán),通過引用將其整個內(nèi)容并入到這里。



背景技術:

除非本文另有說明,在本節(jié)中描述的材料不是本申請中的權(quán)利要求的現(xiàn)有技術,并且不因包含在本節(jié)中而被承認為現(xiàn)有技術。

諸如個人計算機、膝上型計算機、平板計算機、蜂窩電話、以及無數(shù)類型的具有因特網(wǎng)能力的設備這樣的計算設備在現(xiàn)代生活的許多方面越來越普遍。隨著時間的推移,這些設備供向用戶提供信息的方式正變得更智能、更高效、更直觀、和/或更不突兀。

計算硬件、外圍設備、以及傳感器、檢測器、圖像和音頻處理器以及其它技術的小型化趨勢已經(jīng)幫助打開了有時被稱為“可穿戴式計算”的領域。尤其是在圖像和視覺處理及制作的領域中,已經(jīng)成為可能的是考慮將圖形顯示器放置得足夠接近穿戴者的(或用戶的)眼睛的可穿戴式顯示器使得所顯示的圖像呈現(xiàn)為諸如可以在傳統(tǒng)圖像顯示設備上顯示的正常大小的圖像。相關技術可以被稱為“近眼顯示器”。

還可以將具有近眼顯示器的可穿戴式計算設備稱為“頭戴式顯示器”(HMD)、“頭戴顯示器”、“頭戴設備”、或者“頭戴式設備”。頭戴式顯示器將一個或多個圖形顯示器放置為接近穿戴者的一只或兩只眼睛。為了在顯示器上生成圖像,可以使用計算機處理系統(tǒng)。這種顯示器可以占據(jù)穿戴者的整個視場或者僅占據(jù)穿戴者的視場的一部分。此外,頭戴顯示器可以在尺寸上變化,例如其采用如眼鏡式顯示器這樣的較小形式或者諸如頭盔這樣的更大形式。

可穿戴式顯示器的新興和預期使用包括用戶與增強或虛擬現(xiàn)實實時交互的應用。這種應用可是任務關鍵的或安全關鍵的,諸如在公共安全或航空設置中。該應用還可是諸如交互式游戲這樣的娛樂性的應用。許多其它應用也是可能的。



技術實現(xiàn)要素:

在示例中,頭戴式設備(HMD)可以被配置為接收用于指示信息事件的發(fā)生的數(shù)據(jù),并且提供簡單且不突兀的輸入機制以通知并允許用戶查看與該事件相對應的內(nèi)容。這種信息事件的示例可以包括HMD接收電子郵件消息、接收文本(例如SMS或MMS)消息、或者生成系統(tǒng)消息(例如指示低電池電量或者指示安裝在HMD上的應用的更新是可用的以供下載)。一旦接收到用于指示信息事件的數(shù)據(jù),HMD可以以不突兀的方式通過例如播放某個音頻告警(例如蜂鳴聲)或顯示諸如所接收到的電子郵件的主題行或新聞報道的標題這樣的對應內(nèi)容的小摘要來通知穿戴者。

此后HMD可以“加載”對應內(nèi)容,并且為穿戴者提供用于根據(jù)其偏好來選擇忽略指示或訪問對應內(nèi)容的簡單機制。尤其是,如果在加載內(nèi)容的同時穿戴者希望查看與事件相對應的內(nèi)容,那么用戶可以簡單地向上掃視HMD的顯示器。此后HMD可確定穿戴者朝著顯示器向上看,并且響應地顯示與該事件相對應的更詳細信息(例如完整的電子郵件或文本消息、完整的新聞報道等等)。然而,如果穿戴者不想查看對應信息,那么穿戴者可以簡單地忽略該指示。HMD可以確定在提供指示之后閾值持續(xù)時間何時流逝,并且響應地停止對該指示的顯示和/或播出。此外,當閾值持續(xù)時間流逝時,HMD可以“卸載”與事件相對應的內(nèi)容以便向上掃視將不再使得對應內(nèi)容將被顯示。

在第一示例中,一種方法包括:由頭戴式設備(HMD)接收與信息事件對應的數(shù)據(jù),其中當穿戴者戴著HMD時HMD的顯示器位于穿戴者的眼睛的前視視場的上周邊。該方法進一步包括:響應于接收到數(shù)據(jù),提供與信息事件相對應的指示;確定眼睛的注視方向;并且確定注視方向是與顯示器的位置相對應的向上方向。該方法進一步包括:響應于確定眼睛的注視方向是與顯示器的位置相對應的向上方向,在顯示器中顯示與信息事件有關的圖形內(nèi)容。

在第二示例中,HMD包括處理器、眼睛檢測系統(tǒng)、以及顯示器,該顯示器被布置在HMD上使得當穿戴者戴著HMD時,顯示器位于穿戴者的前視視場的上周邊。HMD進一步包括用于存儲下述指令的計算機可讀介質(zhì),所述指令當由處理器執(zhí)行時使得HMD執(zhí)行功能。該功能包括接收與信息事件相對應的數(shù)據(jù),并且響應于接收到數(shù)據(jù),提供與信息事件相對應的指示。該功能進一步包括確定眼睛的注視方向并且確定眼睛的注視方向是與顯示器的位置相對應的向上方向。該功能進一步包括:響應于確定眼睛的注視方向是向上方向,在顯示器中顯示與信息事件有關的圖形內(nèi)容。

第三示例包括用于存儲下述指令的非暫時性計算機可讀介質(zhì),所述指令當由HMD執(zhí)行時使得HMD執(zhí)行功能。HMD包括當穿戴者戴著HMD時位于穿戴者的眼睛的前視視場的上周邊的顯示器。該功能包括:接收與信息事件相對應的數(shù)據(jù),并且響應于接收到該數(shù)據(jù),提供與信息事件相對應的指示。該功能進一步包括:確定眼睛的注視方向并且確定眼睛的注視方向是與顯示器的位置相對應的向上方向。該功能進一步包括:響應于確定眼睛的注視方向是向上方向,在顯示器中顯示與信息事件有關的圖形內(nèi)容。

在第四示例中,提供了一種示例系統(tǒng)。該系統(tǒng)包括當穿戴者戴著該系統(tǒng)時位于穿戴者的眼睛的前視視場的上周邊的顯示器。該系統(tǒng)進一步包括:用于接收與信息事件相對應的數(shù)據(jù)的裝置;以及用于響應于接收到該數(shù)據(jù),提供與信息事件相對應的指示的裝置。該系統(tǒng)進一步包括:用于確定眼睛的注視方向的裝置;以及用于確定眼睛的注視方向是與顯示器的位置相對應的向上方向的裝置。該系統(tǒng)進一步包括:用于響應于確定眼睛的注視方向是向上方向,在顯示器中顯示與信息事件有關的圖形內(nèi)容的裝置。

在第五示例中,示例方法包括:由頭戴式設備(HMD)接收與信息事件對應的數(shù)據(jù)。當穿戴者戴著HMD時,HMD的顯示器位于穿戴者的眼睛的前視視場的上周邊。該方法進一步包括:響應于接收到數(shù)據(jù),提供與信息事件相對應的指示。該方法進一步包括:確定眼睛的第一注視方向,其中該第一注視方向與顯示器對準。該方法進一步包括:確定眼睛的第二注視方向,其中該第二注視方向不與顯示器對準。該方法進一步包括:確定在確定第一注視方向與確定第二注視方向之間的持續(xù)時間小于閾值持續(xù)時間。該方法進一步包括:響應于確定持續(xù)時間小于閾值持續(xù)時間,使得不再提供指示。

在第六示例中,HMD包括處理器、眼睛檢測系統(tǒng)、以及顯示器,該顯示器被布置在HMD上使得當穿戴者戴著HMD時顯示器位于穿戴者的前視視場的上周邊。HMD進一步包括用于存儲下述指令的計算機可讀介質(zhì),所述指令當由處理器執(zhí)行時使得HMD執(zhí)行功能。該功能包括:接收與信息事件相對應的數(shù)據(jù),并且響應于接收到數(shù)據(jù),提供與信息事件相對應的指示。該功能進一步包括:確定眼睛的第一注視方向,其中該第一注視方向與顯示器對準。該功能進一步包括:確定眼睛的第二注視方向,其中該第二注視方向不與顯示器對準。該功能進一步包括:確定在確定第一注視方向與確定第二注視方向之間的持續(xù)時間小于閾值持續(xù)時間。該功能進一步包括:響應于確定該持續(xù)時間小于閾值持續(xù)時間,使得不再提供指示。

第七示例包括用于存儲下述指令的非暫時性計算機可讀介質(zhì),所述指令當由HMD執(zhí)行時使得HMD執(zhí)行功能。當穿戴者戴著HMD時,HMD的顯示器位于穿戴者的前視視場的上周邊。該功能包括:接收與信息事件相對應的數(shù)據(jù)并且響應于接收到該數(shù)據(jù),提供與信息事件相對應的指示。該功能進一步包括:確定眼睛的第一注視方向,其中該第一注視方向與顯示器對準。該功能進一步包括:確定眼睛的第二注視方向,其中該第二注視方向不與顯示器對準。該功能進一步包括:確定在確定第一注視方向與確定第二注視方向之間的持續(xù)時間小于閾值持續(xù)時間。該功能進一步包括:響應于確定持續(xù)時間小于閾值持續(xù)時間,使得不再提供指示。

在第八示例中,示例系統(tǒng)包括當穿戴者戴著該系統(tǒng)時位于穿戴者的眼睛的前視視場的上周邊的顯示器。該系統(tǒng)進一步包括:用于接收與信息事件相對應的數(shù)據(jù)的裝置;以及用于響應于接收到該數(shù)據(jù),提供與信息事件相對應的指示的裝置。該系統(tǒng)進一步包括:用于確定眼睛的第一注視方向的裝置,其中該第一注視方向與顯示器對準。該系統(tǒng)進一步包括:用于確定眼睛的第二注視方向的裝置,其中該第二注視方向不與顯示器對準。該系統(tǒng)進一步包括:用于確定在確定第一注視方向與確定第二注視方向之間的持續(xù)時間小于閾值持續(xù)時間的裝置。該系統(tǒng)進一步包括:用于響應于確定持續(xù)時間小于閾值持續(xù)時間,使得不再提供指示的裝置。

在第九示例中,示例方法包括:由頭戴式設備(HMD)接收與信息事件相對應的數(shù)據(jù),其中當穿戴者戴著HMD時,HMD的顯示器位于穿戴者的眼睛的前視視場的上周邊;響應于接收到數(shù)據(jù),由HMD提供與信息事件相對應的指示;由HMD的眼睛檢測系統(tǒng)用一個或多個入射光束照射與眼睛相對應的眼睛區(qū)域;由眼睛檢測系統(tǒng)檢測與一個或多個入射光束相對應的一個或多個反射光束的強度;由HMD接收來自HMD的眼睛檢測系統(tǒng)的信號,其中該信號表示強度;由HMD確定所接收到的信號與預定信號準則相對應,其中預定信號準則與眼睛的注視方向相對應,所述眼睛的注視方向是與顯示器的位置相對應的向上方向;并且響應該確定,由HMD在顯示器中顯示與信息事件有關的圖形內(nèi)容。

在第十示例中,HMD包括處理器、眼睛檢測系統(tǒng)、以及顯示器,該顯示器被布置在HMD上使得當穿戴者戴著HMD時顯示器位于穿戴者的前視視場的上周邊。HMD進一步包括用于存儲下述指令的計算機可讀介質(zhì),所述指令當由處理器執(zhí)行時使得HMD執(zhí)行功能。該功能包括:接收與信息事件相對應的數(shù)據(jù);響應于接收到數(shù)據(jù),提供與信息事件相對應的指示;由HMD的眼睛檢測系統(tǒng)用一個或多個入射光束照射與眼睛相對應的眼睛區(qū)域;由眼睛檢測系統(tǒng)檢測分別與一個或多個入射光束相對應的一個或多個反射光束;接收來自HMD的眼睛檢測系統(tǒng)的信號,其中該信號表示一個或多個反射光束的強度;確定所接收到的信號與預定信號準則相對應,其中預定信號準則與眼睛的注視方向相對應,所述眼睛的注視方向是與顯示器的位置相對應的向上方向;并且響應于該確定,在顯示器中顯示與信息事件有關的圖形內(nèi)容。

第十一示例包括用于存儲下述指令的非暫時性計算機可讀介質(zhì),所述指令當由HMD執(zhí)行時使得HMD執(zhí)行功能。當穿戴者戴著HMD時,HMD的顯示器位于穿戴者的前視視場的上周邊。該功能包括:接收與信息事件相對應的數(shù)據(jù);響應于接收到數(shù)據(jù),提供與信息事件相對應的指示;由HMD的眼睛檢測系統(tǒng)用一個或多個入射光束照射與眼睛相對應的眼睛區(qū)域;由眼睛檢測系統(tǒng)檢測分別與一個或多個入射光束相對應的一個或多個反射光束;接收來自HMD的眼睛檢測系統(tǒng)的信號,其中該信號表示一個或多個反射光束的強度;確定所接收到的信號與預定信號準則相對應,其中預定信號準則與眼睛的注視方向相對應,所述眼睛的注視方向是與顯示器的位置相對應的向上方向;并且響應于該確定,在顯示器中顯示與信息事件有關的圖形內(nèi)容。

在第十二示例中,示例系統(tǒng)包括當穿戴者戴著HMD時位于穿戴者的眼睛的前視視場的上周邊的顯示器。該系統(tǒng)進一步包括:用于接收與信息事件相對應的數(shù)據(jù)的裝置;以及用于響應于接收到該數(shù)據(jù),提供與信息事件相對應的指示的裝置;用于用一個或多個入射光束來照射與眼睛相對應的眼睛區(qū)域的裝置;用于檢測分別與一個或多個入射光束相對應的一個或多個反射光束的裝置;用于接收來自HMD的眼睛檢測系統(tǒng)的信號的裝置,其中該信號表示一個或多個反射光束的強度;用于確定所接收到的信號與預定信號準則相對應的裝置,其中預定信號準則與眼睛的注視方向相對應,所述眼睛的注視方向是與顯示器的位置相對應的向上方向;以及用于響應于該確定,在顯示器中顯示與信息事件有關的圖形內(nèi)容的裝置。

通過在適當時參考附圖閱讀下面的具體實施方式,這些以及其它方面、優(yōu)點、以及替代對于本領域普通技術人員而言將是顯而易見的。

附圖說明

圖1A圖示了根據(jù)示例實施例的可穿戴式計算系統(tǒng)。

圖1B圖示了在圖1A中所圖示的可穿戴式計算設備的替代視圖。

圖1C圖示了根據(jù)示例實施例的另一可穿戴式計算系統(tǒng)。

圖1D圖示了根據(jù)示例實施例的另一可穿戴式計算系統(tǒng)。

圖1E、1F和1G是對圖1D所示的穿戴者所穿戴著的可穿戴式計算系統(tǒng)的簡化說明。

圖2是根據(jù)示例實施例的計算設備的簡化方框圖。

圖3是對根據(jù)說明性實施例的眼睛位置感測系統(tǒng)的簡化說明。

圖4示出了根據(jù)示例實施例的眼睛閃光的說明性圖像。

圖5是示例方法的方框圖。

圖6是示例方法的方框圖。

圖7A圖示了未與頭戴設備的顯示器對準的穿戴者的眼睛的示例注視方向。

圖7B圖示了與頭戴設備的顯示器對準的穿戴者的眼睛的示例注視方向。

圖8A圖示了用于檢測眼睛的向上注視方向的注視檢測系統(tǒng)。

圖8B圖示了用于檢測眼睛的向下注視方向的注視檢測系統(tǒng)。

圖8C圖示了用于檢測眼睛的向前注視方向的注視檢測系統(tǒng)。

圖9A圖示了與信息事件有關的視覺指示。

圖9B圖示了與信息事件有關的顯示信息。

圖10是示例方法的方框圖。

圖11圖示了相對于時間而言的示例檢測強度信號。

具體實施方式

在這里對示例方法和系統(tǒng)進行描述。應當理解的是詞語“示例”、“示例性”、以及“說明性”在這里用于指“用作示例、實例、或者說明”。在這里被描述為“示例”、“示例性”、或者“說明性”的任何實施例或特征不一定被解釋為比其它實施例或特征更優(yōu)選或有利。這里所描述的示例實施例不意味著是限制性的。容易地理解的是如在這里一般描述的且在附圖中圖示的本公開的方面可以以各種各樣的不同配置來布置、替換、組合、分離、以及設計,所有這些都在這里明確地考慮。

I.概述

頭戴式設備(HMD)可以執(zhí)行各種功能,其中一些可以包括經(jīng)由HMD提供與環(huán)境有關的視覺或音頻信息、接收電子郵件或文本消息、或者提供與這種消息或信息有關的指示。例如,HMD的相機可以捕獲HMD的周圍環(huán)境內(nèi)的感興趣的位置(例如公共汽車站、餐館、或者博物館)的圖像。HMD可以辨識感興趣的位置并且提供用于指示出與感興趣的位置有關的信息可用以經(jīng)由HMD來提供的音頻指示(例如諧鳴聲)。

在另一示例中,HMD可以接收電子郵件消息并且在HMD的平視顯示器中提供與所接收到的電子郵件消息有關的視覺指示。視覺指示可以包括用于表示消息的一部分的顯示文本、消息的發(fā)送者、或者對HMD已接收到消息并且該消息可以通過HMD提供的任何其它視覺指示。

在注意到由HMD所提供的音頻或視覺指示之后,HMD的用戶可能希望查看或聽到與傳入消息有關的附加細節(jié)或者希望被提供與感興趣位置有關的信息。用于使得HMD提供與傳入消息有關的附加細節(jié)或者與感興趣的位置有關的信息的一些方法可以包括HMD檢測(i)HMD(經(jīng)由傳感器)可辨識的用戶的頭部移動或頭部姿勢以作為提供附加細節(jié)的命令,(ii)接收語音命令,或者(iii)接收在HMD的觸摸傳感器上的觸摸輸入。然而,這些方法可被認為是低效的、不方便的、或者太顯眼的。

替代的,HMD可以提供指示并且此后檢測用戶的眼睛朝著HMD的平視顯示器的向上移動,這指示出用戶期望被提供由音頻或視覺指示所表示的附加細節(jié)。與頭部姿勢、語音命令、或者觸摸輸入相比,這可能需要更少的努力或更方便和/或更不顯眼。在一些示例中,HMD可以基于在HMD提供了指示之后在預定義的時間窗內(nèi)檢測到向上眼睛移動來提供附加細節(jié)。例如,HMD可以提供指示,并且如果在提供指示的五秒內(nèi)檢測到眼睛的向上移動,則HMD可以提供該指示所表示的附加細節(jié)。然而,如果HMD在五秒內(nèi)沒有檢測到向上眼睛運動,則HMD可以不顯示附加細節(jié)。此外,如果指示是視覺指示,則HMD可以使得視覺指示在時間窗流逝之后消失。使HMD基于在時間窗口內(nèi)檢測到向上眼睛移動而有條件地提供附加細節(jié)這可以降低“假肯定”或者當用戶不希望接收附加細節(jié)時提供附加細節(jié)的可能性。

響應于穿戴者抬頭看HMD的顯示器,使HMD提供與信息事件有關的附加細節(jié)這可以以各種方式有益于穿戴者。在附加細節(jié)是視覺的情況下,穿戴者將可能抬頭看顯示器以查看附加細節(jié)而不管HMD接收到使得HMD顯示附加細節(jié)的什么類型的穿戴者輸入。因此,使得響應于向上掃視(upward glance),顯示附加細節(jié)可以減少穿戴者在查看附加細節(jié)時所花費的努力量。此外,基于向上掃視提供附加細節(jié)不需要穿戴者以任何方式使用手,這可能允許穿戴者繼續(xù)穿戴者正在執(zhí)行中的任何活動。此外,如果穿戴者希望忽略指示并避免提供附加細節(jié),則穿戴者必須簡單地避免抬頭看HMD的顯示器,在這種情況下穿戴者無論如何都更喜歡這樣做。

II.示例可穿戴式計算設備

現(xiàn)在對可以實現(xiàn)示例實施例的系統(tǒng)和設備進行更詳細地描述。通常,示例系統(tǒng)可以在可穿戴式計算機(還被稱為可穿戴式計算設備)的中實現(xiàn)或者可以采取可穿戴式計算機的形式。在示例性實施例中,可穿戴式計算機采取頭戴式設備(HMD)的形式或者包括頭戴式設備(HMD)。

除其他可能性之外,示例系統(tǒng)可以在諸如移動電話這樣的其它設備中實現(xiàn)或者采取其它設備的形式。此外,示例系統(tǒng)可以采取非暫時性計算機可讀介質(zhì)的形式,該非暫時性計算機可讀介質(zhì)具有存儲在其上的可由處理器執(zhí)行的以提供在這里所描述的功能的程序指令。示例系統(tǒng)還可以采取諸如可穿戴計算機或移動電話這樣的設備或者這種設備的子系統(tǒng)的形式,所述設備包括此上存儲有這種程序指令的這種非暫時性計算機可讀介質(zhì)。

HMD通??梢允悄軌虼髟陬^上并且將顯示器放置在穿戴者的一只或兩只眼睛的前面的任何顯示設備。HMD可以采取諸如頭盔或眼鏡這樣的各種形式。因而,提及“眼鏡”或“眼鏡式”HMD,應當理解為是指具有眼鏡狀框架使得它可以戴在頭上的HMD。此外,示例實施例可以是由具有單個顯示器或兩個顯示器的HMD(其可以分別被稱為“單目”HMD或“雙目”HMD)實現(xiàn)的或者與具有單個顯示器或兩個顯示器的HMD相關聯(lián)實現(xiàn)的。

圖1A圖示了根據(jù)示例性實施例的可穿戴式計算系統(tǒng)。在圖1A中,可穿戴式計算系統(tǒng)采取頭戴式設備(HMD)102(還可以被稱為頭戴顯示器)的形式。然而,應當理解的是在不脫離本發(fā)明的范圍的情況下示例系統(tǒng)和設備可以采取其它類型的設備的形式或者可以在其它類型的設備中或與其相關聯(lián)地實現(xiàn)。如在圖1A中所圖示的,HMD 102包括框架元件,該框架元件包括透鏡框架104、106和中心框架支撐件108、透鏡元件110、112、以及延伸側(cè)臂114、116。中心框架支撐件108和延伸側(cè)臂114、116被配置成分別經(jīng)由用戶的鼻子和耳朵將HMD 102固定到用戶的臉上。

框架元件104、106和108以及延伸側(cè)臂114、116中的每一個可以是由固態(tài)結(jié)構(gòu)的塑料和/或金屬的形成的或者可以是由中空結(jié)構(gòu)的類似材料形成的以允許布線和部件互連通過HMD 102內(nèi)部路由。其它材料也是可能的。

透鏡元件110、112中的每一個中的一個或多個可以是由可適當?shù)仫@示投影圖像或圖形的任何材料形成的。透鏡元件110、112中的每一個還可以是足夠透明的以允許用戶透過透鏡元件看。對透鏡元件的這兩個特征進行組合可以促進將投影圖像或圖形疊加在用戶通過透鏡元件所感知到的真實世界視圖上這樣的增強現(xiàn)實或平視顯示。

延伸側(cè)臂114、116的每一個可以是分別遠離透鏡框架104、106延伸的突起,并且可以包括位于用戶耳朵后面的部分以將HMD 102固定到用戶。延伸側(cè)臂114、116可以通過圍繞用戶頭部的后部延伸而進一步將HMD 102固定到用戶。另外或者替代地,例如,HMD 102可以連接到或附接在頭戴式頭盔結(jié)構(gòu)內(nèi)。對于HMD的其它配置也是可能的。

HMD 102還可以包括板載計算系統(tǒng)118、圖像捕獲設備120、傳感器122、以及手指可操作觸摸板124。板載計算系統(tǒng)118被示為位于HMD 102的延伸側(cè)臂114上;然而,板載計算系統(tǒng)118可以設置在HMD 102的其它部分上,或者可以位于遠離HMD 102的位置(例如板載計算系統(tǒng)118可以有線或無線地連接到HMD 102)。板載計算系統(tǒng)118可以包括例如處理器和存儲器。板載計算系統(tǒng)118可以被配置為接收來自圖像捕獲設備120以及手指可操作觸摸板124(并且可能的話來自其它感測設備、用戶接口、或者兩者)的數(shù)據(jù)并對其進行分析,并且生成由透鏡元件110和112輸出的圖像。

圖像捕獲設備120例如可以是被配置為捕獲靜止圖像和/或捕獲視頻的相機。在所說明的配置中,圖像捕獲設備120位于HMD 102的延伸側(cè)臂114上;然而,圖像捕獲設備120可以設置于HMD 102的其它部分上。圖像捕獲設備120可以被配置為以各種分辨率或以不同的幀速率來捕獲圖像。例如可以將諸如在移動電話或網(wǎng)絡攝像機中所使用的相機這樣的具有小的形狀因數(shù)的許多圖像捕獲設備并入到HMD 102的示例中。

此外,雖然圖1A圖示了一個圖像捕獲設備120,但是可以使用更多的圖像捕獲設備,并且每一個可以被配置為捕獲相同視圖或者捕獲不同視圖。例如,圖像捕獲設備120可以是前向的以捕獲用戶所感知到的真實世界視圖的至少一部分。此后圖像捕獲設備120所捕獲的前向圖像可以用于生成計算機所生成的圖像看起來與用戶所感知到的真實世界視圖相交互或者覆蓋用戶所感知到的真實世界視圖這樣的增強現(xiàn)實。

示出了傳感器122在HMD 102的延伸側(cè)臂116上;然而,傳感器122可以位于HMD 102的其它部分上。為了說明的目的,僅示出了一個傳感器122。然而,在一個示例實施例中,HMD 102可以包括多個傳感器。例如,HMD 102可以包括諸如一個或多個陀螺儀、一個或多個加速度計、一個或多個磁力計、一個或多個圖像傳感器、一個或多個紅外傳感器、和/或一個或多個麥克風這樣的傳感器。除了在這里具體確定的傳感器之外或者替代在這里具體識別的傳感器,還可以包括其它感測設備。

示出了手指可操作觸摸板124在HMD 102的延伸側(cè)臂114上。然而,手指可操作觸摸板124可以位于HMD 102的其它部分上。此外,在HMD 102上可以存在不止一個手指可操作觸摸板。手指可操作觸摸板124可以由用戶使用以輸入命令。手指可操作觸摸板124可以經(jīng)由電容感測、電阻感測、或者表面聲波處理以及其它可能性來感測一個或多個手指的壓力、位置、和/或移動中的至少一個。除了感測在與板表面相平行的或與板表面在同一個平面上的方向上的移動、與板表面相垂直的方向上的移動、或者這兩者之外,手指可操作觸摸板124還可以能夠同時感測一個或多個手指的移動,并且還可以能夠感測施加到觸摸板表面上的壓力水平。在一些實施例中,手指可操作觸摸板124可以是由一個或多個半透明(translucent)或透明的絕緣層以及一個或多個半透明或透明的導電層形成的。手指可操作觸摸板124的邊緣可以被形成為具有凸起的、凹陷的、或者粗糙的表面以便在用戶的手指到達手指可操作觸摸板124的邊緣或其它區(qū)域時向用戶提供觸覺反饋。如果存在不止一個手指可操作觸摸板,則每個手指可操作觸摸板可以是獨立操作的,并且可以提供不同功能。

在進一步的方面中,HMD 102可以被配置為除了或替代經(jīng)由手指可操作觸摸板124所接收到的用戶輸入之外還可以以各種方式接收用戶輸入。例如,板載計算系統(tǒng)118可以實現(xiàn)語音到文本處理并且利用用于將某些口頭命令映射到某些動作的語法。另外,HMD 102可以包括一個或多個麥克風,經(jīng)由這些麥克風可以捕獲穿戴者的語音。如此配置,HMD 102可以是可操作的以檢測口頭命令并且執(zhí)行與該口頭命令相對應的各種計算功能。

作為另一示例,HMD 102可將某些頭部移動解釋為用戶輸入。例如,當戴著HMD 102時,HMD 102可以使用一個或多個陀螺儀和/或一個或多個加速度計來檢測頭部移動。此后HMD 102還可以將諸如點頭、或者向上看、向下看、向左看或向右看這樣的某些頭部移動解釋為用戶輸入。HMD 102還可以根據(jù)移動來平移或滾動顯示器中的圖形。還可以將其它類型的動作映射到頭部移動。

作為又一示例,HMD 102可以將某些姿勢(例如通過穿戴者的手)解釋為用戶輸入。例如,HMD 102可以通過對來自圖像捕獲設備120的圖像數(shù)據(jù)進行分析來捕獲手部移動并且發(fā)起被定義為與某些手部移動相對應的動作。

作為進一步的示例,HMD 102可以將眼睛移動解釋為用戶輸入。尤其是,HMD 102可以包括一個或多個面向內(nèi)的圖像捕獲設備和/或用于感測用戶眼睛的移動和/或位置的一個或多個其它面向內(nèi)的傳感器(未示出)。因而,可以將某些眼睛移動映射到某些動作。例如,可以將某些動作定義為與眼睛在某個方向上的移動、眨眼和/或擠眼、以及其它可能性相對應。

HMD 102還包括用于生成音頻輸出的揚聲器125。在一個示例中,揚聲器可以是還被稱為骨傳導換能器(BCT)的骨傳導揚聲器的形式。揚聲器125例如可以是振動換能器或者用于響應于電音頻信號輸入而產(chǎn)生聲音的電聲換能器。可以將HMD 102的框架設計成使得當用戶戴著HMD 102時揚聲器125接觸穿戴者?;蛘撸梢詫P聲器125嵌入在HMD 102的框架內(nèi)并且將其定位成使得當HMD 102被戴著時揚聲器125使接觸穿戴者的框架的一部分振動。在任一種情況下,HMD 102可以被配置為向揚聲器125發(fā)送音頻信號,以便可以直接或間接地將揚聲器的振動傳遞到穿戴者的骨骼結(jié)構(gòu)上。當振動通過骨骼結(jié)構(gòu)傳到穿戴者的中耳中的骨骼時,穿戴者可將BCT 125所提供的振動解釋為聲音。

根據(jù)具體實現(xiàn),可以實現(xiàn)各種類型的骨傳導換能器(BCT)。通常,被布置成使HMD 102振動的任何部件可以作為振動換能器而被并入。更進一步應該理解的是HMD 102可以包括單個揚聲器125或多個揚聲器。另外,揚聲器在HMD上的位置可以根據(jù)實現(xiàn)而變。例如,揚聲器可以位于靠近穿戴者的太陽穴(如所示)、在穿戴者的耳朵后面、靠近穿戴者的鼻子、和/或在揚聲器125可使穿戴者的骨骼結(jié)構(gòu)振動的任何其它位置上。

圖1B圖示了在圖1A中所圖示的可穿戴式計算設備的替代視圖。如圖1B所示,透鏡元件110、112可以用作顯示元件。HMD 102可以包括與延伸側(cè)臂116的內(nèi)表面相耦合的并且被配置為將顯示器130投影在透鏡元件112的內(nèi)表面的第一投影儀128。另外或者替代地,第二投影儀132可以與延伸側(cè)臂114的內(nèi)表面相耦合并且被配置為將顯示器134投影到透鏡元件110的內(nèi)表面上。

透鏡元件110、112可以用作光投射系統(tǒng)中的組合器并且可以包括用于對從投影儀128、132投影到透鏡元件上的光進行反射的涂層。在一些實施例中,可以不使用反射涂層(例如當投影機128、132是掃描激光設備時)。

在替代實施例中,還可以使用其它類型的顯示元件。例如,透鏡元件110、112本身可以包括:諸如電致發(fā)光顯示器或液晶顯示器這樣的透明或半透明(semi-transparent)矩陣顯示器;用于將圖像遞送到用戶眼睛的一個或多個波導;或者能夠?qū)⒔裹c內(nèi)近眼圖像遞送到用戶的其它光學元件??梢詫@示驅(qū)動器配備在框架元件104、106內(nèi)以用于驅(qū)動這種矩陣顯示器。替代地或者另外,激光或LED源和掃描系統(tǒng)可以用于將光柵顯示直接繪制到用戶眼睛的一個或多個的視網(wǎng)膜上。還存在其它可能性。

在圖1B中示出了注視檢測系統(tǒng)136(例如接近傳感器)包括附接于HMD 102的延伸側(cè)臂114上的光源138以及光傳感器140。(注視檢測系統(tǒng)136還可以被稱為“眼睛檢測系統(tǒng)”或“查看方向檢測系統(tǒng)”)。除了圖1B所示的那些之外,注視檢測系統(tǒng)136還可包括一個或多個光源和元件。另外,可以各種其它方式將注視檢測系統(tǒng)136固定到HMD 102。例如,光源138可與光傳感器140分開安裝。作為另一個示例,可將注視檢測系統(tǒng)136安裝到HMD 102的其它框架元件上,諸如透鏡框架104或106、中心框架支撐件108、和/或延伸側(cè)臂116。

圖1C圖示了根據(jù)示例實施例的采取HMD 152形式的另一可穿戴式計算系統(tǒng)。HMD 152可以包括諸如參考圖1A和1B所描述的那些這樣的框架元件和側(cè)臂。HMD 152可以另外包括諸如參考圖1A和1B所描述的那些這樣的板載計算系統(tǒng)154和圖像捕獲設備156。示出了將圖像捕獲設備156安裝在HMD 152的框架上。然而,還可以將圖像捕獲裝置156安裝在其它位置,或者可以嵌入到框架之中或者否則附接到框架上。

如圖1C所示,HMD 152可以包括可以與設備相耦合的單個顯示器158。顯示器158可以形成在諸如參考圖1A和圖1B所描述的透鏡元件這樣的HMD 152的一個透鏡元件上,并且可以被配置為將計算機生成的圖形覆蓋在用戶的物理世界的視圖中。示出了顯示器158設置在HMD 152的透鏡中心,然而顯示器158可以設置在諸如例如朝向穿戴者的視場的上部或下部這樣的其它位置。顯示器158可經(jīng)由計算系統(tǒng)154控制,該計算系統(tǒng)154經(jīng)由光波導160耦合至顯示器158。

圖1D圖示了根據(jù)示例實施例的采取單目HMD 172的形式的另一可穿戴式計算系統(tǒng)。HMD 172可以包括側(cè)臂173、中心框架支撐件174、以及具有鼻梁架175的橋接部分。在圖1D所示的示例中,中心框架支撐件174與側(cè)臂173相連。HMD 172不包括包含透鏡元件的透鏡框架。HMD 172可以另外包括部件殼體176,該部件殼體可以包括板載計算系統(tǒng)(未示出)、圖像捕獲設備178、和用于操作圖像捕獲設備178(和/或可用于其它目的)的按鈕179。部件殼體176還可以包括其它電氣部件和/或在HMD內(nèi)或HMD上的其它位置與電氣部件電連接。HMD 172還包括BCT 186。

HMD172可以包括其可以經(jīng)由部件殼體176與側(cè)臂173中的一個相耦合的單個顯示器180。在示例實施例中,顯示器180可以是其是由玻璃和/或另一透明或半透明(translucent)材料制成的透視顯示器使得穿戴者可透過顯示器180看得見他們的環(huán)境。此外,部件外殼176可以包括用于顯示器180的光源(未示出)和/或?qū)碜怨庠吹墓庖龑У斤@示器180的光學元件(未示出)以。因而,顯示器180可以包括當HMD 172被戴著時使這種光源所生成的光朝著穿戴者的眼睛引導這樣的光學特征。

在進一步的方面中,HMD 172可以包括用于對側(cè)壁173的長度進行調(diào)節(jié)的滑動特征184。因此,滑動特征184可以用于調(diào)節(jié)HMD 172的適合度。此外,在不脫離本發(fā)明的范圍的情況下,HMD可以包括允許穿戴者對HMD的適合度進行調(diào)節(jié)的其它特征。

圖1E至1G是對穿戴者190所戴的圖1D所示的HMD 172的簡化說明。如圖1F所示,BCT 186被布置為當戴上HMD 172時BCT 186位于穿戴者的耳后。因而,從圖1E所示的視角看不到BCT 186。

在所圖示的示例中,顯示器180可以被布置為當戴著HMD 172時,當用戶戴著HMD 172時顯示器180位于用戶眼睛的前面或附近。例如,如圖1E所示,顯示器180可以位于中心框架支撐件的下方并且在穿戴者的眼睛的中心上方。此外,在所圖示的配置中,顯示器180可以偏離穿戴者的眼睛的中心(例如使得從穿戴者的視角來看顯示器180的中心位于穿戴者眼睛的中心的右側(cè)和上方)。

如圖1E至圖1G中所示配置的,當戴著HMD 172時,顯示器180可以位于穿戴者190的視場的周邊。因而,如圖1F所示,當穿戴者190向前看時,穿戴者190可以利用其周邊視覺看到顯示器180。其結(jié)果是,當穿戴者的眼睛面向前時,顯示器180可以在穿戴者的視場的中心部分之外,因為它通常用于許多日?;顒?。這種位置可促進與他人的無阻礙的眼睛到眼睛的交談以及通常在穿戴者的視場的中心部分內(nèi)提供對世界的無阻礙地觀看和感知。此外,當顯示器180位于如圖所示時,穿戴者190可以通過例如僅使他們的眼睛向上看來查看顯示器180(可能沒有移動他們的頭)。這如圖1G所示,其中穿戴者移動他們的眼睛以向上看并且使其視線與顯示器180對準。穿戴者還可以通過將他們的頭部向下傾斜并且使他們的眼睛與顯示器180對準來使用顯示器。

圖2是根據(jù)示例實施例的計算設備210的簡化方框圖。在示例實施例中,設備210利用鏈接到遠程設備230的通信鏈路220(例如有線或無線連接)進行通信。設備210可以是可接收數(shù)據(jù)并顯示與該數(shù)據(jù)相對應或相關聯(lián)的信息的任何類型的設備。例如,設備210可以采取諸如參考圖1A至1G所描述的頭戴式設備102、152或172這樣的頭戴式顯示器的形式或包括這樣的頭戴式顯示器。

設備210可以包括處理器214和顯示器216。顯示器216例如可以是光學透視顯示器、光學環(huán)視顯示器、或者視頻透視顯示器。處理器214可以接收來自遠程設備230的數(shù)據(jù)并且對要在顯示器216上顯示的數(shù)據(jù)進行配置。例如,處理器214可以是諸如微處理器或數(shù)字信號處理器這樣的任何類型的處理器。

設備210可以進一步包括諸如與處理器214耦合的存儲器218這樣的板載數(shù)據(jù)存儲器。存儲器218例如可以存儲可由處理器214訪問并執(zhí)行的軟件。

遠程設備230可以是被配置為向設備210傳送數(shù)據(jù)的包括膝上型計算機、移動電話、頭戴式顯示器、平板計算設備等等的任何類型的計算設備或發(fā)射器。遠程設備230和設備210可以包含諸如處理器、發(fā)射器、接收器、天線等等這樣的用于使能通信鏈路220的硬件。

此外,遠程設備230可以采取下述計算系統(tǒng)的形式或在計算系統(tǒng)中實現(xiàn),所述計算系統(tǒng)與諸如計算設備210這樣的客戶端設備進行通信并且被配置為代表所述客戶端設備執(zhí)行功能。這種遠程設備230可以接收來自另一計算設備210(例如HMD102、152或172或者移動電話)的數(shù)據(jù),代表設備210執(zhí)行某些處理功能,并且此后將最終數(shù)據(jù)發(fā)送回設備210??梢詫⒃摴δ芊Q為“云”計算。

在圖2中,通信鏈路220被圖示為無線連接;然而,還可以使用有線連接。例如,通信鏈路220可以是諸如通用串行總線這樣的有線串行總線或并行總線。有線連接還可以是專有連接。通信鏈路220還可以是使用例如無線電技術、在IEEE 802.11(包括任何IEEE 802.11修訂版)中所描述的通信協(xié)議、蜂窩技術(諸如GSM、CDMA、UMTS、EV-DO、WiMAX、或者LTE)、或者技術、以及其它可能性的無線連接。遠程設備230可以經(jīng)由因特網(wǎng)訪問并且可以包括與特定WEB服務(例如社交網(wǎng)絡、照片共享、通訊錄等等)相關聯(lián)的計算集群。

III.利用接近傳感器來確定眼睛的注視方向

a.用光照射眼睛區(qū)域

注視檢測系統(tǒng)136(例如接近傳感器)可包括一個或多個光源,諸如圖1B的光源138或圖8A-C的光源854A和854B。這一個或多個光源可由HMD 102控制。在使用時,該光源可照射可以包括穿戴者的眼表、眼瞼、以及眼睛周圍的臉部的眼睛區(qū)域的部分。光源可分別照射眼睛區(qū)域的一部分或全部。

如在本公開中所使用的,術語“光源”可包括被配置為提供適合于在穿戴者的眼睛區(qū)域附近執(zhí)行非侵入性反射率測量的電磁(EM)輻射的任何設備或設備集合。EM輻射可是可見光,或者EM輻射可是在人們通常可見的頻率范圍之外的適當類型的EM輻射。例如,一些實現(xiàn)可使用一個或多個紅外光源。因而,如在本公開中所使用的,術語"光"可包括在可見頻率范圍中的EM輻射以及在可見頻率范圍之外的EM輻射,這取決于期望的實現(xiàn)以及使用術語“光”的上下文。

在一個示例中,HMD將來自一個或多個光源(諸如圖1B的光源138或圖8A-C的光源854A和854B)的光提供給眼睛區(qū)域。光源可以連續(xù)地向眼睛區(qū)域的多個部分提供光,或者它們可以間歇地向眼睛區(qū)域提供光。例如,光源可在照射與不照射之間循環(huán)以便于注視檢測系統(tǒng)區(qū)別從與相應光源相對應的眼睛區(qū)域反射的光。此外,光源的這種循環(huán)可幫助注視檢測系統(tǒng)區(qū)分與相應光源相對應的環(huán)境光與反射光信號。在一些實施例中,注視檢測系統(tǒng)可包括始終開啟和間歇光源二者。

因為不同穿戴者之間的面部結(jié)構(gòu)通常不同,因此一些注視檢測系統(tǒng)可以基于所檢測到的面部特性來校準光源的方向、位置、以及光斑大小/形狀特性。例如,系統(tǒng)可確定從相應光源到眼睛區(qū)域的中心的方向(例如使用注視跟蹤、閃光檢測、視頻識別、或者其組合)并且此后改變光源的布置以瞄準在眼睛區(qū)域的中心周圍的區(qū)域。

b.檢測從眼睛區(qū)域所反射的光

諸如圖1B的光傳感器140或圖8A-C的光傳感器852的光傳感器可以被布置成感測或檢測從穿戴者的眼睛區(qū)域所反射的光。例如,參考圖1A和1B,當HMD 102被戴上時,光傳感器140可以面向穿戴者的眼睛區(qū)域并且可以檢測由(例如由光源138所提供的反射離開眼睛區(qū)域的光)反射光強度的變化所表示的眼睛區(qū)域的移動。

光傳感器140可被配置為檢測諸如反射光的頻率和強度這樣的反射光的某些方面。還可檢測諸如偏振、相干、相位、譜寬、和/或調(diào)制這樣的其它方面。

光傳感器140還可被布置為檢測從眼部區(qū)域的特定部分所反射的光或者檢測來自整個眼部區(qū)域的光。另外,光傳感器140可以被設計為檢測具有諸如例如某個調(diào)制頻率、光頻這樣的某些屬性的光或者具有特定偏振的光。

光傳感器140所檢測到的反射光的強度可基于眼部區(qū)域的各種位置的特性而改變。尤其是,對于光源138所提供的給定光強度,與當光傳感器140被對準以對從眼表(例如鞏膜、角膜等等)所反射的光進行檢測時相比,當光傳感器140被對準以對從眼睛周圍的皮膚(包括眼瞼)所反射的光進行檢測時光傳感器140可以檢測更大的反射光強度。例如,各種皮膚和眼睛表面可以具有不同的光散射和/或反射特性。因此,光傳感器檢測到光強度增大可以指示出使占據(jù)光傳感器的可檢測區(qū)域的皮膚量增大的眼睛移動。例如,用于對當眼睛睜開時來自眼睛表面的光(相對較少的光)進行檢測的光傳感器還可對當眼睛閉合時來自眼瞼的光(相對較多的光)進行檢測。

除了眼睛閉合之外,其它眼睛移動也可通過光傳感器所檢測到的光強度的增大來指示。與眼睛在向前看的圖8C以及眼睛在向下方向上看的圖8B相比,在圖8A中,眼睛在向上方向上看。因此,當眼睛從圖8C中所描繪的向前注視方向轉(zhuǎn)變到圖8A中所描繪的向上注視方向時,下眼瞼804可以向上移動到光源854B所發(fā)射出的光的路之中。因此,光傳感器852所檢測到的且從光源854B所提供的光的強度可能由于向上眼睛移動而增大,因為與圖8C(眼睛向前看)或者圖8B(眼睛往下看)所描繪的情況相比,光源854B可以照射更多的皮膚。同時,如圖8A所示,來自光源854A的光可以照射眼睛表面(如類似地在圖8C中所描繪的),而不會照射眼瞼802。因此,源854B所提供的光的強度可以保持不變,而光傳感器852從光源854A和854B二者所檢測到的總光強可能由于向上眼睛移動而增大,如從圖8C至圖8A的轉(zhuǎn)變所示。

作為另一示例,圖8B示出了在眼睛向下看的情況下與眼睛區(qū)域800相交互的注視檢測系統(tǒng)850。如圖8B所示,穿戴者的上眼瞼802已經(jīng)向下移動到光源854A所發(fā)射出的光的路徑。因此,光傳感器852所檢測到的且光源854A所提供的光的強度可能由于注視方向從向前(如圖8C)變?yōu)橄蛳?如圖8B)而增大,因為與圖8C所描繪的情況相比,可以照射更多的皮膚。同時,來自光源854B的光仍不照射上眼瞼802。因此,從源854B所檢測到的總光強將保持不變,并且從兩個源所檢測到的整體光強可能由于注視方向從向前變?yōu)橄蛳露龃蟆?/p>

c.確定注視方向

注視檢測系統(tǒng)850和/或HMD 102可以確定用于表示眼睛朝向的所沿著的方向(例如沿著其的以眼睛瞳孔為中心的軸)的注視方向。例如,注視檢測系統(tǒng)850所檢測到的總光可由于眼睛從向前注視方向(圖8C)移動到向上注視方向(圖8A)或向下注視方向(圖8B)而增大。因此,如果注視檢測系統(tǒng)850被配置為區(qū)分分別與光源854A和854B相對應的反射光強,則從每個相應光源854A和854B所檢測到的反射光強的增大(或減少)可與對應的眼睛移動(例如向下和向上)相關聯(lián)。

為了便于使光強數(shù)據(jù)與眼睛移動信息相關聯(lián),系統(tǒng)可收集并存儲與已知眼睛移動相對應的代表性光強數(shù)據(jù)。例如,注視檢測系統(tǒng)850或HMD 102可以存儲用于表示與特定注視方向相對應的光強水平的數(shù)據(jù)?;蛘撸伤鸭脩籼囟〝?shù)據(jù)。例如,可指示穿戴者遵循校準過程以存儲與特定穿戴者的面部特性相關聯(lián)的特定強度數(shù)據(jù)。尤其是,HMD102可諸如例如通過音頻或文本命令或者通過在穿戴者應看的方向上顯示指示符來提示該穿戴者在不同的方向上查看,并且此后注視檢測系統(tǒng)850和/或HMD 102可存儲用于表示當穿戴者在不同方向上查看時從穿戴者的眼睛區(qū)域所檢測到的光強的數(shù)據(jù)。可以對HMD 102的新的穿戴者重復該校準過程。

IV.利用反射閃光來確定眼睛的注視方向

根據(jù)示例實施例,諸如HMD這樣的可穿戴式計算設備可以實時地使用眼睛位置感測以向HMD上的一個或多個應用或程序提供輸入。例如,應用可以使用眼睛注視方向和/或眼睛運動來控制顯示器上的視覺光標。眼睛位置感測還可以向諸如服務器這樣的與HMD通信式相連但在其外部的計算設備上運行的一個或多個應用或程序提供輸入。應該注意的是貫穿本公開“觀看方向”或“眼睛位置”可以與"注視方向"等同地使用。

a.眼睛位置感測

眼睛位置感測可以包括一個或多個檢測和/或測量操作以獲得包含用于指示眼睛移動及一個或多個眼睛的其它可觀察特征和特性的信息的眼睛位置數(shù)據(jù)。眼睛位置感測還可以包括一個或多個分析操作以對數(shù)據(jù)進行分析以例如確定適合于由應用輸入的或由用戶解釋的形式的眼睛位置、眼睛移動、以及一個或多個眼睛的其它可觀察特征和特性。

感測和/或測量可以由諸如視頻相機這樣的被配置成觀察和/或測量位置、移動、以及一個或多個眼睛的可能其它特性的眼睛感測設備來執(zhí)行。對眼睛感測數(shù)據(jù)的分析可以由HMD的一個或多個處理器、用于經(jīng)由通信連接接收來自HMD的眼睛感測數(shù)據(jù)的在HMD外部的服務器(或其它計算設備或平臺)、或者例如以分布式方式一起工作的這兩者來執(zhí)行。

眼睛感測數(shù)據(jù)可以包括與眼睛感測設備的輸出相對應的眼睛感測或注視信號,諸如來自眼睛感測視頻相機的視頻流。因而,眼睛感測信號表示眼睛感測設備對一個或多個眼睛的觀察的編碼形式。例如,注視信號可是對模擬測量信號的數(shù)字化編碼。應當理解的是包括已知類型的流視頻的其它形式的注視信號也是可能的。眼睛感測數(shù)據(jù)可以包括諸如時間戳、校準標度、參數(shù)、或者在對眼睛感測數(shù)據(jù)的分析中所使用的其它輔助信息這樣的附加信息。

根據(jù)示例實施例,由眼睛感測設備所獲得的且輸出為眼睛感測信號的可觀察量可以用于確定諸如角運動的范圍和角運動的速度這樣的眼睛移動的動態(tài)特性。從大樣本的不同人獲得這種眼睛移動特性可以提供用于確定動態(tài)特性的頻率(或概率)分布的基礎。另外,對大樣本的不同人的諸如眼睛的質(zhì)量、眼瞼的質(zhì)量、以及眼睛的各個組成部分的尺寸大小這樣的物理特性的測量可以類似地提供用于確定這些物理特性的頻率(或概率)分布的基礎??傊?,各種分布可以用于導出或計算眼睛移動的模型,該模型例如包括眼睛移動的已知的或已計算的速度和/或幅度范圍、通過眼瞼可施加在眼睛上的已知的或已計算的力。此后,該模型可以形成用于評估隨后對眼睛運動的觀察的基礎。

進一步尤其是,經(jīng)由對眼睛感測數(shù)據(jù)的時域分析可以確定諸如存在于眼睛感測信號中的眼睛移動和位置這樣的動態(tài)性能。說明性地,這種動態(tài)性能可以包括與凝視和掃視有關的細節(jié)。更進一步地,與凝視和掃視有關的細節(jié)可以包括例如幅度、方向、持續(xù)時間、速度等。一旦模型被開發(fā),它可用于評估眼睛運動的運行時間測量的可靠性。尤其是,產(chǎn)生超出模型指定為物理現(xiàn)實的極限的運動的注視信號可以被認為是不可靠的。

通常,眼睛感測視頻相機可以捕獲視頻幀,每一個視頻幀包含二維像素陣列形式的圖像。因而,每個圖像可以包括對眼睛的像素渲染。眼睛的物理特性和移動可以是根據(jù)一個或多個這種圖像確定的。例如,可以通過分析諸如瞳孔這樣的眼睛特征在圖像平面中的位置如何跨連續(xù)視頻幀而變化,來確定眼睛的移動。通過使諸如像素平面大小以及視頻相機距所觀察的眼睛的距離這樣的幾何參數(shù)相關可以將跨視頻幀的像素位置的變化轉(zhuǎn)換成眼睛的角運動(位置以及位置的變化率)。

按照相關方式,通過使一個或多個已知的受控光源(諸如LED)位于相對于觀察中的一個或多個眼睛的校準位置,并且此后通過捕獲反射離開一個或多個眼睛的光源的視頻圖像,隨著一個或多個眼睛的移動,連續(xù)的視頻幀可以捕獲在圖像平面中的反射的移動。利用已知的受控光源以及一個或多個眼睛的相對幾何形狀,可以將所觀察到的在圖像平面中的反射的移動轉(zhuǎn)換為一個或多個眼睛的移動。已知的受控光源的反射被稱為受控閃光。

進一步根據(jù)示例實施例,眼睛感測可以使用眼睛特征觀察和受控閃光以確定眼睛移動和位置,可能地以及一個或多個眼睛的其它性質(zhì)和特性。

圖3是根據(jù)示例實施例的對利用受控閃光的眼睛感測的概念性說明。圖3的左手側(cè)(標記為“(a)”)示出了相對于在相對于眼睛的固定位置處的LED 301的三個不同角度取向上的眼睛的示意性表示:眼睛302-a-1(左上)略微向上注視;眼睛302-a-2(上部中間)水平注視;并且眼睛302-a-3(左下)略微向下注視。對于每個取向而言,LED 301(在相對于眼睛的固定位置處)創(chuàng)建了離開眼睛的受控的閃光;來自LED 301的光被分別表示為從LED 301朝向眼睛的實線箭頭。對于眼睛的每個取向,將在眼睛上的不同位置上檢測到閃光。眼睛上的每個不同位置可以被概念性地表示為在例如可以是眼睛感測相機的一部分的像素陣列306中的不同位置上的檢測。這被示出在眼睛的右邊;在每個圖像中,黑點表示對對應的眼睛取向所檢測到的受控閃光:對頂部取向檢測到的閃光308-a-1;對中間取向檢測到的閃光308-a-2;以及對底部取向檢測到的閃光308-a-3。應當理解的是在像素陣列中所檢測到的閃光的相應位置說明了眼睛相對于LED 301而言的不同取向?qū)е峦ㄟ^不同像素進行的檢測。然而,所示的特定位置不一定旨在表示對在像素陣列306中實際檢測到閃光的位置的精確或真實渲染,而是說明了用于使圖像平面中的眼睛移動與閃光運動相關聯(lián)的概念。此外,根據(jù)示例實施例,像素陣列306中的位置可以被分析地映射到眼睛取向。

根據(jù)示例實施例,每個像素陣列306可以與視頻信號的幀相對應。此后,眼睛感測信號可以被認為是每個幀的編碼像素位置和值,其包括與當前說明性示例的分別檢測到的閃光308-a-1、308-a-2和308-a-3相關聯(lián)的像素位置和值。此后對眼睛感測信號的分析可以包括確定與分別檢測到的閃光相關聯(lián)的像素位置和值并且對每個圖像重建眼睛的角取向。逐幀圖像數(shù)據(jù)還可以用于測量眼睛的角速度(例如掃視)。應該理解的是為了本說明的目的簡化了對數(shù)據(jù)獲取和分析的描述,并且在實施中可以存在其它步驟。

圖4是根據(jù)示例實施例的對利用眼睛的圖像進行眼睛感測的概念性說明。圖4中的描繪與圖3相似,但是圖形元素用參考400的數(shù)字重新標記。圖4的左手側(cè)(標記為“(a)”)再次示出了相對于在相對于LED 301的固定位置處的三個不同角取向上的眼睛的示意性表示:眼睛402-a-1(左上)略微向上注視;眼睛402-a-2(上部中間)水平注視;并且眼睛402-a-3(左下)稍微向下注視。對于該示例技術,眼睛感測信號捕獲眼睛的虹膜和瞳孔的圖像。眼睛在角位置402-a-1402-a-2、以及402-a-3上的圖像被在圖像平面406中捕獲,并且分別出現(xiàn)在位置408-a-1、408-a-2、以及408-a-3處。

根據(jù)示例實施例,對眼睛感測信號的分析包括下述一個或多個處理,所述一個或多個處理用于辨識每個圖像中的虹膜和/或瞳孔并且根據(jù)虹膜和/或瞳孔跨連續(xù)圖像幀的位置變化來分析地重建眼睛位置和運動(例如掃視)。在當前示例中,三個像素陣列圖像示出了虹膜/瞳孔在圖像平面上的移動。

從眼睛感測相機所得到的信息可以采取眼睛感測信號或注視信號的形式,并且可以用作一個或另一過程或程序的輸入。舉例來說,注視信號可以作為數(shù)字化數(shù)據(jù)流而提供。

在實施中,由于眼睛漂移、震顫、和/或無意識微掃視所引起的抖動可能會導致噪聲注視信號。當對這種噪聲注視信號進行分析以恢復所觀察到的眼睛運動時,噪聲注視信號可能會導致對眼睛移動的不準確或不可靠的測量。

可以將平滑濾波器和/或卡爾曼濾波器應用于注視信號以幫助減少由于這種抖動所引入的噪聲。然而,在快速眼睛移動(掃視)期間,濾波器可能對數(shù)據(jù)進行過度地平滑。為了避免對凝視信號進行過平滑,當檢測到大的移動(例如掃視)時,可以對濾波器進行重新初始化。該初始化可以是作為用于檢查典型眼睛移動特性的信號的分析過程的一部分來完成的。

由于檢測到大的眼睛移動而禁用過濾器這假定所檢測到的眼睛移動是準確或可靠的。然而,在一些情況下,可能從不可靠的注視信號檢測到大的眼睛移動。例如,眼睛移動可能不是物理上合理或正常的。在這種情況下,應當評估該眼睛移動以確定注視信號本身是否是錯誤的或不可靠的。

b.確定錯誤的或不可靠的眼睛感測信號

在實施中可能會出現(xiàn)各種原因的錯誤或不可靠的眼睛感測信號。一個示例是過度的環(huán)境光,其可以被說明為基于受控閃光而用于眼睛感測。進一步尤其是,設備可以檢測和/或測量除一個或多個眼睛的已知特征和/或來自一個或多個眼睛的受控閃光之外的其它可觀察量。一些其它可觀察量可能不一定有助于眼睛感測的過程。環(huán)境光的存在可以直接被眼睛感測視頻相機檢測到,或者可以被檢測為離開一個或多個眼睛的虛假反射(spurious reflection)。因此,眼睛感測信號可以包括來自環(huán)境光的影響。在對用于眼睛移動和位置(可能地以及一個或多個眼睛的其它可觀察特性和性質(zhì))的眼睛感測信號的分析的上下文中,環(huán)境光可以表現(xiàn)為干擾,并且可以在分析確定過程中引入一定程度的不確定性。

有時可能會發(fā)生來自環(huán)境光的干擾水平可能足夠高以致使眼睛感測數(shù)據(jù)或?qū)ρ劬Ω袦y數(shù)據(jù)的分析在統(tǒng)計上是不可靠的。當這種情況發(fā)生時,使用眼睛感測作為一個或多個應用的輸入可能會產(chǎn)生那些一個或多個應用的不希望或錯誤的行為。

在圖3的右手側(cè)(并且標記為"(b)")圖示了環(huán)境光干擾的影響的示例。在該示例中,重新標記為眼睛302-b-1、302-b-2和302-b-3的眼睛的取向與上面對圖3的左手側(cè)(a)所描述的那些取向相同。同樣地,照明LED 301和像素陣列圖像306也與圖3的左手側(cè)(a)相同。然而,舉例來說,現(xiàn)在存在由燈泡310所表示的環(huán)境光源。射在眼睛上的環(huán)境光被表示為在每個取向中指向眼睛的虛線箭頭。

在環(huán)境光干擾的該示例中,重新標記為閃光308-b-1、308-b-2和308-b-3的反射閃光出現(xiàn)在相應像素陣列圖像中的相同位置。然而,現(xiàn)在在來自燈泡310的環(huán)境光所生成的每個圖像中存在虛假特征(未標記)。這種特征可以模仿受控的閃光并且降低了用于從閃光的像素位置和像素值重建眼睛移動和位置的分析的可靠性。這種虛假特征影響從受控閃光重建眼睛感測的可靠性的程度可以取決于是否以及如何將它們與合法的受控閃光區(qū)別開。

作為示例,如果虛假特征在圖像中看起來像閃光一樣亮,則可能不能將受控閃光與虛假特征區(qū)別開來。在這種情況下,環(huán)境光干擾可能會導致錯誤和/或不可靠的眼睛感測。

在圖4的右手側(cè)(并且被標記為“(b)”)中所說明的環(huán)境光干擾的影響的另一示例示出了來自由太陽410所表示的強光源的環(huán)境光干擾。在該示例中,環(huán)境光有效地沖掉圖像,而使得甚至不能識別出瞳孔/虹膜特征。如同在圖3所說明的示例一樣,可能會導致錯誤和/或不可靠的眼睛感測信號。

雖然不是必須在圖3和圖4中說明,但是可能存在錯誤和/或不可靠的眼睛感測信號的其它原因。例如,不是由于掃視或其它自然眼睛運動所引起的用戶所戴的HMD的振動(例如當用戶乘坐地鐵時),可以導致眼睛感測設備與用戶的眼睛之間的相對移動。如果這種相對移動過大,則捕獲移動的眼睛感測信號可能變得不可靠。錯誤和/或不可靠的眼睛感測信號的其它來源或原因也是可能的。

根據(jù)示例實施例,例如,通常如上所述的,可以通過將從信號所得到的眼睛移動與基于眼睛的物理特性的眼睛移動的模型進行比較來分析地評估眼睛感測或注視信號。尤其是,眼睛的物理特性可以用于設置眼睛移動的參數(shù)值。該參數(shù)可以設置關于從實際眼睛感測信號所得到的測量變量的范圍或閾值,從而定義眼睛移動的規(guī)則。說明性地,眼睛移動的規(guī)則可以包括例如:(a)在凝視期間的最小和最大眼睛移動(例如角度在1與4度之間變化);(b)在掃視期間的最小和最大眼睛移動(例如角度在1與40度之間,典型為15-20度);(c)掃視移動的最小和最大持續(xù)時間(例如持續(xù)時間在約30ms和120ms之間);(d)在凝視之間眼睛移動的最大發(fā)生頻率(例如眼睛每秒不移動多于十次);(e)連續(xù)掃視移動之間的最小持續(xù)時間或不應期(例如兩個連續(xù)掃視移動間隔約100-200ms);(f)凝視的最大持續(xù)時間(例如凝視持續(xù)小于約600ms);(g)掃視的幅度、持續(xù)時間、和/或速度之間的關系(例如幅度與持續(xù)時間之間或幅度與速度之間的大致線性關系);和/或諸如眼球移出頭部或者轉(zhuǎn)動太遠而進入頭部這樣的其它不成立的眼睛移動結(jié)果。還可以定義其它規(guī)則和相關聯(lián)的眼睛移動參數(shù)。

可以將所測量的變量與模型參數(shù)進行比較以確定眼睛感測信號是否對應于違背規(guī)則的眼睛移動。如果眼睛感測信號違背規(guī)則,則可以將所得到的眼睛移動視為是非物理的眼睛移動,而在這樣的情況下認為該眼睛感測信號是錯誤的或不可靠的。響應于確定眼睛感測信號是或已變?yōu)殄e誤的或不可靠的,則使用該信號的系統(tǒng)(例如HMD)可以結(jié)合例如使用注視信號作為輸入的過程、程序、或者應用而采取一個或多個校正和/或回避動作。

c.眼睛感測的適應操作

根據(jù)示例實施例,可以使得HMD暫停或終止受到錯誤或不可靠眼睛感測信號影響的一個或多個應用或者提議或建議暫?;蚪K止受到錯誤或不可靠眼睛感測信號影響的一個或多個應用。此外,HMD所呈現(xiàn)或發(fā)出的通知、告警、提議、和/或建議可以被認為是指向HMD的用戶的,雖然其它類型的接收者也是可能的。

更具體地,當眼睛感測信號被視為是錯誤的或不可靠的時,可以采取一個或多個校正、補償、預防、或者搶先動作。可能的動作例如包括關閉卡爾曼濾波器(或其它濾波器)、重新校準眼睛感測系統(tǒng)、和/或向用戶告警或通知不可靠的眼睛感測信號等等。告警或通知可以采取文本消息、視覺提示、可聽提示、或者在HMD上的一些其它呈現(xiàn)的形式。

告警或通知可以進一步指示出哪些應用(如果有的話)受到錯誤或不可靠的眼睛感測信號的影響。這種通知還可以識別使用眼睛感測作為輸入的一個或多個應用。該識別可用于發(fā)出一個或多個應用可能會錯誤運行或者應暫?;蚪K止使用一個或多個應用的進一步通知。替代地或者另外,一旦確定了錯誤眼睛感測信號,則可以暫停一個或多個應用的操作,或者可以進行暫停或終止受到錯誤或不可靠眼睛感測信號影響的一個或多個應用的提議。

此外,由HMD呈現(xiàn)或發(fā)出的通知、告警、提議、和/或建議可以被認為是指向HMD的用戶的,雖然其它類型的接收者也是可能的。

進一步根據(jù)示例實施例,通知可以包括對為減小或消除過度的環(huán)境光干擾水平而應采取的一個或多個校正動作的指示。例如,該指示可以是將HMD重新定向成離開干擾光的源。替代地或者另外,該指示可以是為HMD或HMD的眼睛感測設備遮擋干擾光。

根據(jù)示例性實施例,一旦確定錯誤的眼睛感測信號的噪聲水平已經(jīng)下降到閾值水平之下,則可以恢復使用眼睛感測以作為一個或多個應用的輸入。還可以發(fā)布恢復的通知。如果暫停使用輸入是自動的(例如沒有活動的用戶交互),那么恢復也可以是自動的。

V.示例方法和系統(tǒng)

圖5是根據(jù)這里所描述的至少一些實施例的用于描繪示例方法500的方框圖。

在塊502,方法500包括由頭戴式設備(HMD)接收與信息事件相對應的數(shù)據(jù)。當穿戴者戴著HMD時,HMD的顯示器可以位于穿戴者的眼睛的前視視場的上周邊。例如,圖1E的HMD 172可以利用圖2的通信鏈路220來接收來自遠程設備230(例如服務器)的與信息事件相對應的數(shù)據(jù)。該數(shù)據(jù)可以與HMD所接收到的消息(例如電子郵件、SMS、或者MMS)有關。在一些示例中,HMD 172還可以被配置為接收可能與在HMD 172上運行的應用(例如社交媒體應用)相關聯(lián)的“推送通知”。在該示例中,HMD 172可以向服務器提供待命命令(standing command)以提供推送通知并且HMD 172可以被配置為在推送通知被提供時接收這樣的推送通知。

或者,數(shù)據(jù)可以是由圖2的處理器214從諸如用于監(jiān)測HMD的電池中剩余的能量的量的電池計這樣的HMD 172的傳感器接收到的。在這里,數(shù)據(jù)可以包括用于指示出電池中剩余的儲存能量的量很低的信息。在另一示例中,HMD可以使得HMD的相機捕獲穿戴者的周圍環(huán)境(例如地標)的圖像。此后HMD可以將圖像發(fā)送到服務器。服務器可以訪問與地標有關的信息并且可以將與地標有關的信息發(fā)送到HMD(以呈現(xiàn)給穿戴者)。信息事件的其它示例是可能的。

在塊504,方法500包括:響應于接收到該數(shù)據(jù),提供與信息事件相對應的指示。該指示(例如由HMD提供)可以是音頻指示、視覺指示、或者振動指示。例如,音頻指示可以包括由HMD的揚聲器或骨傳導換能器所提供的諧鳴聲、蜂鳴聲、或者鈴聲。振動指示可以包括由揚聲器、骨傳導換能器、或者被配置為產(chǎn)生HMD的穿戴者可察覺到的振動脈沖的HMD的任何其它部件所提供的振動。作為另一示例,在圖9A中圖示了與傳入電子郵件消息有關的視覺指示900。該視覺指示900可以包括諸如電子郵件消息的發(fā)送者以及主題這樣的信息(其它示例是可能的)。然而,可以從視覺指示900省略掉諸如電子郵件消息的正文這樣的更詳細的信息。視覺指示還可以包括閃爍的或者點亮的LED,或者當穿戴者的眼睛朝向與HMD的顯示器對準(或不對準)的注視方向上時在HMD的顯示器內(nèi)的在穿戴者的視場內(nèi)可感知到的明顯的或明亮的圖像。

參考作為示例的圖7A,穿戴者190可以使她的眼睛基本上對準她的前面(例如在注視方向上或者在基本上與地面平行的視線183中)使得HMD 172的顯示器180所顯示的圖像181可以僅在她的周邊視場內(nèi)是可感知到的。取決于HMD 172是如何實現(xiàn)的,HMD 172所提供的視覺指示可以在穿戴者的周邊視場內(nèi)是可見的(例如作為顯示器180所顯示的圖像181的一部分)或者可以或許作為點亮的LED 701而在她的直接視線183附近是可見的。

參考作為示例的圖7B,穿戴者190可能已移動她的眼睛來以向上的角度(例如相對于與地面平行的平面)對準使得圖像181沿著她的新視線183是可感知到的。取決于HMD 172是如何實現(xiàn)的,HMD 172所提供的視覺指示可以在穿戴者的周邊視場內(nèi)是可見的(例如點亮的LED 701在顯示器180所顯示的圖像181下面是可見的)或者可以或許作為顯示器180所顯示的圖像181的一部分而在她的直接視線183附近是可見的。

在另一示例中,HMD可以與諸如具有網(wǎng)絡功能的或藍牙兼容的耳機、手表、平板計算機、膝上型計算機、或者智能電話這樣的另一計算設備通信式地相耦合。方法500可以包括用于使計算設備與HMD通信式地相耦合以提供下述指示的HMD,所述指示可以包括上面預期的任何類型的指示。

在塊506,方法500包括確定眼睛的注視方向。可以利用在圖3和圖4中所描繪的或者在上面的部分III和IV中所描述的系統(tǒng)或方法中的任何一個來確定眼睛的注視方向。參考作為示例的圖8C,光源854A和854B可以照亮眼睛區(qū)域800。光傳感器852可以檢測分別與光源854A和854B所提供的光相對應的反射光。注視檢測系統(tǒng)850或HMD可以基于光傳感器852所檢測到的光來以各種方式確定眼睛的注視方向。

在一些示例中,代替確定眼睛的注視方向,HMD可以檢測或感測穿戴者所執(zhí)行的各種眼睛姿勢。例如,HMD可以檢測穿戴者的眼睛的眨動或眨眼。在這種情況下,HMD可以響應于檢測或感測到眨動或眨眼姿勢,在顯示器中顯示與信息事件有關的圖形內(nèi)容。眼睛姿勢的其它示例是可能的。

在塊508,方法500包括確定眼睛的注視方向是與HMD的顯示器的位置相對應的向上方向。當HMD被戴著時,顯示器位于眼睛的前視視場的上周邊。HMD 172可以通過將和當前注視方向相關聯(lián)的光傳感器數(shù)據(jù)或接近傳感器數(shù)據(jù)與和已知向上注視方向相關聯(lián)的存儲數(shù)據(jù)進行比較來確定眼睛的當前注視方向是向上方向。通常,可以利用在3和圖4中描繪的或者在上面的部分III和IV中所描述的系統(tǒng)或方法中的任何一個來確定眼睛的注視方向。

圖7B描述了與HMD 172的顯示器180對準的穿戴者190的眼睛的注視方向,其中顯示器180位于眼睛的前視視場的上周邊。如圖7B所示,當穿戴者向上看時,顯示器180可以顯示具有與穿戴者的視線183基本對準的明顯位置的圖像181。然而在圖7A中,顯示器180向穿戴者190顯示明顯位于穿戴者190的眼睛的前視視場的上周邊的圖像181(例如如視線183所指示的當穿戴者向前看時)。

在一些情況下,HMD可以確定所確定的眼睛的注視方向已經(jīng)持續(xù)至少閾值持續(xù)時間(例如2秒)以便(i)提高注視方向確定的準確度或者(ii)提高在使用HMD的顯示器以提供與該指示有關的更多詳細信息之前HMD的穿戴者對所提供的指示感興趣的置信度水平。如在這里所使用的,“與HMD的顯示器對準”的注視方向可以包括立體角的范圍,該立體角的范圍包括以顯示器為中心的注視方向。不“與HMD的顯示器對準”的注視方向可以在立體角的范圍之外。

在塊510,方法500包括:響應于確定眼睛的注視方向是向上方向,則在顯示器中顯示與信息事件有關的圖形內(nèi)容。如在圖9B中所圖示的,如果所接收到的數(shù)據(jù)表示電子郵件消息,則所顯示的圖形內(nèi)容902可以包括表示電子郵件消息的正文的內(nèi)容的文本。如果所接收到的數(shù)據(jù)表示與穿戴者的周圍環(huán)境(例如地標)有關的信息,則圖形內(nèi)容可以包括與地標有關的或者用于描述地標的成像或文本。如果所接收到的數(shù)據(jù)表示來自HMD的電池計的用于指示出HMD的電池以低儲存能量運行的消息,則圖形內(nèi)容可以包括用于指示電池以低的儲存能量運行的文本或成像。

在確定了眼睛的注視方向之后,方法500可以進一步包括:(i)確定在確定注視方向與提供指示的相應時間之間未流逝閾值持續(xù)時間,并且(ii)至少部分地基于確定在相應時間之間未流逝閾值持續(xù)時間來顯示圖形內(nèi)容。例如,可以根據(jù)塊504來提供指示,并且HMD的穿戴者可以在所提供的指示的5秒內(nèi)將她的注視指向HMD的顯示器。如果閾值持續(xù)時間為10秒,則HMD可以確定從提供指示起未流逝閾值持續(xù)時間,并且此后一旦檢測到確定注視與顯示器對準則顯示與指示有關的圖形內(nèi)容。然而,如果在指示被提供之后并且在穿戴者將其注視指向顯示器之前過去了12秒,則可以不顯示圖形內(nèi)容(至少在穿戴者沒有提供用于指示出希望觀看圖形內(nèi)容的其它輸入的情況下不顯示圖形內(nèi)容)。

在另一示例中,方法500可以包括(i)確定從提供指示起已經(jīng)過去了預定持續(xù)時間并且(ii)在顯示圖形內(nèi)容之前,基于確定從提供指示起已經(jīng)過去了預定持續(xù)時間而停止提供指示。在這樣的示例中,指示可以在過去了預定持續(xù)時間之后消退,但是在停止提供指示之后可能存在另一時間窗,在該另一時間窗期間穿戴者可以抬頭看顯示器以使得顯示圖形內(nèi)容。例如,在從最初提供指示起過去了5秒之后,HMD可以停止提供指示。此后在HMD停止提供通知之后的2秒,用戶可以使她的注視指向顯示器。在這種情況下,如果預定持續(xù)時間是8秒,則HMD可以顯示圖形內(nèi)容,但是如果預定持續(xù)時間是11秒,則在沒有由穿戴者提供的進一步輸入的情況下可以不提供圖形內(nèi)容。

在確定了(第一)注視方向之后,方法500可以進一步包括確定不與HMD的顯示器對準的眼睛的第二注視方向,并且響應于確定第二注視方向,使顯示器不包括圖形內(nèi)容(例如從顯示器移除圖形內(nèi)容)。例如,在提供指示之后,穿戴者可以使其注視對準朝向HMD的顯示器以查看所顯示的圖形內(nèi)容。在某一時刻,穿戴者可以完成閱讀或查看所顯示的圖形內(nèi)容并且使她的注視指向離開HMD的顯示器。一旦確定不與顯示器對準的第二注視方向,HMD可以從顯示器移除圖形內(nèi)容并且還可以禁用顯示器以節(jié)能并且使得穿戴者可以能夠透過整個顯示器觀看。

在一些示例中,通過校準過程可提高注視檢測的準確性。為此,方法500可以包括HMD向穿戴者提供用于請求與HMD的顯示器對準的穿戴者的眼睛的注視方向的消息。當穿戴者已經(jīng)使其注視對準朝向顯示器時,HMD(例如光源138)可以用入射光照射與眼睛相對應的眼睛區(qū)域。該眼睛區(qū)域可以包括在眼睛附近的穿戴者臉部或頭部的任何區(qū)域。此后,在眼睛對準與顯示器對準的注視方向的同時,HMD(例如光傳感器140)可以檢測從眼睛區(qū)域所反射的光的強度,并且存儲用于表示反射光的所檢測到的強度的數(shù)據(jù)。所存儲的數(shù)據(jù)可以表示用于將來在確定注視方向的過程中進行比較的樣本。例如,確定眼睛的注視方向可以包括對在預定強度范圍內(nèi)的光的強度進行檢測,該預定強度范圍包括與穿戴者使其注視對準朝向HMD的顯示器的已知狀態(tài)相對應的所檢測到的強度。

圖6是根據(jù)這里所描述的至少一些實施例的用于對示例方法600進行描繪的方框圖。

在一些示例中,方法600的塊606可以在如上所述的且在圖5中所描繪的方法500的塊502和504之后。在塊606,方法600包括確定眼睛的第一注視方向,其中該第一注視方向與位于眼睛的前視視場的上周邊中的HMD的顯示器對準(例如圖7B)??梢岳迷?和圖4中所描繪的以及在上面的所附文本中或者在上面與方法500的塊506或508有關的任何文本中所描述的系統(tǒng)或方法中的任何一個來確定眼睛的注視方向。

在塊608處,方法600包括確定眼睛的第二注視方向,其中該第二注視方向不與顯示器對準。例如,圖7A描繪了不與顯示器180對準的第二注視方向(例如視線183),這意味著顯示器180所顯示的圖像181在穿戴者190的周邊視場內(nèi)是可見的(如果對于穿戴者是可見的)。

在塊610,方法600包括確定在確定第一注視方向與確定第二注視方向之間的持續(xù)時間小于閾值持續(xù)時間。為了確定在所述確定之間的持續(xù)時間,HMD 172可以保持內(nèi)部時鐘或者可以接收來自圖2的遠程設備230的網(wǎng)絡時鐘信號。例如,可以根據(jù)塊504來提供指示,并且HMD的穿戴者可以使其注視指向顯示器(例如第一注視方向)。此后在使穿戴者的注視指向顯示器的1秒內(nèi),該穿戴者可以使其注視重指向以離開顯示器。如果閾值持續(xù)時間是2秒,則HMD可以確定在第一與第二注視方向的相應確定之間已過去了不到閾值持續(xù)時間。

在塊612,方法600包括:響應于該確定,使得不再提供指示。在振動指示的情況下,HMD可以使HMD停止振動。在音頻指示的情況下,HMD的揚聲器可以中止構(gòu)成音頻指示的恒定或周期性諧鳴聲或蜂鳴聲。在視覺指示的情況下,HMD可以使HMD的LED停止點亮或停止閃爍,或者可以使HMD的顯示器停止提供顯眼的視覺指示。

圖10是根據(jù)這里所描述的至少一些實施例的用于對示例方法1000進行描繪的方框圖。

在塊1002,方法1000包括由頭戴式設備(HMD)接收與信息事件相對應的數(shù)據(jù),其中當穿戴者戴著HMD時,HMD的顯示器位于穿戴者的眼睛的前視視場的上周邊。塊1002可以包括如上關于方法500的塊502所述的任何功能。

在塊1004,方法1000包括:響應于接收到數(shù)據(jù),由HMD提供與信息事件相對應的指示。塊1004可以包括上面參考方法500的塊504所描述的任何功能。

在塊1006,方法1000包括通過HMD的眼睛檢測系統(tǒng)用一個或多個入射光束來照射與眼睛相對應的眼睛區(qū)域。眼睛檢測系統(tǒng)可以包括上面在部分III和IV中所描述的任何眼睛檢測系統(tǒng)或眼睛感測系統(tǒng)。例如,注視檢測系統(tǒng)136的一個或多個光源138可以用一個或多個入射光束照射眼睛區(qū)域。

在塊1008,方法1000包括通過眼睛檢測系統(tǒng)來檢測與一個或多個入射光束相對應的一個或多個反射光束的強度。例如,光傳感器140可以檢測與一個或多個光源138所生成的入射光束相對應的反射光束。

在塊1010,方法1000包括由HMD接收來自眼睛檢測系統(tǒng)的信號,其中該信號表示一個或多個反射光束的強度。例如,光傳感器140可以生成信號并且發(fā)送該信號以由HMD的處理器接收。

在塊1012,方法1000包括由HMD來確定所接收到的信號與預定信號準則相對應,其中預定信號準則與眼睛的注視方向相對應,眼睛的注視方向是與顯示器的位置相對應的向上方向。例如,為了與在操作狀態(tài)下所接收的數(shù)據(jù)進行比較,HMD可以存儲用于表示下述信號特性的參考數(shù)據(jù),所述信號特性與穿戴者使其注視向上朝向HMD的顯示器這樣的狀態(tài)相對應。參考圖11,作為示例,信號1102可以將一個或多個反射光束的所檢測到的強度表示為時間的函數(shù)。例如,信號1102可以是與一個或多個反射光束的所檢測到的強度成比例或成反比的電壓或電流。

可能與穿戴者的向上注視(朝向顯示器)相對應的一個信號標準可以是信號1102指示從第一強度1104到小于第一強度1104的第二強度1106的負變化??梢詫⒌谝粡姸?104與第二強度1106之間的強度差的幅度稱為閾值幅度1108。按照這種方式,確定所接收到的信號與預定信號準則相對應可以包括:確定所接收到的信號指示出反射光束的負的強度變化的幅度超過閾值幅度1108。

可能與穿戴者的向上注視(朝向顯示器)相對應的另一準則是可能在小于閾值持續(xù)時間1110的持續(xù)時間期間發(fā)生了由信號1102所表示的強度的負變化(從第一強度1104到第二強度1106)。這可以指示穿戴者的眼睛朝著顯示器的注視方向的急劇變化。按照這種方式,確定所接收到的信號與預定信號準則相對應可以包括確定所接收到的信號指示出一個或多個反射光束的所檢測到的強度的負變化(從第一強度1104到第二強度1106)并且在小于閾值持續(xù)時間1110的持續(xù)時間期間發(fā)生了該變化。

可能與穿戴者的向上注視(朝向顯示器)相對應的又一準則是在所檢測的強度負變化之后的預定持續(xù)時間1114期間由信號1102所表示的一個或多個反射光束的所檢測到的強度的幅度可能不會變化超過預定量。例如,在展現(xiàn)出從第一強度1104到第二強度1106的強度的負變化之后,信號1102可以保持在下述范圍1112內(nèi),所述范圍1112用于表示包括第二強度1106的一個或多個反射光束的強度的范圍。也就是說,如果在強度明顯的負變化之后信號在給定時間“穩(wěn)定”在表示第二強度1106的水平附近,那么更可能的是信號1102實際上指示穿戴者使他或她的注視朝著顯示器向上移動。按照這種方式,確定所接收到的信號與預定信號準則相對應可以包括確定信號1102指示出在所檢測到的強度的負變化之后的預定持續(xù)時間期間所檢測到的強度的幅度還沒有變化超過預定量。簡而言之,HMD可以將所檢測到的信號與上面列出的預定信號準則中的任一個進行比較以便間接地確定穿戴者已使其注視朝著顯示器向上移動。

在塊1014,方法1000包括:響應于該確定,HMD在顯示器中顯示與信息事件有關的圖形內(nèi)容。塊1014可以包括上面參考塊510所描述的任何功能。

VI.結(jié)論

個人用戶或用戶組可以創(chuàng)建基于數(shù)據(jù)的“用戶賬戶”,其還可以被稱為“賬戶”。特定用戶或用戶組的用戶賬戶可以包括與特定用戶或用戶組有關的該用戶或用戶組已選擇以為用戶賬戶提供的數(shù)據(jù)。因而,在某種意義上,特定用戶的賬戶可以是該特定用戶的基于數(shù)據(jù)的表示。例如,用戶可以為各種應用、網(wǎng)站、和/或在線服務創(chuàng)建賬戶。用戶賬戶的示例包括電子郵件賬戶、社交網(wǎng)絡賬戶、在線財務賬戶、具有服務提供商的賬戶等等。此外,在一些情況下,用戶可以具有單個用戶賬戶,該單個用戶賬戶作為用戶的基于數(shù)據(jù)的表示而為多個服務、網(wǎng)站、應用等提供。例如,用戶可以選擇使用他們的電子郵件賬戶或社交網(wǎng)絡賬戶以作為對多個不同實體所提供的各種在線服務和應用的共同登錄。此外,諸如移動電話、膝上型計算機、或者可穿戴式計算設備這樣的計算設備的用戶可以使其用戶賬號與計算設備本身相關聯(lián)使得當用戶操作計算設備時他們的賬戶將與在計算設備上所提供的應用相關聯(lián)。

在附圖中,除非上下文另有指示,否則相似符號典型地表示相似部件。在具體實施方式、附圖、權(quán)利要求中所描述的說明性實施例不意味著限制。在不脫離在這里所提出的主題的范圍的情況下,可使用其它實施例,并且可作出其它變化。容易理解的是如在這里所一般描述的且在附圖中所圖示的本公開的方面可以以各種各樣的不同配置進行布置、替換、組合、分離、以及設計,所有這些都在這里明確預期。

參考圖中的且如在這里所討論的消息流圖、場景、流程圖中的任何一個或所有,每個步驟、塊、和/或通信可以表示根據(jù)示例實施例的信息的處理和/或信息的傳輸。替代實施例包括在這些示例實施例的范圍之內(nèi)。在這些替代實施例中,例如,被描述為步驟、塊、傳輸、通信、請求、響應、和/或消息的功能可以按照與所示或所討論的順序顛倒的順序來執(zhí)行,包括按照基本上同時或相反的順序,這取決于所涉及的功能。此外,更多或更少的步驟、塊、和/或功能可以與這里所討論的消息流圖、場景、流程圖中的任何一個一起使用,并且可以對這些消息流圖、場景、以及流程圖進行部分地或整體地彼此組合。

用于表示信息的處理的步驟或塊可以與下述電路相對應,所述電路可被配置為執(zhí)行這里所描述的方法或技術的特定邏輯功能。替代地或另外,表示信息的處理的步驟或塊可以與模塊、段、或者程序代碼的一部分(包括有關數(shù)據(jù))相對應。

程序代碼可以包括可由用于實施方法或者技術中的特定邏輯功能或者動作的處理器執(zhí)行的一個或者多個指令??梢詫⒊绦虼a和/或有關數(shù)據(jù)存儲在任何類型的計算機可讀介質(zhì)上,諸如存儲設備這樣的包括盤片驅(qū)動器、硬盤驅(qū)動器、或其它存儲介質(zhì)。

計算機可讀介質(zhì)還可以包括諸如像寄存器存儲器,處理器高速緩存和/或隨機存取存儲器(RAM)一樣在短時間段內(nèi)存儲數(shù)據(jù)的計算機可讀介質(zhì)這樣的非暫時性計算機可讀介質(zhì)。計算機可讀介質(zhì)還可以包括諸如例如像只讀存儲器(ROM)、光盤或磁盤、和/或壓縮盤只讀存儲器(CD-ROM)一樣在較長時間段內(nèi)存儲程序代碼和/或數(shù)據(jù)的非暫時性計算機可讀介質(zhì),諸如輔助或者持久長期存儲裝置。計算機可讀介質(zhì)還可以是任何其它易失性或非易失性存儲系統(tǒng)。計算機可讀介質(zhì)可以被認為是例如計算機可讀存儲介質(zhì)或有形存儲設備。

此外,表示一個或多個信息傳輸?shù)牟襟E或塊可以與同一物理設備中的軟件和/或硬件模塊之間的信息傳輸相對應。然而,其它信息傳輸可以在不同物理設備中的軟件模塊和/和/或硬件模塊之間。

當前第1頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
察隅县| 武功县| 苍梧县| 朝阳区| 寻乌县| 乳山市| 菏泽市| 仙居县| 天峻县| 镇江市| 阿拉善左旗| 南昌县| 务川| 武宁县| 亳州市| 旺苍县| 阿城市| 福海县| 嘉定区| 奉节县| 泰安市| 镇原县| 阿拉善左旗| 乌拉特前旗| 咸丰县| 辉南县| 循化| 丰镇市| 深圳市| 阿城市| 荔波县| 象山县| 上饶县| 永济市| 武功县| 兰州市| 梅河口市| 柳河县| 龙海市| 新乡县| 眉山市|