本發(fā)明的各實施例涉及可佩戴計算機接口。

背景

移動通信和計算設(shè)備(諸如移動電話、平板、電子閱讀器、膝上型計算機、以及個人數(shù)字助理)以讓人眼花繚亂的速度激增并滲透入人類文明。如今，幾乎所有的文化(跨越從技術(shù)不成熟的社會到處于當今科學(xué)和技術(shù)的前沿的社會的整個范圍)都通曉移動通信/計算設(shè)備。單單在2013年，約18億臺移動電話(其中10億臺移動電話是智能電話)被制造商交付給消費者——地球上的每一個男性、女性和兒童有令人驚訝的約2臺移動電話。在同一年，還賣出了另外的5億臺平板電腦和膝上型計算機。并且，通信/計算設(shè)備(此后被一般地稱為計算機)正快速地變形成大量不同形式，這使得它們更易于使用和攜帶，并且甚至成為日常生活的更密切的一部分。計算機正被配置作為可佩戴附件，諸如眼鏡、手表和手環(huán)，并且被集成到衣物中。

各種新的和不同形式的計算機以及它們相關(guān)聯(lián)的附件和移動應(yīng)用(“App”)的無所不在、以及世界人口以及所導(dǎo)致的密度的增加已將個人和公共隱私破壞到一定程度，使得維護和保護一點點的安靜、隱私和機密性都變成煩擾、頭條的擔憂。例如，將膝上型、平板、手腕或手中的計算機屏幕無意地視覺泄露給地鐵、公交車、飛機或購物中心中的繁雜的旁人常常是對一個人的個人隱私區(qū)域的頻繁侵犯，而這如果可能的話可能需要相當靈巧的不停地動才能避免。

概述

本發(fā)明的實施例的一個方面涉及提供一種用于提供和保護用戶的隱私區(qū)域的可佩戴計算機接口。在一個實施例中，計算機接口用于確定用戶是否正面向該接口，并且如果是的話，確定用戶的身份。如果所確定的身份是被授權(quán)訪問該接口對接的計算機所提供的功能的用戶，則接口使得該用戶能夠訪問該功能?？蛇x地，接口基本上僅在用戶面向并看著該接口時維持訪問，這樣的接口此后被稱為“Watch-It接口”(注視接口)或簡稱為“Watch-It”。

在本發(fā)明的一個實施例中，“Watch-It”包括三維(3D)相機系統(tǒng)，該3D相機系統(tǒng)可被控制來獲取相機系統(tǒng)的視場(FOV)中的場景的3D范圍圖像，并且可選地獲取對比度圖像，此后也被稱為場景的“圖片圖像”或“圖片”。3D范圍圖像提供場景的各特征的3D空間坐標。圖片圖像提供可被用于標識特征和特征的特性的圖片。可選地，Watch-It和3D相機系統(tǒng)通常被關(guān)閉，并且Watch-It反復(fù)地開啟(周期性地或間歇性地)以使用3D相機系統(tǒng)來對其環(huán)境成像并且處理3D相機系統(tǒng)所獲取的圖像來確定用戶是否在FOV中并且是否正面對Watch-It?？蛇x地，Watch-It包括加速度計并且響應(yīng)于加速度計生成的指示將該Watch-It變?yōu)槊鎸τ脩舻倪\動的信號來開啟以對其環(huán)境成像。如果Watch-It確定它正被用戶“注視”，則Watch-It處理3D相機系統(tǒng)所提供的用戶圖像以確定用戶的身份。如果該身份是被授權(quán)訪問Watch-It對接的計算機的功能的用戶，則Watch-It使得該用戶能夠訪問所述功能。

可選地，Watch-It包括視頻屏幕并且可在屏幕上基本僅顯示屏保或者保持屏幕空白，直到Watch-It確定它正被授權(quán)用戶注視著。在作出這一判斷之際，Watch-It可在屏幕上生成交互式顯示以供用戶使用。Watch-It 3D相機系統(tǒng)的FOV的立體角和FOV的景深定義了Watch-It提供給用戶的隱私區(qū)域。在一個實施例中，立體角和/或景深是可調(diào)整的以使FOV以及由此的隱私區(qū)域適配于授權(quán)用戶的偏好和/或需求。在一個實施例中，Watch-It包括隱私過濾器，該隱私過濾器用于遮蔽Watch-It屏幕上顯示的圖像免于被視覺窺探。

在本發(fā)明的一個實施例中，Watch-It被配置成獲取用戶發(fā)出的語音的聲紋并且處理由3D相機系統(tǒng)提供的圖像以標識聲紋中期望用戶發(fā)出的諸如口令或口令短語之類的單詞以獲得對功能的訪問和/或與計算機交互。在本發(fā)明的一個實施例中，3D相機系統(tǒng)在用戶發(fā)出聲紋中的語音的同時對用戶的臉部成像，并且處理該圖像以讀取用戶的唇語以協(xié)助標識單詞。

在本發(fā)明的一個實施例中，Watch-It接口被包括在佩戴在手臂或手腕上的設(shè)備中，該設(shè)備具有類似于腕表形狀的外形?？蛇x地，Watch-It被佩戴在腿上以使得用戶能夠在坐下時使用該接口。計算機可以是Watch-It可與之通信以與用戶對接的各種計算設(shè)備和/或處理器中的任意一種。作為示例，計算機可包括智能電話、膝上型計算機、筆記本計算機、PC、個人數(shù)字助理(PDA)、芯片組、以及專用集成電路(ASIC)中的任意一個、或組合、或不止一個。可選地，Watch-It和該接口與用戶對接的計算機被集成在同一個可佩戴設(shè)備中。

在討論中，除非另行說明，修改本發(fā)明的實施例的一個或多個特征的條件或關(guān)系特性的諸如“基本上”和“大約”的副詞應(yīng)被理解為該條件或特性被定義為針對該實施例所意圖的應(yīng)用在該實施例的操作可接受的容差范圍以內(nèi)。除非另外指示，本說明書和/或權(quán)利要求書中的單詞“或”被認為是包含性“或”而不是排他性或，并且指示其結(jié)合的各項目中的至少一者或其組合。

提供本概述以便以簡化的形式介紹以下在詳細描述中進一步描述的一些概念。本概述并不旨在標識所要求保護主題的關(guān)鍵特征或必要特征，也不旨在用于限制所要求保護主題的范圍。

附圖說明

下面將參考在此所附的在此段落之后列出的附圖來描述本發(fā)明的實施例的非限制性示例。在多于一幅附圖中出現(xiàn)的相同的特征通常在其出現(xiàn)的所有附圖中都以相同的數(shù)字來標記。標記表示附圖中的本發(fā)明的實施例的一個給定特征的圖標或其他圖形指示的標記可被用于參考該給定的特征。附圖中所示的組件的尺寸和特征是為了方便和清楚呈現(xiàn)而選擇的，并且不一定按比例顯示。

圖1A示意性地示出了根據(jù)本發(fā)明的實施例的正佩戴著具有類似于腕表的形狀的Watch-It的用戶；

圖1B示意性地大幅放大地示出根據(jù)本發(fā)明的實施例的圖1A中所示的Watch-It以方便查看Watch-It的細節(jié)；

圖1C示出根據(jù)本發(fā)明的實施例的Watch-It的各組件的框圖；

圖2A示意性地示出根據(jù)本發(fā)明的實施例的圖1A中示出的用戶正將Watch-It拿到他的面前使得Watch-It能夠標識該用戶；

圖2B示意性地示出根據(jù)本發(fā)明的實施例的圖2A中示出的Watch-It的FOV和用戶的臉部的放大視圖，以及用于確定用戶的頭部朝向以及用戶是否正看著Watch-It的參數(shù)；以及

圖3A、3B以及3C示意性地解說根據(jù)本發(fā)明的實施例的Watch-It的3D相機系統(tǒng)所獲取的圖像中用戶眼睛的圖像可如何被用于確定用戶的凝視方向以及用戶是否正看著Watch-It。

詳細描述

圖1A示意性地示出了根據(jù)本發(fā)明的實施例的正佩戴著具有腕表形狀的Watch-It 20的用戶10。圖1B示意性地示出根據(jù)本發(fā)明的實施例的圖1A中所示的Watch-It 20的放大圖像，而圖1C示出Watch-It 20可包括的各組件的框圖50。在圖1A中，佩戴著Watch-It的用戶的手腕11沿用戶身體旁下垂，且用戶并未看著Watch-It。

Watch-It 20可選地包括用于與用戶10交互的顯示屏幕22以及框圖60(圖1C)中示出的3D相機系統(tǒng)30，圖1A和1B中僅示出了3D相機系統(tǒng)30在Watch-It的一個面24上的光學(xué)孔徑32。顯示屏幕22可被合適的衍射或散射隱私屏幕(未示出)覆蓋以限制屏幕22的可視錐并保護Watch-It 20不被視覺窺探。如框圖60中示意性示出的3D相機系統(tǒng)30包括3D范圍相機34和圖片相機36。3D相機系統(tǒng)30具有視場(FOV)，在圖1A和1B中由虛線38示意性地概示出，并且在以下可被稱為FOV 38。3D范圍相機34獲取FOV 38中的場景的范圍圖像，而圖片相機36獲取FOV中的場景的對比度圖像、圖片。3D范圍相機34所獲取的范圍圖像提供場景中的各特征的3D空間坐標。圖片相機36所獲取的場景的圖片提供特征的圖片，該圖片可被用于標識該特征?？刂破?0(圖1C)控制Watch-It 20和3D相機系統(tǒng)30的操作并且處理由3D相機系統(tǒng)中的3D范圍相機34和/或圖片相機36所提供的圖像以標識可能被成像在各圖像中的用戶，如以下所描述的。

3D范圍相機34可以是任何適合的3D范圍相機，并且可例如包括飛行時間(TOF)3D相機或立體三角測量3D相機。TOF-3D相機可確定光脈沖從TOF-3D相機到相機所成像的場景中的特征并返回到相機的往返程所耗費的“往返時間”以確定到該特征的距離。立體三角測量3D相機獲取場景中的特征的立體圖像，該立體圖像包括來自兩個不同視角的特征圖像并從特征的圖像在各圖像中的位置的差異中確定到特征的距離。

作為示例，Watch-It 20中包括的3D范圍相機34被假設(shè)為TOF 3D范圍相機。Watch-It 20包括IR(紅外)光源35，控制器40控制該IR光源35來發(fā)射相對短的IR光脈沖以照亮3D相機系統(tǒng)30的FOV 38中的場景。對于每一個發(fā)射的光脈沖，響應(yīng)于IR光脈沖的發(fā)射時間控制器40快門式地開關(guān)3D范圍相機34達對應(yīng)的短曝光時間段以對特征從光脈沖反射回3D范圍相機34的光成像?？刂破?0響應(yīng)于所成像的光來確定往返時間和到特征的距離。圖片相機36可選地響應(yīng)于環(huán)境IR光和/或由場景中的特征反射的來自光源35生成的IR光脈沖的IR光來獲取場景的圖像?？蛇x地，圖片相機36響應(yīng)于可見光來獲取場景的圖像。

盡管圖1C中的Watch-It的框圖60指示3D相機系統(tǒng)30包括與圖片相機分開的3D范圍相機，但是在一個實施例中，Watch-It 20可包括同一個多用途相機，該多用途相機由控制器40控制以用作TOF-3D范圍相機和圖片相機?？刂破?0可通過控制光源35發(fā)射短IR光脈沖來照亮場景并快門式開關(guān)該多用途相機以恰當?shù)卮_定對應(yīng)曝光時間段的時長來操作該多用途相機作為TOF-3D范圍相機來確定到場景中的特征的距離。控制器40可通過在相對長的曝光時間段期間對場景成像來對來自光源35發(fā)射的多個IR光脈沖、環(huán)境IR光、或可見光的光成像來操作該多用途相機作為圖片相機。

在一個實施例中，該多用途相機可包括第一和第二光傳感器并且通過對場景中的特征所反射的(可選地)分別來自第一和第二光傳感器上的相同的光脈沖的光成像來基本同時地獲取場景的范圍圖像和圖片圖像。第一和第二光傳感器可共享相同的光學(xué)器件，該光學(xué)器件收集場景的特征所反射的來自光源35所發(fā)射的光脈沖，并且將反射自每一個光脈沖的光的第一和第二部分分別引導(dǎo)向第一和第二光傳感器。控制器40可快門式地開關(guān)第一光傳感器以提供針對每一個IR光的對應(yīng)的短曝光時間段以對來自第一光傳感器上的光脈沖的光的第一部分成像以獲取該光脈沖的往返時間?？刂破骺煽扉T式地開關(guān)第二光傳感器達相對長的曝光時間段以對第二光傳感器上的多個光脈沖的第二部分成像以獲取場景的圖片圖像。

在一個實施例中，控制器40將Watch-It 20維護在默認的休眠狀態(tài)，在該休眠狀態(tài)下，Watch-It的操作的特征是相對小的能量消耗并且3D相機系統(tǒng)30關(guān)閉。在該默認休眠狀態(tài)下，控制器40可在屏幕22上生成屏保顯示或者維持屏幕空白?？刂破?0可周期性地或間歇性地將Watch-It 20開啟到激活狀態(tài)以使用3D相機系統(tǒng)30來對Watch-It的環(huán)境成像并處理3D相機系統(tǒng)所獲取的圖像以確定用戶是否處于FOV 38中并且正面向Watch-It 20。

可選地，Watch-It 20包括加速度計42，并且當加速度計42響應(yīng)于用戶10的手腕11的移動而生成的信號指示用戶將Watch-It 20帶至面對他或她的臉部時，控制器40將Watch-It 20開啟至激活狀態(tài)。在本發(fā)明的實施例中，Watch-It 20包括用于實現(xiàn)分類器(未示出)的指令集，該分類器可包括例如支持向量機、回歸機、貝葉斯引擎、和/或神經(jīng)網(wǎng)絡(luò)，用于確定加速度計42所提供的信號是否指示用戶已將Watch-It 20帶至面對用戶的臉部。為了作出該判斷，分類器可被教示以將加速度計所提供的指示手腕11的將Watch-It 20帶至面向用戶的臉部的移動的信號與指示手的其它移動(諸如指示可伴隨步行的正常的搖擺運動的移動)的信號區(qū)分開來。

在被例如圖2A中示意性地示出的響應(yīng)于用戶10將Watch-It 20帶至面向他或她的臉部而被開啟至激活狀態(tài)之際，控制器40操作3D相機系統(tǒng)30來獲取位于3D相機系統(tǒng)的FOV 38中的場景的3D范圍圖像和圖片圖像?？刂破?0處理場景的圖像以確定場景是否包括用戶的圖像，并且如果是的話，處理該圖像以確定用戶的身份并且確定該用戶是否正看著Watch-It 20。

在本發(fā)明的實施例中，控制器40可被控制以將FOV 38的維度配置成期望或有利的維度以確定FOV中用戶的存在和/或以將用戶與Watch-It對接或經(jīng)由Watch-It對接用戶。例如，3D相機系統(tǒng)30對其對象進行成像的FOV 38的景深(DOF)或最大成像范圍可被變得更小或更大以適應(yīng)用戶10認為與Watch-It 20交互是舒適的距離。FOV 38可被調(diào)整以在用戶10與Watch-It 20交互時限制用戶10周圍的無關(guān)特征被成像。FOV 38的立體角可類似地被變得更大或更小以適應(yīng)用戶。立體角可變得更大以適應(yīng)較大的臉，或者變得更小以限制對無關(guān)對象成像。FOV的方向也可被調(diào)整。例如，盡管相機系統(tǒng)的FOV一般關(guān)于相機系統(tǒng)的光學(xué)軸對稱，如以下討論的圖2B中示意性地示出的，但是在本發(fā)明的一個實施例中，F(xiàn)OV 38可被調(diào)整使其不關(guān)于3D相機系統(tǒng)30的光學(xué)軸的方向?qū)ΨQ，而是歪斜遠離光學(xué)軸的方向。將FOV歪斜以適應(yīng)用戶 10在與Watch-It 20交互時看Watch-It 20的偏好方向可能是期望的。對于佩戴在手腕的Watch-It 20，用戶可能傾向于從與光學(xué)軸成角度的舒適的視角來看Watch-It?？刂破?0可配置FOV 38的維度使其具有相對小的體積以為Watch-It 20和用戶10提供具有對于視角窺探的增加的免疫性的特征的隱私區(qū)域。例如，F(xiàn)OV 38可具有在FOV 38的最大成像范圍處的剛好足夠包含用戶的臉部的截面。

對于包括TOF-3D范圍相機的3D相機系統(tǒng)30，F(xiàn)OV 38的DOF或最大成像范圍可選地通過相對于光源35所發(fā)射的IR脈沖的發(fā)射時間和脈沖寬度調(diào)整曝光周期的定時和/或持續(xù)時間來調(diào)整。FOV 38的立體角可通過合適的縮放透鏡系統(tǒng)或通過裁剪3D相機系統(tǒng)30所獲取的圖像來調(diào)整。裁剪可通過對3D相機系統(tǒng)30所獲取的圖像進行圖像處理和/或控制對于光傳感器中包括的像素(這些像素上的由3D相機系統(tǒng)收集的光被成像)的光的靈敏度來執(zhí)行。

控制器40可通過響應(yīng)于根據(jù)各種圖案識別算法中的任意一種或這些圖案識別算法中不止一種的任意組合來對圖像進行處理來確定圖像是否包括人臉圖像來確定用戶(諸如用戶 10)在所成像的場景的圖像中的存在?？刂破?0可例如包括用于執(zhí)行被配置成確定圖像是否包括人臉的“基于形狀”和/或“基于紋理”的算法的可執(zhí)行指令集。

基于形狀的檢測算法可包括至少一個分類器，該分類器通過訓(xùn)練檢測系統(tǒng)辨別一組3D范圍和圖片訓(xùn)練圖像(訓(xùn)練圖像中的一些包含人臉圖像而其它則不包含)中的人臉形狀而被訓(xùn)練成識別人臉的形狀?？蛇x地，基于形狀的檢測算法是一種被訓(xùn)練成在3D范圍和圖片圖像中整體地檢測人臉形狀的全局的基于形狀的檢測系統(tǒng)?？蛇x地，基于形狀的檢測算法是一種基于組成部分的基于形狀的檢測算法?；诮M成部分的檢測系統(tǒng)通過提供由組成部分分類器所提供的針對人臉的各組成部分(諸如眼睛、耳朵、鼻子以及嘴)是否在圖像中存在的評估來確定人臉的圖像在3D范圍和圖片圖像中的存在。評估隨后被整體分類器組合以提供對于圖像是否能證明人臉的整體評估。組成部分和整體分類器可用合適的訓(xùn)練集來訓(xùn)練。

基于紋理的分類器響應(yīng)于3D相機系統(tǒng)所提供的圖片圖像的密度的空間變化和/或3D范圍圖像中到場景中的各特征的距離的空間變化來確定人臉在圖像中的存在。就像基于形狀的分類器的情形一樣，基于紋理的分類器可用圖片和3D范圍圖像的合適的訓(xùn)練集來訓(xùn)練。

在本發(fā)明的實施例中，在確定臉在FOV 38中存在之際，控制器40處理圖片和3D范圍圖像以確定用戶 10的頭部的朝向以及該朝向是否與用戶看向Watch-It 20相一致。在本發(fā)明的實施例中，頭部朝向被用于確定用戶的凝視方向并且確定該凝視方向是否指示用戶正看著Watch-It 20?？蛇x地，朝向與3D相機系統(tǒng)30的光學(xué)軸比照并且可響應(yīng)于在3D相機系統(tǒng)30所提供的圖像中被成像的用戶的頭部和臉部的基準點特征的3D空間坐標來確定?；鶞庶c特征是其圖像和3D空間坐標有利于指示頭部的朝向的特征，并且可包括諸如前額、眼睛、鼻子、嘴唇和下巴、以及耳朵之類的特征。

圖2B示意性地示出圖1A和2A中所示的用戶10的頭部和臉部的基準點特征，這些基準點特征可被Watch-It 20用于確定用戶的頭部朝向以及用戶是否正面向3D相機系統(tǒng)30和Watch-It 20。在圖2B中，Watch-It的3D相機系統(tǒng)30由標記為“30”的圓(從該圖的視角看該圓看上去像是橢圓)來表示，并且該圖示出了3D相機系統(tǒng)的FOV 38的光學(xué)軸37。用戶10的頭部和臉部位于FOV 38中。用戶10的頭部的朝向可通過由關(guān)于分別圍繞光學(xué)軸37、以及與該光學(xué)軸垂直的X和Y正交軸的旋轉(zhuǎn)的方位角ω、傾斜角θ、以及偏斜角φ來定義。標記為ω、θ、和φ的彎曲的塊箭頭分別指示圍繞光學(xué)軸37、X軸、以及Y軸的旋轉(zhuǎn)的方位角、傾斜角、以及偏斜角。用戶10的臉部和頭部的3D范圍圖像和/或圖片圖像所提供的用戶10的兩個或更多個基準點特征(諸如分別是右耳和左耳14和15、右眼和左眼12和13、前額16、以及下巴17)的組合的3D空間坐標可被用于確定ω、θ、和φ，以及確定用戶是否正面向3D相機系統(tǒng)30。

作為一個簡單示例，假設(shè)用戶10已將他的頭部僅圍繞Y軸轉(zhuǎn)動。右耳和左耳14和15和/或右眼和左眼12和13的3D空間坐標可被用于確定旋轉(zhuǎn)角度φ。如果用戶的頭部僅沿X軸位移，則根據(jù)3D空間坐標確定的位移的量和φ一般可足以確定用戶10是否正面向Watch-It 20。如果頭部的位移也沿Y軸，則角度θ也可有利于確定用戶10是否正面向Watch-It 20。類似的，傾斜角θ可響應(yīng)于前額16和下巴17的3D空間坐標來確定。

盡管根據(jù)本發(fā)明的實施例，頭部朝向可被用于指示用戶 10是否正面向Watch-It 20，但是用戶可能面向Watch-It 20但是卻將他或她的凝視指向別處。在本發(fā)明的實施例中，Watch-It控制器40處理由3D相機系統(tǒng)30獲取的圖像以確定3D相機系統(tǒng)30所成像的用戶的凝視方向并且確定該凝視方向是否被指向Watch-It 20以確定用戶是否正嘗試使用Watch-It 20。

在本發(fā)明的實施例中，為了確定凝視方向，控制器40處理圖像以定位和確定可被用來確定眼睛的凝視方向的來自眼睛的不同結(jié)構(gòu)的一個或多個表面的反射的相對位置。來自眼睛的結(jié)構(gòu)的表面的反射被通常稱為“普爾基涅反射”。第一、第二、第三、和第四普爾基涅反射分別指來自角膜的前表面、角膜的后表面、晶狀體的前表面以及晶狀體的后表面的反射。

對于給定的靜態(tài)光源，來自角膜的前表面的反射(即第一普爾基涅反射)是最強的，且按照慣例被稱為“閃爍(glint)”。閃爍的圖像在相機獲取的眼睛圖像中的位置相對獨立于中等眼睛轉(zhuǎn)動(眼睛轉(zhuǎn)動多達約±15°)的眼睛凝視方向以及頭部和相機的固定位置。閃爍的圖像的位置可被用于參照眼睛的特征或其它普爾基涅反射的圖像的運動來確定人的凝視方向?？蛇x地，控制器40響應(yīng)于3D相機系統(tǒng)30所獲取的用戶的圖像中用戶的頭部朝向和眼睛的瞳孔的圖像相對于來自眼睛的閃爍的圖像的位置來確定用戶(諸如圖1A和圖2A中的用戶10)的眼睛的凝視方向?？蛇x地，如以上所描述的，頭部朝向由控制器40確定。

圖3A、3B和3C示意性地解說了對于一些非常簡單的情形下閃爍相對于眼睛的瞳孔的位置可如何指示眼睛的凝視方向。這些附圖中的每一幅圖示出用戶10的右眼14和眼睛的閃爍101、瞳孔102、虹膜103、以及鞏膜104的示意性圖像。在這些附圖中的每一幅圖中，眼睛14被定向關(guān)于通過眼睛中心的水平軸160成一個不同角度。在圖3B中，眼睛12筆直地沿著3D相機系統(tǒng)30(圖2B)的光學(xué)軸37看，并且眼睛的光學(xué)軸(未示出)與光學(xué)軸37對準。作為結(jié)果，閃爍101位于眼睛的瞳孔102的圖像的中心。在圖3A中，用戶10正“向上”看，并且沿圓形箭頭161所指示的方向旋轉(zhuǎn)眼睛14達角度α。作為結(jié)果，閃爍101相對于瞳孔102向下移位。在圖3C中，用戶10正“向下”看，并且沿圓形箭頭162所指示的方向旋轉(zhuǎn)眼睛14達角度α，該方向與圖3A中的圓形箭頭161所指示的旋轉(zhuǎn)相反。作為結(jié)果，閃爍101相對于瞳孔102向上移位。閃爍101和瞳孔102之間的距離可被用于確定角度α的幅值。

響應(yīng)于確定用戶10的頭部朝向指示用戶10正面向Watch-It 20和/或響應(yīng)于確定用戶10的凝視方向指示用戶正看著Watch-It，控制器40可在屏幕22(圖1B、2A)上生成一個指示來提醒用戶10用戶存在已被識別。該指示當然可以是任何適合的圖形顯示，諸如舉例而言眼睛、臉、或忙碌圖標的顯示?？蛇x地，Watch-It 20包括揚聲器并且通過生成音頻提醒來通知用戶10他的存在已被注意到。在識別用戶存在并可選地為該用戶生成視覺和或聽覺響應(yīng)之后，控制器可進一步確定用戶10的身份以及用戶10是否被授權(quán)訪問Watch-It 20所提供的功能和/或可經(jīng)由Watch-It訪問的設(shè)備。例如，Watch-It 20可包括機密信息數(shù)據(jù)庫和/或APP(應(yīng)用)庫，和/或支持Watch-It 20僅在用戶10是授權(quán)用戶的情況下變得可用的通信服務(wù)。并且/或者，Watch-It 20可僅在用戶10是授權(quán)用戶的情況下允許對提供一個或多個功能(諸如以上提到的示例功能中的一個或多個)的另一設(shè)備(諸如移動電話、平板、或膝上型計算機)的使用。

Watch-It 20可通過將3D相機系統(tǒng)30所獲取的用戶的圖形中包括的數(shù)據(jù)與包括在Watch-It 20中的參考數(shù)據(jù)庫(未示出)或Watch-It能夠訪問的參考數(shù)據(jù)庫中包括的數(shù)據(jù)作比較來確定用戶 10的身份。可選地，數(shù)據(jù)庫包括與至少一個授權(quán)用戶的3D范圍和圖片“參考圖像”相關(guān)聯(lián)的數(shù)據(jù)。在本發(fā)明的實施例中，參考圖像可包括可選地由3D相機系統(tǒng)30所獲取的該至少一個授權(quán)用戶的標準姿勢的3D范圍和圖片圖像。用戶標準姿勢可例如是完整的正面姿勢，其中用戶的頭部朝向角度ω、θ、和φ都基本等于零，并且在3D相機系統(tǒng)成像時，用戶的臉基本位于3D相機系統(tǒng)30(圖2B)的FOV 38的中心。為了將3D相機系統(tǒng)30所獲取的用戶10的3D范圍和圖片圖像中的數(shù)據(jù)與參考圖像中的數(shù)據(jù)作比較，控制器40可選地確定一個變換(例如仿射變換)，該變換將用戶10的圖像變換為以標準姿勢朝向的圖像。該變換可選地響應(yīng)于3D相機系統(tǒng)30所獲取的用戶10的圖像所提供的3D空間坐標來確定。控制器40將用戶10的圖像變換為標準姿勢，并且將經(jīng)變換的圖像與參考圖像作比較以確定用戶10是否是授權(quán)用戶。

在本發(fā)明的實施例中，Watch-It 20要求用戶10說出包括口令或口令短語的語音，同時3D相機系統(tǒng)30對用戶10成像以標識和授權(quán)該用戶。Watch-It 20可包括話筒(未示出)并且可選地使用該話筒來記錄用戶語音的聲紋?？蛇x地，控制器40處理該聲紋以確定該口令或口令短語是否在聲紋中存在。在本發(fā)明的實施例中，控制器40使用3D相機系統(tǒng)30在用戶說出記錄在聲紋中的語音時所獲取的3D范圍圖像和圖片圖像中包括的用戶嘴唇、牙齒和舌頭的圖像來讀取用戶的唇語?？刂破?0將唇語讀取與聲紋相關(guān)以協(xié)助標識音素以及由此標識可能被說出并記錄在聲紋中的口令或口令短語。

一旦被授權(quán)，Watch-It 20可不僅使用話筒還可使用由控制器40響應(yīng)于對3D相機系統(tǒng)30提供的3D范圍圖像和/或圖片圖像進行圖像處理來執(zhí)行的唇語讀取來通過語音將用戶10對接到Watch-It 20或Watch-It 20對接的設(shè)備。在本發(fā)明的實施例中，為了促進對用戶10的唇語讀取，控制器40可可選地使用以上所討論的方法來調(diào)整FOV 38的DOF或最大成像范圍以約束用戶10將其嘴巴定位在相對于Watch-It 20的有利位置，使得用戶的嘴唇、牙齒和舌頭被3D相機系統(tǒng)有利地成像以供唇語讀取。例如，控制器40可控制FOV 38來約束用戶10以將他或她的嘴巴保持在一距離范圍內(nèi)，可選地從約5cm到約50cm，對于該距離范圍，3D相機系統(tǒng)30能夠獲取具有有利分辨率的用戶的嘴巴的圖像。在一個實施例中，控制器40可提示用戶10將其頭部定向到相對于光學(xué)軸37(圖2B)有利地朝向以促進唇語讀取。例如，控制器40可分別確定用戶10的頭部的偏斜角φ和傾斜角θ(可選地如以上所討論的)，并且提示用戶調(diào)整他的頭部朝向以偏斜和傾斜有利于唇語讀取的角度。提示用戶10可通過在屏幕22上顯示合適的圖標以指示方法或有利地指示偏斜角和傾斜角來實現(xiàn)。類似的，控制器40可響應(yīng)于3D相機系統(tǒng)30所獲取的范圍圖像來確定用戶10的嘴巴與Watch-It 20的距離，并且提示用戶10放置其頭部以將嘴巴定位到有利于唇語讀取的距離處。

因此，根據(jù)本發(fā)明的實施例，提供了一種被配置成由用戶佩戴并且將用戶與計算機對接的計算機接口，所述接口包括：三維(3D)相機系統(tǒng)，所述3D相機系統(tǒng)具有光學(xué)軸和視場(FOV)，所述3D相機系統(tǒng)包括：3D范圍相機，所述3D范圍相機可被控制以獲取所述FOV中的場景的范圍圖像，所述范圍圖像提供特征在所述場景中的3D空間坐標；以及圖片相機，所述圖片相機可被控制以獲取所述場景的圖片圖像；以及控制器，所述控制器處理所述圖像中的一者或兩者以確定用戶是否被成像在所述FOV中并且正看著所述接口，并且如果是的話，確定所述用戶的身份，并且如果所述身份是被授權(quán)使用所述接口的用戶的身份，則所述控制器使得所述用戶能夠訪問由所述計算機所提供的功能。

可選地，所述控制器將所述接口維持在其中所述3D相機系統(tǒng)被關(guān)閉的默認狀態(tài)?？蛇x地，所述控制器周期性地或間歇性地開啟所述3D相機系統(tǒng)以獲取所述3D范圍圖像和圖片圖像。附加地或替代地，所述接口可包括加速度計，所述加速度計響應(yīng)于所述接口的運動來生成信號，所述控制器處理所述信號以確定所述用戶是否移動了所述接口以將所述用戶定位在所述FOV中。如果所述控制器確定所述用戶已移動了所述接口以將所述用戶定位在所述FOV中，所述控制器可開啟所述3D相機系統(tǒng)以獲取所述3D范圍圖像和圖片圖像。

在本發(fā)明的實施例中，為了確定所述用戶是否正看著所述接口，所述控制器處理所述3D范圍圖像和圖片圖像中的至少一者或兩者以確定所述用戶的頭部是否在FOV中。

在本發(fā)明的實施例中，為了確定所述用戶是否正看著所述接口，所述控制器處理所述3D范圍圖像和圖片圖像中的至少一者或兩者以確定所述用戶的頭部的朝向。根據(jù)本發(fā)明的實施例，為了確定所述用戶是否正看著所述接口，所述控制器處理所述3D范圍圖像和圖片圖像中的至少一者或兩者以標識所述用戶的眼睛的圖像并且響應(yīng)于所述圖像標識所述眼睛的凝視方向。

在本發(fā)明的實施例中，所述接口包括或能夠訪問具有與至少一個授權(quán)用戶的參考圖像相關(guān)聯(lián)的數(shù)據(jù)的數(shù)據(jù)庫，并且所述控制器將與所述參考圖像相關(guān)聯(lián)的數(shù)據(jù)同與所述3D范圍圖像和圖片圖像中的至少一者或兩者相關(guān)聯(lián)的數(shù)據(jù)作比較以確定所述用戶的身份并且確定所確定的身份是否是授權(quán)用戶的身份。可選地，授權(quán)用戶的參考圖像是授權(quán)用戶處于標準姿勢下的圖像?？蛇x地，所述標準姿勢是完整正面姿勢，其中用戶基本筆直地沿著獲取參考圖像的相機的光學(xué)軸看。控制器可對3D范圍圖像和圖片圖像中的至少一者應(yīng)用變換以將圖像變換為標準姿勢以確定用戶的身份。控制器可響應(yīng)于3D范圍圖像來確定變換。

在本發(fā)明的實施例中，所述接口包括話筒，并且所述控制器控制所述話筒來獲取所述用戶說出的語音的聲紋，同時控制所述3D相機系統(tǒng)獲取所述用戶的嘴說出所述語音時的3D范圍和圖片圖像?？蛇x地，所述控制器處理所述用戶的嘴的圖像以讀取所述用戶的唇語并且將所述唇語讀取與所述聲紋相關(guān)以標識所述聲紋中的單詞。

所述控制器可處理所述3D相機系統(tǒng)所提供的圖像以作出對于所述用戶的嘴距所述接口的距離、所述用戶的頭部相對于所述光學(xué)軸的傾斜角、歪斜角以及方位角中的至少一個或不止一個的任意組合的確定，并且可使用所述確定來提示所述用戶將嘴定位在所述FOV中的有利于唇語讀取的位置。

在本發(fā)明的實施例中，所述控制器控制所述FOV的立體角、景深、以及最大成像范圍中的至少一個或兩個或更多個的組合來提供期望的FOV的大小。

在本發(fā)明的實施例中，所述控制器控制所述FOV相對于所述光學(xué)軸的方向以提供所述3D相機系統(tǒng)的期望的成像方向。

所述接口可以是腕帶式接口。所述接口可被佩戴在所述用戶的腿上。

在本申請的說明書和權(quán)利要求書中，動詞“包括”、“包含”和“具有”及其組合中的每一個是用來指示該動詞的一個或多個賓語不一定是該動詞的一個或多個主語的組件、元素、或部分的完整列表。

在本申請中作為示例提供了對本發(fā)明的各實施例的描述，而不旨在限制本發(fā)明的范圍。所描述的實施例包括不同的特征，對于本發(fā)明的所有實施例來說并不是所有的特征都是必需的。一些實施例只利用部分特征或特征的可能組合。本領(lǐng)域的技術(shù)人員會想到所描述的本發(fā)明的各實施例的變型以及本發(fā)明的各實施例包括在所描述的各實施例中注明的特征的不同組合。本發(fā)明的范圍僅受權(quán)利要求書的限定。