本發(fā)明大體上涉及用于利用與交互式圖形用戶界面相結(jié)合的眼睛移動(dòng)檢測(cè)的計(jì)算機(jī)實(shí)現(xiàn)系統(tǒng)和方法。具體地,本發(fā)明涉及用于在用戶與圖形用戶界面交互時(shí)通過將基于眼睛的輸入與基于手勢(shì)的輸入和基于手勢(shì)的用戶命令進(jìn)行結(jié)合來輔助用戶的系統(tǒng)和方法。
背景技術(shù):已經(jīng)通過引入圖形用戶界面(GUI)使人機(jī)交互發(fā)生革命性巨變。由此,提供了用于以極大地超出任何先前信道的帶寬向用戶呈現(xiàn)信息的有效方式。多年以來,已經(jīng)通過彩色屏幕、增大的顯示器、智能圖形對(duì)象(例如,彈出窗口)、窗口標(biāo)簽、菜單、工具欄等進(jìn)一步提高了可以呈現(xiàn)信息的速度。然而,在此期間,輸入設(shè)備基本上保持不變,即,鍵盤和定點(diǎn)設(shè)備(例如,鼠標(biāo)、跟蹤球或觸摸板)。近年來,已經(jīng)引入了(例如,手寫筆或圖形筆形式的)手寫設(shè)備。然而,雖然輸出帶寬已經(jīng)增加了很多倍,但是輸入帶寬實(shí)質(zhì)上未改變。因此,人機(jī)交互中的通信帶寬的嚴(yán)重不對(duì)稱性已經(jīng)顯現(xiàn)。為了減小這種帶寬不對(duì)稱性以及為了改善和促進(jìn)用戶交互,已經(jīng)進(jìn)行了多種嘗試來將眼睛跟蹤用于這些目的。通過在例如膝上型計(jì)算機(jī)中實(shí)現(xiàn)眼睛跟蹤設(shè)備,可以顯著提高用戶與在計(jì)算機(jī)上運(yùn)行的不同軟件應(yīng)用之間的交互可能性。因此,一種用于改善和促進(jìn)用戶交互并且用于移除帶寬不對(duì)稱性的令人關(guān)注的思想是:取而代之地使用眼睛注視跟蹤,或者使用眼睛注視跟蹤作為鼠標(biāo)輸入的補(bǔ)充。通常,根據(jù)計(jì)算出的用戶注視點(diǎn)將光標(biāo)定位在顯示器上。已經(jīng)提出了多種不同的技術(shù)以在這些系統(tǒng)中選擇和激活目標(biāo)對(duì)象。在一個(gè)示例中,在檢測(cè)到用戶在特定時(shí)間段期間將他或她的注視集中在特定對(duì)象處之后,系統(tǒng)激活對(duì)象。另一種方法是當(dāng)用戶眨眼時(shí)檢測(cè)對(duì)象的激活。然而,存在與這些使用眼睛跟蹤的解決方案相關(guān)聯(lián)的問題。例如,人類將其眼睛用于感知?jiǎng)幼鞫皇强刂?。因此,小心地使用眼睛移?dòng)來與計(jì)算機(jī)交互以例如激活和選擇呈現(xiàn)在計(jì)算機(jī)的顯示器上的對(duì)象可能是充滿壓力的。還可能難以控制眨眼或凝視,以與呈現(xiàn)在顯示器上的對(duì)象進(jìn)行交互。因此,本領(lǐng)域中需要改善技術(shù),該技術(shù)實(shí)現(xiàn)與配備有眼睛跟蹤設(shè)備的計(jì)算機(jī)的用戶交互從而允許用戶以更直觀和自然的方式使用他或她的眼睛來控制、選擇和激活呈現(xiàn)在計(jì)算機(jī)的顯示器上的對(duì)象或?qū)ο蟮囊徊糠?。此外,在本領(lǐng)域中還需要以更有效的方式利用使用眼睛跟蹤的潛力以改善和促進(jìn)與計(jì)算機(jī)的用戶交互的技術(shù)。在Beymer等的美國(guó)專利申請(qǐng)(公開號(hào)2005/0243054)中給出了一種這樣的嘗試,在該專利申請(qǐng)中,公開了一種用于使用眼睛注視和鍵按壓來選擇和激活目標(biāo)對(duì)象的技術(shù)。更具體地,用戶注視目標(biāo)對(duì)象,例如,圖形用戶界面上的按鈕,然后按壓鍵盤的選擇鍵。一旦按壓了選擇鍵,就使用概率推理確定了最可能的目標(biāo)。然后,所確定的目標(biāo)對(duì)象被突出顯示并且用戶可以通過再次按壓選擇鍵來選擇該目標(biāo)對(duì)象。如果突出顯示的對(duì)象不是目標(biāo)對(duì)象,則用戶可以使用額外鍵導(dǎo)航至期望的目標(biāo)對(duì)象來選擇另一目標(biāo)對(duì)象。然而,該技術(shù)局限于基于眼睛注視與對(duì)一個(gè)專用選擇鍵的兩次連續(xù)按壓的組合的對(duì)象選擇和激活。在Amir等的US6,204,828中,公開了用于通過集成眼睛注視和手動(dòng)操作員輸入來輔助用戶定位光標(biāo)的計(jì)算機(jī)驅(qū)動(dòng)系統(tǒng)。注視跟蹤裝置在用戶觀看屏幕時(shí)監(jiān)視用戶的眼睛方位。同時(shí),計(jì)算機(jī)在諸如鼠標(biāo)等的輸入設(shè)備上監(jiān)視操作員的機(jī)械激活。當(dāng)計(jì)算機(jī)檢測(cè)到輸入設(shè)備的機(jī)械激活時(shí),其確定當(dāng)前注視區(qū)域中的初始光標(biāo)顯示位置。然后,在初始顯示位置處將光標(biāo)顯示在屏幕上,此后,根據(jù)用戶對(duì)輸入設(shè)備的操控而不參考注視來手動(dòng)地定位光標(biāo)。因此,在現(xiàn)有技術(shù)中仍然需要以更有效的方式利用使用眼睛跟蹤的潛力以改善和促進(jìn)與計(jì)算機(jī)的用戶交互(具體地,與圖形用戶界面的用戶交互)的改善技術(shù)。
技術(shù)實(shí)現(xiàn)要素:本發(fā)明的目的是提供用于當(dāng)用戶與圖形用戶界面交互時(shí)通過將基于注視的輸入與基于手勢(shì)的用戶命令相結(jié)合來輔助用戶的改善方法、設(shè)備和系統(tǒng)。本發(fā)明的另一目的是提供用于與圖形用戶界面進(jìn)行對(duì)用戶友好且直觀的交互的方法、設(shè)備和系統(tǒng)。本發(fā)明的特定目的是提供使不具有傳統(tǒng)觸摸屏的計(jì)算機(jī)系統(tǒng)的用戶能夠使用基于注視的輸入和基于手勢(shì)的用戶命令的組合來通過觸摸屏式方式與圖形用戶界面交互的系統(tǒng)、設(shè)備和方法。此外,本發(fā)明提供了以下解決方案:例如在與常規(guī)觸摸屏的交互難以使用或者富有人體工程學(xué)挑戰(zhàn)性的情形下,使用注視輸入和基于手勢(shì)的輸入的觸摸屏式交互來作為與具有觸摸屏的計(jì)算機(jī)設(shè)備的觸摸屏交互的補(bǔ)充或替代。本發(fā)明的另一特定目的是提供以下系統(tǒng)、設(shè)備和方法:與圖形用戶界面進(jìn)行基于組合的注視和手勢(shì)的交互,以在不具有傳統(tǒng)觸摸屏的計(jì)算機(jī)系統(tǒng)中或者在具有被布置為在人體工程學(xué)上不利于用戶的觸摸屏或者被布置為使得與觸摸屏相比用戶更適合使用手勢(shì)和注視來進(jìn)行交互的觸摸屏的計(jì)算機(jī)系統(tǒng)中實(shí)現(xiàn)觸摸屏式環(huán)境。在本發(fā)明的上下文中,術(shù)語“GUI”(圖形用戶界面)是指基于圖形的用戶界面,其在并入了例如可移動(dòng)窗口和圖標(biāo)的顯示器上具有畫面或圖像和文字(包括例如符號(hào)和數(shù)字)。此外,在本發(fā)明的上下文中,術(shù)語“對(duì)象”或“對(duì)象部分”是指交互式圖形對(duì)象或GUI對(duì)象(例如,窗口、圖標(biāo)、按鈕、滾動(dòng)條、超鏈接)或非交互式對(duì)象(例如,圖像、文本或文本中的用戶期望選擇或激活的文字)。在本方面的上下文中,術(shù)語“觸摸板”(或術(shù)語“跟蹤板”)是指用于檢測(cè)一根或多根手指和/或旨在定點(diǎn)、繪制或做手勢(shì)的一個(gè)或多個(gè)其他對(duì)象(例如,手寫筆)的位置和移動(dòng)的表面?zhèn)鞲衅?。通過具有獨(dú)立權(quán)利要求中所定義的特征的系統(tǒng)的方式來實(shí)現(xiàn)本發(fā)明的這些目的和其他的目的。通過從屬權(quán)利要求描述本發(fā)明的實(shí)施例。根據(jù)本發(fā)明的一個(gè)方面,提供了用于實(shí)現(xiàn)在例如計(jì)算機(jī)設(shè)備或手持設(shè)備或無線發(fā)送/接收單元(WTRU)中以處理和產(chǎn)生基于手勢(shì)的控制命令從而基于這些命令執(zhí)行用戶動(dòng)作的控制模塊??刂颇K被配置為從適于檢測(cè)用戶產(chǎn)生的手勢(shì)的輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào),以及基于所述用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令。此外,控制模塊被配置為至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域,以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在圖形信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。用作起始點(diǎn)的注視點(diǎn)區(qū)域可以是用戶初始注視的區(qū)域或者微調(diào)區(qū)域,即,用戶已經(jīng)通過例如經(jīng)由輸入裝置的調(diào)節(jié)或校正命令來選擇的區(qū)域,從而將初始注視點(diǎn)區(qū)域校正或調(diào)節(jié)至所選區(qū)域。根據(jù)本發(fā)明的另一方面,提供了一種在與(例如,與計(jì)算機(jī)設(shè)備或手持設(shè)備相關(guān)聯(lián)或包括在計(jì)算機(jī)設(shè)備或手持設(shè)備中,或者與無線發(fā)送/接收單元(WTRU)相關(guān)聯(lián)或者包括在WTRU中的)信息呈現(xiàn)區(qū)域進(jìn)行用戶交互期間產(chǎn)生基于手勢(shì)的命令的方法。該方法包括:獲取用戶輸入,該用戶輸入與用戶產(chǎn)生的手勢(shì)和注視數(shù)據(jù)信號(hào)相對(duì)應(yīng),以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令。此外,至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域,以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。根據(jù)本發(fā)明的另一方面,提供了一種手持便攜式設(shè)備,該手持便攜式設(shè)備配備有信息呈現(xiàn)區(qū)域或者與信息呈現(xiàn)區(qū)域相關(guān)聯(lián)并且包括適于檢測(cè)用戶產(chǎn)生的手勢(shì)的輸入裝置和適于檢測(cè)所述信息呈現(xiàn)區(qū)域的觀看者的注視數(shù)據(jù)的注視跟蹤模塊。該手持設(shè)備還包括:控制模塊,控制模塊被配置為:從輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào),以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令。該控制模塊被還配置為至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域,以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。在本發(fā)明的實(shí)施例中,手持設(shè)備可以是蜂窩電話、智能電話、iPad或類似設(shè)備、平板電腦、phoblet/phablet、膝上型計(jì)算機(jī)或類似設(shè)備。根據(jù)本發(fā)明的另一方面,提供了一種無線發(fā)送/接收單元WTRU,該WTRU與信息呈現(xiàn)區(qū)域相關(guān)聯(lián)并且包括適于檢測(cè)用戶產(chǎn)生的手勢(shì)的輸入裝置和適于檢測(cè)信息呈現(xiàn)區(qū)域的觀看者的注視數(shù)據(jù)的注視跟蹤模塊。該WTRU還包括:控制模塊,控制模塊被配置為:從輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào),以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令。該控制模塊被還配置為至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域,以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。術(shù)語“無線發(fā)送/接收單元(WTRU)”包括但不限于用戶設(shè)備(UE)、移動(dòng)站、固定或移動(dòng)訂戶單元、蜂窩電話、智能電話、個(gè)人數(shù)字助理(PDA)、計(jì)算機(jī)、或者能夠在無線環(huán)境(例如,無線局域網(wǎng)(WLAN)或無線移動(dòng)通信系統(tǒng)(例如,第三代(3G)全球移動(dòng)通信系統(tǒng)和包括長(zhǎng)期演進(jìn)(LTE)小區(qū)的用于移動(dòng)通信的系統(tǒng)))中操作的任何其他類型的設(shè)備。根據(jù)本發(fā)明的另一方面,提供了一種用于與信息呈現(xiàn)區(qū)域進(jìn)行用戶交互的系統(tǒng)。該系統(tǒng)包括:輸入裝置,適于檢測(cè)用戶產(chǎn)生的手勢(shì),以及注視跟蹤模塊,適于檢測(cè)信息呈現(xiàn)區(qū)域的觀看者的注視數(shù)據(jù)。此外,該系統(tǒng)包括:控制模塊,被配置為:從輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào),以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令。控制模塊還被配置為:至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上用戶注視點(diǎn)所在的注視點(diǎn)區(qū)域,以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在圖形信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中,使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。根據(jù)本發(fā)明的另一方面,提供了一種與信息呈現(xiàn)區(qū)域相關(guān)聯(lián)的計(jì)算機(jī)設(shè)備。該計(jì)算機(jī)設(shè)備包括:輸入裝置,適于檢測(cè)用戶產(chǎn)生的手勢(shì),以及注視跟蹤模塊,適于檢測(cè)信息呈現(xiàn)區(qū)域的觀看者的注視數(shù)據(jù)。該計(jì)算機(jī)設(shè)備還包括:控制模塊,該控制模塊被配置為:從適于檢測(cè)用戶產(chǎn)生的手勢(shì)的輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào),以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令。此外,控制模塊被配置為至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域,以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。根據(jù)本發(fā)明的實(shí)施例,計(jì)算機(jī)設(shè)備可以例如是具有以下各項(xiàng)的組中的任意一個(gè):個(gè)人計(jì)算機(jī)、計(jì)算機(jī)工作站、大型計(jì)算機(jī)、車輛中的處理器或設(shè)備、或者手持設(shè)備,例如蜂窩電話、智能電話或類似設(shè)備、便攜式音樂播放器(例如,iPod)、膝上型計(jì)算機(jī)、計(jì)算機(jī)游戲、電子書、iPAD或類似設(shè)備、平板電腦、Phoblet/Phablet。根據(jù)本發(fā)明的實(shí)施例,輸入裝置被配置為使用例如光學(xué)測(cè)量技術(shù)或電容測(cè)量技術(shù)來檢測(cè)手或手指例如相對(duì)于鍵盤或信息呈現(xiàn)區(qū)域的用戶手勢(shì)。根據(jù)本發(fā)明的一個(gè)方面,提供了一種用于與可佩帶的頭戴式信息呈現(xiàn)區(qū)域進(jìn)行用戶交互的系統(tǒng)。該系統(tǒng)包括:被配置為陀螺戒指的輸入裝置,適于檢測(cè)用戶產(chǎn)生的手勢(shì)并且適于與(還可通信地連接到信息呈現(xiàn)區(qū)域的)控制模塊進(jìn)行無線通信,以及注視跟蹤模塊,適于檢測(cè)信息呈現(xiàn)區(qū)域的觀看者的注視數(shù)據(jù)??刂颇K被配置為:從輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào);以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令;至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域;以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在圖形信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。根據(jù)本發(fā)明的另一方面,提供了一種用于與信息呈現(xiàn)區(qū)域進(jìn)行用戶交互的系統(tǒng)。該系統(tǒng)包括:輸入裝置,適于檢測(cè)用戶產(chǎn)生的手勢(shì),其中輸入裝置包括至少一個(gè)觸摸板,該觸摸板被布置在車輛的轉(zhuǎn)向設(shè)備上或者適于集成在車輛的轉(zhuǎn)向設(shè)備中。此外,系統(tǒng)包括:注視跟蹤模塊,適于檢測(cè)信息呈現(xiàn)區(qū)域的觀看者的注視數(shù)據(jù),以及控制模塊,被配置為:從輸入裝置獲取用戶輸入并且從注視跟蹤模塊獲取注視數(shù)據(jù)信號(hào);以及基于用戶輸入來確定至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令;至少基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上包括用戶注視點(diǎn)的注視點(diǎn)區(qū)域;以及基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在圖形信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。根據(jù)本發(fā)明的實(shí)施例,輸入裝置包括觸摸板,該觸摸板被配置為使用戶能夠產(chǎn)生基于手勢(shì)的控制命令。例如可以通過在觸摸板的表面上移動(dòng)至少一根手指或者使用例如手指觸摸觸摸板的表面來產(chǎn)生基于手勢(shì)的命令。根據(jù)本發(fā)明的實(shí)施例,觸摸板表面的專用部分或區(qū)域被配置為接收基于手勢(shì)的控制命令。根據(jù)本發(fā)明的實(shí)施例,觸摸板表面的至少第一專用部分或區(qū)域被配置為接收第一組基于手勢(shì)的控制命令,并且觸摸板表面的至少第二部分或區(qū)域被配置為接收第二組基于手勢(shì)的控制命令。例如,觸摸板可以被配置為接收諸如在專用區(qū)域或部分處滾動(dòng)或縮放等的手勢(shì)。在本發(fā)明的實(shí)施例中,控制模塊被配置為基于經(jīng)由輸入裝置的多個(gè)同時(shí)的用戶輸入來確定至少一個(gè)基于手勢(shì)的控制命令。此外,基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域上用戶注視點(diǎn)所在的注視點(diǎn)區(qū)域,并且基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在圖形信息呈現(xiàn)區(qū)域上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。根據(jù)本發(fā)明的實(shí)施例,輸入模塊被配置為解釋表示至少一個(gè)用戶產(chǎn)生的手勢(shì)的信號(hào),以提供反映用戶手勢(shì)的至少一個(gè)基于手勢(shì)的控制命令。根據(jù)本發(fā)明的實(shí)施例,輸入模塊被布置在控制模塊中。在本發(fā)明的實(shí)施例中,輸入模塊被配置為使用注視輸入信號(hào)和/或可能的基于手勢(shì)的控制命令的預(yù)定集合來解釋表示至少一個(gè)用戶產(chǎn)生的手勢(shì)的信號(hào),每一個(gè)可能的控制命令與相對(duì)于輸入裝置的特定用戶手勢(shì)相對(duì)應(yīng)。根據(jù)本發(fā)明的實(shí)施例,至少一個(gè)對(duì)象被呈現(xiàn)在圖形信息呈現(xiàn)區(qū)域上,對(duì)象表示至少一個(gè)圖形用戶界面組件,并且被配置為根據(jù)用戶產(chǎn)生的基于手勢(shì)的控制命令而被操縱,其中控制模塊被配置為:基于注視數(shù)據(jù)信號(hào)來確定用戶注視點(diǎn)是否在對(duì)象上或者在該對(duì)象周圍的區(qū)域中。此外,控制模塊可以被配置為:基于注視數(shù)據(jù)信號(hào)來確定用戶注視點(diǎn)在預(yù)定時(shí)間點(diǎn)是否已經(jīng)在對(duì)象上或者在該對(duì)象周圍的區(qū)域中。例如,控制模塊可以被配置為確定用戶注視點(diǎn)在0.1秒之前是否在對(duì)象上或者該對(duì)象周圍的區(qū)域上。如果與由經(jīng)由輸入裝置的用戶輸入得到的用戶產(chǎn)生的激活命令同步地,用戶注視點(diǎn)在對(duì)象上或者在該對(duì)象周圍的區(qū)域中,則啟用對(duì)象的用戶激活,其中可以通過由經(jīng)由輸入裝置的用戶輸入得到的用戶產(chǎn)生的命令來操縱所激活的對(duì)象。如果與由經(jīng)由輸入裝置的用戶輸入得到的用戶產(chǎn)生的激活命令在預(yù)定時(shí)間段上同步地,用戶注視點(diǎn)曾在對(duì)象上或者在該對(duì)象周圍的區(qū)域內(nèi),則也啟用對(duì)象的用戶激活,其中可以通過由于經(jīng)由輸入裝置的用戶輸入得到的用戶產(chǎn)生的命令來操縱激活的對(duì)象。根據(jù)本發(fā)明的實(shí)施例,當(dāng)用戶觸摸觸摸板時(shí),通過諸如十字準(zhǔn)線或類似標(biāo)記等的視覺反饋來指示初始注視點(diǎn)的位置。用戶可以通過在觸摸板上移動(dòng)手指來調(diào)整該初始位置。然后,用戶可以使用不同的手勢(shì)以觸摸屏式方式與信息呈現(xiàn)區(qū)域進(jìn)行交互。視覺反饋的強(qiáng)度(例如,十字準(zhǔn)線的光的強(qiáng)度)可以取決于信息呈現(xiàn)區(qū)域上用戶的注視所在的位置。例如,如果在注視點(diǎn)處發(fā)起用于平移(pan)窗口的拖動(dòng)操作,則視覺反饋?zhàn)畛蹩梢允遣贿B續(xù)(discrete)的。當(dāng)拖動(dòng)操作已經(jīng)維持一段時(shí)間時(shí),可以增強(qiáng)視覺反饋以向用戶指示此時(shí)執(zhí)行拖動(dòng)操作的位置。在包括觸摸板的實(shí)施例中,手勢(shì)是相對(duì)于觸摸板的手指移動(dòng),并且每一個(gè)手勢(shì)與導(dǎo)致用戶動(dòng)作的基于特定手勢(shì)的控制命令相關(guān)聯(lián)或相對(duì)應(yīng)。在下文中,將討論可以使用手勢(shì)和注視的組合執(zhí)行的用戶動(dòng)作的非窮舉數(shù)量的示例:●通過例如注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象并且通過與之關(guān)聯(lián)地在預(yù)定時(shí)間段期間下壓觸摸板并在觸摸板上保持手指,呈現(xiàn)與該對(duì)象相關(guān)的視覺反饋。例如,通過在第一時(shí)間段期間下壓觸摸板并且在觸摸板上保持手指,可以突出顯示對(duì)象,并且通過在第二時(shí)間段期間繼續(xù)在觸摸板上保持手指,可以顯示對(duì)與該對(duì)象相關(guān)的信息進(jìn)行呈現(xiàn)的信息框?!裢ㄟ^例如注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象并且通過與之關(guān)聯(lián)地使用手指輕擊觸摸板,可以發(fā)起主動(dòng)作。例如,可以通過注視表示應(yīng)用的圖標(biāo)并且使用手指輕擊觸摸板來打開和啟動(dòng)應(yīng)用?!裢ㄟ^例如注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象并且通過與之關(guān)聯(lián)地抬起已經(jīng)與觸摸板相接觸的手指,可以發(fā)起主動(dòng)作。例如,可以通過注視表示應(yīng)用的圖標(biāo)并且抬起已經(jīng)與觸摸板相接觸的手指來打開和啟動(dòng)應(yīng)用?!裼脩艨梢酝ㄟ^注視信息呈現(xiàn)區(qū)域并且通過與之關(guān)聯(lián)地在觸摸板上滑動(dòng)他或她的手指來滑動(dòng)或拖動(dòng)由信息呈現(xiàn)區(qū)域呈現(xiàn)的視圖。從而在用戶注視點(diǎn)處發(fā)起拖動(dòng)??梢酝ㄟ^注視對(duì)象并且通過與之關(guān)聯(lián)地在觸摸板上滑動(dòng)手指來實(shí)現(xiàn)在信息呈現(xiàn)區(qū)域上滑動(dòng)對(duì)象的類似動(dòng)作。通過需要兩根手指來進(jìn)行劃動(dòng)或者一根手指用于劃動(dòng)而另一根手指按下按鈕的方式,可以取而代之地實(shí)現(xiàn)這兩個(gè)目的。●用戶可以通過注視對(duì)象并且通過與之關(guān)聯(lián)地在觸摸板上向下劃動(dòng)他或她的手指來選擇對(duì)象以進(jìn)行進(jìn)一步動(dòng)作?!裢ㄟ^注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠植⑶彝ㄟ^與之關(guān)聯(lián)地使用他或她的兩根手指進(jìn)行捏合,可以對(duì)該對(duì)象或?qū)ο蟛糠诌M(jìn)行縮放。通過使例如拇指推動(dòng)按鈕或鍵盤鍵并且手指在觸摸板上遠(yuǎn)離或朝向按鈕或鍵盤鍵移動(dòng),也可以在僅能夠感測(cè)單一觸摸的觸摸板上實(shí)現(xiàn)相同的功能?!裢ㄟ^注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠植⑶彝ㄟ^與之關(guān)聯(lián)地使用他或她的兩根手指旋轉(zhuǎn),可以旋轉(zhuǎn)對(duì)象或?qū)ο蟛糠?。類似地,?dāng)使用僅能夠感測(cè)單一觸摸的觸摸板時(shí),拇指可以按壓按鈕同時(shí)手指在觸摸板上與按鈕相距恒定距離的曲線中移動(dòng)以旋轉(zhuǎn)對(duì)象?!裢ㄟ^注視信息呈現(xiàn)區(qū)域的邊緣并且在觸摸板上在可能朝向信息呈現(xiàn)區(qū)域的中心的方向上(如果已經(jīng)在注視位置做出手勢(shì))滑動(dòng)手指,可以呈現(xiàn)或顯示在正常使用期間隱藏的菜單或其他窗口(例如,幫助菜單)。也即是說,如果用戶注視例如信息呈現(xiàn)區(qū)域的左邊緣并且在觸摸板上在向右方向上劃動(dòng)他或她的手指,則可以顯示或呈現(xiàn)隱藏菜單或其他窗口?!裢ㄟ^注視滑動(dòng)條控制(例如,音量控制),手指可以在觸摸板上、在觸摸屏的預(yù)定義區(qū)域上或者在鍵盤上上移/下移(或者針對(duì)水平控制,左移/右移)以調(diào)整滑動(dòng)條控制的值?!裢ㄟ^注視復(fù)選框控制同時(shí)在觸摸板上做出“選中-手勢(shì)”(例如,“V”),復(fù)選框可以是選中的或未選中的?!裢ㄟ^注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的可縮放對(duì)象或?qū)ο蟛糠郑瑫r(shí)使用一根手指(例如,拇指之一)用力按壓壓力敏感觸摸板,可以使用注視點(diǎn)作為縮放中心點(diǎn)來對(duì)所述對(duì)象進(jìn)行放大或縮小,其中,每一個(gè)用力按壓在不同縮放水平之間切換(toggle)?!裢ㄟ^注視有多個(gè)選項(xiàng)可用(例如,“復(fù)制”或“重命名”)的對(duì)象或?qū)ο蟛糠?,可以在預(yù)置聚焦停留時(shí)間已經(jīng)過去之后或者在已經(jīng)提供適當(dāng)?shù)挠脩糨斎胫笤趯?duì)象的不同側(cè)上顯示不同的選項(xiàng)。此后,觸摸板或觸摸屏的預(yù)定義區(qū)域用于選擇動(dòng)作。例如,向左劃動(dòng)以復(fù)制并且向右滑動(dòng)以重命名。根據(jù)本發(fā)明的另一個(gè)實(shí)施例,注視跟蹤模塊和用戶輸入裝置被實(shí)現(xiàn)在配備有觸摸屏的設(shè)備(例如,iPad或類似設(shè)備)中。觸摸屏用作信息呈現(xiàn)區(qū)域和用于輸入用戶手勢(shì)的輸入設(shè)備二者。控制模塊被包括在配備有觸摸屏的設(shè)備中,并且被配置為基于注視數(shù)據(jù)信號(hào)來確定信息呈現(xiàn)區(qū)域(即,觸摸屏)上用戶注視點(diǎn)所在的注視點(diǎn)區(qū)域,并且基于所確定的注視點(diǎn)區(qū)域和至少一個(gè)用戶產(chǎn)生的基于手勢(shì)的控制命令來執(zhí)行對(duì)呈現(xiàn)在觸摸屏上的視圖進(jìn)行操縱的至少一個(gè)用戶動(dòng)作,其中使用所確定的注視點(diǎn)區(qū)域作為起始點(diǎn)來執(zhí)行用戶動(dòng)作。經(jīng)由觸摸屏輸入用戶手勢(shì)。根據(jù)該實(shí)施例,用戶手勢(shì)或觸摸屏上的手指移動(dòng)是相對(duì)于注視點(diǎn)的,這伴隨著配備有觸摸屏的設(shè)備的更用戶友好且人體工程學(xué)的使用。例如,用戶可以用兩只手握住設(shè)備并且使用注視和拇指的移動(dòng)與觸摸屏上的圖形用戶界面進(jìn)行交互,其中所有用戶動(dòng)作和激活都將用戶注視點(diǎn)作為起始點(diǎn)。如上所述,上文所討論的手勢(shì)和注視發(fā)起的動(dòng)作僅是示例性的,并且存在與注視點(diǎn)相結(jié)合導(dǎo)致可感知的動(dòng)作的大量其他手勢(shì)。在下文中,描述一些其他示例:●可以通過注視對(duì)象或?qū)ο蟛糠植⑶野磯菏种?例如,拇指)、通過移動(dòng)手指來進(jìn)行微調(diào)、并且釋放手指施加的壓力以選擇對(duì)象或?qū)ο蟛糠?,來?duì)該對(duì)象或?qū)ο蟛糠诌M(jìn)行選擇;●可以通過注視對(duì)象或?qū)ο蟛糠?、按壓手?例如,拇指)、通過移動(dòng)手指來進(jìn)行微調(diào)、使用另一手指(例如,另一拇指)輕擊以選擇對(duì)象或?qū)ο蟛糠郑瑏韺?duì)該對(duì)象或?qū)ο蟛糠诌M(jìn)行選擇。此外,雙輕擊可以用于“雙擊動(dòng)作”,并且快速下移可以用于“右擊”。●通過注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的可縮放對(duì)象或?qū)ο蟛糠?,同時(shí)以圓周運(yùn)動(dòng)移動(dòng)手指(例如,拇指之一),可以使用注視點(diǎn)作為縮放中心點(diǎn)來對(duì)所述對(duì)象進(jìn)行放大或縮小,其中,順時(shí)針運(yùn)動(dòng)執(zhí)行“放大”命令,并且逆時(shí)針運(yùn)動(dòng)執(zhí)行“縮小”命令,反之亦然。●通過注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的可縮放對(duì)象或?qū)ο蟛糠?,并且通過與之關(guān)聯(lián)地使一根手指(例如,拇指之一)保持靜止同時(shí)上移或下移另一根手指(例如,另一根拇指),可以使用注視點(diǎn)作為縮放中心點(diǎn)來對(duì)所述對(duì)象進(jìn)行放大或縮小,其中,上移運(yùn)動(dòng)執(zhí)行“放大”命令,下移運(yùn)動(dòng)執(zhí)行“縮小”命令,反之亦然?!裢ㄟ^注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的可縮放對(duì)象或?qū)ο蟛糠滞瑫r(shí)使用一根手指(例如,拇指之一)雙輕擊觸摸屏,可以使用注視點(diǎn)作為縮放中心點(diǎn)來對(duì)所述對(duì)象進(jìn)行放大或縮小,其中,每一個(gè)雙輕擊在不同的縮放水平之間切換。●通過注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的可縮放對(duì)象或?qū)ο蟛糠滞瑫r(shí)在相反的水平方向上同時(shí)滑動(dòng)兩根手指(例如,兩根拇指),可以對(duì)該對(duì)象或?qū)ο蟛糠诌M(jìn)行縮放。●通過注視可縮放對(duì)象并且與之關(guān)聯(lián)地使手指(例如,一根拇指)在觸摸屏上保持靜止同時(shí)以圓周運(yùn)動(dòng)移動(dòng)另一根手指(例如,另一根拇指),可以對(duì)該對(duì)象或?qū)ο蟛糠诌M(jìn)行縮放?!裢ㄟ^注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠植⑶遗c之關(guān)聯(lián)地使手指(例如,拇指之一)在觸摸屏上保持靜止同時(shí)滑動(dòng)另一根手指(例如,另一根拇指),可以滑動(dòng)或拖動(dòng)由信息呈現(xiàn)區(qū)域呈現(xiàn)的視圖。●通過注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠植⑶遗c之關(guān)聯(lián)地使手指(例如,拇指之一)在觸摸屏上保持靜止同時(shí)滑動(dòng)另一根手指(例如,另一根拇指),可以滑動(dòng)或拖動(dòng)由信息呈現(xiàn)區(qū)域呈現(xiàn)的視圖。●通過注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠滞瑫r(shí)使用手指(例如,拇指之一)輕擊或雙輕擊,可以激活自動(dòng)平移(panning)功能,使得在注視點(diǎn)靠近信息呈現(xiàn)區(qū)域的邊緣的同時(shí)呈現(xiàn)區(qū)域從屏幕的邊緣之一向中心連續(xù)地滑動(dòng),直到接收到第二用戶輸入為止。●通過注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠滞瑫r(shí)使用手指(例如,拇指之一)輕擊或雙輕擊,呈現(xiàn)區(qū)域立即根據(jù)注視點(diǎn)(例如,注視點(diǎn)用于指示滑動(dòng)信息呈現(xiàn)區(qū)域應(yīng)該滑動(dòng)到的中心)滑動(dòng)?!裢ㄟ^注視呈現(xiàn)在信息呈現(xiàn)區(qū)域上的對(duì)象或?qū)ο蟛糠滞瑫r(shí)在相反的垂直方向上同時(shí)滑動(dòng)兩根手指(例如,兩根拇指),可以旋轉(zhuǎn)該對(duì)象或?qū)ο蟛糠?。在?zhí)行兩指手勢(shì)之前,手指之一可以用于微調(diào)動(dòng)作點(diǎn)。例如,當(dāng)用戶觸摸觸摸屏?xí)r,可以在注視點(diǎn)上示出諸如“虛擬手指”等的用戶反饋符號(hào)。第一根手指可以用于四處滑動(dòng)以相對(duì)于原點(diǎn)來調(diào)整動(dòng)作點(diǎn)。當(dāng)用戶使用第二根手指觸摸屏幕時(shí),動(dòng)作點(diǎn)固定并且第二根手指用于“點(diǎn)擊”動(dòng)作點(diǎn)或者用于執(zhí)行諸如上述旋轉(zhuǎn)、拖動(dòng)和縮放示例等的兩指手勢(shì)。根據(jù)本發(fā)明的另一實(shí)施例,注視跟蹤模塊和用戶輸入裝置被實(shí)現(xiàn)在諸如iPad、超級(jí)本平板電腦或類似設(shè)備等的便攜式設(shè)備中。然而,替代使用拇指在呈現(xiàn)區(qū)域上執(zhí)行手勢(shì),將一個(gè)或兩個(gè)單獨(dú)的觸摸板放置在設(shè)備的背面,以允許使用除了拇指之外的其他手指的兩指手勢(shì)。根據(jù)本發(fā)明的另一實(shí)施例,注視跟蹤模塊和用戶輸入裝置被實(shí)現(xiàn)在車輛中。信息呈現(xiàn)區(qū)域可以是平視顯示器或信息娛樂屏幕。輸入裝置可以是轉(zhuǎn)向設(shè)備的背面(以與食指一起使用)或正面(以與拇指一起使用)上的一個(gè)或兩個(gè)單獨(dú)的觸摸板。根據(jù)本發(fā)明的另一實(shí)施例,注視跟蹤模塊和信息呈現(xiàn)區(qū)域被實(shí)現(xiàn)在可佩帶的頭戴式顯示器中,該頭戴式顯示器可以被設(shè)計(jì)為看似一副眼鏡(例如,US8,235,529中所述的解決方案)。用戶輸入裝置可以包括陀螺儀,并且適于佩戴在手腕、手或至少一根手指上。例如,輸入裝置可以是與眼鏡(或處理單元,諸如可通信地連接到眼鏡智能電話等)無線連接的戒指和檢測(cè)佩戴戒指的手指的小幅移動(dòng)的陀螺儀。檢測(cè)到表示的移動(dòng)的手勢(shì)數(shù)據(jù)然后被無線地傳送到檢測(cè)到注視的眼鏡,并且基于來自輸入裝置的手勢(shì)數(shù)據(jù)的基于手勢(shì)的控制命令用于識(shí)別和執(zhí)行用戶動(dòng)作。通常,在大多數(shù)應(yīng)用中,觸摸板顯著小于信息呈現(xiàn)區(qū)域,這使得在特定情形中觸摸板可以對(duì)可能的用戶動(dòng)作施加限制。例如,可能期望在整個(gè)信息呈現(xiàn)區(qū)域上拖動(dòng)或移動(dòng)對(duì)象同時(shí)用戶手指的移動(dòng)受到較小觸摸板區(qū)域的限制。因此,在本發(fā)明的實(shí)施例中,如果例如按下或按壓特定或?qū)S玫陌粹o或鍵盤鍵,則盡管用戶已經(jīng)從觸摸板移走了手指,也可以維持觸摸屏式會(huì)話。由此,用戶可以執(zhí)行需要觸摸板上的多次觸摸的動(dòng)作。例如,可以通過觸摸板上的多次拖動(dòng)移動(dòng)來在整個(gè)信息呈現(xiàn)區(qū)域上移動(dòng)或拖動(dòng)對(duì)象。在本發(fā)明的其他實(shí)施例中,在手指沿著與手指的初始方向相同的方向到達(dá)觸摸板的邊緣之后,信息呈現(xiàn)區(qū)域上的拖動(dòng)移動(dòng)或者其他用戶動(dòng)作繼續(xù)。繼續(xù)的移動(dòng)或其他動(dòng)作可以持續(xù)到傳送中斷命令為止,該中斷命令可以是例如下壓鍵盤鍵或按鈕、觸摸板上的輕擊或者當(dāng)從觸摸板移走了手指時(shí)。在本發(fā)明的其他實(shí)施例中,當(dāng)用戶手指靠近觸摸板的邊緣時(shí),增加或加快拖動(dòng)移動(dòng)或其他動(dòng)作的速度。如果手指在相反的方向上移動(dòng),則可以減小速度。在本發(fā)明的實(shí)施例中,可以基于注視位置來加快動(dòng)作,例如,對(duì)象的拖動(dòng)移動(dòng)。例如,通過注視對(duì)象、在期望方向上發(fā)起該對(duì)象的拖動(dòng)操作、然后注視該對(duì)象的期望結(jié)束位置,對(duì)象的初始位置與期望結(jié)束位置之間的距離越長(zhǎng),對(duì)象移動(dòng)的速度將越高。在本發(fā)明的其他實(shí)施例中,語音命令可被用于選擇要對(duì)當(dāng)前注視的對(duì)象執(zhí)行什么動(dòng)作,然后需要手勢(shì)來執(zhí)行該動(dòng)作。例如,諸如詞“移動(dòng)”等的語音命令可以允許用戶通過在觸摸板或觸摸屏上移動(dòng)手指來移動(dòng)當(dāng)前正在注視的對(duì)象。要執(zhí)行的另一個(gè)動(dòng)作可以是刪除對(duì)象。在該情況下,詞“刪除”可以允許刪除當(dāng)前正在注視的對(duì)象,但是另外需要諸如向下劃動(dòng)等的手勢(shì)來實(shí)際刪除對(duì)象。因此,通過注視要作用于的對(duì)象來選擇對(duì)象,通過語音命令來選擇要執(zhí)行的特定動(dòng)作,并且通過手勢(shì)來完成要執(zhí)行的移動(dòng)或確認(rèn)。下面將通過例證實(shí)施例的方式來討論本發(fā)明的其他目的和優(yōu)點(diǎn)。當(dāng)參照以下詳細(xì)描述、所附權(quán)利要求和附圖來考慮時(shí),將更全面地理解本發(fā)明的這些和其他特征和優(yōu)點(diǎn)。附圖說明附圖不必按比例繪制,并且以舉例說明而非限制性的方式概括地示出了本發(fā)明的多個(gè)實(shí)施例。因此,在附圖的圖示中通過舉例說明而非限制性的方式說明了示例性實(shí)施例,在附圖中,相似的附圖標(biāo)記指示相似的元件。應(yīng)當(dāng)注意的是,在本討論中對(duì)“一”或“一個(gè)”實(shí)施例的提及不一定是對(duì)相同實(shí)施例的提及,并且這種提及意味著至少一個(gè)。圖1示出了用戶控制可以在其中實(shí)現(xiàn)本發(fā)明的計(jì)算機(jī)裝置的概覽圖;圖2是示出了根據(jù)本發(fā)明的布置的實(shí)施例的框圖;圖3是示出了根據(jù)本發(fā)明的布置的另一實(shí)施例的框圖;圖4示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的示例性手勢(shì);圖5示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的另一示例性手勢(shì);圖6示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的另一示例性手勢(shì);圖7示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的另一示例性手勢(shì);圖8示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的另一示例性手勢(shì);圖9示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的另一示例性手勢(shì);圖10示出了根據(jù)本發(fā)明導(dǎo)致用戶產(chǎn)生的基于手勢(shì)的控制命令的另一示例性手勢(shì);圖11a示出了在其中實(shí)現(xiàn)本發(fā)明的另一實(shí)施例的配備有觸摸屏的設(shè)備的概覽圖;圖11b示出了在其中實(shí)現(xiàn)本發(fā)明的另一實(shí)施例的在背面配備有觸摸板的設(shè)備的概覽圖;圖12是示出了圖11a中所示的根據(jù)本發(fā)明的實(shí)施例的框圖;圖13a是根據(jù)本發(fā)明的實(shí)施例的控制模塊的示意圖;圖13b是根據(jù)本發(fā)明的另一實(shí)施例的控制模塊的示意圖;圖13c是根據(jù)本發(fā)明的另一實(shí)施例的控制模塊的示意圖;圖14是根據(jù)本發(fā)明的實(shí)施例的無線發(fā)送/接收單元WTRU的示意圖;圖15a是根據(jù)本發(fā)明的實(shí)施例的計(jì)算機(jī)設(shè)備或手持設(shè)備的實(shí)施例的示意圖;圖15b是根據(jù)本發(fā)明的計(jì)算機(jī)設(shè)備或手持設(shè)備的另一實(shí)施例的示意圖;圖16是示出了根據(jù)本發(fā)明的實(shí)施例的方法的實(shí)施例的步驟的示意性流程圖;圖17是示出了根據(jù)本發(fā)明的方法的另一實(shí)施例的步驟的示意性流程圖;圖18是示出了根據(jù)本發(fā)明的實(shí)施例的方法的另一實(shí)施例的步驟的示意性流程圖;圖19是示出了根據(jù)本發(fā)明的實(shí)施例的方法的另一實(shí)施例的步驟的示意性流程圖;圖20是示出了根據(jù)本發(fā)明的布置的另一實(shí)施例的框圖;圖21是本發(fā)明的另一實(shí)現(xiàn)的示意圖;圖22是本發(fā)明的另一實(shí)現(xiàn)的示意圖;以及圖23是本發(fā)明的實(shí)現(xiàn)的示意圖。具體實(shí)施方式本文使用的術(shù)語“模塊”指代專用集成電路(ASIC)、電子電路、執(zhí)行一個(gè)或多個(gè)軟件程序的處理器(共享的、專用的、或組)以及存儲(chǔ)器、組合邏輯電路、或者提供所述功能的其他適合的組件。術(shù)語“模塊”還指代實(shí)現(xiàn)本文所述的方法(具體地,結(jié)合每一個(gè)特定“模塊”所述的功能)必需的特定形式的軟件。認(rèn)為將主要通過根據(jù)本發(fā)明的系統(tǒng)中采用的特定系統(tǒng)架構(gòu)并且通過根據(jù)本發(fā)明的系統(tǒng)采用的特定方法來確定特定形式的軟件。下文是根據(jù)本發(fā)明的示例性實(shí)施例的描述。不應(yīng)從限制性的意義理解該描述,而是僅為了描述本發(fā)明的一般原理的目的給出該描述。將理解的是,在不偏離本發(fā)明的范圍的情況下可以利用其他實(shí)施例并且進(jìn)行結(jié)構(gòu)和邏輯改變。參照?qǐng)D1、圖2、圖3和圖20,將描述根據(jù)本發(fā)明的計(jì)算機(jī)系統(tǒng)的實(shí)施例。圖1示出了根據(jù)本發(fā)明具有集成的注視和手動(dòng)控制的計(jì)算機(jī)系統(tǒng)的實(shí)施例。用戶110能夠至少部分地基于眼睛跟蹤信號(hào)DEYE(眼睛跟蹤信號(hào)DEYE描述了用戶在信息呈現(xiàn)區(qū)域或顯示器20上的關(guān)注點(diǎn)x、y)并且基于用戶產(chǎn)生的手勢(shì)(即,可以檢測(cè)到用戶的至少一個(gè)身體部位的移動(dòng),從而經(jīng)由諸如觸摸板51等的用戶輸入裝置50產(chǎn)生基于手勢(shì)的控制命令),來控制計(jì)算機(jī)系統(tǒng)10。在本發(fā)明的上下文中,如上所述,術(shù)語“觸摸板”(或術(shù)語“跟蹤板”)是指以觸覺傳感器(即,可以將用戶手指的運(yùn)動(dòng)和位置轉(zhuǎn)換為屏幕(信息呈現(xiàn)區(qū)域)上的相對(duì)位置的專用表面)為特征的定點(diǎn)設(shè)備。觸摸板是膝上型計(jì)算機(jī)的公共特征,并且也在桌面空間不足的情況下用作鼠標(biāo)的替換。因?yàn)樗鼈兊某叽绮煌?,因此也可以在個(gè)人數(shù)字助理(PDA)和一些便攜式媒體播放器上發(fā)現(xiàn)它們。無線觸摸板也可以作為拆卸的配件使用。觸摸板以多種方式之一操作,包括電容感測(cè)和電導(dǎo)感測(cè)。如今最常用的技術(shù)伴隨著感測(cè)手指的電容虛擬地效應(yīng)或傳感器之間的電容。雖然諸如觸摸屏等的觸摸板能夠感測(cè)絕對(duì)位置,但是分辨率受到其尺寸的限制。對(duì)于作為指針設(shè)備的通常使用,與操縱被抬起并放回表面的鼠標(biāo)類似,手指的拖動(dòng)運(yùn)動(dòng)被轉(zhuǎn)換為光標(biāo)在屏幕上的更精細(xì)的相對(duì)運(yùn)動(dòng)。與標(biāo)準(zhǔn)鼠標(biāo)的左右按鈕相當(dāng)?shù)挠布粹o被定位在觸摸板的下方、上方或旁邊。上網(wǎng)本有時(shí)采用最后一種方式作為節(jié)約空間的方式。一些觸摸板和相關(guān)聯(lián)的設(shè)備驅(qū)動(dòng)器軟件可以將輕擊板解釋為點(diǎn)擊,并且其后接著是連續(xù)定點(diǎn)運(yùn)動(dòng)的輕擊(“點(diǎn)擊-半按(click-and-a-half)”)可以指示拖動(dòng)。觸覺觸摸板允許通過將按鈕功能并入到觸摸板自身的表面中來進(jìn)行點(diǎn)擊和拖動(dòng)。為了選擇,下壓觸摸板而不是物理按鈕。為了拖動(dòng),不是執(zhí)行“點(diǎn)擊-半按”技術(shù),而是進(jìn)行下壓同時(shí)拖動(dòng)對(duì)象而不釋放壓力,并且當(dāng)完成時(shí)放開。觸摸板驅(qū)動(dòng)器還可以允許使用多根手指來促進(jìn)其他鼠標(biāo)按鈕(通常針對(duì)中心按鈕兩指輕擊)。一些觸摸板具有“熱點(diǎn)”,即觸摸板上用于除了鼠標(biāo)之外的功能的位置。例如,在特定觸摸板上沿著觸摸板的邊緣移動(dòng)手指將被用作滾輪,控制滾動(dòng)條并且垂直地或水平地滾動(dòng)具有焦點(diǎn)的窗口。Apple(蘋果)使用兩指拖動(dòng)來在其觸摸板上進(jìn)行滾動(dòng)。此外,一些觸摸板驅(qū)動(dòng)器支持輕擊區(qū),即,輕擊將執(zhí)行功能(例如,暫停媒體播放器或者啟動(dòng)應(yīng)用)的區(qū)域。所有這些功能是在觸摸板設(shè)備驅(qū)動(dòng)器軟件中實(shí)現(xiàn)的,并且可以被禁用。觸摸板主要用于整裝(self-contained)的便攜式膝上型計(jì)算機(jī)中,并且不需要靠近機(jī)器的平坦表面。觸摸板接近鍵盤,并且只需要非常短的手指移動(dòng)以在顯示屏上移動(dòng)光標(biāo);雖然是有利的,但是這還使得用戶的拇指可能在鍵入時(shí)無意地移動(dòng)鼠標(biāo)的光標(biāo)。在具有內(nèi)置觸摸板的鍵盤中,觸摸板功能可用于臺(tái)式計(jì)算機(jī)。觸摸板的示例包括一維觸摸板,該一維觸摸板用作第二代及以后的iPodClassic便攜式音樂播放器上的菜單導(dǎo)航的主控制界面,其中它們被稱作“點(diǎn)擊滑輪”,這是因?yàn)樗鼈儍H感測(cè)沿著一個(gè)軸的運(yùn)動(dòng),該軸像輪子一樣回繞。在觸摸板的另一實(shí)現(xiàn)中,第二代MicrosoftZune產(chǎn)品線(Zune80/120和Zune4/8)將觸摸應(yīng)用于ZunePad。Apple的PowerBook500系列是其攜帶這種設(shè)備的第一臺(tái)膝上型計(jì)算機(jī),Apple將其稱為“跟蹤板(trackpad)”。Apple...