自動(dòng)視線校準(zhǔn)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及信息技術(shù)領(lǐng)域，具體地涉及自動(dòng)視線校準(zhǔn)。
【背景技術(shù)】
[0002]視線跟蹤或眼睛跟蹤技術(shù)越來越多地用于其它電子裝置(例如平板電腦、便攜式電腦、智能電視、游戲機(jī)等)或者結(jié)合上述電子裝置使用。視線跟蹤系統(tǒng)可以用作例如如在輸入方法中跟蹤用戶的眼睛焦點(diǎn)或視線焦點(diǎn)的輸入裝置，該輸入方法用于執(zhí)行特定動(dòng)作，例如滾動(dòng)屏幕上的內(nèi)容、突出/選擇屏幕上的元素等。
[0003]按照慣例，視線跟蹤系統(tǒng)必須被校準(zhǔn)以供使用。因此，用戶通常經(jīng)過初始化過程或練習(xí)，由此來獲得樣品或訓(xùn)練數(shù)據(jù)以便校準(zhǔn)系統(tǒng)。這個(gè)過程基本上相當(dāng)于使用對(duì)用戶的眼睛的圖像捕獲來校準(zhǔn)系統(tǒng)，該用戶的眼睛看著被放置在屏幕上的預(yù)定目標(biāo)。這允許系統(tǒng)確定在計(jì)算相對(duì)于屏幕的用戶的視線中要使用什么參數(shù)。當(dāng)參數(shù)改變時(shí)，例如，用戶朝向屏幕移動(dòng)或者遠(yuǎn)離屏幕移動(dòng)，或者以其它方式改變他或她相對(duì)于裝置的定位，可能需要重新運(yùn)行校準(zhǔn)過程以便保持視線跟蹤系統(tǒng)的準(zhǔn)確度和精度。

【發(fā)明內(nèi)容】

[0004]總之，一方面提供了一種方法，包括:使用裝置的處理器來確定裝置處的觸摸輸入事件的發(fā)生；使用裝置的傳感器來捕獲用戶的圖像數(shù)據(jù)；使用處理器來識(shí)別與觸摸輸入事件關(guān)聯(lián)的屏幕位置；以及使用處理器利用觸摸輸入事件的發(fā)生、圖像數(shù)據(jù)及屏幕位置來校準(zhǔn)裝置的視線跟蹤系統(tǒng)。
[0005]另一方面提供了一種設(shè)備，包括:觸摸輸入裝置；屏幕，其顯示信息；傳感器，其捕獲裝置的用戶的圖像數(shù)據(jù)；處理器，其可操作地耦接到觸摸輸入裝置、屏幕及傳感器；以及存儲(chǔ)器，其用于存儲(chǔ)指令，該指令可由處理器執(zhí)行以:確定觸摸輸入裝置處的觸摸輸入事件的發(fā)生；使用傳感器來捕獲用戶的圖像數(shù)據(jù)；識(shí)別與觸摸輸入事件關(guān)聯(lián)的屏幕位置；以及利用觸摸輸入事件的發(fā)生、圖像數(shù)據(jù)及屏幕位置來校準(zhǔn)設(shè)備的視線跟蹤系統(tǒng)。
[0006]進(jìn)一步的方面提供了一種計(jì)算機(jī)程序產(chǎn)品，包括:存儲(chǔ)有可由處理器執(zhí)行的代碼的存儲(chǔ)裝置，所述代碼包括:用于使用裝置的處理器來確定裝置處的觸摸輸入事件的發(fā)生的代碼；用于使用裝置的傳感器來捕獲用戶的圖像數(shù)據(jù)的代碼；用于使用處理器來識(shí)別與觸摸輸入事件關(guān)聯(lián)的屏幕位置的代碼；以及用于使用處理器利用觸摸輸入事件的發(fā)生、圖像數(shù)據(jù)及屏幕位置來校準(zhǔn)裝置的視線跟蹤系統(tǒng)的代碼。
[0007]前述是概要，并且因此可以包含細(xì)節(jié)的簡(jiǎn)化、概括和省略；因此，本領(lǐng)域的技術(shù)人員將理解的是，該概要僅僅是說明性的且不意在以任何方式進(jìn)行限制。
[0008]為了更好地理解實(shí)施方式連同實(shí)施方式的其它的和進(jìn)一步的特征以及優(yōu)點(diǎn)，參照以下的結(jié)合附圖的描述。本發(fā)明的范圍將在所附權(quán)利要求中指出。
【附圖說明】
[0009]圖1示出了信息處理裝置線路的示例。
[0010]圖2示出了信息處理裝置線路的另一示例。
[0011]圖3示出了用于自動(dòng)視線校準(zhǔn)的示例方法。
【具體實(shí)施方式】
[0012]將容易地理解的是，可以以除所描述的示例實(shí)施方式以外的多種不同的配置來布置和設(shè)計(jì)如在本文附圖中概括地描述并示出的實(shí)施方式的部件。因此，以下如在附圖中示出的、示例實(shí)施方式的更詳細(xì)的描述，不意在限制所要求保護(hù)的實(shí)施方式的范圍，而僅代表示例實(shí)施方式。
[0013]本說明書全文中，對(duì)“一個(gè)(one)實(shí)施方式”或“一種(an)實(shí)施方式”(等)的引用意味著結(jié)合實(shí)施方式所描述的特定特征、結(jié)構(gòu)或特性包含在至少一個(gè)實(shí)施方式中。因此，在本說明書全文的各處所出現(xiàn)的短語“在一個(gè)實(shí)施方式中”或“在一種實(shí)施方式中”等未必都指同一實(shí)施方式。
[0014]此外，在一個(gè)或更多個(gè)實(shí)施方式中，所描述的特征、結(jié)構(gòu)或特性可以以任何適當(dāng)?shù)姆绞竭M(jìn)行組合。在下面的描述中，提供了許多具體的細(xì)節(jié)以給出對(duì)實(shí)施方式的透徹的理解。然而，相關(guān)領(lǐng)域的技術(shù)人員將認(rèn)識(shí)到，可以在沒有一個(gè)或更多個(gè)具體細(xì)節(jié)或者有其它的方法、部件、材料等的情況下，對(duì)各種實(shí)施方式進(jìn)行實(shí)踐。在其它示例中，不再詳細(xì)地示出或描述公知的結(jié)構(gòu)、材料或操作以避免混淆。
[0015]如本文所述，眼睛跟蹤(本文中也稱為視線跟蹤)需要初始校準(zhǔn)。例如，當(dāng)用戶的頭部移動(dòng)時(shí)，眼睛跟蹤還需要重新校準(zhǔn)。校準(zhǔn)通常涉及用戶跟隨在屏幕上的各種位置之間移動(dòng)的對(duì)象。現(xiàn)有解決方案允許用戶校準(zhǔn)眼睛跟蹤以使得用戶能夠跟隨在屏幕上的各種位置之間移動(dòng)的對(duì)象，但是這對(duì)用戶而言不方便。此外，在用戶移動(dòng)他或她的頭部的情況下，如果系統(tǒng)要保持準(zhǔn)確度和精度，則現(xiàn)有解決方案需要重新校準(zhǔn)。
[0016]實(shí)施方式使用借助于以下而得知用戶正在看著屏幕上的位置來校準(zhǔn)眼睛跟蹤:使用來自視線跟蹤系統(tǒng)之外的一個(gè)或多個(gè)部件的可用系統(tǒng)知識(shí)來推斷用戶正在看著什么。下面是系統(tǒng)信息的一些非限制性示例，該系統(tǒng)信息允許實(shí)施方式確定用戶正在看著特定的屏幕位置。
[0017]實(shí)施方式可以利用以下事實(shí)來推斷用戶已經(jīng)看了該位置:用戶已經(jīng)觸摸了裝置的屏幕(例如提供到觸摸屏的輸入，如果有的話，包括懸?；蚪咏袦y(cè))。實(shí)施方式可以利用以下事實(shí)來推斷用戶已經(jīng)看了該位置:用戶已經(jīng)點(diǎn)擊鼠標(biāo)按鈕或使用另一非光學(xué)輸入裝置選擇了一些事物。例如，用戶可以鍵入或輸入文本，這允許實(shí)施方式推斷用戶正在看著或聚焦于在屏幕上顯示的光標(biāo)位置或字位置。實(shí)施方式可以利用以下事實(shí)來推斷用戶已經(jīng)看了該位置:在點(diǎn)擊可選擇的元素例如網(wǎng)頁鏈接之前，用戶已經(jīng)將經(jīng)由非光學(xué)輸入裝置發(fā)生的鼠標(biāo)位置或光標(biāo)位置移動(dòng)到屏幕位置。實(shí)施方式可以利用以下事實(shí)來推斷用戶已經(jīng)看了該位置:用戶按壓鼠標(biāo)或光標(biāo)定位按鈕(例如控制鍵)。實(shí)施方式可以使用以下事實(shí)來推斷用戶已經(jīng)看了該位置:用戶已經(jīng)通過進(jìn)行動(dòng)作(例如打開菜單、下拉列表等)的控制而懸停光標(biāo)或其它選擇元件(例如筆或觸針、指尖等)。同樣地，實(shí)施方式可以推斷用戶用他或她的眼睛跟隨光標(biāo)位置和移動(dòng)。針對(duì)上述中的每個(gè)，根據(jù)實(shí)施方式，眼睛跟蹤或視線跟蹤系統(tǒng)可以通過對(duì)用戶正在看著的已知屏幕位置進(jìn)行匹配來自我校準(zhǔn)。當(dāng)用戶正常地利用裝置并且沒有必要運(yùn)行校準(zhǔn)練習(xí)時(shí)，這些都會(huì)發(fā)生。
[0018]在實(shí)施方式中，在以下給定的情況下可以考慮定時(shí)信息:例如特定非光學(xué)輸入以及用戶的眼睛正在或者曾經(jīng)聚焦于該位置的可能性。在一些實(shí)施方式中，定時(shí)信息可以包括提供偏移以適當(dāng)?shù)剡m應(yīng)特定使用案例場(chǎng)景。例如，如由于用戶在進(jìn)行選擇之前可能向下看鍵盤/鼠標(biāo)，可能需要將眼睛位置(圖像數(shù)據(jù))倒回到在進(jìn)行鼠標(biāo)選擇之前的時(shí)刻。同樣地，由于用戶在提供這種輸入之后會(huì)看著光標(biāo)位置，所以實(shí)施方式可能需要使用在動(dòng)作例如光標(biāo)位置輸入之后捕獲的、關(guān)于用戶的視線焦點(diǎn)的圖像數(shù)據(jù)。
[0019]眼睛跟蹤可以例如基于眼睛跟蹤記錄的先前歷史、用戶特定的歷史或使用模式等來確定關(guān)于下述的置信水平:給定位置數(shù)據(jù)點(diǎn)為準(zhǔn)確或者應(yīng)當(dāng)被拋棄/不用于校準(zhǔn)。當(dāng)收集了足夠的屏幕位置時(shí)，在不需要初始校準(zhǔn)的情況下可以自動(dòng)地啟用眼睛跟蹤特征。因此，實(shí)施方式可以完全跳過視線跟蹤系統(tǒng)初始化/校準(zhǔn)步驟，并且簡(jiǎn)單地提醒用戶該系統(tǒng)在使用例如運(yùn)行校準(zhǔn)作為后臺(tái)任務(wù)期間已被校準(zhǔn)。
[0020]正如例如通過比較未來事件來保持眼睛跟蹤的準(zhǔn)確度那樣，可以通過策略來保持并更新校準(zhǔn)。如果未識(shí)別出足夠的屏幕位置以跳過初始校準(zhǔn)，則可以使用收集的數(shù)據(jù)點(diǎn)來至少減少常規(guī)眼睛跟蹤校準(zhǔn)。通過這種方式，實(shí)施方式簡(jiǎn)化了視線跟蹤系統(tǒng)的必要校準(zhǔn)，并且提供了更具用戶友好性的體驗(yàn)。
[0021]通過參考附圖將最好地理解所示出的示例實(shí)施方式。下面的描述僅意在通過示例的方式，并且簡(jiǎn)單示出了某些示例實(shí)施方式。
[0022]雖然在信息處理裝置(本文中也稱為設(shè)備、電子裝置或僅裝置)中可以利用各種其它電路、線路或部件，但是對(duì)于智能電話和/或平板電腦線路100來說，圖1中示出的示例包括在例如平板電腦或其它移動(dòng)計(jì)算平臺(tái)中發(fā)現(xiàn)的電路設(shè)計(jì)上的系統(tǒng)。軟件和(一個(gè)或多個(gè))處理器被組合在單電路110中。如本領(lǐng)域公知的，處理器包括內(nèi)部運(yùn)算單元、寄存器、高速緩存存儲(chǔ)器、總線、I/O端口等。內(nèi)部總線等取決于不同的供應(yīng)商