專利名稱：一種眼控鼠標實現(xiàn)方法及系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及視覺跟蹤技術(shù)領(lǐng)域，具體涉及一種眼控鼠標實現(xiàn)方法及系統(tǒng)。
背景技術(shù)：
探索自然和諧的人機關(guān)系已成為計算機研究的一個重要領(lǐng)域，自然、高效、智能化的人機交互界面是當今計算機發(fā)展的重要趨勢。但是，對于殘障人士，如果手腳運動不方便，利用傳統(tǒng)鼠標實現(xiàn)人機交互就非常困難。在人機交互領(lǐng)域中，眼睛作為重要的信息交互通道，而視線反應(yīng)人的注意方向，因而將視線應(yīng)用于人機交互領(lǐng)域具有其自然性、直接性和交互性等特點，備受人們的關(guān)注，因此如何實現(xiàn)利用眼睛視線方向控制實現(xiàn)鼠標功能的眼控鼠標是亟需解決的技術(shù)問題。

發(fā)明內(nèi)容
為了克服上述現(xiàn)有技術(shù)中存在的缺陷，本發(fā)明的目的是提供一種眼控鼠標實現(xiàn)方法及系統(tǒng)，能夠利用眼睛視線方向控制實現(xiàn)鼠標功能。為了實現(xiàn)本發(fā)明的上述目的，根據(jù)本發(fā)明的一個方面，本發(fā)明提供了一種眼控鼠標實現(xiàn)方法，包括如下步驟:S1:獲取眼部圖像；S2:對所述眼部圖像中的瞳孔位置進行檢測及定位；S3:建立所述眼部視線方向與屏幕的映射關(guān)系；S4:實時監(jiān)控眼部視線方向，根據(jù)所述眼部視線方向與屏幕的映射關(guān)系，確定所述眼部視線在所述屏幕上的注視點；S5:確定鼠標的工作模式，所述工作模式包括鼠標移動模式、單擊模式和雙擊模式；S6:在所述屏幕上眼部視線的注視點處顯示鼠標并按照所述工作模式進行工作。本發(fā)明的眼控鼠標實現(xiàn)方法通過建立眼部視線方向與屏幕的映射關(guān)系，然后確定瞳孔中心，根據(jù)眼部視線方向與屏幕的映射關(guān)系，確定眼部視線在所述屏幕上的注視點，在屏幕上眼部視線的注視點處顯示鼠標并按照預(yù)設(shè)工作模式進行工作，快速準確地實現(xiàn)眼控鼠標的功能。在本發(fā)明的一種優(yōu)選實施例中，所述步驟S2中瞳孔的定位方法為:S21:對所述眼部圖像進行預(yù)處理，增加所述眼部圖像的整體亮度，以及濾除所述眼部圖像的噪聲；S22:統(tǒng)計所述眼部圖像的所有像素點的最大類間方差；S23:根據(jù)所述最大類間方差，計算所述眼部圖像二值化的最佳閾值，實現(xiàn)眼部圖
像二值化處理；S24:提取瞳孔邊緣信息；S25:確定瞳孔中心及半徑。
本發(fā)明的瞳孔定位方法能夠快速準確地對瞳孔進行定位，即使在眼睛圖像模糊的情況下，也能將瞳孔的中心快速定位出來。在本發(fā)明的另一種優(yōu)選實施例中，在對所述眼部圖像進行預(yù)處理的步驟中，增加所述眼部圖像的整體亮度的方法為:S211:將所述眼部圖像轉(zhuǎn)化為對應(yīng)的直方圖；S212:根據(jù)所述直方圖統(tǒng)計出所述眼部圖像中所有像素點的灰度值；S213:確定像素灰度值的基準，將所述眼部圖像的像素點的灰度值依據(jù)所述基準進行光線補償。本發(fā)明通過增加眼部圖像的整體亮度，對于一些模糊像素點或者模糊圖像也能夠快速準確地進行通孔定位，提高了準確性。在本發(fā)明的再一種優(yōu)選實施例中，所述確定像素灰度值的基準的方法為:選擇所有像素點中5%-10%的像素點的灰度值的平均值作為基準。本發(fā)明選擇所有像素點中的部分像素點的灰度值的平均值作為基準，選取的比例可以根據(jù)實際需要調(diào)整，提高了方法的靈活性。在本發(fā)明的一種優(yōu)選實施例中，在對所述眼部圖像進行預(yù)處理的步驟中，采用二維的中值濾波器濾除所述眼部圖像的噪聲。本發(fā)明采用中值濾波和光線補償?shù)念A(yù)處理方法，具有對模糊的、偏暗的、由噪聲的眼部圖像進行提升亮度和濾除噪聲的能力，提高了瞳孔定位的準確性。在本發(fā)明的另一種優(yōu)選實施例中，所述步驟S22中統(tǒng)計所述眼部圖像的所有像素點的最大類間方差的方法為:S221:得到所述眼部圖像的直方圖；S222:在所述直方圖中確定所述眼部圖像中像素數(shù)目為零的像素灰度值；S223:確定所述眼部圖像中像素數(shù)目不為零的像素灰度值，計算所述像素數(shù)目不為零的像素灰度值的最大類間方差。本發(fā)明的最大類間方差計算方法，只需要計算像素數(shù)目不為零的像素灰度值的最大類間方差，提高了計算速度。在本發(fā)明的一種優(yōu)選實施例中，選取所述眼部圖像的前景和背景的分割閾值，當所述最大類間方差最大時，所述分割閾值為分割的最佳閾值。本發(fā)明利用改進型的最大類間方差法實現(xiàn)自適應(yīng)閾值提取，具有閾值合適、自適應(yīng)、速度快的優(yōu)點。在本發(fā)明的一種優(yōu)選實施例中，提取瞳孔邊緣信息的方法為:若中心像素點的像素值為255,則不論其余相鄰的8個像素點的像素值為何值,一律保留中心像素點的像素值為255 ；若中心像素點的像素值為0，且相鄰的8個像素點的像素值均為0，則將中心像素點的像素值改變?yōu)?55 ；其余情況時，全部將中心像素點的像素值改為O。在本發(fā)明的另一種優(yōu)選實施例中，利用最小二乘法確定瞳孔中心及半徑。本發(fā)明瞳孔邊緣信息的提取方法和基于最小二乘法的確定瞳孔中心及半徑的橢圓擬合方法實現(xiàn)瞳孔的精確定位，具有準確快速的特點。
在本發(fā)明的一種優(yōu)選實施例中，建立所述眼部視線方向與屏幕的映射關(guān)系的步驟為:S31:在屏幕上依次顯示M個標定點，所述M為正整數(shù)；S32:當眼睛在注視著每一個標定點時，攝像機檢測紅外光源發(fā)出的光線經(jīng)過瞳孔中心反射后在屏幕上的N個對應(yīng)點，所述N為正整數(shù)；S33:對每一個標定點檢測的N個對應(yīng)點進行分析,得到一個等效對應(yīng)點；S34:建立瞳孔中心與標定點的對應(yīng)關(guān)系。從而通過檢測眼睛視線方向而確定眼睛在屏幕上的注視點，實現(xiàn)眼孔鼠標的功倉泛。為了實現(xiàn)本發(fā)明的上述目的，根據(jù)本發(fā)明的二個方面，本發(fā)明提供了一種眼控鼠標實現(xiàn)系統(tǒng)，包括:紅外光源、攝像機、屏幕和控制單元，所述控制單元包括眼部圖像獲取模塊和核心處理模塊；所述紅外光源和攝像機建立眼部視線方向與屏幕的映射關(guān)系；所述眼部圖像獲取模塊用于采集眼部圖像；所述核心處理模塊與所述眼部圖像獲取模塊相連，用于接收所述眼部圖像并判斷瞳孔的中心，以及實現(xiàn)眼控鼠標的工作并通過屏幕進行顯示。本發(fā)明的眼控鼠標實現(xiàn)系統(tǒng)能夠利用眼睛視線方向準確地控制鼠標的運動，實現(xiàn)眼控鼠標的功能。在本發(fā)明的一種優(yōu)選實施例中，所述核心處理模塊包括瞳孔中心判斷模塊、標定模塊和視線跟蹤模塊，所述瞳孔中心判斷模塊與所述眼部圖像獲取模塊相連，用于接收眼部圖像并判斷瞳孔的中心，所述標定模塊用于建立所述眼部視線方向與屏幕的映射關(guān)系，所述視線跟蹤模塊分別與瞳孔中心判斷模塊和所述標定模塊相連，所述視線跟蹤模塊根據(jù)所述瞳孔中心判斷模塊判斷的瞳孔中心以及所述眼部視線方向與屏幕的映射關(guān)系確定眼睛在屏幕上的注視點并模擬鼠標實現(xiàn)跟蹤操作。從而利用眼睛視線方向準確地控制鼠標的運動，實現(xiàn)眼控鼠標的功能。在本發(fā)明的一種優(yōu)選實施例中，還包括數(shù)據(jù)轉(zhuǎn)換模塊，所述數(shù)據(jù)轉(zhuǎn)換模塊分別與所述眼部圖像獲取模塊和所述核心處理模塊相連，用于實現(xiàn)所述眼部圖像數(shù)據(jù)的格式轉(zhuǎn)換并將轉(zhuǎn)換后的眼部圖像傳輸至所述核心處理模塊。本發(fā)明數(shù)據(jù)轉(zhuǎn)換模塊進行格式轉(zhuǎn)換，當眼部圖像獲取模塊采集的數(shù)據(jù)獲得的眼部圖像數(shù)據(jù)與核心處理模塊能夠處理的數(shù)據(jù)類型不同時，利用該數(shù)據(jù)轉(zhuǎn)換模塊對眼部圖像獲取模塊采集的數(shù)據(jù)格式進行轉(zhuǎn)換，提高了瞳孔定位系統(tǒng)的兼容性。本發(fā)明的附加方面和優(yōu)點將在下面的描述中部分給出，部分將從下面的描述中變得明顯，或通過本發(fā)明的實踐了解到。


本發(fā)明的上述和/或附加的方面和優(yōu)點從結(jié)合下面附圖對實施例的描述中將變得明顯和容易理解，其中:圖1是本發(fā)明眼控鼠標實現(xiàn)方法的流程圖；圖2是本發(fā)明瞳孔定位方法的流程圖；圖3是本發(fā)明一種優(yōu)選實施方式中眼部圖像所對應(yīng)的直方圖；圖4是本發(fā)明一種優(yōu)選實施方式中采集的眼部圖像圖5是對圖4所示眼部圖像的預(yù)處理效果圖；圖6是圖4所示眼部圖像的二值化效果圖；圖7是圖4所示眼部圖像的瞳孔中心定位效果圖。
具體實施例方式下面詳細描述本發(fā)明的實施例，所述實施例的示例在附圖中示出，其中自始至終相同或類似的標號表示相同或類似的元件或具有相同或類似功能的元件。下面通過參考附圖描述的實施例是示例性的，僅用于解釋本發(fā)明，而不能理解為對本發(fā)明的限制。在本發(fā)明的描述中，除非另有規(guī)定和限定，需要說明的是，術(shù)語“安裝”、“相連”、“連接”應(yīng)做廣義理解，例如，可以是機械連接或電連接，也可以是兩個元件內(nèi)部的連通，可以是直接相連，也可以通過中間媒介間接相連，對于本領(lǐng)域的普通技術(shù)人員而言，可以根據(jù)具體情況理解上述術(shù)語的具體含義。本發(fā)明提供了一種眼控鼠標實現(xiàn)方法，如圖1所示，包括如下步驟:S1:獲取眼部圖像；S2:對眼部圖像中的瞳孔位置進行檢測及定位；S3:建立眼部視線方向與屏幕的映射關(guān)系；S4:實時監(jiān)控眼部視線方向，根據(jù)眼部視線方向與屏幕的映射關(guān)系，確定眼部視線在屏幕上的注視點；S5:確定鼠標的工作模式，其中，工作模式包括鼠標移動模式、單擊模式和雙擊模式；S6:在屏幕上眼部視線的注視點處顯示鼠標并按照所述工作模式進行工作。在本實施方式中，對眼部圖像中的瞳孔位置進行檢測及定位的方法，如圖2所示，包括如下步驟:S21:對所述眼部圖像進行預(yù)處理，增加所述眼部圖像的整體亮度，以及濾除所述眼部圖像的噪聲；S22:統(tǒng)計所述眼部圖像的所有像素點的最大類間方差；S23:根據(jù)所述最大類間方差，計算所述眼部圖像二值化的最佳閾值，實現(xiàn)眼部圖
像二值化處理；S24:提取瞳孔邊緣信息；S25:確定瞳孔中心及半徑。在本發(fā)明的一種優(yōu)選實施方式中，獲取眼部圖像，通過眼動儀采集眼睛轉(zhuǎn)動的眼部視頻圖像，并存于計算機內(nèi)；然后利用步驟S21至步驟S23采集每一幀眼部視頻圖像，實現(xiàn)圖像的預(yù)處理和自適應(yīng)二值化處理；最后利用步驟S24至步驟S25對瞳孔進行定位，具體提取瞳孔邊緣信息并確定瞳孔中心及半徑。本發(fā)明的瞳孔定位方法能夠快速準確地對瞳孔進行定位，即使在眼睛圖像模糊的情況下，也能將瞳孔的中心快速定位出來。在本發(fā)明的一種優(yōu)選實施方式中，該瞳孔定位方法的具體步驟為:第一步:獲取眼部圖像，在本實施方式中，利用眼動儀的攝像機獲取眼部圖像視頻并存于計算機的存儲器內(nèi)，圖4示出了由眼動儀采集的三幅不同角度的眼部圖像。對眼部圖像進行預(yù)處理，增加眼部圖像的整體亮度，以及濾除眼部圖像的噪聲，處理后的圖像如圖5所示，在本實施方式中，采集每一幀眼部圖像做圖像預(yù)處理，通過光線補償增加圖像整體亮度及濾除噪聲。在對眼部圖像進行預(yù)處理的步驟中，通過光線補償增加眼部圖像的整體亮度的方法為:S211:將眼部圖像轉(zhuǎn)化為對應(yīng)的直方圖，在本實施方式中，如圖3所示，通過圖像視覺庫結(jié)合軟件Visual studio2010將眼部圖像轉(zhuǎn)化為對應(yīng)的直方圖，其橫坐標為灰度值，其縱坐標為灰度值所對應(yīng)的像素個數(shù)。S212:根據(jù)直方圖統(tǒng)計出眼部圖像中所有像素點的灰度值。S213:確定像素灰度值的基準，將眼部圖像的像素點的灰度值依據(jù)基準進行光線補償。在本實施方式中，確定像素灰度值的基準的方法為:選擇所有像素點中一定數(shù)量的像素點的灰度值的平均值作為基準，在本發(fā)明的一個更加優(yōu)選的實施方式中，選取5%-10%的像素點的灰度值的平均值作為基準。優(yōu)選采用8%的像素點的灰度值的平均值作為基準。本發(fā)明選擇所有像素點中的部分像素點的灰度值的平均值作為基準，選取的比例可以根據(jù)實際需要調(diào)整，提高了方法的靈活性。在確定基準后，將眼部圖像的像素點的灰度值依據(jù)基準進行光線補償。在本實施方式中，可以對所有的像素點的灰度值進行光線補償，也可以對除確定基準所選取的像素點以外的其他所有像素點的灰度值進行光線補償。在本實施方式中，具體光線補償?shù)姆椒梢詾榈幌抻诎幢壤禂?shù)進行補償?shù)姆椒ǎ』鶞驶叶戎档囊欢ū壤禂?shù)加到所有的像素點的灰度值上，例如取基準灰度值的50%加到所有的像素點的灰度值上，從而實現(xiàn)對所有的像素點的灰度值的光線補償，增強了眼部圖像的亮度。 本發(fā)明通過增加眼部圖像的整體亮度，對于一些模糊像素點或者模糊圖像也能夠快速準確地進行通孔定位，提高了準確性。在對眼部圖像進行光線補償后，濾除眼部圖像的噪聲，在本實施方式中，濾波器采用非線性濾波器，可以采用但不限于均值濾波器或和中值濾波器，優(yōu)選采用中值濾波器，在本發(fā)明的一種更加優(yōu)選的實施方式中，采用二維的中值濾波器濾除眼部圖像的噪聲，具體的實現(xiàn)過程如下:用一個含有奇數(shù)點的滑動窗口在圖像上滑動，將窗口中心點對應(yīng)圖像像素點的灰度值用窗口內(nèi)的中間值代替。由于眼部圖像是二維的，采用二維濾波器，該濾波器可由下式表示: =( I )其中，S表示濾波窗口，為圖像像素的序列，yi；J為濾波器的輸出。本發(fā)明采用中值濾波和光線補償?shù)念A(yù)處理方法，具有對模糊的、偏暗的、由噪聲的眼部圖像進行提升亮度和濾除噪聲的能力，提高了瞳孔定位的準確性。第二步:統(tǒng)計眼部圖像的所有像素點的最大類間方差，在本發(fā)明的另一種優(yōu)選實施方式中，也可以采用改進的最大類間方差計算方法，即并不是計算所有像素點的最大類間方差，而是計算某一部分像素點的最大類間方差，具體的方法可以為但不限于根據(jù)眼部圖像直方圖，統(tǒng)計出眼部圖像中未出現(xiàn)的像素灰度值，計算余下像素的最大類間方差，在本實施方式中，計算最大類間方差的方法為:S231:得到眼部圖像的直方S232:在直方圖中確定眼部圖像中像素數(shù)目為零的像素灰度值；S233:確定眼部圖像中像素數(shù)目不為零的像素灰度值，計算像素數(shù)目不為零的像素灰度值的最大類間方差。本發(fā)明的最大類間方差計算方法，只需要計算像素數(shù)目不為零的像素灰度值的最大類間方差，提高了計算速度。在本發(fā)明的一種優(yōu)選實施例中，選取眼部圖像的前景和背景的分割閾值，當最大類間方差最大時，分割閾值為分割的最佳閾值。本發(fā)明利用改進型的最大類間方差法實現(xiàn)自適應(yīng)閾值提取，具有閾值合適、自適應(yīng)、速度快的優(yōu)點。在本實施方式中，在第一步中對預(yù)處理的眼部圖像做直方圖處理后，然后采用改進的最大類間方差法求取統(tǒng)計出圖像中未出現(xiàn)的像素灰度值，僅計算余下像素的最大類間方差。如圖3所示，該直方圖在圖像灰度值為0-35之間及210-255之間的這兩部份灰度值所對應(yīng)的像素數(shù)目都為零，因此在求取最大類間方差時，先將圖像中這兩部分像素灰度值統(tǒng)計出來，不計算其所對應(yīng)的類間方差值，只對余下的像素進行計算。計算最大類間方差的原理如下:計t為圖片前景和背景的分割閾值，其中前景點數(shù)占整個圖像比例為w0，其圖像平均灰度值為u0，背景點數(shù)占圖像比例為wl，其圖像平均灰度值為ul，于是可計算得圖像總平均灰度為U。從最小灰度值到最大灰度值遍歷為t，當t使得類間方差值g最大時，此時t即為分割的最佳閾值。設(shè)圖像大小為M*N像素，L為圖像灰度值的級別，在本實施方式中，L的取值為1-255，設(shè)圖像中像素的灰度值小于t的像素個數(shù)記作NO，像素灰度大于t的像素個數(shù)記作NI，可計算得:
權(quán)利要求
1.一種眼控鼠標實現(xiàn)方法，其特征在于，包括如下步驟: S1:獲取眼部圖像； 52:對所述眼部圖像中的瞳孔位置進行檢測及定位； 53:建立所述眼部視線方向與屏幕的映射關(guān)系； 54:實時監(jiān)控眼部視線方向，根據(jù)所述眼部視線方向與屏幕的映射關(guān)系，確定所述眼部視線在所述屏幕上的注視點； 55:確定鼠標的工作模式，所述工作模式包括鼠標移動模式、單擊模式和雙擊模式； S6:在所述屏幕上眼部視線的注視點處顯示鼠標并按照所述工作模式進行工作。
2.如權(quán)利要求1所述的眼控鼠標實現(xiàn)方法，其特征在于，所述步驟S2中瞳孔的定位方法為: 521:對所述眼部圖像進行預(yù)處理，增加所述眼部圖像的整體亮度，以及濾除所述眼部圖像的噪聲； 522:統(tǒng)計所述眼部圖像的所有像素點的最大類間方差； 523:根據(jù)所述最大類間方差，計算所述眼部圖像二值化的最佳閾值，實現(xiàn)眼部圖像二值化處理； 524:提取瞳孔邊緣信息； 525:確定瞳孔中心及半徑。
3.如權(quán)利要求2所述的眼控鼠標實現(xiàn)方法，其特征在于，在對所述眼部圖像進行預(yù)處理的步驟中，增加所述眼部圖像的整體亮度的方法為: 5211:將所述眼部圖像轉(zhuǎn)化為對應(yīng)的直方圖； 5212:根據(jù)所述直方圖統(tǒng)計出所述眼部圖像中所有像素點的灰度值； S213:確定像素灰度值的基準，將所述眼部圖像的像素點的灰度值依據(jù)所述基準進行光線補償。
4.如權(quán)利要求2所述的眼控鼠標實現(xiàn)方法，其特征在于，所述確定像素灰度值的基準的方法為:選擇所有像素點中5%-10%的像素點的灰度值的平均值作為基準。
5.如權(quán)利要求2所述的眼控鼠標實現(xiàn)方法，其特征在于，所述步驟S22中統(tǒng)計所述眼部圖像的所有像素點的最大類間方差的方法為: 5221:得到所述眼部圖像的直方圖； 5222:在所述直方圖中確定所述眼部圖像中像素數(shù)目為零的像素灰度值； 5223:確定所述眼部圖像中像素數(shù)目不為零的像素灰度值，計算所述像素數(shù)目不為零的像素灰度值的最大類間方差。
6.如權(quán)利要求2或5所述的眼控鼠標實現(xiàn)方法，其特征在于，選取所述眼部圖像的前景和背景的分割閾值，當所述最大類間方差最大時，所述分割閾值為分割的最佳閾值。
7.如權(quán)利要求2所述的眼控鼠標實現(xiàn)方法，其特征在于，提取瞳孔邊緣信息的方法為: 若中心像素點的像素值為255，則不論其余相鄰的8個像素點的像素值為何值，一律保留中心像素點的像素值為255 ； 若中心像素點的像 素值為O，且相鄰的8個像素點的像素值均為O，則將中心像素點的像素值改變?yōu)?55 ； 其余情況時，全部將中心像素點的像素值改為O。
8.如權(quán)利要求1所述的眼控鼠標實現(xiàn)方法，其特征在于，建立所述眼部視線方向與屏幕的映射關(guān)系的步驟為: 531:在屏幕上依次顯示M個標定點，所述M為正整數(shù)； 532:當眼睛在注視著每一個標定點時，攝像機檢測紅外光源發(fā)出的光線經(jīng)過瞳孔中心反射后在屏幕上的N個對應(yīng)點，所述N為正整數(shù)； 533:對每一個標定點檢測的N個對應(yīng)點進行分析，得到一個等效對應(yīng)點； 534:建立瞳孔中心與標定點的對應(yīng)關(guān)系。
9.一種眼控鼠標實現(xiàn)系統(tǒng)，其特征在于，包括:紅外光源、攝像機、屏幕和控制單元，所述控制單元包括眼部圖像獲取模塊和核心處理模塊； 所述紅外光源和攝像機按照權(quán)利要求8所示的方法建立眼部視線方向與屏幕的映射關(guān)系; 所述眼部圖像獲取模塊用于采集眼部圖像； 所述核心處理模塊與所述眼部圖像獲取模塊相連，用于接收所述眼部圖像并判斷瞳孔的中心，以及按照權(quán)利要求1-7之一所述的方法實現(xiàn)眼控鼠標的工作并通過屏幕進行顯/Jn ο
10.如權(quán)利要求9所述的眼控鼠標實現(xiàn)系統(tǒng)，其特征在于:所述核心處理模塊包括瞳孔中心判斷模塊、標定模塊和視 線跟蹤模塊，所述瞳孔中心判斷模塊與所述眼部圖像獲取模塊相連，用于接收眼部圖像并判斷瞳孔的中心，所述標定模塊用于建立所述眼部視線方向與屏幕的映射關(guān)系，所述視線跟蹤模塊分別與瞳孔中心判斷模塊和所述標定模塊相連，所述視線跟蹤模塊根據(jù)所述瞳孔中心判斷模塊判斷的瞳孔中心以及所述眼部視線方向與屏幕的映射關(guān)系確定眼睛在屏幕上的注視點并模擬鼠標實現(xiàn)跟蹤操作。
全文摘要
本發(fā)明提出了一種眼控鼠標實現(xiàn)方法及系統(tǒng)，該方法包括如下步驟獲取眼部圖像；對眼部圖像中的瞳孔位置進行檢測及定位；建立眼部視線方向與屏幕的映射關(guān)系；實時監(jiān)控眼部視線方向，根據(jù)眼部視線方向與屏幕的映射關(guān)系，確定眼部視線在屏幕上的注視點；確定鼠標的工作模式；在屏幕上眼部視線的注視點處顯示鼠標并按照所述工作模式進行工作。本發(fā)明能夠利用眼睛視線方向準確地控制鼠標的運動，實現(xiàn)眼控鼠標的功能。
文檔編號G06K9/00GK103176607SQ20131013039
公開日2013年6月26日 申請日期2013年4月16日 優(yōu)先權(quán)日2013年4月16日
發(fā)明者王東強, 唐云建, 黃麗麗, 韓鵬, 孫懷義, 莫斌 申請人:重慶市科學(xué)技術(shù)研究院