移動(dòng)體用手勢(shì)引導(dǎo)裝置、移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)及移動(dòng)體用手勢(shì)引導(dǎo)方法
【專利摘要】本發(fā)明的移動(dòng)體用手勢(shì)引導(dǎo)裝置、移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)及移動(dòng)體用手勢(shì)引導(dǎo)方法算出根據(jù)3D攝像頭(6)的檢測(cè)信號(hào)確定的操作者A的手部位置與用于進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置的差所對(duì)應(yīng)的強(qiáng)調(diào)度R，在每次根據(jù)3D攝像頭(6)對(duì)操作者(A)的手部的檢測(cè)，算出強(qiáng)調(diào)度(R)時(shí)，以所算出的強(qiáng)調(diào)度(R)通知手勢(shì)操作的操作對(duì)象物，從而將操作者(A)的手部向預(yù)先規(guī)定的手部位置引導(dǎo)。
【專利說明】移動(dòng)體用手勢(shì)引導(dǎo)裝置、移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)及移動(dòng)體用手勢(shì)引導(dǎo)方法
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及一種識(shí)別移動(dòng)體內(nèi)操作者手勢(shì)的移動(dòng)體用手勢(shì)引導(dǎo)裝置、移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)及移動(dòng)體用手勢(shì)引導(dǎo)方法。
【背景技術(shù)】
[0002]已提出一種系統(tǒng)，其識(shí)別操作者所做的手勢(shì)后，對(duì)移動(dòng)體內(nèi)存在于離開操作者的位置的設(shè)備進(jìn)行操作。這種系統(tǒng)需要正確識(shí)別手勢(shì)后進(jìn)行操作，因此將用于做手勢(shì)的空間位置告知操作者很重要。
[0003]例如，專利文獻(xiàn)I已公開一種系統(tǒng)，其使用全息圖等技術(shù)將操作開關(guān)和按鈕等操作系統(tǒng)的虛像顯示在空間，識(shí)別對(duì)該虛像做出的手勢(shì)后對(duì)設(shè)備進(jìn)行操作。該系統(tǒng)中，顯示在空間內(nèi)的虛像如同實(shí)際的操作對(duì)象設(shè)備的操作系統(tǒng)一般，能夠?qū)ζ渥鍪謩?shì)。因此，操作者能夠輕易得知顯示虛像的位置是用于做手勢(shì)的空間位置。
[0004]此外，專利文獻(xiàn)2所記載的發(fā)明中，將操作者的視點(diǎn)位置與操作對(duì)象物的位置用直線連接，在該直線上的空間內(nèi)檢測(cè)到操作者的手指時(shí)，判斷正在對(duì)該操作對(duì)象物進(jìn)行操作。通過如上方式，操作者能夠根據(jù)自己的視點(diǎn)與操作對(duì)象物的三維位置關(guān)系得知用于做手勢(shì)的空間位置。
現(xiàn)有技術(shù)文獻(xiàn) [專利文獻(xiàn)]
[0005][專利文獻(xiàn)I]日本專利特開2005-234676號(hào)公報(bào)[專利文獻(xiàn)2]日本專利特開2005-280396號(hào)公報(bào)

【發(fā)明內(nèi)容】

發(fā)明所要解決的技術(shù)問題
[0006]專利文獻(xiàn)I需要一種特殊裝置，其使用全息圖等技術(shù)將操作開關(guān)和按鈕等操作系統(tǒng)的虛像顯示在空間，因此存在系統(tǒng)結(jié)構(gòu)復(fù)雜而導(dǎo)致成本增加的課題。
[0007]此外，專利文獻(xiàn)2以操作者的視點(diǎn)作為基準(zhǔn)判斷用于做手勢(shì)的空間位置，因此根據(jù)操作者的頭部動(dòng)作，用于做手勢(shì)的空間位置也會(huì)發(fā)生偏移。因此，由于頭部動(dòng)作導(dǎo)致錯(cuò)誤檢測(cè)操作者的視點(diǎn)時(shí)，操作者無法得知用于做手勢(shì)的位置，可能無法正確進(jìn)行操作。
[0008]本發(fā)明為解決上述課題開發(fā)而成，其目的在于得到一種移動(dòng)體用手勢(shì)引導(dǎo)裝置、移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)及移動(dòng)體用手勢(shì)引導(dǎo)方法，其能夠以簡單結(jié)構(gòu)實(shí)現(xiàn)，且能夠引導(dǎo)成用于進(jìn)行手勢(shì)操作的合適狀態(tài)。
解決技術(shù)問題所采用的技術(shù)方案
[0009]本發(fā)明所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置具備:強(qiáng)調(diào)度算出部，所述強(qiáng)調(diào)度算出部根據(jù)檢測(cè)操作者的手部的傳感器的檢測(cè)信息，確定操作者的手部位置，算出操作者的手部位置與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的位置的差所對(duì)應(yīng)的強(qiáng)調(diào)度；以及通知控制部，所述通知控制部在每次根據(jù)傳感器對(duì)操作者的手部的檢測(cè)，由強(qiáng)調(diào)度算出部算出強(qiáng)調(diào)度時(shí)，以所算出的強(qiáng)調(diào)度將手勢(shì)操作的操作對(duì)象物通知給通知裝置后，將操作者的手部向預(yù)先規(guī)定的位置引導(dǎo)。
發(fā)明效果
[0010]根據(jù)本發(fā)明，具有能夠以簡單結(jié)構(gòu)實(shí)現(xiàn)，且能夠引導(dǎo)成用于進(jìn)行手勢(shì)操作的合適狀態(tài)的效果。
【附圖說明】
[0011]圖1是表示本實(shí)施方式I所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置的結(jié)構(gòu)的方塊圖。
圖2是表示實(shí)施方式I所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置的動(dòng)作的流程圖。
圖3是表示操作者的手部、操作對(duì)象物及做手勢(shì)區(qū)域的位置關(guān)系的圖。
圖4是表示操作者的手部形狀的圖。
圖5是表示實(shí)施方式I的操作對(duì)象物的通知方式的圖。
圖6是表示實(shí)施方式2的操作對(duì)象物與做手勢(shì)區(qū)域的關(guān)系的圖。
圖7是表示操作者的手部距做手勢(shì)區(qū)域的中心位置的偏離方向所對(duì)應(yīng)的通知方式的一例的圖。
圖8是表示實(shí)施方式3的操作對(duì)象物與所對(duì)應(yīng)的多個(gè)做手勢(shì)區(qū)域的關(guān)系的圖。
圖9是表示實(shí)施方式3的各做手勢(shì)區(qū)域與操作對(duì)象物的關(guān)系的圖。
圖10是表示實(shí)施方式3的各通知裝置的操作對(duì)象物與做手勢(shì)區(qū)域的關(guān)系的圖。
圖11是表示本發(fā)明實(shí)施方式4所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置的結(jié)構(gòu)的方塊圖。
圖12是表示做手勢(shì)區(qū)域的設(shè)定畫面的一例的圖。
【具體實(shí)施方式】
[0012]以下根據(jù)附圖對(duì)更詳細(xì)說明本發(fā)明和實(shí)施本發(fā)明的方式進(jìn)行說明。
實(shí)施方式1.圖1是表示本實(shí)施方式I所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置的結(jié)構(gòu)的方塊圖。移動(dòng)體用手勢(shì)引導(dǎo)裝置I在乘坐在車輛等移動(dòng)體上的操作者對(duì)操作對(duì)象物進(jìn)行手勢(shì)操作時(shí)，將操作者的手部向預(yù)先規(guī)定的做手勢(shì)區(qū)域引導(dǎo)，并向?qū)υ撌謩?shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)。
圖1中，移動(dòng)體用手勢(shì)引導(dǎo)裝置I具備運(yùn)算部2、I/F(接口)部3、以及事件檢測(cè)部4，上述各部通過總線5分別連接。
此外，移動(dòng)體用手勢(shì)引導(dǎo)裝置I經(jīng)由I/F部3與3D攝像頭6、揚(yáng)聲器7、HUD(平視顯示器)8、以及中心顯示器9連接。
[0013]運(yùn)算部2相當(dāng)于安裝在移動(dòng)體用手勢(shì)引導(dǎo)裝置I上的CPU，進(jìn)行各種控制的運(yùn)算處理。此外，運(yùn)算部2如圖1所示，具備通知控制部20、強(qiáng)調(diào)度算出部21、以及手勢(shì)識(shí)別部22。例如，通知控制部20、強(qiáng)調(diào)度算出部21、以及手勢(shì)識(shí)別部22通過由軟件編程的CPU實(shí)現(xiàn)。
[0014]通知控制部20在每次根據(jù)3D攝像頭6對(duì)操作者的手部的檢測(cè)，由強(qiáng)調(diào)度算出部21算出強(qiáng)調(diào)度時(shí)，以所算出的強(qiáng)調(diào)度將手勢(shì)操作的操作對(duì)象物通知給通知裝置，來將操作者的手部向預(yù)先規(guī)定的位置和對(duì)手勢(shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)。此處，操作對(duì)象物例如是作為手勢(shì)操作對(duì)象的元件或應(yīng)用。 此外，通知裝置是將操作對(duì)象物通知給操作者的裝置，圖1中相當(dāng)于揚(yáng)聲器7、HUD8、中心顯示器9。即，操作對(duì)象物的通知方式包括:通過由揚(yáng)聲器7輸出的聲音進(jìn)行通知的方式；以及通過HUD8或中心顯示器9顯示的顯示物進(jìn)行通知的方式。
此時(shí)，通過聲音進(jìn)行通知的方式中，根據(jù)強(qiáng)調(diào)度改變通知聲音的音量、聲音的種類等。通過顯示物進(jìn)行通知的方式中，根據(jù)強(qiáng)調(diào)度改變顯示物的透明度、顏色、大小、形狀等。
[0015]強(qiáng)調(diào)度算出部21根據(jù)操作者的手部的檢測(cè)信息，確定操作者的手部位置及形狀，算出操作者的手部位置及形狀與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置及形狀的差所對(duì)應(yīng)的強(qiáng)調(diào)度。
例如，將操作者的手部位置與做手勢(shì)區(qū)域的位置的差定量化，并將操作者的手部形狀與對(duì)操作對(duì)象物的手勢(shì)操作預(yù)先規(guī)定的手部形狀的差定量化后，分別得出差異度，然后分別使用該差異度算出強(qiáng)調(diào)度。此時(shí)，強(qiáng)調(diào)度算出部21算出強(qiáng)調(diào)度，使得操作者的手部越靠近做手勢(shì)區(qū)域且操作者的手部形狀越接近預(yù)先規(guī)定的形狀，強(qiáng)調(diào)度的值越大。
通過如上方式，操作者的手部越靠近對(duì)操作對(duì)象物預(yù)先規(guī)定的做手勢(shì)區(qū)域，越強(qiáng)調(diào)通知操作對(duì)象物。如此，操作者通過將手部向強(qiáng)調(diào)操作對(duì)象物的方向移動(dòng)，從而操作者的手部被引導(dǎo)至進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置(做手勢(shì)區(qū)域)，并被引導(dǎo)成對(duì)該手勢(shì)操作預(yù)先規(guī)定的手部形狀。
[0016]I/F部3是在移動(dòng)體用手勢(shì)引導(dǎo)裝置1、3D攝像頭6、揚(yáng)聲器7、HUD8、以及中心顯示器9之間進(jìn)行信息交換的接口。另外，由移動(dòng)體用手勢(shì)引導(dǎo)裝置1、3D攝像頭6、揚(yáng)聲器7、HUD8、以及中心顯示器9構(gòu)成將操作者的手部向做手勢(shì)區(qū)域和預(yù)先規(guī)定的手部形狀引導(dǎo)的移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)。
[0017]事件檢測(cè)部4經(jīng)由天線4a及總線5檢測(cè)來自外部的事件。此處，事件的含義是指產(chǎn)生了應(yīng)該通知用戶的信息，所述信息包括:經(jīng)由天線4a檢測(cè)到的來自車輛外部的郵件來信、或者經(jīng)由總線5從車載傳感器(圖中未顯示)獲得的缺少汽油等信息。
[0018]3D(三維)攝像頭6是檢測(cè)操作者的手部的傳感器。例如，根據(jù)3D攝像頭6的檢測(cè)信息(拍攝信息)，獲得用于確定拍攝視野內(nèi)的操作者的手部的空間位置(深度信息)及手部形狀的圖像信息。強(qiáng)調(diào)度算出部21輸入這些信息作為3D攝像頭6的檢測(cè)信息，從而確定操作者的手部位置及形狀。
3D攝像頭6例如能夠使用立體攝像頭或T0F(Time Of Flight:飛行時(shí)間)攝像頭實(shí)現(xiàn)。
[0019]揚(yáng)聲器7是通過聲音輸出以聽覺方式通知操作對(duì)象物的通知裝置。此外，HUD8及中心顯示器9是顯示操作對(duì)象物所對(duì)應(yīng)的顯示物來以視覺方式通知的通知裝置。另外，HUD8是設(shè)置在駕駛座前方的擋風(fēng)玻璃或方向盤與擋風(fēng)玻璃之間的投影板等上投影顯示信息的顯示器。中心顯示器9是配置在車室內(nèi)前方的儀表板的中央部附近的顯示器。
[0020]另外，如圖1所示的示例中，移動(dòng)體用手勢(shì)引導(dǎo)裝置I具備手勢(shì)識(shí)別部22，表示出手勢(shì)識(shí)別部22識(shí)別做手勢(shì)區(qū)域中操作者的手勢(shì)操作的結(jié)構(gòu)，但是并不限定于此。
即，也可以通過如下方式構(gòu)成:將識(shí)別手勢(shì)操作的構(gòu)成要素設(shè)置在與移動(dòng)體用手勢(shì)引導(dǎo)裝置I不同的裝置上，與通知控制部20及強(qiáng)調(diào)度算出部21協(xié)同來識(shí)別手勢(shì)操作。
此外，表示出移動(dòng)體用手勢(shì)引導(dǎo)裝置I將操作者的手部向進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置(做手勢(shì)區(qū)域)引導(dǎo)，并向?qū)υ撌謩?shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)的示例，但是并不限定于此。 例如，強(qiáng)調(diào)度算出部21根據(jù)傳感器的檢測(cè)信息，僅確定操作者的手部位置，算出該操作者的手部位置與做手勢(shì)區(qū)域的差所對(duì)應(yīng)的強(qiáng)調(diào)度。
而且，通知控制部20在每次根據(jù)傳感器對(duì)操作者的手部的檢測(cè)，由強(qiáng)調(diào)度算出部21算出強(qiáng)調(diào)度時(shí)，以所算出的強(qiáng)調(diào)度將手勢(shì)操作的操作對(duì)象物通知給通知裝置，從而將操作者的手部向預(yù)先規(guī)定的位置引導(dǎo)。
[0021]接著對(duì)動(dòng)作進(jìn)行說明。
圖2是表示實(shí)施方式I所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置的動(dòng)作的流程圖，并根據(jù)該圖2所示流程圖的流程進(jìn)行說明。
首先，事件檢測(cè)部4檢測(cè)事件(步驟ST1)。事件檢測(cè)部4通知檢測(cè)到事件后，強(qiáng)調(diào)度算出部21將預(yù)先規(guī)定的強(qiáng)調(diào)度R的初始值輸出到通知控制部20。此處，為了在事件發(fā)生時(shí)便于用戶識(shí)別該事件所對(duì)應(yīng)的操作對(duì)象物，將強(qiáng)調(diào)度R的初始值設(shè)為最高的強(qiáng)調(diào)度或者與其相應(yīng)的值。
[0022]通知控制部20對(duì)通知裝置進(jìn)行控制，使其以強(qiáng)調(diào)度R的初始值通知事件所對(duì)應(yīng)的操作對(duì)象物。具體地進(jìn)行說明，即通知控制部20根據(jù)事件檢測(cè)部4檢測(cè)到的事件的相關(guān)信息與從強(qiáng)調(diào)度算出部21輸入的強(qiáng)調(diào)度R的初始值，確定事件所對(duì)應(yīng)的操作對(duì)象物，并輸出以強(qiáng)調(diào)度R的初始值通知所確定的操作對(duì)象物的通知命令。通知命令經(jīng)由I/F部3被輸出給通知裝置(揚(yáng)聲器7、HUD8、中心顯示器9)。揚(yáng)聲器7、HUD8、中心顯示器9根據(jù)通知命令以強(qiáng)調(diào)度R的初始值通知事件所對(duì)應(yīng)的操作對(duì)象物(步驟ST2)。
[0023]圖3是表示操作者的手部、操作對(duì)象物及做手勢(shì)區(qū)域的位置關(guān)系的圖。圖3中，操作者A是用方向盤12進(jìn)行駕駛的駕駛員。例如，事件是郵件來信時(shí)，郵件來信所對(duì)應(yīng)的圖標(biāo)10顯示在HUD8的投影構(gòu)件(擋風(fēng)玻璃或投影板)8a上。此處，圖標(biāo)10是作為手勢(shì)操作對(duì)象的操作對(duì)象物。一旦出現(xiàn)郵件來信，由于已設(shè)定強(qiáng)調(diào)度R的初始值，因此圖標(biāo)10被立即明確顯示，便于操作者A確認(rèn)。例如，圖標(biāo)10以最低的透明度顯示。
[0024]如上述所示，操作對(duì)象物的相關(guān)事件發(fā)生，從而通知裝置以強(qiáng)調(diào)度R的初始值通知操作對(duì)象物時(shí)，如果該事件發(fā)生后已經(jīng)過設(shè)定時(shí)間，則強(qiáng)調(diào)度算出部21依次算出從強(qiáng)調(diào)度R的初始值逐漸降低的強(qiáng)調(diào)度R。通知控制部20對(duì)通知裝置進(jìn)行控制，使其以強(qiáng)調(diào)度算出部21依次算出的強(qiáng)調(diào)度R通知操作對(duì)象物。如此，通知裝置以逐漸降低的強(qiáng)調(diào)度R通知操作對(duì)象物(步驟ST3)。
[0025]如此，事件發(fā)生且通知操作對(duì)象物后經(jīng)過設(shè)定時(shí)間仍未檢測(cè)到對(duì)該操作對(duì)象物進(jìn)行手勢(shì)操作的操作者A的手部時(shí)，將強(qiáng)調(diào)度R逐漸降低來通知操作對(duì)象物。如此，能夠防止以較高的強(qiáng)調(diào)度R不必要地持續(xù)通知操作對(duì)象物。
例如，在HUD8的投影構(gòu)件8a上顯示有圖標(biāo)10時(shí)，圖標(biāo)10被重疊顯示在駕駛員的前方視野中，從而阻礙駕駛員的視野。
因此，如果經(jīng)過設(shè)定時(shí)間仍未檢測(cè)到操作者A的手部，則將強(qiáng)調(diào)度R逐漸降低，顯示圖標(biāo)10使其透明度相應(yīng)地變高。如此，圖標(biāo)10逐漸變得不明顯，能夠抑制駕駛員的視野受到阻礙。
另外，經(jīng)過上述設(shè)定時(shí)間后又經(jīng)過預(yù)先規(guī)定的時(shí)間仍未檢測(cè)到操作者A的手部時(shí)，判斷操作者A沒有操作意愿，可以停止通知操作對(duì)象物。
[0026]事件發(fā)生后經(jīng)過上述設(shè)定時(shí)間前或者經(jīng)過上述設(shè)定時(shí)間后通知裝置以逐漸降低的強(qiáng)調(diào)度R通知操作對(duì)象物的期間，強(qiáng)調(diào)度算出部21處于3D攝像頭6檢測(cè)操作者A的手部的檢測(cè)等待狀態(tài)。此處，如果未檢測(cè)到操作者A的手部(步驟ST4:否)，則該檢測(cè)等待狀態(tài)持續(xù)。
3D攝像頭6檢測(cè)到操作者A的手部后(步驟ST4:是)，強(qiáng)調(diào)度算出部21根據(jù)3D攝像頭6的檢測(cè)信息，確定操作者A的手部位置及形狀。3D攝像頭6的檢測(cè)信息是3D攝像頭6拍攝到的3D影像，能夠從該3D影像中得到操作者A的手部的二維影像及該影像的各像素所具有的縱深坐標(biāo)。根據(jù)這些信息，確定操作者A的手部位置(空間位置)及手部形狀。
[0027]接著，強(qiáng)調(diào)度算出部21算出所確定的操作者A的手部位置與預(yù)先規(guī)定的做手勢(shì)區(qū)域11的位置差及所確定的操作者A的手部形狀與對(duì)操作對(duì)象物的手勢(shì)操作預(yù)先規(guī)定的手部形狀的差異度所對(duì)應(yīng)的強(qiáng)調(diào)度R(步驟ST5)。此處，做手勢(shì)區(qū)域11如圖3所示，被配置在操作者A與操作對(duì)象物即圖標(biāo)10之間。通過如上方式，操作者A能夠一邊視覺確認(rèn)操作對(duì)象物一邊直觀地進(jìn)行手勢(shì)操作。
[0028]此外，強(qiáng)調(diào)度R例如根據(jù)下述式(I)算出。其中，下述式(I)中，如圖3所示，d是從做手勢(shì)區(qū)域11的中心O的位置坐標(biāo)到操作者A的手部位置坐標(biāo)的距離。另外，距離d是O以上的值，在操作者A的手部位于中心O時(shí)其值為O。此外，s是操作者A的手部形狀與對(duì)操作對(duì)象物的手勢(shì)操作預(yù)先規(guī)定的手部形狀的差異度。相互的形狀差異越大，差異度s取越大的正值。另外，α和β是正系數(shù)，用α和β設(shè)定強(qiáng)調(diào)度R中距離d和差異度s的影響程度。
另外，將操作者A的手部向做手勢(shì)區(qū)域11引導(dǎo)，但不將操作者A的手部形狀向?qū)κ謩?shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)時(shí)，即在算出強(qiáng)調(diào)度R的過程中不考慮差異度s時(shí)，例如將系數(shù)β設(shè)為O即可。
R= I/(α.d+β.s)......(I)
[0029]圖4是表示操作者的手部形狀的圖。例如，對(duì)操作對(duì)象物的手勢(shì)操作預(yù)先規(guī)定的手部形狀是如圖4(a)所示的形狀a時(shí)，如果操作者A的手部是類似形狀a的形狀，則差異度s為較小值。另一方面，操作者A將手部形狀變?yōu)閳D4(b)所示的形狀b或圖4(c)所示的形狀c時(shí)，差異度s的值變大。如此，操作者A的手部偏離做手勢(shì)區(qū)域11或者與預(yù)先規(guī)定的手部形狀不同時(shí)，根據(jù)上述式(I)算出的強(qiáng)調(diào)度R為較低值。即，上述式(I)中，操作者A的手部越靠近做手勢(shì)區(qū)域11內(nèi)且操作者A的手部形狀越接近預(yù)先規(guī)定的手部形狀，強(qiáng)調(diào)度R的值越大。
[0030]通知控制部20對(duì)通知裝置進(jìn)行控制，使其按照步驟ST5以強(qiáng)調(diào)度算出部21算出的強(qiáng)調(diào)度R通知操作對(duì)象物。如此，通知裝置以強(qiáng)調(diào)度R通知操作對(duì)象物(步驟ST6)。重復(fù)執(zhí)行從步驟ST4到步驟ST6的處理，直至操作者A的手部進(jìn)入做手勢(shì)區(qū)域11內(nèi)(直至距離d為O)。即，通知控制部20對(duì)通知裝置進(jìn)行控制，使其在上述重復(fù)期間，在每次由3D攝像頭6依次檢測(cè)到操作者A的手部，相應(yīng)地由強(qiáng)調(diào)度算出部21算出強(qiáng)調(diào)度R時(shí)，以所算出的強(qiáng)調(diào)度R通知操作對(duì)象物。通知裝置根據(jù)通知控制部20的控制，以強(qiáng)調(diào)度算出部21依次算出的強(qiáng)調(diào)度R通知操作對(duì)象物。
[0031]圖5是表示實(shí)施方式I的操作對(duì)象物的通知方式的圖，示出了通知郵件來信所對(duì)應(yīng)的操作對(duì)象物的情況。如圖5所示，強(qiáng)調(diào)度R為最大時(shí)，將郵件來信所對(duì)應(yīng)的圖標(biāo)的透明度設(shè)為最小后顯不。此外，通知郵件來?目的通知聲首的首量也設(shè)為最大。相反地強(qiáng)調(diào)度R為最小時(shí)，將郵件來信所對(duì)應(yīng)的圖標(biāo)的透明度設(shè)為最大來顯示，通知郵件來信的通知聲音的音量也設(shè)為最小。通知裝置根據(jù)操作者A的手部位置及形狀，以強(qiáng)調(diào)度算出部21依次算出的強(qiáng)調(diào)度R顯示圖標(biāo)并輸出通知聲音。操作者A將手部向圖標(biāo)明確顯示且通知聲音變大的方向移動(dòng)，從而操作者A的手部被引導(dǎo)至做手勢(shì)區(qū)域11。
[0032]強(qiáng)調(diào)度算出部21根據(jù)3D攝像頭6的檢測(cè)信息算出強(qiáng)調(diào)度R后，根據(jù)距離d判定操作者A的手部是否存在于做手勢(shì)區(qū)域11內(nèi)(步驟ST7)。此處，如果操作者A的手部未進(jìn)入做手勢(shì)區(qū)域11內(nèi)(步驟ST7:否)，則返回步驟ST4的處理。
另外，事件發(fā)生后經(jīng)過設(shè)定時(shí)間仍未檢測(cè)到操作者A的手部進(jìn)入做手勢(shì)區(qū)域11內(nèi)時(shí)，強(qiáng)調(diào)度算出部21依次算出強(qiáng)調(diào)度R使其逐漸降低，通知控制部20可以對(duì)通知裝置進(jìn)行控制，以由強(qiáng)調(diào)度算出部21依次算出的強(qiáng)調(diào)度R通知操作對(duì)象物。通過如上方式，也能夠防止持續(xù)通知不必要的操作對(duì)象物。
[0033]另一方面，操作者A的手部位于做手勢(shì)區(qū)域11內(nèi)時(shí)(步驟ST7:是)，強(qiáng)調(diào)度算出部21將此情況通知給通知控制部20。
通知控制部20從強(qiáng)調(diào)度算出部21接到上述通知后，對(duì)通知裝置進(jìn)行控制，通知操作者A的手部存在于做手勢(shì)區(qū)域11內(nèi)(步驟ST8)。例如，從揚(yáng)聲器7輸出特殊聲音，或者對(duì)操作對(duì)象物進(jìn)行特殊顯示。如此，操作者A能夠識(shí)別出在移動(dòng)體用手勢(shì)引導(dǎo)裝置I中能夠識(shí)別手勢(shì)操作。
[0034]此后，手勢(shì)識(shí)別部22對(duì)做手勢(shì)區(qū)域11內(nèi)的操作者A的手部的指尖轉(zhuǎn)動(dòng)、搖手、特殊手部形狀等手勢(shì)操作進(jìn)行識(shí)別(步驟ST9)。如此執(zhí)行手勢(shì)操作的識(shí)別結(jié)果的相應(yīng)處理。
例如，事件為郵件來信時(shí)，執(zhí)行指示閱讀郵件的“選擇”或者結(jié)束通知而不拆封郵件的“取消”等處理。
[0035]另外，由手勢(shì)識(shí)別部22識(shí)別出“用手向右滑動(dòng)”等表示不需要操作對(duì)象物的手勢(shì)操作時(shí)，通知控制部20對(duì)通知裝置進(jìn)行控制，結(jié)束該操作對(duì)象物的通知。即，消除操作對(duì)象物的顯示或停止通知聲音的輸出。如此，能夠防止持續(xù)通知不必要的操作對(duì)象物。例如，能夠消除HUD8上阻礙駕駛員的視野的不必要的操作對(duì)象物。
[0036]手勢(shì)識(shí)別部22無法識(shí)別手勢(shì)操作且操作者A的手部遠(yuǎn)離做手勢(shì)區(qū)域11時(shí)，通知控制部20對(duì)通知裝置進(jìn)行控制，輸出特殊聲音或進(jìn)行特殊顯示，從而將處于手勢(shì)操作無法識(shí)別狀態(tài)的情況通知給操作者A。如此，操作者A能夠直觀地得知已遠(yuǎn)離做手勢(shì)區(qū)域11，能夠立即轉(zhuǎn)到從步驟ST4開始的處理。
[0037]此外，實(shí)施方式I所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置I中，如圖3所示，手勢(shì)識(shí)別部22使操作對(duì)象物與做手勢(shì)區(qū)域11 一對(duì)一對(duì)應(yīng)，來對(duì)做手勢(shì)區(qū)域11中進(jìn)行的手勢(shì)操作進(jìn)行識(shí)別。例如，使多個(gè)不同的操作對(duì)象物與公共的做手勢(shì)區(qū)域?qū)?yīng)時(shí)，需要在公共的做手勢(shì)區(qū)域?qū)Ω鱾€(gè)操作對(duì)象物進(jìn)行手勢(shì)操作。此時(shí)，如果每個(gè)操作對(duì)象物對(duì)應(yīng)不同的手勢(shì)操作，則容易引起操作失誤。因此，使操作對(duì)象物與做手勢(shì)區(qū)域11一對(duì)一對(duì)應(yīng)，從而操作者A在每個(gè)操作對(duì)象物的做手勢(shì)區(qū)域中進(jìn)行操作對(duì)象物所對(duì)應(yīng)的手勢(shì)操作即可。如此，能夠減少操作失誤的發(fā)生。
[0038]如以上所示，根據(jù)本實(shí)施方式I，強(qiáng)調(diào)度算出部21根據(jù)3D攝像頭6的檢測(cè)信號(hào)，確定操作者A的手部位置，算出操作者A的手部位置與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置的差所對(duì)應(yīng)的強(qiáng)調(diào)度R。通知控制部20在每次根據(jù)3D攝像頭6對(duì)操作者A的手部的檢測(cè)，由強(qiáng)調(diào)度算出部21算出強(qiáng)調(diào)度R時(shí)，以所算出的強(qiáng)調(diào)度R將手勢(shì)操作的操作對(duì)象物通知給通知裝置，來將操作者A的手部向預(yù)先規(guī)定的位置引導(dǎo)。
特別是強(qiáng)調(diào)度算出部21算出操作者A的手部位置與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的做手勢(shì)區(qū)域11的中心位置的距離d所對(duì)應(yīng)的強(qiáng)調(diào)度R。
采用這種結(jié)構(gòu)后，無需為了對(duì)操作對(duì)象物的手勢(shì)操作進(jìn)行識(shí)別而使用全息圖等將操作對(duì)象物的虛像顯示在空間，能夠以簡單結(jié)構(gòu)實(shí)現(xiàn)移動(dòng)體用手勢(shì)引導(dǎo)裝置I。此外，操作者A將手部向強(qiáng)調(diào)通知操作對(duì)象物的方向移動(dòng)，從而操作者A的手部被引導(dǎo)至進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置(做手勢(shì)區(qū)域)。如此，操作者A的手部被引導(dǎo)至用于進(jìn)行手勢(shì)操作的合適位置，能夠提高手勢(shì)操作的識(shí)別精度。
[0039]此外，根據(jù)本實(shí)施方式I，強(qiáng)調(diào)度算出部21根據(jù)3D攝像頭6的檢測(cè)信息，進(jìn)一步確定操作者A的手部形狀，算出操作者A的手部位置及形狀與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的位置及對(duì)手勢(shì)操作預(yù)先規(guī)定的手部形狀的差所對(duì)應(yīng)的強(qiáng)調(diào)度R，通知控制部20以強(qiáng)調(diào)度算出部21算出的強(qiáng)調(diào)度R將手勢(shì)操作的操作對(duì)象物通知給通知裝置后，將操作者A的手部向預(yù)先規(guī)定的位置和對(duì)手勢(shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)。
特別是強(qiáng)調(diào)度算出部21算出操作者A的手部位置與做手勢(shì)區(qū)域11的中心位置的距離d及操作者A的手部形狀與對(duì)操作對(duì)象物的手勢(shì)操作預(yù)先規(guī)定的手部形狀的差異度s所對(duì)應(yīng)的強(qiáng)調(diào)度R。
通過采用這種結(jié)構(gòu)，能夠?qū)⒉僮髡逜的手部向用于進(jìn)行手勢(shì)操作的做手勢(shì)區(qū)域11引導(dǎo)，進(jìn)而向?qū)υ撌謩?shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)。如此，能夠?qū)⒉僮髡逜的手部向用于進(jìn)行手勢(shì)操作的合適狀態(tài)引導(dǎo)，能夠提高手勢(shì)操作的識(shí)別精度。
[0040]進(jìn)而，根據(jù)本實(shí)施方式I，在操作對(duì)象物的相關(guān)事件發(fā)生，導(dǎo)致通知裝置通知該操作對(duì)象物時(shí)，如果事件發(fā)生后經(jīng)過設(shè)定時(shí)間，則強(qiáng)調(diào)度算出部21依次算出強(qiáng)調(diào)度R使其逐漸降低，通知控制部20對(duì)通知裝置進(jìn)行控制，以由強(qiáng)調(diào)度算出部21依次算出的強(qiáng)調(diào)度R通知操作對(duì)象物。通過如上方式，能夠防止持續(xù)通知不必要的操作對(duì)象物。
[0041 ]進(jìn)而，根據(jù)本實(shí)施方式I，手勢(shì)識(shí)別部22使操作對(duì)象物與做手勢(shì)區(qū)域11 一對(duì)一對(duì)應(yīng)，來對(duì)做手勢(shì)區(qū)域11內(nèi)的操作者A的手部的手勢(shì)操作進(jìn)行識(shí)別。通過如上方式，操作者A在每個(gè)操作對(duì)象物的做手勢(shì)區(qū)域中進(jìn)行操作對(duì)象物所對(duì)應(yīng)的手勢(shì)操作即可。如此，能夠減少操作失誤的發(fā)生。
[0042]進(jìn)而，根據(jù)本實(shí)施方式I，由手勢(shì)識(shí)別部22識(shí)別出表示不需要操作對(duì)象物的手勢(shì)操作時(shí)，通知控制部20對(duì)通知裝置進(jìn)行控制，使其不通知該操作對(duì)象物。通過如上方式，能夠防止持續(xù)通知不必要的操作對(duì)象物。
[0043]進(jìn)而，根據(jù)本實(shí)施方式I，通知控制部20對(duì)通知裝置進(jìn)行控制，使其通知操作者A的手部已進(jìn)入或者遠(yuǎn)離做手勢(shì)區(qū)域11。通過如上方式，操作者A能夠直觀地得知已進(jìn)入或者遠(yuǎn)離做手勢(shì)區(qū)域11。
[0044]進(jìn)而，根據(jù)本實(shí)施方式I，做手勢(shì)區(qū)域11被配置在操作者A與操作對(duì)象物之間。通過如上方式，操作者A能夠一邊確認(rèn)操作對(duì)象物一邊直觀地進(jìn)行手勢(shì)操作。
[0045]實(shí)施方式2.實(shí)施方式I中，強(qiáng)調(diào)度算出部21通過將從操作者A的手部位置到做手勢(shì)區(qū)域11的中心位置的距離d用于算出強(qiáng)調(diào)度R，從而將操作者A的手部位置與做手勢(shì)區(qū)域11的中心位置的差反饋給操作者A。但是，該方法中，操作者A無法得知手部向哪個(gè)方向偏離，將手部引導(dǎo)至做手勢(shì)區(qū)域11可能耗費(fèi)較多時(shí)間。
因此，實(shí)施方式2中，算出在做手勢(shì)區(qū)域11的內(nèi)外檢測(cè)到的操作者A的手部距做手勢(shì)區(qū)域11的中心位置的偏離方向，以與該偏離方向相應(yīng)的通知方式通知操作對(duì)象物，來將操作者A的手部向做手勢(shì)區(qū)域11的中心位置引導(dǎo)。通過如上方式，操作者A能夠根據(jù)通知裝置對(duì)操作對(duì)象物的通知得知應(yīng)該將手部向上下左右的哪個(gè)方向移動(dòng)。
[0046]實(shí)施方式2所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置I與上述實(shí)施方式I所示的結(jié)構(gòu)基本相同，但是如上述所示，通知控制部20及強(qiáng)調(diào)度算出部21的內(nèi)部處理不同。因此，以下參照?qǐng)D1對(duì)實(shí)施方式2所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置I的結(jié)構(gòu)進(jìn)行說明。
[0047]圖6是表示實(shí)施方式2的操作對(duì)象物與做手勢(shì)區(qū)域的關(guān)系的圖。圖7是表示操作者的手部距做手勢(shì)區(qū)域的中心位置的偏離方向所對(duì)應(yīng)的通知方式的示例的圖。圖6中，操作者A是用方向盤12進(jìn)行駕駛的駕駛員，手勢(shì)操作對(duì)象的圖標(biāo)10顯示在HUD8的投影構(gòu)件8a上。做手勢(shì)區(qū)域11是例如圖6所示的長方體的空間區(qū)域。將該做手勢(shì)區(qū)域11的中心O設(shè)為原點(diǎn)，定義xy平面與操作者A側(cè)相對(duì)的xyz坐標(biāo)系。
[0048]實(shí)施方式2中，算出操作者A的手部相對(duì)于做手勢(shì)區(qū)域11內(nèi)的xy面的中心O的位置向左右方向偏離的dx的值及向上下方向偏離的dy的值，根據(jù)dx及dy的值確定操作者A的手部相對(duì)于中心O的偏離方向。
進(jìn)而，如圖7(a)所示，將做手勢(shì)區(qū)域11內(nèi)的上述xy面投影到操作者A側(cè)，算出操作者A的手部相對(duì)于操作者A的手部位置的上述xy面的投影面的中心位置(從中心O向操作者A側(cè)延長的延長線(z軸)與該投影面的交點(diǎn)位置)向左右方向偏離的dx的值及向上下方向偏離的dy的值，根據(jù)dx及dy確定操作者A的手部相對(duì)于上述投影面的中心位置的偏離方向。
[0049]強(qiáng)調(diào)度算出部21將對(duì)由3D攝像頭6在做手勢(shì)區(qū)域11的內(nèi)外檢測(cè)到的操作者A的手部算出的強(qiáng)調(diào)度R、以及如上述確定的操作者A的手部距做手勢(shì)區(qū)域11的中心位置的偏離方向通知給通知控制部20。
通知控制部20對(duì)通知裝置進(jìn)行控制，以強(qiáng)調(diào)度算出部21算出的強(qiáng)調(diào)度R及偏離方向的相應(yīng)通知方式通知操作對(duì)象物。
[0050]例如，操作對(duì)象物為與郵件來信相對(duì)應(yīng)的圖標(biāo)10時(shí)，如圖7(b)所示，圖標(biāo)1a中，dx及dy均為正值，操作者A的手部相對(duì)于中心O或從中心O向操作者A側(cè)延長的延長線(z軸)上的點(diǎn)(xy面的投影面的中心)向右上方向偏離。
因此，圖標(biāo)1a中，為了以視覺方式表示操作者A的手部相對(duì)于中心O或從中心O向操作者A側(cè)延長的延長線(z軸)上的點(diǎn)(上述投影面的中心)向右上方向偏離，其右上部分以操作者A的手部位置及形狀(距離d及差異度s)所對(duì)應(yīng)的強(qiáng)調(diào)度R即強(qiáng)調(diào)度R所對(duì)應(yīng)的透明度顯示，其他部分以高于右上部分的透明度顯示。
[0051]此外，圖標(biāo)1b中，dx及dy均為0，操作者A的手部位于中心O或上述投影面的中心位置。圖標(biāo)1b中，如圖7(b)所示，圖標(biāo)整體以操作者A的手部位置及形狀(距離d及差異度S)所對(duì)應(yīng)的強(qiáng)調(diào)度R所對(duì)應(yīng)的透明度顯示。
[0052]同樣地，圖標(biāo)1c中，dx及dy均為負(fù)值，操作者A的手部相對(duì)于中心O或上述投影面的中心向左下方向偏離。
因此，圖標(biāo)1c中，為了以視覺方式表示操作者A的手部相對(duì)于中心O或上述投影面的中心向左下方向偏離，其左下部分以操作者A的手部位置及形狀(距離d及差異度s)所對(duì)應(yīng)的強(qiáng)調(diào)度R的透明度顯示，其他部分以高于左下部分的透明度顯示。
[0053]圖標(biāo)1d中，dx為正值，dy為負(fù)值，操作者A的手部相對(duì)于中心O或上述投影面的中心向右下方向偏離。
因此，圖標(biāo)1d中，為了以視覺方式表示操作者A的手部相對(duì)于中心O或上述投影面的中心向右下方向偏離，其右下部分以操作者A的手部位置及形狀(距離d及差異度s)所對(duì)應(yīng)的強(qiáng)調(diào)度R的透明度顯示，其他部分以高于右下部分的透明度顯示。
[0054]如上述所示，圖標(biāo)1a僅右上部分以較深的顏色顯示，操作者A能夠以視覺方式得知手部相對(duì)于做手勢(shì)區(qū)域11的中心O或上述投影面的中心向右上方向偏離。
另一方面，圖標(biāo)1b的整體的顏色深度均勻，操作者A能夠以視覺方式得知手部位于做手勢(shì)區(qū)域11的中心O或上述投影面的中心。通過如上方式，操作者A能夠直觀地理解自己的手部相對(duì)于做手勢(shì)區(qū)域11的位置向上下左右的哪個(gè)方向偏離，從而能夠更輕易地進(jìn)行正確的手勢(shì)操作。
[0055]此外，已示出根據(jù)操作者A的手部的偏離方向改變顯示方式的情況，但是也可以改變利用聲音的聽覺方式。例如，事先設(shè)定相對(duì)于做手勢(shì)區(qū)域11的中心O或上述投影面的中心的上下左右偏離的相應(yīng)的種類互不相同的聲音。
操作者A的手部相對(duì)于中心O或從中心O向操作者A側(cè)延長的延長線(z軸)上的點(diǎn)(上述投影面的中心)向右上方向偏離時(shí)，由揚(yáng)聲器7輸出右上方向偏離所對(duì)應(yīng)的種類的聲音。
另一方面，操作者A的手部位于中心O或上述投影面的中心時(shí)，由揚(yáng)聲器7輸出手部位于中心時(shí)所對(duì)應(yīng)的種類的聲音。另外，揚(yáng)聲器7輸出的聲音的音量與強(qiáng)調(diào)度R相對(duì)應(yīng)。
[0056]如以上所示，根據(jù)本實(shí)施方式2，強(qiáng)調(diào)度算出部21進(jìn)一步算出由3D攝像頭6在做手勢(shì)區(qū)域11的內(nèi)外檢測(cè)到的操作者A的手部距做手勢(shì)區(qū)域11的中心O或從該中心O向操作者A側(cè)延長的延長線(z軸)上的點(diǎn)(xy面的投影面與z軸的交點(diǎn))的偏離方向，通知控制部20以由強(qiáng)調(diào)度算出部21算出的強(qiáng)調(diào)度R及偏離方向所對(duì)應(yīng)的通知方式將操作對(duì)象物通知給通知裝置后，將操作者A的手部向做手勢(shì)區(qū)域11的中心位置引導(dǎo)。
通過如上方式，操作者A能夠直觀地理解相對(duì)于做手勢(shì)區(qū)域11的位置向上下左右的哪個(gè)方向偏離，從而能夠更輕易地進(jìn)行正確的手勢(shì)操作。
[0057]實(shí)施方式3.實(shí)施方式3中，對(duì)存在多個(gè)做手勢(shì)區(qū)域的情況進(jìn)行敘述。通過設(shè)置多個(gè)做手勢(shì)區(qū)域，能夠擴(kuò)大進(jìn)行手勢(shì)操作的場(chǎng)所及手勢(shì)操作的種類范圍。
[0058]實(shí)施方式3所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置I與上述實(shí)施方式I所示的結(jié)構(gòu)基本相同，但是如上述所示，在使用多個(gè)做手勢(shì)區(qū)域的方面，內(nèi)部處理不同。因此，以下參照?qǐng)D1對(duì)實(shí)施方式3所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置I的結(jié)構(gòu)進(jìn)行說明。
[0059]圖8是表示實(shí)施方式3的操作對(duì)象物與所對(duì)應(yīng)的多個(gè)做手勢(shì)區(qū)域的關(guān)系的圖。圖8中，操作者A是用方向盤12進(jìn)行駕駛的駕駛員，作為手勢(shì)操作對(duì)象的圖標(biāo)10顯示在HUD8的投影構(gòu)件8a上。做手勢(shì)區(qū)域13，14為操作者A對(duì)圖標(biāo)10的左手用和右手用的做手勢(shì)區(qū)域。
[0060]手勢(shì)識(shí)別部22中，使圖標(biāo)10與做手勢(shì)區(qū)域13—對(duì)一對(duì)應(yīng)或者使圖標(biāo)10與做手勢(shì)區(qū)域14 一對(duì)一對(duì)應(yīng)，來對(duì)操作者A的手部的手勢(shì)操作進(jìn)行識(shí)別。即，操作者A可以對(duì)圖標(biāo)10在任意做手勢(shì)區(qū)域中進(jìn)行手勢(shì)操作。如此在如圖8所示的情況下，無論操作者A是左撇子還是右撇子，都能夠用便于松開方向盤12的手進(jìn)行手勢(shì)操作。
[0061]同樣地也可以設(shè)置對(duì)圖標(biāo)10的副駕駛座或后座的乘客用的做手勢(shì)區(qū)域。通過如上方式，乘客也能夠?qū)D標(biāo)10進(jìn)行手勢(shì)操作。
[0062]圖9是表示實(shí)施方式3的各做手勢(shì)區(qū)域與操作對(duì)象物的關(guān)系的圖。圖9中，操作者A是用方向盤12進(jìn)行駕駛的駕駛員，作為手勢(shì)操作對(duì)象的圖標(biāo)10，15顯示在HUD8的投影構(gòu)件8a上。圖標(biāo)1是做手勢(shì)區(qū)域16所對(duì)應(yīng)的圖標(biāo)，圖標(biāo)15是做手勢(shì)區(qū)域17所對(duì)應(yīng)的圖標(biāo)。
[0063]操作者A在做手勢(shì)區(qū)域16內(nèi)對(duì)圖標(biāo)10進(jìn)行手勢(shì)操作，從而執(zhí)行來信郵件的閱讀處理。此外，在做手勢(shì)區(qū)域17內(nèi)對(duì)圖標(biāo)15進(jìn)行手勢(shì)操作，從而執(zhí)行到加油站的導(dǎo)航處理。
如此識(shí)別出在各做手勢(shì)區(qū)域中各不相同的操作對(duì)象物的手勢(shì)操作，因此能夠執(zhí)行多個(gè)操作對(duì)象物所對(duì)應(yīng)的處理。此外，對(duì)“用手滑動(dòng)”等手勢(shì)操作設(shè)定在各做手勢(shì)區(qū)域中各不相同的含義，從而能夠擴(kuò)大手勢(shì)操作的種類范圍。
[0064]圖10是表示實(shí)施方式3的各通知裝置的操作對(duì)象物與做手勢(shì)區(qū)域的關(guān)系的圖。圖10中，操作者A是用方向盤12進(jìn)行駕駛的駕駛員，作為手勢(shì)操作對(duì)象的圖標(biāo)10顯示在HUD8的投影構(gòu)件8a上，同樣地手勢(shì)操作對(duì)象的圖標(biāo)15顯示在中心顯示器9的畫面9a上。此外，做手勢(shì)區(qū)域18是圖標(biāo)10所對(duì)應(yīng)的做手勢(shì)區(qū)域，做手勢(shì)區(qū)域19是圖標(biāo)15所對(duì)應(yīng)的做手勢(shì)區(qū)域。
[0065]識(shí)別出操作者A在做手勢(shì)區(qū)域18進(jìn)行的手勢(shì)操作時(shí)，通知控制部20對(duì)做手勢(shì)區(qū)域18所對(duì)應(yīng)的HUD8，輸出手勢(shì)操作的處理結(jié)果的通知命令。同樣地，操作者A在做手勢(shì)區(qū)域19進(jìn)行手勢(shì)操作時(shí)，通知控制部20對(duì)做手勢(shì)區(qū)域19所對(duì)應(yīng)的中心顯示器9，輸出手勢(shì)操作的處理結(jié)果的通知命令。
即，通知控制部20進(jìn)行控制，使由手勢(shì)識(shí)別部22識(shí)別出手勢(shì)操作的做手勢(shì)區(qū)域所對(duì)應(yīng)的通知裝置輸出手勢(shì)操作的處理結(jié)果。通過如上方式，操作者A能夠根據(jù)做手勢(shì)區(qū)域選擇希望輸出手勢(shì)操作的處理結(jié)果的通知裝置。
[0066]如以上所示，根據(jù)本實(shí)施方式3，在多個(gè)部位設(shè)置做手勢(shì)區(qū)域，因此能夠擴(kuò)大進(jìn)行手勢(shì)操作的場(chǎng)所及手勢(shì)操作的種類范圍。
例如，設(shè)置左手用和右手用的做手勢(shì)區(qū)域13，14，從而無論操作者A是左撇子還是右撇子，都能夠用便于松開方向盤12的手對(duì)操作對(duì)象物進(jìn)行手勢(shì)操作。此外，設(shè)置駕駛員以外的同行乘客用的做手勢(shì)區(qū)域，使得乘客也能夠?qū)Σ僮鲗?duì)象物進(jìn)行手勢(shì)操作。
[0067]此外，根據(jù)本實(shí)施方式3，手勢(shì)識(shí)別部22對(duì)各做手勢(shì)區(qū)域中各不相同的操作對(duì)象物的手勢(shì)操作進(jìn)行識(shí)別。通過如上方式，能夠執(zhí)行多個(gè)操作對(duì)象物所對(duì)應(yīng)的處理。此外，能夠?qū)Α坝檬只瑒?dòng)”等手勢(shì)操作設(shè)定在各做手勢(shì)區(qū)域中各不相同的含義。
[0068]進(jìn)而，根據(jù)本實(shí)施方式3，通知控制部20進(jìn)行控制，使由手勢(shì)識(shí)別部22識(shí)別出手勢(shì)操作的做手勢(shì)區(qū)域所對(duì)應(yīng)的通知裝置輸出手勢(shì)操作的處理結(jié)果。通過如上方式，操作者A能夠根據(jù)做手勢(shì)區(qū)域選擇希望輸出手勢(shì)操作的處理結(jié)果的通知裝置。
[0069]實(shí)施方式4.圖11是表示本發(fā)明實(shí)施方式4所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置的結(jié)構(gòu)的方塊圖。圖11中，實(shí)施方式4所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置IA具有與實(shí)施方式I的結(jié)構(gòu)不同的運(yùn)算部2A，運(yùn)算部2A具備實(shí)施區(qū)域設(shè)定部23。實(shí)施區(qū)域設(shè)定部23是改變做手勢(shì)區(qū)域11的位置的位置改變部。此外，實(shí)施區(qū)域設(shè)定部23具備調(diào)整部23a，所述調(diào)整部23a根據(jù)來自外部的指示調(diào)整做手勢(shì)區(qū)域11的位置。另外，圖11中，對(duì)與圖1相同的構(gòu)成要素賦予相同符號(hào)，并省略說明。
[0070]例如，用戶或維護(hù)的負(fù)責(zé)人通過使用實(shí)施區(qū)域設(shè)定部23從而能夠在任意時(shí)刻改變做手勢(shì)區(qū)域11的位置。
圖12是表示做手勢(shì)區(qū)域的設(shè)定畫面的一例的圖。首先，用戶或維護(hù)的負(fù)責(zé)人在中心顯示器9等顯示裝置所顯示的菜單畫面中進(jìn)行選擇，來啟動(dòng)實(shí)施區(qū)域設(shè)定部23。
實(shí)施區(qū)域設(shè)定部23啟動(dòng)后，調(diào)整部23a將圖12所示的設(shè)定畫面9b顯示在中心顯示器9上。另外，設(shè)定畫面也可以顯示在HUD8上。
[0071]設(shè)定畫面9b具有設(shè)定欄9c，所述設(shè)定欄9c用于設(shè)定做手勢(shì)區(qū)域11的中心O的位置坐標(biāo)(中心坐標(biāo))、以及表示其大小的寬度和高度。通過由用戶使用觸摸屏或硬件按鍵等輸入裝置在設(shè)定欄9c中設(shè)定中心坐標(biāo)、寬度和高度，從而調(diào)整部23a在基于該設(shè)定值的位置上設(shè)定做手勢(shì)區(qū)域U。如此，用戶能夠?qū)⒆鍪謩?shì)區(qū)域11的位置改變到便于進(jìn)行手勢(shì)操作的場(chǎng)所。
[0072]圖12中，例如，在從通知裝置的HUD8上顯示的操作對(duì)象物沿其顯示面的法線方向(z軸)向操作者A側(cè)設(shè)定10cm。進(jìn)而，距該顯示面1cm的位置為中心0，以該中心O作為原點(diǎn)在X軸方向設(shè)定20cm(經(jīng)由中心O在-X軸方向設(shè)置-1Ocm且在+X軸方向設(shè)置+1cm)的值，在y軸方向設(shè)定20cm(經(jīng)由中心O在-y軸方向設(shè)置-1Ocm且在+y軸方向設(shè)置+1cm)的值。進(jìn)而設(shè)定寬度20cm后，在z軸方向規(guī)定20cm(經(jīng)由中心O在_z軸方向設(shè)置-1Ocm且在+z軸方向設(shè)置+1cm)的值，通過將高度設(shè)為20cm后，將包括中心O在內(nèi)的xy面在z軸方向規(guī)定在投影到-1Ocm位置的面到投影到+1cm位置的面的區(qū)間，形成長方體的空間區(qū)域，將該長方體的空間區(qū)域定義為做手勢(shì)區(qū)域。
[0073]另外，設(shè)定欄9c中，可以將操作者A的位置與操作對(duì)象物之間的任意空間位置預(yù)先設(shè)定為做手勢(shì)區(qū)域11的初始位置。通過如上方式，如果上述初始位置便于操作者A進(jìn)行手勢(shì)操作，則不需要進(jìn)行位置改變，因此能夠簡化做手勢(shì)區(qū)域11的位置設(shè)定。
此外，圖12中已示出將操作對(duì)象物的位置作為基準(zhǔn)改變做手勢(shì)區(qū)域11的位置的情況，但是操作者A是用方向盤12進(jìn)行駕駛的駕駛員時(shí)，也可以將方向盤12的位置(例如方向盤12的左端位置)作為基準(zhǔn)。
[0074]此外，實(shí)施區(qū)域設(shè)定部23也可以對(duì)由手勢(shì)識(shí)別部22識(shí)別出手勢(shì)操作的操作者A的手部位置進(jìn)行學(xué)習(xí)，根據(jù)該學(xué)習(xí)結(jié)果改變做手勢(shì)區(qū)域11的位置。
例如，實(shí)施區(qū)域設(shè)定部23依次儲(chǔ)存由操作者A進(jìn)行手勢(shì)操作的手部位置，算出過去進(jìn)行過預(yù)先規(guī)定次數(shù)的手勢(shì)操作的位置中的相同次數(shù)超過閾值的位置或者過去進(jìn)行過預(yù)先規(guī)定次數(shù)的手勢(shì)操作的平均位置。然后，實(shí)施區(qū)域設(shè)定部23將算出的位置作為中心O或者作為頂點(diǎn)位置等改變做手勢(shì)區(qū)域11的位置。
通過如上方式，能夠?qū)⒆鍪謩?shì)區(qū)域11的位置改變到適合操作者A的位置。
[0075]但是，做手勢(shì)區(qū)域11過于接近方向盤12等時(shí)，操作者A對(duì)方向盤12的操作可能被誤判為手勢(shì)操作。
因此，可以由實(shí)施區(qū)域設(shè)定部23對(duì)可改變的做手勢(shì)區(qū)域11的位置范圍設(shè)定限制。例如，在實(shí)施區(qū)域設(shè)定部23中將位于距方向盤12預(yù)先規(guī)定的距離內(nèi)的空間位置設(shè)定為禁止位置，以免將做手勢(shì)區(qū)域11的位置改變到該禁止位置。通過如上方式，能夠減少手勢(shì)操作的誤識(shí)別。
[0076]如以上所示，根據(jù)本實(shí)施方式4，具有改變做手勢(shì)區(qū)域11的位置的實(shí)施區(qū)域設(shè)定部23，因此能夠移動(dòng)做手勢(shì)區(qū)域，而不是將其設(shè)為固定位置。此外，由于具備根據(jù)來自外部的設(shè)定內(nèi)容調(diào)整做手勢(shì)區(qū)域11的位置的調(diào)整部23a，能夠?qū)⒆鍪謩?shì)區(qū)域11設(shè)定在操作者A喜好的場(chǎng)所。
[0077]此外，根據(jù)本實(shí)施方式4，實(shí)施區(qū)域設(shè)定部23對(duì)識(shí)別出手勢(shì)操作的操作者A的手部位置進(jìn)行學(xué)習(xí)，根據(jù)該學(xué)習(xí)結(jié)果改變做手勢(shì)區(qū)域11的位置。通過如上方式，能夠設(shè)定便于操作者A進(jìn)行手勢(shì)操作的做手勢(shì)區(qū)域11。此時(shí)，由實(shí)施區(qū)域設(shè)定部23在可改變的做手勢(shì)區(qū)域11的位置范圍設(shè)定限制。如此，能夠防止將做手勢(shì)區(qū)域11設(shè)定在容易引起誤識(shí)別的場(chǎng)所，能夠減少手勢(shì)操作的誤識(shí)別。
[0078]另外，本發(fā)明在該發(fā)明的范圍內(nèi)，可進(jìn)行各實(shí)施方式的自由組合，或進(jìn)行各實(shí)施方式的任意構(gòu)成要素的變形，又或者在各實(shí)施方式中可省略任意構(gòu)成要素。
工業(yè)上的實(shí)用性
[0079]本發(fā)明所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置能夠以簡單結(jié)構(gòu)實(shí)現(xiàn)，且能夠引導(dǎo)成用于進(jìn)行手勢(shì)操作的合適狀態(tài)，例如，優(yōu)選作為車載信息設(shè)備的操作裝置。
[符號(hào)說明]
[0080]I, IA移動(dòng)體用手勢(shì)引導(dǎo)裝置2,2k 運(yùn)算部
3I/F 部
4事件檢測(cè)部 4a 天線
5總線
63D攝像頭
7揚(yáng)聲器
8HUD
8a投影構(gòu)件
9中心顯示器 9a 畫面
9b設(shè)定畫面
9c設(shè)定欄
10，10a?10d，15 圖標(biāo)11，13，14，16?19做手勢(shì)區(qū)域12方向盤
20通知控制部
21強(qiáng)調(diào)度算出部
22手勢(shì)識(shí)別部
23實(shí)施區(qū)域設(shè)定部 23a 調(diào)整部
【主權(quán)項(xiàng)】
1.一種移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 具備: 強(qiáng)調(diào)度算出部，所述強(qiáng)調(diào)度算出部根據(jù)檢測(cè)操作者的手部的傳感器的檢測(cè)信息，確定所述操作者的手部位置，算出所述操作者的手部位置與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的位置的差所對(duì)應(yīng)的強(qiáng)調(diào)度；以及 通知控制部，所述通知控制部在每次根據(jù)所述傳感器對(duì)所述操作者的手部的檢測(cè)，由所述強(qiáng)調(diào)度算出部算出強(qiáng)調(diào)度時(shí)，以所算出的強(qiáng)調(diào)度將所述手勢(shì)操作的操作對(duì)象物通知給通知裝置，來將所述操作者的手部向所述預(yù)先規(guī)定的位置引導(dǎo)。2.如權(quán)利要求1所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述強(qiáng)調(diào)度算出部還根據(jù)所述傳感器的檢測(cè)信息，確定所述操作者的手部形狀，算出所述操作者的手部位置及形狀與進(jìn)行所述手勢(shì)操作的預(yù)先規(guī)定的位置及對(duì)所述手勢(shì)操作預(yù)先規(guī)定的手部形狀的差所對(duì)應(yīng)的強(qiáng)調(diào)度， 所述通知控制部以由所述強(qiáng)調(diào)度算出部算出的強(qiáng)調(diào)度將所述手勢(shì)操作的操作對(duì)象物通知給所述通知裝置，來將所述操作者的手部向所述預(yù)先規(guī)定的位置和對(duì)所述手勢(shì)操作預(yù)先規(guī)定的手部形狀引導(dǎo)。3.如權(quán)利要求1所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述強(qiáng)調(diào)度算出部算出所述操作者的手部位置與進(jìn)行所述手勢(shì)操作的預(yù)先規(guī)定的做手勢(shì)區(qū)域的中心位置的距離所對(duì)應(yīng)的強(qiáng)調(diào)度。4.如權(quán)利要求2所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述強(qiáng)調(diào)度算出部算出所述操作者的手部位置與所述做手勢(shì)區(qū)域的中心位置的距離、以及所述操作者的手部形狀與對(duì)所述手勢(shì)操作預(yù)先規(guī)定的手部形狀的差異度所對(duì)應(yīng)的強(qiáng)調(diào)度。5.如權(quán)利要求1所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述操作對(duì)象物的相關(guān)事件發(fā)生，導(dǎo)致所述通知裝置通知了該操作對(duì)象物時(shí)，如果所述事件發(fā)生后經(jīng)過設(shè)定時(shí)間，則所述強(qiáng)調(diào)度算出部依次算出強(qiáng)調(diào)度使其逐漸降低， 所述通知控制部對(duì)所述通知裝置進(jìn)行控制，使其以所述強(qiáng)調(diào)度算出部依次算出的強(qiáng)調(diào)度通知所述操作對(duì)象物。6.如權(quán)利要求3所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述強(qiáng)調(diào)度算出部進(jìn)一步算出由所述傳感器在所述做手勢(shì)區(qū)域的內(nèi)外檢測(cè)到的所述操作者的手部距該做手勢(shì)區(qū)域的中心或從該中心向操作者側(cè)延長的延長線上的點(diǎn)的偏離方向， 所述通知控制部以由所述強(qiáng)調(diào)度算出部算出的強(qiáng)調(diào)度及與所述偏離方向相對(duì)應(yīng)的通知方式將所述操作對(duì)象物通知給所述通知裝置，來將所述操作者的手部向所述做手勢(shì)區(qū)域的中心位置引導(dǎo)。7.如權(quán)利要求3所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 具備手勢(shì)識(shí)別部，所述手勢(shì)識(shí)別部使所述操作對(duì)象物與所述做手勢(shì)區(qū)域一對(duì)一對(duì)應(yīng)，來對(duì)所述做手勢(shì)區(qū)域的所述操作者的手部的手勢(shì)操作進(jìn)行識(shí)別。8.如權(quán)利要求7所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 由所述手勢(shì)識(shí)別部識(shí)別出表示不需要所述操作對(duì)象物的手勢(shì)操作時(shí)，所述通知控制部對(duì)所述通知裝置進(jìn)行控制，使其不通知該操作對(duì)象物。9.如權(quán)利要求7所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 在多個(gè)部位設(shè)置所述做手勢(shì)區(qū)域。10.如權(quán)利要求9所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述手勢(shì)識(shí)別部對(duì)各做手勢(shì)區(qū)域中各不相同的操作對(duì)象物的手勢(shì)操作進(jìn)行識(shí)別。11.如權(quán)利要求9所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述通知控制部進(jìn)行控制，使由所述手勢(shì)識(shí)別部識(shí)別出手勢(shì)操作的做手勢(shì)區(qū)域所對(duì)應(yīng)的通知裝置輸出所述手勢(shì)操作的處理結(jié)果。12.如權(quán)利要求9所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述多個(gè)做手勢(shì)區(qū)域是移動(dòng)體的駕駛員的右手用和左手用的做手勢(shì)區(qū)域或所述駕駛員以外的乘客用的做手勢(shì)區(qū)域。13.如權(quán)利要求9所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述做手勢(shì)區(qū)域被配置在所述操作者與所述操作對(duì)象物之間。14.如權(quán)利要求3所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 具備位置改變部，所述位置改變部改變所述做手勢(shì)區(qū)域的位置。15.如權(quán)利要求14所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述位置改變部具備調(diào)整部，所述調(diào)整部根據(jù)來自外部的設(shè)定內(nèi)容調(diào)整所述做手勢(shì)區(qū)域的位置。16.如權(quán)利要求14所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述位置改變部對(duì)識(shí)別出手勢(shì)操作的所述操作者的手部位置進(jìn)行學(xué)習(xí)，根據(jù)該學(xué)習(xí)結(jié)果改變所述做手勢(shì)區(qū)域的位置。17.如權(quán)利要求16所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 由所述位置改變部在可改變的所述做手勢(shì)區(qū)域的位置范圍設(shè)定限制。18.如權(quán)利要求3所述的移動(dòng)體用手勢(shì)引導(dǎo)裝置，其特征在于， 所述通知控制部對(duì)所述通知裝置進(jìn)行控制，使其通知所述操作者的手部已進(jìn)入或者離開所述做手勢(shì)區(qū)域。19.一種移動(dòng)體用手勢(shì)引導(dǎo)系統(tǒng)，其特征在于， 具備: 傳感器，所述傳感器檢測(cè)操作者的手部； 通知裝置，所述通知裝置通知操作對(duì)象物； 強(qiáng)調(diào)度算出部，所述強(qiáng)調(diào)度算出部根據(jù)所述傳感器的檢測(cè)信息，確定所述操作者的手部位置，算出所述操作者的手部位置與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置的差所對(duì)應(yīng)的強(qiáng)調(diào)度；以及 通知控制部，所述通知控制部在每次根據(jù)所述傳感器對(duì)所述操作者的手部的檢測(cè)，由所述強(qiáng)調(diào)度算出部算出強(qiáng)調(diào)度時(shí)，以所算出的強(qiáng)調(diào)度將所述手勢(shì)操作的操作對(duì)象物通知給所述通知裝置，來將所述操作者的手部向所述預(yù)先規(guī)定的位置引導(dǎo)。20.一種移動(dòng)體用手勢(shì)引導(dǎo)方法，其特征在于， 包括如下步驟: 由強(qiáng)調(diào)度算出部根據(jù)檢測(cè)操作者的手部的傳感器的檢測(cè)信息，確定所述操作者的手部位置，算出所述操作者的手部位置與進(jìn)行手勢(shì)操作的預(yù)先規(guī)定的手部位置的差所對(duì)應(yīng)的強(qiáng)調(diào)度；以及 由通知控制部在每次根據(jù)所述傳感器對(duì)所述操作者的手部的檢測(cè)，由所述強(qiáng)調(diào)度算出部算出強(qiáng)調(diào)度時(shí)，以所算出的強(qiáng)調(diào)度將所述手勢(shì)操作的操作對(duì)象物通知給所述通知裝置，來將所述操作者的手部向所述預(yù)先規(guī)定的位置引導(dǎo)。
【文檔編號(hào)】G06F3/01GK106030460SQ201480075742
【公開日】2016年10月12日
【申請(qǐng)日】2014年2月18日
【發(fā)明人】平野敬, 熊谷太郎, 太田脩平
【申請(qǐng)人】三菱電機(jī)株式會(huì)社