專利名稱：人機(jī)互動(dòng)系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種人機(jī)互動(dòng)技術(shù)，特別是涉及一種人機(jī)互動(dòng)系統(tǒng)和方法。
背景技術(shù)：
人機(jī)互動(dòng)技術(shù)已廣泛應(yīng)用于人們的日常生活和工作中。例如，體感游戲以及電器設(shè)備的控制等等。尤其是人機(jī)互動(dòng)技術(shù)中的體感游戲由于其兼有健身和娛樂的目的而倍受人們的喜愛。目前現(xiàn)有的人機(jī)互動(dòng)技術(shù)通常是基于控制設(shè)備來實(shí)現(xiàn)的，例如，體感游戲通常是通過計(jì)算機(jī)和體感控制裝置來實(shí)現(xiàn)或者是通過電視機(jī)、機(jī)頂盒以及體感控制裝置來實(shí)現(xiàn)。體感控制裝置如游戲手柄等，體感控制裝置通常會(huì)被用戶單手或者雙手握于手中，并進(jìn)行控制操作。發(fā)明人在實(shí)現(xiàn)本發(fā)明過程中發(fā)現(xiàn)人機(jī)互動(dòng)中的控制設(shè)備通常是一個(gè)物理實(shí)體設(shè)備，且通常由多個(gè)按鍵、搖桿、光源、重力加速度傳感器以及小屏幕等元件組成。然而，目前人機(jī)互動(dòng)技術(shù)已經(jīng)可以不限于物理的實(shí)體設(shè)備來實(shí)現(xiàn)了，而且，現(xiàn)有的人機(jī)互動(dòng)的實(shí)現(xiàn)方式有待于進(jìn)一步的豐富。有鑒于上述現(xiàn)有的人機(jī)互動(dòng)技術(shù)存在的需求，本發(fā)明人基于從事此類產(chǎn)品設(shè)計(jì)制造多年豐富的實(shí)務(wù)經(jīng)驗(yàn)及專業(yè)知識(shí)，并配合學(xué)理的運(yùn)用，積極加以研究創(chuàng)新，以期創(chuàng)設(shè)一種新的人機(jī)互動(dòng)系統(tǒng)和方法，能夠滿足現(xiàn)有的人機(jī)互動(dòng)技術(shù)存在的需求，使其更具有實(shí)用性。經(jīng)過不斷的研究設(shè)計(jì)，并經(jīng)過反復(fù)試作樣品及改進(jìn)后，終于創(chuàng)設(shè)出確具實(shí)用價(jià)值的本發(fā)明。

發(fā)明內(nèi)容
本發(fā)明的目的在于，滿足人機(jī)互動(dòng)技術(shù)存在的需求，而提供一種新的人機(jī)互動(dòng)系統(tǒng)和方法，所要解決的技術(shù)問題是，使人機(jī)互動(dòng)技術(shù)的實(shí)現(xiàn)方式多元化，非常適于實(shí)用。本發(fā)明的目的以及解決其技術(shù)問題可以采用以下的技術(shù)方案來實(shí)現(xiàn)。依據(jù)本發(fā)明提出的一種人機(jī)互動(dòng)系統(tǒng)，所述人機(jī)互動(dòng)系統(tǒng)包括視頻捕捉裝置和控制裝置；視頻捕捉裝置，用于實(shí)時(shí)攝取圖像，并輸出；所述控制裝置包括接收模塊，用于接收所述視頻捕捉裝置傳輸來的圖像；面部表情提取模塊，用于從所述接收模塊接收到的圖像中提取用戶面部的熱點(diǎn)區(qū)域信息，并根據(jù)所述熱點(diǎn)區(qū)域信息確定用戶的面部表情信息；存儲(chǔ)模塊，用于預(yù)先存儲(chǔ)面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息；控制模塊，用于將面部表情提取模塊確定出的面部表情信息在所述存儲(chǔ)模塊中存儲(chǔ)的對(duì)應(yīng)關(guān)系信息中進(jìn)行匹配查找，以確定面部表情提取模塊確定出的面部表情信息對(duì)應(yīng)的控制命令；執(zhí)行模塊，用于執(zhí)行所述控制模塊確定出的控制命令。本發(fā)明的目的以及解決其技術(shù)問題還可以采用以下的技術(shù)措施來進(jìn)一步實(shí)現(xiàn)。較佳的，前述的人機(jī)互動(dòng)系統(tǒng)，其中所述視頻捕捉裝置與所述控制裝置集成設(shè)置于同一電子設(shè)備中。較佳的，前述的人機(jī)互動(dòng)系統(tǒng)，其中所述電子設(shè)備包括計(jì)算機(jī)、游戲機(jī)、移動(dòng)電話、平板電腦、機(jī)頂盒、電視機(jī)頂盒一體機(jī)或者電視機(jī)。較佳的，前述的人機(jī)互動(dòng)系統(tǒng)，其中所述視頻捕捉裝置與所述控制裝置獨(dú)立分離設(shè)置，且所述視頻捕捉裝置與所述控制裝置之間通過有線方式連接、或者通過無線方式連接。較佳的，前述的人機(jī)互動(dòng)系統(tǒng)，其中所述控制裝置設(shè)置于計(jì)算機(jī)、游戲機(jī)、移動(dòng)電話、平板電腦、機(jī)頂盒、電視機(jī)頂盒一體機(jī)或者電視機(jī)中。依據(jù)本發(fā)明提出的一種人機(jī)互動(dòng)方法，包括實(shí)時(shí)攝取圖像；從所述攝取的圖像中提取用戶面部的熱點(diǎn)區(qū)域信息；根據(jù)所述熱點(diǎn)區(qū)域信息確定用戶的 面部表情信息；將所述面部表情信息在預(yù)先存儲(chǔ)的面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息中匹配查找，以確定所述用戶的面部表情信息對(duì)應(yīng)的控制命令；執(zhí)行所述確定出的控制命令。借由上述技術(shù)方案，本發(fā)明的人機(jī)互動(dòng)系統(tǒng)和方法至少具有下列優(yōu)點(diǎn)及有益效果本發(fā)明通過利用視頻捕捉裝置攝取圖像、面部表情提取模塊將攝取的圖像中的用戶面部的熱點(diǎn)區(qū)域信息對(duì)應(yīng)的面部表情信息提供給控制模塊，使控制模塊可以根據(jù)該面部表情信息和存儲(chǔ)模塊中存儲(chǔ)的對(duì)應(yīng)關(guān)系輸出控制命令，以實(shí)現(xiàn)基于面部表情的人機(jī)互動(dòng)，從而使人機(jī)互動(dòng)的實(shí)現(xiàn)方式多元化，非常適于實(shí)用。綜上所述，本發(fā)明在技術(shù)上有顯著的進(jìn)步，具有明顯的積極效果，誠(chéng)為一新穎、進(jìn)步、實(shí)用的新設(shè)計(jì)。上述說明僅是本發(fā)明技術(shù)方案的概述，為了能夠更清楚了解本發(fā)明的技術(shù)手段，而可依照說明書的內(nèi)容予以實(shí)施，并且為了讓本發(fā)明的上述和其他目的、特征和優(yōu)點(diǎn)能夠更明顯易懂，以下特舉較佳實(shí)施例，并配合附圖詳細(xì)說明如下。


圖I為本發(fā)明的人機(jī)互動(dòng)系統(tǒng)示意圖；圖2為本發(fā)明的人機(jī)互動(dòng)方法流程圖。
具體實(shí)施例方式為更進(jìn)一步闡述本發(fā)明為達(dá)成預(yù)定發(fā)明目的所采取的技術(shù)手段及功效，以下結(jié)合附圖及較佳實(shí)施例，對(duì)依據(jù)本發(fā)明提出的人機(jī)互動(dòng)系統(tǒng)和方法其具體實(shí)施方式
、結(jié)構(gòu)、特征、流程及其功效，詳細(xì)說明如后。實(shí)施例一、人機(jī)互動(dòng)系統(tǒng)。該系統(tǒng)如附圖I所示。圖I示出的人機(jī)互動(dòng)系統(tǒng)包括視頻捕捉裝置I和控制裝置2。其中的控制裝置2包括接收模塊21、面部表情提取模塊22、存儲(chǔ)模塊23、控制模塊24以及執(zhí)行模塊25。接收模塊21與面部表情提取模塊22連接，控制模塊24與面部表情提取模塊22、存儲(chǔ)模塊23以及執(zhí)行模塊25均連接。視頻捕捉裝置I主要用于實(shí)時(shí)攝取圖像，并將其攝取到的圖像向控制裝置2發(fā)送。這里的實(shí)時(shí)攝取如視頻捕捉裝置I按照預(yù)定采樣頻率進(jìn)行圖像采樣。該視頻捕捉裝置I可以與控制裝置2集成設(shè)置，也可以與控制裝置2相互分離獨(dú)立設(shè)置。在視頻捕捉裝置I與控制裝置2相互分離獨(dú)立設(shè)置的情況下，視頻捕捉裝置I可以與控制裝置2采用有線連接方式連接或者采用無線連接方式連接，即視頻捕捉裝置通過有線或者無線的方式將其攝取到的圖像傳輸給控制裝置2。視頻捕捉裝置I可以采用現(xiàn)有的攝像頭、以及攝像機(jī)等攝像設(shè)備，本發(fā)明不限制視頻捕捉裝置I的具體類型?？刂蒲b置2主要用于根據(jù)視頻捕捉裝置I實(shí)時(shí)攝取的圖像、以及其預(yù)先存儲(chǔ)的用戶的面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息確定出攝取到的用戶面部表情對(duì)應(yīng)的控制命令，控制裝置2通過執(zhí)行其確定出的該控制命令，從而實(shí)現(xiàn)了基于面部表情的人機(jī)互動(dòng)。
由于本發(fā)明提供的人機(jī)互動(dòng)系統(tǒng)僅僅是基于用戶的面部表情來實(shí)現(xiàn)人機(jī)互動(dòng)，因此，用戶完全可以坐在桌前或者站在桌前或者位于其它近距離的地方來進(jìn)行人機(jī)互動(dòng)如體感游戲等，從而可以實(shí)現(xiàn)近距離體感游戲，并可以使用戶在游戲過程中進(jìn)行面部運(yùn)動(dòng)，增強(qiáng)用戶對(duì)保健運(yùn)動(dòng)的興趣?？刂蒲b置2中的接收模塊21主要用于接收視頻捕捉裝置I傳輸來的圖像序列。在視頻捕捉裝置I與控制裝置2獨(dú)立分離設(shè)置的情況下，接收模塊21可以通過有線或者無線方式接收到視頻捕捉裝置I傳輸來的圖像。一個(gè)具體的例子接收模塊21可以通過藍(lán)牙、
2.4GHz、WIFI、紅外傳輸、以及USB等傳輸方式接收視頻捕捉裝置I傳輸來的圖像，即接收模塊21可以為藍(lán)牙模塊、2. 4GHz模塊、WIFI模塊、紅外模塊、或者USB模塊。在視頻捕捉裝置I與控制裝置2集成設(shè)置在同一電子設(shè)備的情況下，接收模塊21可以為緩存介質(zhì)。本發(fā)明不限制接收模塊21的具體實(shí)現(xiàn)方式?？刂蒲b置2中的面部表情提取模塊22主要用于從接收模塊21接收到的圖像中提取用戶面部的熱點(diǎn)區(qū)域信息，并判斷出該熱點(diǎn)區(qū)域信息對(duì)應(yīng)的面部表情信息，之后，面部表情提取模塊22向控制模塊24輸出其確定出的面部表情信息。這里的熱點(diǎn)區(qū)域如眉毛、眼睛、嘴巴、以及臉頰等。這里的面部表情信息如眉毛、眼睛、嘴巴以及臉頰等部位中的一個(gè)或多個(gè)部位的關(guān)鍵值，也可以為面部表情的索引值等。本發(fā)明不限制面部表情提取模塊22輸出的面部表情信息的具體表現(xiàn)形式。另外，本發(fā)明中的面部表情提取模塊22可以采用現(xiàn)有的技術(shù)(如笑臉提取技術(shù)等)來提取用戶面部的特定部位的熱點(diǎn)區(qū)域信息。需要說明的是，面部表情提取模塊22在接收到視頻捕捉裝置I傳輸來的圖像后，可以先對(duì)其接收到的圖像進(jìn)行優(yōu)化處理操作，之后，再進(jìn)行熱點(diǎn)區(qū)域信息的提取及確定面部表情操作。上述對(duì)圖像進(jìn)行的優(yōu)化處理操作可以包括去除無效信息處理、去除干擾信息處理、去除紅眼處理、糾正鏡頭畸變處理、以及增強(qiáng)有效信息處理等操作中的一個(gè)或者多個(gè)操作。另外，面部表情提取模塊22在提取熱點(diǎn)區(qū)域信息的過程中，可以先將視頻捕捉裝置I傳輸來的圖像轉(zhuǎn)換為黑白圖像，從而面部表情提取模塊22可以根據(jù)黑白圖像中的像素的灰度值，提取出用戶面部的熱點(diǎn)區(qū)域信息?？刂蒲b置2中的存儲(chǔ)模塊23主要用于存儲(chǔ)面部表情信息和控制命令之間的對(duì)應(yīng)關(guān)系信息，例如，存儲(chǔ)模塊23中存儲(chǔ)有面部表情的索引號(hào)與控制命令的對(duì)應(yīng)關(guān)系信息；再例如，存儲(chǔ)模塊23中存儲(chǔ)有面部表情的各關(guān)鍵值與控制命令之間的對(duì)應(yīng)關(guān)系信息。上述關(guān)鍵值如眼睛的開合程度、眉毛的彎曲度、嘴巴開合程度、嘴巴的彎曲方向以及腮部的鼓出/凹陷程度等。上述控制命令可以稱為針對(duì)設(shè)備的某具體應(yīng)用的控制命令，例如，電視機(jī)換臺(tái)、瀏覽照片翻頁、關(guān)閉正在瀏覽的網(wǎng)頁或者體感游戲中的游戲命令等等。本發(fā)明可以動(dòng)態(tài)的設(shè)置存儲(chǔ)模塊23中存儲(chǔ)的對(duì)應(yīng)關(guān)系信息，一個(gè)具體的例子首先，開啟視頻捕捉裝置1，視頻捕捉裝置I開始攝像操作，視頻捕捉裝置I攝取到的包含用戶面部的圖片被顯示在控制裝置2所在設(shè)備的顯示屏上，控制裝置2可以在顯示屏上顯示面部區(qū)域位置范圍，用戶可以通過調(diào)整其坐姿或者站位等使視頻捕捉裝置I攝取到的用戶面部位于該面部區(qū)域位置范圍內(nèi)，之后，用戶點(diǎn)擊攝取圖片對(duì)應(yīng)的按鍵(該按鍵如計(jì)算機(jī)鍵盤上的回車鍵或者屏幕上顯示的注冊(cè)鍵或者遙控器上的確定鍵等)；控制裝置2在監(jiān)測(cè)到由該按鍵產(chǎn)生的攝取圖片的命令之后，獲取包含有用戶面部區(qū)域的圖片，該圖片可以是黑白圖片或者彩色圖片，然后，控制裝置2從該圖片中獲取熱點(diǎn)區(qū)域圖像信息，并通過分析該熱點(diǎn)區(qū)域圖像信息確定出面部表情索引值，之后，將該面部表情索引值和當(dāng)前需要設(shè)置的控制命令以表中記錄的形式對(duì)應(yīng)存儲(chǔ)到存儲(chǔ)模塊23中。當(dāng)然，本發(fā)明中的控制裝置2也可以采用其它操作過程在存儲(chǔ)模塊23中存儲(chǔ)面部表情信息和控制命令之間的對(duì)應(yīng)關(guān)系信息，本發(fā)明不限制在存儲(chǔ)模塊23存儲(chǔ)面部表情信息和控制命令之間的對(duì)應(yīng)關(guān)系信息的具體實(shí)現(xiàn)方式。
控制裝置2中的控制模塊24主要用于基于存儲(chǔ)模塊23中存儲(chǔ)的對(duì)應(yīng)關(guān)系信息將面部表情提取模塊22傳輸來的面部表情信息轉(zhuǎn)換為相應(yīng)的控制命令，并將該控制命令提供給控制裝置2中的執(zhí)行模塊，以實(shí)現(xiàn)人機(jī)交互如體感游戲等。一個(gè)具體的例子控制模塊24可以利用面部表情提取模塊22輸出的面部表情信息在存儲(chǔ)模塊23中存儲(chǔ)的對(duì)應(yīng)關(guān)系信息中進(jìn)行匹配查找，匹配到的記錄中的控制命令即為其接收到的面部表情信息對(duì)應(yīng)的控制命令?？刂蒲b置2還可以包括顯示屏以及電源模塊等元件。顯示屏主要用于顯示畫面(如游戲畫面、以及視頻捕捉裝置I攝取獲得的圖像等)。該顯示屏可以為計(jì)算機(jī)的顯示屏、移動(dòng)電話的顯示屏、電視機(jī)顯示屏、平板電腦顯示屏、或者游戲機(jī)顯示屏等。電源模塊主要用于為控制裝置2中的各用電元件(如控制裝置2中的各模塊、或者視頻捕捉裝置I和控制裝置2中的各模塊等)提供電力資源，該電源模塊可以為計(jì)算機(jī)、移動(dòng)電話、電視機(jī)、平板電腦、或者游戲機(jī)等電子設(shè)備本身自帶的電源模塊，也可以為專為本發(fā)明中的人機(jī)互動(dòng)系統(tǒng)設(shè)置的電源模塊。上述實(shí)施例中記載的人機(jī)互動(dòng)系統(tǒng)的設(shè)置方式可以為如下兩種形式第一種形式為整個(gè)人機(jī)互動(dòng)系統(tǒng)集成設(shè)置在同一個(gè)電子設(shè)備中，從而整個(gè)人機(jī)互動(dòng)系統(tǒng)成為一個(gè)電子設(shè)備的一部分，該電子設(shè)備可以具體為計(jì)算機(jī)、移動(dòng)電話、電視機(jī)、平板電腦、機(jī)頂盒、電視機(jī)機(jī)頂盒一體機(jī)或者游戲機(jī)等。一個(gè)具體的例子在人機(jī)互動(dòng)系統(tǒng)集成設(shè)置在計(jì)算機(jī)中的情況下，視頻捕捉裝置I集成設(shè)置在計(jì)算機(jī)顯示屏的左上角，而控制裝置2集成設(shè)置在計(jì)算機(jī)的主機(jī)的內(nèi)部電路中。第二種形式為人機(jī)互動(dòng)系統(tǒng)中的視頻捕捉裝置I與控制裝置2獨(dú)立分離設(shè)置，且視頻捕捉裝置I與控制裝置2之間可以通過有線或者無線的方式連接。具體的，視頻捕捉裝置I可以為攝像頭或者攝像機(jī)等獨(dú)立的設(shè)備，控制裝置2則可以集成設(shè)置在計(jì)算機(jī)、移動(dòng)電話、電視機(jī)、平板電腦(PAD)、機(jī)頂盒、電視機(jī)機(jī)頂盒一體機(jī)或者游戲機(jī)等電子設(shè)備中。實(shí)施例二、人機(jī)互動(dòng)方法。該方法的流程如附圖2所示。圖2中示出的人機(jī)互動(dòng)方法包括如下步驟S200、實(shí)時(shí)攝取圖像。具體的，可以按照預(yù)定采樣頻率進(jìn)行圖像采樣。S210、從實(shí)時(shí)攝取的圖像中提取用戶面部的熱點(diǎn)區(qū)域信息。
具體的，上述熱點(diǎn)區(qū)域如眉毛、眼睛、嘴巴、以及臉頰等。本發(fā)明中可以采用現(xiàn)有的技術(shù)(如笑臉提取技術(shù)等)來提取用戶面部的特定部位的熱點(diǎn)區(qū)域信息。本發(fā)明可以先對(duì)實(shí)時(shí)攝取的圖像進(jìn)行優(yōu)化處理操作，之后再進(jìn)行熱點(diǎn)區(qū)域信息的提取操作。上述對(duì)圖像進(jìn)行的優(yōu)化處理操作可以包括去除無效信息處理、去除干擾信息處理、去除紅眼處理、糾正鏡頭畸變處理、以及增強(qiáng)有效信息處理等操作中的一個(gè)或者多個(gè)操作。另外，在提取熱點(diǎn)區(qū)域信息的過程中，可以先將攝取到的圖像轉(zhuǎn)換為黑白圖像，從而根據(jù)黑白圖像中的像素的灰度值，提取出用戶面部的熱點(diǎn)區(qū)域信息。S220、根據(jù)熱點(diǎn)區(qū)域信息確定用戶的面部表情信息。具體的，上述的面部表情信息如眉毛、眼睛、嘴巴以及臉頰等部位中的一個(gè)或多個(gè)部位的關(guān)鍵值，也可以為面部表情的索引值等。本發(fā)明不限制面部表情信息的具體表現(xiàn)形式。
S230、將上述確定出的面部表情信息在預(yù)先存儲(chǔ)的面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息中匹配查找，以確定出用戶的面部表情信息對(duì)應(yīng)的控制命令。具體的，本發(fā)明預(yù)先存儲(chǔ)有面部表情信息和控制命令之間的對(duì)應(yīng)關(guān)系信息，如預(yù)先存儲(chǔ)有面部表情的索引號(hào)與控制命令的對(duì)應(yīng)關(guān)系信息；再例如，預(yù)先存儲(chǔ)有面部表情的各關(guān)鍵值與控制命令之間的對(duì)應(yīng)關(guān)系信息。上述關(guān)鍵值如眼睛的開合程度、眉毛的彎曲度、嘴巴開合程度、嘴巴的彎曲方向以及腮部的鼓出/凹陷程度等。上述控制命令可以稱為針對(duì)設(shè)備的某具體應(yīng)用的控制命令，例如，電視機(jī)換臺(tái)、計(jì)算機(jī)瀏覽圖片前/后翻頁、關(guān)閉正在瀏覽的網(wǎng)頁或者體感游戲中的游戲命令等等。本發(fā)明可以動(dòng)態(tài)的設(shè)置預(yù)先存儲(chǔ)的對(duì)應(yīng)關(guān)系信息，例如首先，開始執(zhí)行攝像操作，攝取到的包含用戶面部的圖片被顯示，本發(fā)明可以顯示面部區(qū)域位置范圍，用戶可以通過調(diào)整其坐姿或者站位等使實(shí)時(shí)攝取到的用戶面部位于該面部區(qū)域位置范圍內(nèi)，之后，用戶點(diǎn)擊攝取圖片對(duì)應(yīng)的按鍵(該按鍵如計(jì)算機(jī)鍵盤上的回車鍵或者屏幕上顯示的注冊(cè)鍵或者遙控器上的確定鍵等)，從而獲取包含有用戶面部區(qū)域的圖片，該圖片可以是黑白圖片或者彩色圖片，然后，從該圖片中獲取熱點(diǎn)區(qū)域圖像信息，并通過分析該熱點(diǎn)區(qū)域圖像信息確定出面部表情索引值，之后，將該面部表情索引值和當(dāng)前需要設(shè)置的控制命令以表中記錄的形式對(duì)應(yīng)存儲(chǔ)起來。當(dāng)然，本發(fā)明也可以采用其它操作過程預(yù)先存儲(chǔ)面部表情信息和控制命令之間的對(duì)應(yīng)關(guān)系信息，本發(fā)明不限制預(yù)先存儲(chǔ)面部表情信息和控制命令之間的對(duì)應(yīng)關(guān)系信息的具體實(shí)現(xiàn)方式。確定控制命令的一個(gè)具體的例子利用前述步驟獲得的面部表情信息在預(yù)先存儲(chǔ)的對(duì)應(yīng)關(guān)系信息中進(jìn)行匹配查找，匹配到的記錄中的控制命令即為上述確定出的面部表情信息對(duì)應(yīng)的控制命令。S240、執(zhí)行上述確定出的控制命令。以上所述僅是本發(fā)明的較佳實(shí)施例而已，并非對(duì)本發(fā)明作任何形式上的限制，雖然本發(fā)明已以較佳實(shí)施例揭露如上，然而并非用以限定本發(fā)明，任何熟悉本專業(yè)的技術(shù)人員在不脫離本發(fā)明技術(shù)方案范圍內(nèi)，當(dāng)可利用上述揭示的技術(shù)內(nèi)容作出些許更動(dòng)或修飾為等同變化的等效實(shí)施例，但凡是未脫離本發(fā)明技術(shù)方案的內(nèi)容，依據(jù)本發(fā)明的技術(shù)實(shí)質(zhì)對(duì)以上實(shí)施例所作的任何簡(jiǎn)單修改、等同變化與修飾，均仍屬于本發(fā)明技術(shù)方案的范圍內(nèi)。
權(quán)利要求
1.一種人機(jī)互動(dòng)系統(tǒng)，其特征在于，所述系統(tǒng)包括視頻捕捉裝置和控制裝置； 所述視頻捕捉裝置，用于實(shí)時(shí)攝取圖像，并輸出； 所述控制裝置包括 接收模塊，用于接收所述視頻捕捉裝置傳輸來的圖像； 面部表情提取模塊，用于從所述接收模塊接收到的圖像中提取用戶面部的熱點(diǎn)區(qū)域信息，并根據(jù)所述熱點(diǎn)區(qū)域信息確定用戶的面部表情信息； 存儲(chǔ)模塊，用于預(yù)先存儲(chǔ)面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息； 控制模塊，用于將面部表情提取模塊確定出的面部表情信息在所述存儲(chǔ)模塊中存儲(chǔ)的對(duì)應(yīng)關(guān)系信息中進(jìn)行匹配查找，以確定面部表情提取模塊確定出的面部表情信息對(duì)應(yīng)的控制命令； 執(zhí)行模塊，用于執(zhí)行所述控制模塊確定出的控制命令。
2.如權(quán)利要求I所述的人機(jī)互動(dòng)系統(tǒng)，其特征在于，所述視頻捕捉裝置與所述控制裝置集成設(shè)置于同一電子設(shè)備中。
3.如權(quán)利要求2所述的人機(jī)互動(dòng)系統(tǒng)，其特征在于，所述電子設(shè)備包括計(jì)算機(jī)、游戲機(jī)、移動(dòng)電話、平板電腦、機(jī)頂盒、電視機(jī)頂盒一體機(jī)或者電視機(jī)。
4.如權(quán)利要求I所述的人機(jī)互動(dòng)系統(tǒng)，其特征在于，所述視頻捕捉裝置與所述控制裝置獨(dú)立分離設(shè)置，且所述視頻捕捉裝置與所述控制裝置之間通過有線方式連接、或者通過無線方式連接。
5.如權(quán)利要求4所述的人機(jī)互動(dòng)系統(tǒng)，其特征在于，所述控制裝置設(shè)置于計(jì)算機(jī)、游戲機(jī)、移動(dòng)電話、平板電腦、機(jī)頂盒、電視機(jī)頂盒一體機(jī)或者電視機(jī)中。
6.一種人機(jī)互動(dòng)方法，其特征在于，所述方法包括 實(shí)時(shí)攝取圖像； 從所述攝取的圖像中提取用戶面部的熱點(diǎn)區(qū)域信息； 根據(jù)所述熱點(diǎn)區(qū)域信息確定用戶的面部表情信息； 將所述面部表情信息在預(yù)先存儲(chǔ)的面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息中匹配查找，以確定所述用戶的面部表情信息對(duì)應(yīng)的控制命令； 執(zhí)行所述確定出的控制命令。
全文摘要
本發(fā)明是有關(guān)于一種人機(jī)互動(dòng)系統(tǒng)和方法。其中的系統(tǒng)包括視頻捕捉裝置和控制裝置；視頻捕捉裝置用于實(shí)時(shí)攝取圖像并輸出；控制裝置包括接收模塊，用于接收所述圖像；面部表情提取模塊，用于從所述圖像中提取用戶面部的熱點(diǎn)區(qū)域信息，并根據(jù)熱點(diǎn)區(qū)域信息確定用戶的面部表情信息；存儲(chǔ)模塊，用于預(yù)先存儲(chǔ)面部表情信息與控制命令的對(duì)應(yīng)關(guān)系信息；控制模塊，用于將上述確定出的面部表情信息在存儲(chǔ)模塊中存儲(chǔ)的對(duì)應(yīng)關(guān)系信息中進(jìn)行匹配查找，以確定面部表情提取模塊確定出的面部表情信息對(duì)應(yīng)的控制命令；執(zhí)行模塊，用于執(zhí)行所述控制模塊確定出的控制命令。本發(fā)明提供的技術(shù)方案能夠基于用戶面部表情實(shí)現(xiàn)人機(jī)互動(dòng)，從而使人機(jī)互動(dòng)的實(shí)現(xiàn)方式多元化。
文檔編號(hào)G06K9/00GK102955565SQ20111025470
公開日2013年3月6日 申請(qǐng)日期2011年8月31日 優(yōu)先權(quán)日2011年8月31日
發(fā)明者吳冠廷 申請(qǐng)人:德信互動(dòng)科技(北京)有限公司