專利名稱：用于對(duì)閉眼歸類的方法
技術(shù)領(lǐng)域：
本發(fā)明涉及與例如用于自動(dòng)困倦檢測(cè)的由車輛實(shí)現(xiàn)的方法有關(guān)的改進(jìn)，具體地，涉及用于對(duì)閉眼歸類的方法和相應(yīng)系統(tǒng)，以用于改善例如困倦檢測(cè)方法的可靠性。
背景技術(shù)：
交通事故的發(fā)生時(shí)常是由于例如因困倦導(dǎo)致的司機(jī)反常造成的。為了防止由司機(jī)反常造成的事故，可能至關(guān)重要的是為司機(jī)提供警告消息以重新建立司機(jī)對(duì)周圍交通形勢(shì)的注意，或者在危急情況下建議司機(jī)采取剎車或換成車輛的另一司機(jī)。近來，在開發(fā)困倦檢測(cè)算法上已取得很大進(jìn)步，這些算法基于使用監(jiān)視傳感器(例如攝像機(jī)等)檢測(cè)駕駛員的閉眼。這些算法可以用在圖像輸入單元中，該圖像輸入單元通過使用監(jiān)視傳感器來檢測(cè)司機(jī)的臉部和眼睛。以此，可檢測(cè)司機(jī)的注視方向，例如車輛司機(jī)當(dāng)前正在看的方向。具有圖像輸入單元的系統(tǒng)的示例可參見US 2003/039 387。US 2003/039 387的圖像輸入單元輸入包括司機(jī)臉部區(qū)域的圖像，以指明司機(jī)的注視或臉部方向。該系統(tǒng)基于接收到的圖像輸入來生成輸入圖案，以用于確定司機(jī)的注視或臉部方向。此外，提供包括多個(gè)存儲(chǔ)目標(biāo)(即司機(jī)曾經(jīng)看過的車輛內(nèi)部和外部的位置)的字典圖案。目標(biāo)可以例如為側(cè)視鏡、后視鏡、信息娛樂系統(tǒng)等。此外，該系統(tǒng)生成的輸入圖案與存儲(chǔ)目標(biāo)進(jìn)行對(duì)比，以確定司機(jī)的當(dāng)前注視或臉部方向。然而，即使用于檢測(cè)司機(jī)眼睛的系統(tǒng)已變得越來越復(fù)雜，但是所述系統(tǒng)未考慮到存在可能導(dǎo)致司機(jī)減小眼睛睜開大小或目光轉(zhuǎn)向特定方向(例如由于車箱內(nèi)變化的光照條件)的除困倦之外的其它因素。這還可能例如由外部因素(例如直射的陽(yáng)光、閃光、夜里來自對(duì)向車流的前燈燈光等)導(dǎo)致。此外，如果司機(jī)正向下看或斜視，則系統(tǒng)可能將此檢測(cè)為閉眼。因此存在如下風(fēng)險(xiǎn):當(dāng)事實(shí)上車輛司機(jī)充分意識(shí)到當(dāng)前形勢(shì)時(shí)卻為該司機(jī)提供針對(duì)困倦司機(jī)的警告消息。因此，期望提供一種在向司機(jī)提供警告消息之前辨別檢測(cè)到的閉眼的實(shí)際因素的方法。

發(fā)明內(nèi)容
根據(jù)本發(fā)明的一方面，通過一種用于改善來自圖像傳感器的一部分生理數(shù)據(jù)的可靠性的方法，以至少部分解決以上問題，其中該圖像傳感器監(jiān)視位于車輛駕駛室中的駕駛員，該方法包括:從圖像傳感器接收生理數(shù)據(jù)，該生理數(shù)據(jù)包括與駕駛員的眼睛、臉部、頭部、胳膊和身體動(dòng)作中的至少一個(gè)有關(guān)的信息；基于生理數(shù)據(jù)來識(shí)別駕駛員的眼皮閉合、眼睛動(dòng)作或頭部動(dòng)作中的至少一個(gè)的跡象；將生理數(shù)據(jù)和駕駛室內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較；并且通過將識(shí)別出的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作與比較結(jié)果關(guān)聯(lián)，對(duì)眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作的類型進(jìn)行歸類。本發(fā)明基于以下理解:通過將生理數(shù)據(jù)和駕駛室內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較，可以提供穩(wěn)固且可靠的方法，以用于確定例如識(shí)別出的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作是否是被正確識(shí)別的，或者是例如由測(cè)量數(shù)據(jù)缺陷所致。例如，如果從圖像傳感器接收到的信息是物理上不可能的眼睛閃變運(yùn)動(dòng)，則與預(yù)定規(guī)則集合的比較可以確定所接收到的信息由測(cè)量數(shù)據(jù)缺陷導(dǎo)致。這個(gè)缺陷可能由例如以下導(dǎo)致:圖像傳感器此刻無(wú)法定位并提供駕駛員眼睛的精確圖像。根據(jù)另一示例，如果車輛駕駛員突然從其肩部上面看過去以查看是否他正被另一車輛超過，則圖像傳感器可能失去對(duì)例如駕駛員眼睛的跟蹤，取而代之的是錯(cuò)誤識(shí)別成眼皮閉合。而與預(yù)定規(guī)則集合的比較可以確定所識(shí)別出的眼皮閉合實(shí)際上是由駕駛員從其肩部上面看過去而導(dǎo)致的，而非真正的眼皮閉合。因此，在這個(gè)示例中，比較的結(jié)果由于為錯(cuò)誤而可以被過濾掉。根據(jù)又一示例，如果車輛駕駛員突然由于陽(yáng)光或夜里對(duì)面來車的前燈燈光(即，從外面照進(jìn)車廂的光)而致眩目，則駕駛員可能轉(zhuǎn)頭或者閉上其眼皮，其方式可能由圖像傳感器識(shí)別為例如由困倦導(dǎo)致的眼皮閉合。因此，由于車輛中的光照條件使得駕駛員此時(shí)可能已對(duì)亮光有反應(yīng)并進(jìn)而意識(shí)到周圍交通環(huán)境，所以與預(yù)定規(guī)則集合的比較此時(shí)可過濾掉已記錄的眼皮閉
口 O措辭“生理數(shù)據(jù)”應(yīng)在以下理解為可以由識(shí)別例如駕駛員的眼睛、臉部、身體、以及眼睛注視方向、眼皮閉合等等的基于圖像的系統(tǒng)識(shí)別出的所有類型的數(shù)據(jù)。此外，措辭“識(shí)別眼皮閉合的跡象”應(yīng)理解為:基于圖像的系統(tǒng)識(shí)別出駕駛員正在(快速或慢速)眨眼或閉合其眼睛。此外，向基于圖像的系統(tǒng)提供駕駛室內(nèi)的光照條件可以例如經(jīng)由單獨(dú)的光傳感器或該基于圖像的系統(tǒng)本身進(jìn)行。單獨(dú)的光傳感器可以例如是紅外線傳感器(IR)、近紅外線傳感器(NIR)，具有光敏特性的攝像機(jī)等等。此外，將生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較可以包括:識(shí)別由生理數(shù)據(jù)低于預(yù)定閾值而構(gòu)成的置信指標(biāo)，并且當(dāng)置信水平低于預(yù)定閾值時(shí)規(guī)定對(duì)生理數(shù)據(jù)的歸類錯(cuò)誤。因此，如果生理數(shù)據(jù)表現(xiàn)出的方式或多或少在物理上不可能(即，更可能是圖像傳感器失去對(duì)駕駛員的眼睛、胳膊和/或身體的位置的追蹤)，則可以得出歸類錯(cuò)誤?！拔锢砩喜豢赡堋钡男袨榭梢岳缡巧頂?shù)據(jù)指出頭部和/或身體轉(zhuǎn)動(dòng)等的頻率異常高的情況。又進(jìn)一步地，將生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較可以包括:識(shí)別由生理數(shù)據(jù)高于預(yù)定閾值而構(gòu)成的臉部位置和/或方向的變化，并且如果臉部位置和/或方向的變化高于預(yù)定閾值時(shí)規(guī)定對(duì)生理數(shù)據(jù)的歸類錯(cuò)誤。例如，如果車輛駕駛員的臉部朝向后視鏡之一的方向且圖像傳感器識(shí)別出眼皮閉合，則由于更可能是圖像傳感器失去對(duì)眼睛的追蹤并且駕駛員完全意識(shí)到交通形勢(shì)，所以可以規(guī)定歸類錯(cuò)誤。根據(jù)又一實(shí)施例，將生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較包括:估計(jì)在由生理數(shù)據(jù)構(gòu)成的眼皮動(dòng)作、眼睛動(dòng)作和/或頭部動(dòng)作與預(yù)定的眼皮動(dòng)作、眼睛動(dòng)作和/或頭部動(dòng)作模板之間的匹配度，并且當(dāng)匹配度低于預(yù)定閾值時(shí)規(guī)定對(duì)生理數(shù)據(jù)的歸類錯(cuò)誤。根據(jù)又一實(shí)施例，其中，將生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較，包括:識(shí)別表示駕駛員非困倦狀態(tài)的眼睛、頭部和身體動(dòng)作中的至少一個(gè)，并且如果識(shí)別出非困倦狀態(tài)，則規(guī)定對(duì)生理數(shù)據(jù)歸類為非困倦。根據(jù)又一實(shí)施例，將駕駛室內(nèi)的光照條件與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較，包括:識(shí)別朝向駕駛員的光照度以及駕駛室內(nèi)變化的光照條件中的至少一個(gè)。根據(jù)又一實(shí)施例，識(shí)別朝向駕駛員的光照度以及駕駛室內(nèi)變化的光照條件中的至少一個(gè)，包括:分析圖像數(shù)據(jù)的對(duì)比度、光照度和/或光照度頻率中的至少一個(gè)，該圖像數(shù)據(jù)由來自圖像傳感器或來自布置在車輛駕駛室內(nèi)的光傳感器的生理數(shù)據(jù)構(gòu)成。根據(jù)本發(fā)明的另一方面，提供了一種用于改善來自圖像傳感器的一部分生理數(shù)據(jù)的可靠性的控制系統(tǒng)，該圖像傳感器監(jiān)視位于車輛駕駛室中的駕駛員，該控制裝置包括控制單元，該控制單元用于:從圖像傳感器接收生理數(shù)據(jù)，該生理數(shù)據(jù)包括與駕駛員的眼睛、臉部、頭部、胳膊和身體動(dòng)作中的至少一個(gè)有關(guān)的信息；基于生理數(shù)據(jù)來識(shí)別駕駛員的眼皮閉合、眼睛動(dòng)作或頭部動(dòng)作中的至少一個(gè)的跡象；將生理數(shù)據(jù)和駕駛室內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較；并且通過將識(shí)別出的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作與比較結(jié)果關(guān)聯(lián)，對(duì)眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作的類型進(jìn)行歸類。本發(fā)明該方面提供了如上關(guān)于本發(fā)明的以上方面論述的類似優(yōu)點(diǎn)。應(yīng)當(dāng)注意到，控制系統(tǒng)優(yōu)選是用于車輛例如小汽車、公共汽車、卡車的駕駛員輔助系統(tǒng)。以下將關(guān)于本發(fā)明的具體描述而給出更全面的論述。顯然，其它車輛類型也是可以的，并且位于本發(fā)明的范圍之內(nèi)。根據(jù)本發(fā)明又一方面，提供了一種計(jì)算機(jī)可讀介質(zhì)，其包含用于改善來自圖像傳感器的一部分生理數(shù)據(jù)的可靠性的計(jì)算機(jī)程序產(chǎn)品，該圖像傳感器監(jiān)視位于車輛駕駛室中的駕駛員，該計(jì)算機(jī)程序產(chǎn)品包括代碼，該代碼在由處理器執(zhí)行時(shí)用于:從圖像傳感器接收生理數(shù)據(jù)，該生理數(shù)據(jù)包括與駕駛員的眼睛、臉部、頭部、胳膊和身體動(dòng)作中的至少一個(gè)有關(guān)的信息；基于生理數(shù)據(jù)來識(shí)別駕駛員的眼皮閉合、眼睛動(dòng)作或頭部動(dòng)作中的至少一個(gè)的跡象；將生理數(shù)據(jù)和在駕駛室內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較；并且通過將識(shí)別出的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作與比較結(jié)果關(guān)聯(lián)，對(duì)眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作類型進(jìn)行歸類。同樣的，本發(fā)明的這個(gè)方面提供了如上關(guān)于本發(fā)明以上方面論述的類似優(yōu)點(diǎn)。當(dāng)研究所附權(quán)利要求和以下說明時(shí)，會(huì)明白本發(fā)明的進(jìn)一步特性和優(yōu)點(diǎn)。技術(shù)人員意識(shí)到，在不脫離本發(fā)明范圍的情況下，本發(fā)明的不同特征可以結(jié)合以創(chuàng)建除了以下描述的那些實(shí)施例以外的實(shí)施例。


從以下詳細(xì)描述和附圖將容易理解本發(fā)明的不同方面，包括本發(fā)明的特定特征和優(yōu)點(diǎn)，在該附圖中:圖1示出配備有內(nèi)部傳感器的車輛內(nèi)部的立體圖，以及在該車輛內(nèi)通常駕駛員會(huì)注視的多個(gè)位置；圖2示出車輛駕駛員的臉部的坐標(biāo)系；并且圖3概念性示出根據(jù)本發(fā)明當(dāng)前優(yōu)選實(shí)施例的控制系統(tǒng)的邏輯元件。
具體實(shí)施例方式現(xiàn)在將參照附圖在下文中更加全面地描述本發(fā)明，在附圖中示出了本發(fā)明的示例性實(shí)施例。然而，本發(fā)明可以以多種不同形式實(shí)施，并且不應(yīng)解釋為限于本文中闡述的實(shí)施例；相反地，為了徹底性和完整性而提供這些實(shí)施例。相同的參考標(biāo)號(hào)在全文中指代相同的元件。以下參照用于改善對(duì)車輛駕駛員閉眼進(jìn)行歸類的方法來描述本發(fā)明。車輛優(yōu)選配備有:用于獲得車輛駕駛員信息的內(nèi)部傳感器，為了更好理解，現(xiàn)在參考圖1，其示出了車輛(此處被示為汽車100)的駕駛室114。在該示出的實(shí)施例中，汽車100包括車輛駕駛員(未示出)和內(nèi)部傳感器(此處被示為攝像機(jī)系統(tǒng)102)。攝像機(jī)系統(tǒng)102被布置用于在車輛行駛期間確定車輛駕駛員的行為。此外，攝像機(jī)系統(tǒng)102可以被布置為關(guān)注駕駛員臉部、胳膊和身體的預(yù)定數(shù)量位置。這些位置可以例如為眼睛、眼皮、眉毛、鼻子、嘴、面頰等等。攝像機(jī)系統(tǒng)102可以針對(duì)正常駕駛汽車100的特定駕駛員202進(jìn)行預(yù)校準(zhǔn)，或者在每次駕駛員202進(jìn)入汽車100駕駛座時(shí)進(jìn)行校準(zhǔn)。當(dāng)攝像機(jī)系統(tǒng)102檢測(cè)到了駕駛員臉部的不同位置時(shí)，可以估計(jì)臉部行為。攝像機(jī)系統(tǒng)102因此可以檢測(cè)例如頭部和眼睛的方向、頭部姿態(tài)、眼睛掃視、頭部-眼睛急動(dòng)、閉眼、閉眼速度、胳膊動(dòng)作、身體動(dòng)作等。通過利用與駕駛員臉部204結(jié)合的坐標(biāo)系202 (如圖2中所示)，攝像機(jī)系統(tǒng)102還可以檢測(cè)駕駛員頭部是否正向右或向左轉(zhuǎn)(偏轉(zhuǎn))205、向上或向下轉(zhuǎn)(俯仰)206、或者朝右肩或左肩傾斜(晃動(dòng))207。臉部204的坐標(biāo)系202優(yōu)選是其原點(diǎn)定位于駕駛員眼睛之間的極坐標(biāo)系。此外，汽車還包括內(nèi)部光傳感器104，在所述實(shí)施例中，該內(nèi)部光傳感器104在汽車100的前進(jìn)方向上位于內(nèi)后視鏡106背后。當(dāng)然，內(nèi)部光傳感器104的確切定位可以取決于車輛類型及其具體內(nèi)部設(shè)計(jì)。即，在例如卡車中，可能不存在任何后視鏡，因此內(nèi)部光傳感器必須位于另一合適位置。內(nèi)部光傳感器104被布置用于檢測(cè)可能致使車輛駕駛員起反應(yīng)的、到達(dá)駕駛室的迎面而來的光，例如明亮的陽(yáng)光或夜里來自對(duì)向車流的前燈燈光。又進(jìn)一步而言，車廂中具有車輛駕駛員正常情況下會(huì)注意到的一些位置。這些位置是例如外部后視鏡108、信息娛樂系統(tǒng)110、速度儀表盤112，在駕駛員旁邊的乘客、變速桿等?，F(xiàn)在參照?qǐng)D3，示出用于提供根據(jù)本發(fā)明的方法的系統(tǒng)300的示例性實(shí)施例。系統(tǒng)300包括:接收來自攝像機(jī)系統(tǒng)102的信息的圖像傳感器302、內(nèi)部光傳感器304、眼皮閉合識(shí)別模塊306、比較操作模塊308以及困倦檢測(cè)模塊310。然而應(yīng)注意的是，眼皮閉合模塊306以及比較操作模塊308可為同一個(gè)模塊，并且僅為了說明目的而彼此分開。此外，圖像傳感器302接收車輛駕駛員的生理數(shù)據(jù)并且將該信息發(fā)送給眼皮閉合模塊306以及比較操作模塊308。比較操作模塊還從圖像傳感器302接收關(guān)于例如駕駛員的眼睛、胳膊和身體動(dòng)作的信息。此外，內(nèi)部光傳感器304接收關(guān)于駕駛室114內(nèi)的光照條件(例如明亮的陽(yáng)光、夜里來自對(duì)向車流前燈的燈光)的信息。內(nèi)部光傳感器304還將接收到的光照條件提供給比較操作模塊308。進(jìn)一步地，當(dāng)比較操作模塊308接收到了關(guān)于駕駛室114內(nèi)的光照條件的信息、以及關(guān)于駕駛員的眼睛、胳膊和身體動(dòng)作的生理數(shù)據(jù)時(shí)，比較操作模塊308將該信息相對(duì)于預(yù)定規(guī)則集合進(jìn)行比較，以評(píng)估駕駛員的當(dāng)前狀態(tài)。此后，困倦檢測(cè)模塊310從眼皮閉合模塊306接收檢測(cè)到的眼皮閉合，并且從比較操作模塊308接收與檢測(cè)到的眼皮閉合的實(shí)際原因有關(guān)的歸類。根據(jù)示例，預(yù)定規(guī)則集合可以包括如上所述在駕駛室114內(nèi)的多個(gè)位置，以使得系統(tǒng)可基于識(shí)別出的眼睛注視方向和/或臉部方向，確定車輛駕駛員當(dāng)前正注意這些位置中的一個(gè)。例如，如果系統(tǒng)識(shí)別出駕駛員的眼皮閉合，且同時(shí)識(shí)別出駕駛員臉部朝著左側(cè)后視鏡108方向，則系統(tǒng)可以規(guī)定所識(shí)別出的眼皮閉合為錯(cuò)誤歸類，這是因?yàn)?，更可能是駕駛員充分意識(shí)到形勢(shì)并且最可能由于駕駛員頭部的轉(zhuǎn)動(dòng)(而圖像傳感器無(wú)法正確跟隨該轉(zhuǎn)動(dòng))引起檢測(cè)到眼皮閉合。此外，預(yù)定規(guī)則集合還可以包括物理上可能或不會(huì)發(fā)生的特定圖案。例如，如果圖像傳感器檢測(cè)到駕駛員眼睛正以看起來不合情理的方式不規(guī)律的上/下或左/右運(yùn)動(dòng)，則預(yù)定規(guī)則可以將檢測(cè)出的眼睛行為歸類為錯(cuò)誤。根據(jù)另一示例，如果在圖像傳感器302檢測(cè)到駕駛員的眼皮閉合的同時(shí)內(nèi)部光傳感器304檢測(cè)到照向車輛駕駛員的亮光，則比較操作模塊308可以規(guī)定該眼皮閉合為錯(cuò)誤歸類，這是因?yàn)?，?shí)際原因更可能是車輛駕駛員的眼睛瞇著以躲避眩目光。應(yīng)當(dāng)注意到，因?yàn)閳D像傳感器302可能例如由于變化的光照條件而失去其校準(zhǔn)，所以來自圖像傳感器302的數(shù)據(jù)不僅可能在短時(shí)期(例如秒)受影響，還可能在更長(zhǎng)時(shí)間(例如分鐘)內(nèi)受影響。即使已經(jīng)參考本發(fā)明的特定示例性實(shí)施例描述了本發(fā)明，但是本領(lǐng)域技術(shù)技術(shù)人員也容易想到很多不同的替選、改進(jìn)等。通過對(duì)附圖、公開內(nèi)容和所附權(quán)利要求的研究，技術(shù)人員在實(shí)施請(qǐng)求保護(hù)的本發(fā)明時(shí)能夠理解及實(shí)現(xiàn)對(duì)所公開實(shí)施例的變型。例如，本發(fā)明參照一些實(shí)施例在上文進(jìn)行了大體描述。然而，如技術(shù)人員容易意識(shí)到的那樣，除以上公開的實(shí)施例以外的其它實(shí)施例在所附權(quán)利要求限定的本發(fā)明范圍內(nèi)是同等可能的。例如，除了以上描述的小汽車以外，本發(fā)明還可應(yīng)用于卡車、公共汽車、翻斗車、輪式裝載機(jī)、以及其它類型車輛。在權(quán)利要求中，詞語(yǔ)“包括”不排除其它元件或步驟，并且不定冠詞“一”不排除多個(gè)。單一計(jì)算機(jī)或其它單元可以完成在權(quán)利要求中記載的若干項(xiàng)目的功能。一些特定措施被記載在相互不同的從屬權(quán)利要求中，僅僅這一情況并不表示這些措施的組合無(wú)法用于獲得優(yōu)勢(shì)。
權(quán)利要求
1.一種用于改善來自圖像傳感器(302)的一部分生理數(shù)據(jù)的可靠性的方法，所述圖像傳感器(302)監(jiān)視位于車輛(100)的駕駛室(114)中的駕駛員(202)，所述方法包括: -從所述圖像傳感器(302)接收生理數(shù)據(jù)，所述生理數(shù)據(jù)包括與所述駕駛員(202)的眼睛、臉部、頭部、胳膊和身體動(dòng)作中的至少一個(gè)有關(guān)的信息； -基于所述生理數(shù)據(jù)來識(shí)別所述駕駛員(202)的眼皮閉合、眼睛動(dòng)作或頭部動(dòng)作中的至少一個(gè)的跡象； -將所述生理數(shù)據(jù)和所述駕駛室內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較；并且 -通過將所識(shí)別的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作與所述比較的結(jié)果關(guān)聯(lián)，對(duì)所述眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作的類型進(jìn)行歸類。
2.根據(jù)權(quán)利要求1所述的方法，其中，將所述生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較包括:識(shí)別由所述生理數(shù)據(jù)低于預(yù)定閾值而構(gòu)成的置信指標(biāo)，并且當(dāng)置信水平低于所述預(yù)定閾值時(shí)規(guī)定對(duì)所述生理數(shù)據(jù)的歸類錯(cuò)誤。
3.根據(jù)權(quán)利要求1或2所述的方法，其中，將所述生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較包括:識(shí)別由所述生理數(shù)據(jù)高于預(yù)定閾值而構(gòu)成的所述臉部的位置和/或方向的變化，并且如果所述臉部的位置和/或方向的變化高于所述預(yù)定閾值時(shí)規(guī)定對(duì)所述生理數(shù)據(jù)的歸類錯(cuò)誤。
4.根據(jù)權(quán)利要求1至3中的任一項(xiàng)所述的方法，其中，將所述生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較，包括:估計(jì)在由所述生理數(shù)據(jù)構(gòu)成的眼皮動(dòng)作、眼睛動(dòng)作和/或頭部動(dòng)作與預(yù)定的眼皮動(dòng)作、眼睛動(dòng)作和/或頭部動(dòng)作模板之間的匹配度，并且當(dāng)所述匹配度低于預(yù)定閾 值時(shí)規(guī)定對(duì)所述生理數(shù)據(jù)的歸類錯(cuò)誤。
5.根據(jù)前述權(quán)利要求中的任一項(xiàng)所述的方法，其中，將所述生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較，包括:識(shí)別表示所述駕駛員(202)的非困倦狀態(tài)的眼睛、頭部和身體動(dòng)作中的至少一個(gè)，并且如果識(shí)別出非困倦狀態(tài)，則規(guī)定對(duì)所述生理數(shù)據(jù)歸類為非困倦。
6.根據(jù)前述權(quán)利要求中的任一項(xiàng)所述的方法，其中，將在所述駕駛室(114)內(nèi)的所述光照條件與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較，包括:識(shí)別朝向所述駕駛員的光照度以及所述駕駛室(114)內(nèi)變化的光照條件中的至少一個(gè)。
7.根據(jù)權(quán)利要求6所述的方法，其中，識(shí)別朝向所述駕駛員的光照度以及所述駕駛室內(nèi)變化的光照條件中的至少一個(gè)，包括:分析圖像數(shù)據(jù)的對(duì)比度、光照度和/或光照度頻率中的至少一個(gè)，所述圖像數(shù)據(jù)由以下構(gòu)成: -來自所述圖像傳感器(302)的所述生理數(shù)據(jù)，或 -來自布置在所述車輛(100)的駕駛室(114)內(nèi)的光傳感器(304)的所述生理數(shù)據(jù)。
8.一種用于改善來自圖像傳感器(302)的一部分生理數(shù)據(jù)的可靠性的控制系統(tǒng)(300)，所述圖像傳感器(302)監(jiān)視位于車輛(100)的駕駛室(114)中的駕駛員(202)，所述控制裝置包括控制單元，所述控制單元用于: -從所述圖像傳感器(302)接收生理數(shù)據(jù)，所述生理數(shù)據(jù)包括與所述駕駛員(202)的眼睛、臉部、頭部、胳膊和身體動(dòng)作中的至少一個(gè)有關(guān)的信息； -基于所述生理數(shù)據(jù)來識(shí)別所述駕駛員(202)的眼皮閉合、眼睛動(dòng)作或頭部動(dòng)作中的至少一個(gè)的跡象； -將所述生理數(shù)據(jù)和所述駕駛室(114)內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較；并且 -通過將所識(shí)別出的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作與所述比較的結(jié)果關(guān)聯(lián)，對(duì)所述眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作類型進(jìn)行歸類。
9.根據(jù)權(quán)利要求8所述的控制系統(tǒng)(300)，其中，所述控制單元還用于:當(dāng)將所述生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較時(shí)，識(shí)別由所述生理數(shù)據(jù)低于預(yù)定閾值而構(gòu)成的置信指標(biāo)，并且如果置信水平低于所述預(yù)定閾值則規(guī)定對(duì)所述生理數(shù)據(jù)的歸類錯(cuò)誤。
10.根據(jù)權(quán)利要求8或9所述的控制系統(tǒng)(300)，其中，所述控制單元還用于:當(dāng)將所述生理數(shù)據(jù)與關(guān)于當(dāng)前駕駛員狀態(tài)的所述預(yù)定規(guī)則集合進(jìn)行比較時(shí)，識(shí)別由所述生理數(shù)據(jù)高于預(yù)定閾值而構(gòu)成的所述臉部的位置和/或方向的變化，并且如果所述臉部的位置和/或方向的變化高于所述預(yù)定閾值則規(guī)定對(duì)所述生理數(shù)據(jù)的歸類錯(cuò)誤。
11.根據(jù)權(quán)利要求8至10中的任一項(xiàng)所述的控制系統(tǒng)(300)，其中，所述控制系統(tǒng)(300)是用于車輛 的駕駛員輔助系統(tǒng)。
全文摘要
本發(fā)明提供一種用于改善來自圖像傳感器(302)的一部分生理數(shù)據(jù)的可靠性的方法，所述圖像傳感器(302)監(jiān)視位于車輛(100)的駕駛室(114)中的駕駛員(202)，所述方法包括從圖像傳感器(302)接收生理數(shù)據(jù)，該生理數(shù)據(jù)包括與所述駕駛員(202)的眼睛、臉部、頭部、胳膊和身體動(dòng)作中的至少一個(gè)有關(guān)的信息；基于所述生理數(shù)據(jù)來識(shí)別所述駕駛員(202)的眼皮閉合、眼睛動(dòng)作或頭部動(dòng)作中的至少一個(gè)的跡象；將生理數(shù)據(jù)和在駕駛室內(nèi)的光照條件中的至少一個(gè)與關(guān)于當(dāng)前駕駛員狀態(tài)的預(yù)定規(guī)則集合進(jìn)行比較；并且通過將識(shí)別出的眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作與比較結(jié)果關(guān)聯(lián)，對(duì)眼皮閉合、眼睛動(dòng)作和/或頭部動(dòng)作類型進(jìn)行歸類。
文檔編號(hào)G06K9/00GK103150545SQ201210299500
公開日2013年6月12日 申請(qǐng)日期2012年8月22日 優(yōu)先權(quán)日2011年9月2日
發(fā)明者丹尼爾·萊溫, 蘇珊娜·萊安德松, 萊娜·韋斯特瓦爾, 彼得·克龍貝里 申請(qǐng)人:沃爾沃汽車公司, 沃爾沃技術(shù)公司