監(jiān)視攝像機(jī)控制裝置以及圖像監(jiān)視系統(tǒng)的制作方法
【專利摘要】在對(duì)多個(gè)區(qū)域進(jìn)行攝像的多個(gè)監(jiān)視攝像機(jī)中，同一物體被重復(fù)地檢測(cè)的情況下，用于根據(jù)各攝像機(jī)的各個(gè)圖像選擇適當(dāng)?shù)膱D像的監(jiān)視攝像機(jī)控制裝置以及圖像監(jiān)視系統(tǒng)中，構(gòu)成為具備：對(duì)監(jiān)視區(qū)域內(nèi)進(jìn)行攝像的多臺(tái)攝像機(jī)(100～102)；從在多臺(tái)攝像機(jī)中獲取的圖像中檢測(cè)物體的識(shí)別部分(104)；和顯示選擇部分(106)，在由多臺(tái)攝像機(jī)重復(fù)進(jìn)行攝像的監(jiān)視區(qū)域內(nèi)檢測(cè)到物體時(shí)，顯示選擇部分從各臺(tái)攝像機(jī)在識(shí)別部分中獲取作為物體的特征量的識(shí)別結(jié)果，并根據(jù)識(shí)別結(jié)果和識(shí)別結(jié)果的優(yōu)先度，對(duì)各臺(tái)攝像機(jī)的圖像設(shè)定與優(yōu)先度相對(duì)應(yīng)的優(yōu)先順序。
【專利說(shuō)明】監(jiān)視攝像機(jī)控制裝置以及圖像監(jiān)視系統(tǒng)

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種圖像監(jiān)視系統(tǒng)，其具有從通過(guò)攝像機(jī)等攝像設(shè)備獲取的圖像中檢測(cè)人物或者移動(dòng)體的識(shí)別裝置，能夠?qū)崿F(xiàn)檢測(cè)入侵者或者檢測(cè)搭載在移動(dòng)機(jī)器人等上的接近者的功能。本發(fā)明尤其涉及一種具有獲取圖像監(jiān)視系統(tǒng)的圖像的功能以及控制圖像顯示的功能的圖像監(jiān)視系統(tǒng)。

【背景技術(shù)】
[0002]已知有具備對(duì)通過(guò)攝像機(jī)等攝像設(shè)備獲取的圖像進(jìn)行識(shí)別處理以檢測(cè)出現(xiàn)在監(jiān)視區(qū)域內(nèi)的人物或者車(chē)輛等移動(dòng)物體的功能的圖像監(jiān)視系統(tǒng)。該圖像監(jiān)視系統(tǒng)具有根據(jù)檢測(cè)結(jié)果僅對(duì)出現(xiàn)了移動(dòng)物體的圖像進(jìn)行記錄的功能、在顯示裝置上顯示警告圖標(biāo)的功能以及使蜂鳴器蜂鳴而喚起監(jiān)視人員注意的功能等。為此，有助于減輕在從前必須不間斷地進(jìn)行確認(rèn)業(yè)務(wù)的監(jiān)視業(yè)務(wù)的負(fù)擔(dān)。此外，在發(fā)生了偷盜等犯罪行為或者非法行為時(shí)，能夠?qū)⒂涗浽谠搱D像監(jiān)視系統(tǒng)中的圖像應(yīng)用于事后的犯罪搜查等。
[0003]近年來(lái)，由于犯罪的多樣化，犯罪數(shù)量的上升和破案率的下降等，商店、金融機(jī)構(gòu)和辦公大樓等的防范意識(shí)提高，使得圖像監(jiān)視系統(tǒng)的引進(jìn)進(jìn)一步得到了發(fā)展。由于圖像記錄裝置的大容量化和網(wǎng)絡(luò)攝像機(jī)等的普及，在各種場(chǎng)所設(shè)置了攝像機(jī)，使得攝像機(jī)的數(shù)量進(jìn)一步增加。如上所述，由于通過(guò)監(jiān)視人員的肉眼從記錄圖像中尋找犯罪行為等的作業(yè)的負(fù)擔(dān)非常大，所以需要進(jìn)一步強(qiáng)化對(duì)監(jiān)視業(yè)務(wù)進(jìn)行支援的功能。
[0004]在此所存在的問(wèn)題是，由于攝像機(jī)的數(shù)量龐大，監(jiān)視人員觀察特定圖像(例如特定人物)的業(yè)務(wù)等變得非常復(fù)雜。若非對(duì)監(jiān)視區(qū)域和監(jiān)視攝像機(jī)的情況非常熟悉的熟練人員，則很難做到高效并且不會(huì)發(fā)生遺漏地觀察圖像。
[0005]作為現(xiàn)有技術(shù)，已知有專利文獻(xiàn)I所公開(kāi)的監(jiān)視系統(tǒng)，其預(yù)先登錄具有云臺(tái)控制功能的攝像機(jī)的移動(dòng)位置，與傳感器的檢測(cè)結(jié)果聯(lián)動(dòng)地使攝像機(jī)的云臺(tái)旋轉(zhuǎn)到規(guī)定的位置，由此來(lái)獲取監(jiān)視區(qū)域的圖像(專利文獻(xiàn)I)。此外，還已知有專利文獻(xiàn)2所公開(kāi)的監(jiān)視系統(tǒng)，其預(yù)先登錄多臺(tái)攝像機(jī)的位置關(guān)系，并根據(jù)用戶的指示或者移動(dòng)物體的移動(dòng)方向等來(lái)切換在監(jiān)視器上顯示的圖像(專利文獻(xiàn)2)。
[0006]在先技術(shù)文獻(xiàn)
[0007]專利文獻(xiàn)
[0008]專利文獻(xiàn)I日本國(guó)專利特開(kāi)2001-275104號(hào)公報(bào)
[0009]專利文獻(xiàn)2日本國(guó)專利特開(kāi)2011-217320號(hào)公報(bào)


【發(fā)明內(nèi)容】

[0010]可是，在專利文獻(xiàn)I所公開(kāi)的監(jiān)視系統(tǒng)中，隨著在系統(tǒng)中運(yùn)行的攝像機(jī)數(shù)量的增加，根據(jù)傳感器檢測(cè)進(jìn)行旋轉(zhuǎn)的攝像機(jī)數(shù)量也相應(yīng)增加，所以需要詳細(xì)地進(jìn)行事先設(shè)定和系統(tǒng)內(nèi)部的調(diào)整，導(dǎo)致監(jiān)視人員的負(fù)擔(dān)增大。
[0011]此外，在通過(guò)監(jiān)視人員一邊操作運(yùn)臺(tái)控制功能一邊使攝像機(jī)動(dòng)作的場(chǎng)合，由于會(huì)產(chǎn)生時(shí)間延遲等，所以在對(duì)入侵者和規(guī)定的人物進(jìn)行追蹤時(shí)，容易產(chǎn)生跟丟的情況。
[0012]為此，作為現(xiàn)有技術(shù)，已經(jīng)開(kāi)發(fā)出了具有識(shí)別功能并能夠自動(dòng)進(jìn)行追蹤的系統(tǒng)。例如在專利文獻(xiàn)2所發(fā)明的監(jiān)視系統(tǒng)中，將設(shè)置在監(jiān)視區(qū)域內(nèi)的多臺(tái)攝像機(jī)設(shè)定為固定攝像機(jī)，預(yù)先登錄其位置關(guān)系，以便能夠利用該位置關(guān)系。具體來(lái)說(shuō)是，當(dāng)各臺(tái)攝像機(jī)的畫(huà)面上的移動(dòng)物體從視角消失后，向監(jiān)視人員提示設(shè)置在其移動(dòng)方向上的攝像機(jī)。此外，在該監(jiān)視系統(tǒng)中，還能夠通過(guò)監(jiān)視人員的輸入裝置來(lái)指定方向。
[0013]可是，雖然該技術(shù)能夠根據(jù)攝像機(jī)的位置關(guān)系來(lái)預(yù)測(cè)移動(dòng)物體的移動(dòng)，并能夠提示此后拍攝到該移動(dòng)物體的攝像機(jī)的圖像。但是，根據(jù)攝像機(jī)的設(shè)置情況，有時(shí)繼續(xù)顯示原來(lái)的圖像可能更為合適。這是因?yàn)?，由于是根?jù)作為被拍攝體的移動(dòng)物體的動(dòng)作等進(jìn)行追蹤，所以如果從不適合獲取用于確定被拍攝體的信息的方向進(jìn)行拍攝(例如在追蹤人物時(shí)，從拍攝不到臉部的區(qū)域進(jìn)行拍攝時(shí)，在追蹤車(chē)輛時(shí)，從拍攝不到車(chē)牌和駕駛員的區(qū)域進(jìn)行拍攝時(shí))，則無(wú)法獲取可動(dòng)物體的重要信息，可能難以作為情況證據(jù)等加以應(yīng)用。
[0014]此外，在攝像機(jī)存在重復(fù)的場(chǎng)合，或者監(jiān)視區(qū)域不是走廊等可動(dòng)區(qū)域受到限制的區(qū)域，而是移動(dòng)物體的可動(dòng)區(qū)域具有自由度的例如辦公室和零售店等開(kāi)放的監(jiān)視區(qū)域等的場(chǎng)合，如果像專利文獻(xiàn)2那樣僅僅在事先登錄攝像機(jī)的配置關(guān)系，則難以進(jìn)行應(yīng)對(duì)。這是因?yàn)椋崾緢D像的攝像機(jī)的選擇條件可能會(huì)變得非常復(fù)雜，而并不僅限于例如移動(dòng)物體朝視角的右側(cè)移動(dòng)了，所以提示設(shè)置在右側(cè)的攝像機(jī)的圖像那樣單純的結(jié)構(gòu)。
[0015]為此，本發(fā)明的目的在于提供一種監(jiān)視攝像機(jī)控制裝置以及圖像監(jiān)視系統(tǒng)，使得在拍攝多個(gè)區(qū)域的多臺(tái)監(jiān)視攝像機(jī)重復(fù)檢測(cè)到相同的物體的場(chǎng)合，能夠從各臺(tái)攝像機(jī)圖像中選擇適當(dāng)?shù)膱D像。
[0016]解決方案
[0017]為了實(shí)現(xiàn)上述目的，例如采用權(quán)利要求中所述的結(jié)構(gòu)。以下列舉一例，其特征在于具有多臺(tái)攝像機(jī)和識(shí)別部分，多臺(tái)攝像機(jī)對(duì)監(jiān)視區(qū)域內(nèi)進(jìn)行攝像，識(shí)別部分從通過(guò)多臺(tái)攝像機(jī)獲取的圖像中檢測(cè)物體，此外還具有顯示選擇部分，在由多臺(tái)攝像機(jī)重復(fù)攝像的監(jiān)視區(qū)域內(nèi)檢測(cè)到物體時(shí)，顯示選擇部分通過(guò)識(shí)別部分從各臺(tái)攝像機(jī)獲取作為物體的特征量的識(shí)別結(jié)果，并根據(jù)識(shí)別結(jié)果和識(shí)別結(jié)果的優(yōu)先度，對(duì)各臺(tái)攝像機(jī)的圖像設(shè)定與優(yōu)先度相對(duì)應(yīng)的優(yōu)先順序。
[0018]發(fā)明效果
[0019]根據(jù)本發(fā)明，在拍攝多個(gè)區(qū)域的多臺(tái)監(jiān)視攝像機(jī)重復(fù)檢測(cè)到相同的物體的場(chǎng)合，能夠從各臺(tái)攝像機(jī)的圖像中提示有助于識(shí)別物體等的信息。

【專利附圖】

【附圖說(shuō)明】
[0020]圖1是表示本發(fā)明的一實(shí)施方式的圖像監(jiān)視系統(tǒng)的方塊圖。
[0021]圖2是本發(fā)明的監(jiān)視區(qū)域和攝像機(jī)的設(shè)置圖。
[0022]圖3是表示本發(fā)明的監(jiān)視區(qū)域和攝像機(jī)的設(shè)置的俯視圖。
[0023]圖4是本發(fā)明的獲取圖像的輸出例。
[0024]圖5是本發(fā)明的攝像機(jī)圖像和監(jiān)視區(qū)域的對(duì)應(yīng)圖。
[0025]圖6是本發(fā)明的識(shí)別部分的處理流程圖。
[0026]圖7是本發(fā)明的識(shí)別結(jié)果的數(shù)據(jù)結(jié)構(gòu)圖。
[0027]圖8是本發(fā)明的攝像機(jī)配置信息的數(shù)據(jù)結(jié)構(gòu)圖。
[0028]圖9是表示本發(fā)明的監(jiān)視區(qū)域上的攝像機(jī)和移動(dòng)物體的信息的俯視圖。
[0029]圖10是表示根據(jù)本發(fā)明的識(shí)別部分獲取的結(jié)果和攝像機(jī)配置信息算出的信息表的圖。
[0030]圖11是表示本發(fā)明的優(yōu)先度設(shè)定單元的圖。
[0031]圖12是表示本發(fā)明的圖像顯示方法的圖。
[0032]圖13是表示本發(fā)明的圖像顯示方法的圖。
[0033]圖14是表示本發(fā)明的圖像顯示的切換方法的圖。
[0034]圖15是表示本發(fā)明的一實(shí)施方式的方塊圖。
[0035]圖16是表示本發(fā)明的一實(shí)施方式的方塊圖。

【具體實(shí)施方式】
[0036]以下參照附圖對(duì)本發(fā)明的一實(shí)施方式進(jìn)行詳細(xì)的說(shuō)明。
[0037]圖1是表示本發(fā)明的一實(shí)施方式所涉及的監(jiān)視攝像機(jī)控制裝置和圖像監(jiān)視系統(tǒng)的方塊圖。在本實(shí)施例中，有時(shí)將監(jiān)視攝像機(jī)控制裝置和圖像監(jiān)視系統(tǒng)簡(jiǎn)稱為圖像監(jiān)視系統(tǒng)或者監(jiān)視系統(tǒng)。
[0038]該圖像監(jiān)視系統(tǒng)具有攝像機(jī)100?102、圖像獲取部分103、識(shí)別部分104、識(shí)別結(jié)果105、顯示選擇部分106、攝像機(jī)配置信息107、輸入單元108、圖像顯示部分109、顯示單元HO。
[0039]該圖像監(jiān)視系統(tǒng)采用了電子計(jì)算機(jī)系統(tǒng)。該電子計(jì)算機(jī)系統(tǒng)的硬件包括CPU、存儲(chǔ)器和I/o等，安裝有能夠執(zhí)行的規(guī)定軟件。由此，能夠?qū)崿F(xiàn)在各圖以方塊形式表示的各個(gè)功能部分。
[0040]為了便于對(duì)實(shí)施方式進(jìn)行說(shuō)明，在本實(shí)施例中，以設(shè)置三臺(tái)攝像機(jī)(攝像機(jī)100?102)的場(chǎng)合為例進(jìn)行說(shuō)明，但并不限定于該結(jié)構(gòu)，也可假設(shè)設(shè)置有2臺(tái)以上攝像機(jī)的結(jié)構(gòu)。攝像機(jī)100?102是包括具有變焦功能的攝像機(jī)透鏡和CMOS (Complementary Metal OxideSemiconductor，互補(bǔ)金屬氧化物半導(dǎo)體)以及CO) (Charge Coupled Device，電荷親合元件)等攝像元件(均未圖示)的攝像設(shè)備。該攝像機(jī)100?102通過(guò)圖像獲取部分103獲取圖像信號(hào)，并輸出到后述的識(shí)別部分104和圖像顯示部分109。
[0041]攝像機(jī)100?102還是載置于云臺(tái)上從而能夠進(jìn)行上下左右旋轉(zhuǎn)的云臺(tái)變焦攝像機(jī)。雖然在本實(shí)施例中未作出說(shuō)明，但當(dāng)然能夠?qū)z像機(jī)100?102的圖像轉(zhuǎn)送到記錄裝置或者顯示裝置，或者進(jìn)行圖像的記錄，以便監(jiān)視人員在進(jìn)行肉眼確認(rèn)時(shí)使用。
[0042]顯示單元110是液晶顯示裝置或者CRT (Cathode Ray Tube，陽(yáng)極射線管)顯示裝置等的顯示裝置。也可以用RGBOted-Green-Blue，紅綠藍(lán))監(jiān)視器輸出終端或者通過(guò)網(wǎng)絡(luò)進(jìn)行數(shù)據(jù)輸出的終端、手機(jī)或者平板電腦等終端來(lái)替代顯示單元110。
[0043]各種參數(shù)的設(shè)定通過(guò)用戶接口進(jìn)行。設(shè)置在圖像獲取部分103、識(shí)別部分104和圖像顯示部分109等中的用戶接口包括鼠標(biāo)和鍵盤(pán)等輸入裝置(未圖示)，用于接受由用戶輸入的參數(shù)等。為了對(duì)本發(fā)明的主要部分進(jìn)行詳細(xì)說(shuō)明，所以在顯示選擇部分106上只記載了輸入?yún)?shù)等用的輸入單元108。
[0044]以下對(duì)本發(fā)明的結(jié)構(gòu)塊進(jìn)行詳細(xì)說(shuō)明。參照?qǐng)D2等對(duì)本發(fā)明的監(jiān)視系統(tǒng)中的攝像機(jī)和移動(dòng)物體的關(guān)系進(jìn)行說(shuō)明。
[0045]圖2表示本實(shí)施例的監(jiān)視區(qū)域205和設(shè)置在該區(qū)域的攝像機(jī)和移動(dòng)物體等的關(guān)系。在監(jiān)視區(qū)域205中設(shè)置有攝像機(jī)200?202 (與圖1的攝像機(jī)100?102相同)，并且存在有物體203。此外，在監(jiān)視區(qū)域205中大都還存在櫥柜等日用品和墻壁、走廊等建筑結(jié)構(gòu)物，在此將其稱為結(jié)構(gòu)物204。在本實(shí)施例中，物體203為人物，其正朝著移動(dòng)方向206的方向移動(dòng)，臉朝著臉部方向207。
[0046]在此，物體包括可動(dòng)物體和靜止物體?？蓜?dòng)物體指可以移動(dòng)和變動(dòng)的物體。在本實(shí)施例中，將可動(dòng)物體舉例為人物，人物是臉和手腳以及人物整體可以移動(dòng)和變動(dòng)的物體。此外，作為可動(dòng)物體，還可以列舉出車(chē)輛、人拿著的包、電腦畫(huà)面以及保險(xiǎn)箱的門(mén)等。例如，電腦的畫(huà)面和保險(xiǎn)箱的門(mén)等是能夠通過(guò)人等進(jìn)行畫(huà)面的朝向和畫(huà)面顯示的變動(dòng)的物體、以及能夠進(jìn)行保險(xiǎn)箱門(mén)打開(kāi)等變動(dòng)的物體。此外，本發(fā)明還能夠應(yīng)用于不進(jìn)行移動(dòng)和變動(dòng)的靜止物體。
[0047]監(jiān)視區(qū)域205的含義與實(shí)際空間等相同，預(yù)先將其坐標(biāo)系統(tǒng)定義為(Xw，Yw, Zw)。
[0048]圖3是從上方觀察到的該監(jiān)視區(qū)域205的俯視圖。
[0049]在圖3中新示出了與各臺(tái)攝像機(jī)相對(duì)應(yīng)的攝像區(qū)域300?302 (其含義與視角相同)。其它部分與圖2—樣，在監(jiān)視區(qū)域205內(nèi)存在物體203，其朝著移動(dòng)方向206移動(dòng)，并且臉朝著臉部方向207。
[0050]圖4表示由攝像機(jī)200?202拍攝到的圖像。攝像機(jī)圖像400?402分別表示由攝像機(jī)200?202拍攝到的圖像，該等圖像通過(guò)圖1的圖像獲取部分103獲取，并且通過(guò)圖像顯示部分109顯示在顯示單元110上。根據(jù)各臺(tái)攝像機(jī)的設(shè)置情況和攝像區(qū)域300?302等，以包括物體203和結(jié)構(gòu)物204的方式進(jìn)行攝像。根據(jù)與攝像機(jī)200?202的位置關(guān)系的不同，拍攝到的物體203和結(jié)構(gòu)物204的樣子、物體203的大小、移動(dòng)方向206和臉部方向207的樣子也不同。
[0051]在圖2至圖4中示出的表示監(jiān)視區(qū)域205和物體203等的圖像中，物體203朝著攝像機(jī)200的方向移動(dòng)，臉部方向207朝著攝像機(jī)201的方向。此外，物體203位于監(jiān)視區(qū)域205的Xw-Yw空間的中心的右下方，攝像機(jī)202是離物體203最近的攝像機(jī)。
[0052]以下說(shuō)明計(jì)算攝像機(jī)與監(jiān)視區(qū)域的對(duì)應(yīng)關(guān)系的一計(jì)算例。
[0053]并不僅限于本實(shí)施例，作為攝像機(jī)與監(jiān)視區(qū)域的對(duì)應(yīng)關(guān)系(也就是攝像機(jī)參數(shù))的計(jì)算方法，已知有從簡(jiǎn)易的近似求解方法到詳細(xì)的求解方法等多種計(jì)算方法。該對(duì)應(yīng)關(guān)系在獲取圖1所示的攝像機(jī)配置信息107時(shí)使用。
[0054]圖5表示監(jiān)視區(qū)域和通過(guò)攝像機(jī)獲取的攝像機(jī)圖像上的對(duì)應(yīng)點(diǎn)。
[0055]具體來(lái)說(shuō)是，可以如圖5所示，采用獲取監(jiān)視區(qū)域501 (含義與監(jiān)視區(qū)域205、實(shí)際空間相同)和通過(guò)攝像機(jī)500獲取的攝像機(jī)圖像502上的對(duì)應(yīng)點(diǎn)的方法。攝像機(jī)500存在于監(jiān)視區(qū)域501內(nèi)的某一個(gè)位置(Xe，Yc, Zc)。
[0056]攝像機(jī)圖像502上的任意的攝像機(jī)圖像位置504與監(jiān)視區(qū)域501內(nèi)的監(jiān)視區(qū)域位置505的對(duì)應(yīng)關(guān)系能夠根據(jù)圖像上的位置和實(shí)際空間的實(shí)測(cè)值求出。作為現(xiàn)有的在獲取該對(duì)應(yīng)點(diǎn)后獲取攝像機(jī)參數(shù)的方法，可以列舉出“R.Y.Tsai，“A versatile cameracalibrat1n technique for high-accuracy 3D machine vis1n metrology usingoff-the-shelf TV camera and IensesiTEEE Journal of Robotics and Automat1n，Vol.RA-3，N0.4，pp.323-344，1987”等的攝像機(jī)校正技術(shù)，在此省略其詳細(xì)說(shuō)明。作為根據(jù)該對(duì)應(yīng)點(diǎn)來(lái)求出攝像機(jī)參數(shù)的方法，已知有通過(guò)獲取4點(diǎn)以上的對(duì)應(yīng)點(diǎn)就能夠獲取攝像機(jī)參數(shù)的方法。
[0057]根據(jù)上述步驟，如圖5所示，能夠求出攝像機(jī)500的俯角Θ、在監(jiān)視區(qū)域501內(nèi)的設(shè)置角度Φ以及攝像機(jī)的高度He等。
[0058]接著按照順序從圖1所示的識(shí)別部分104開(kāi)始進(jìn)行說(shuō)明。在識(shí)別部分104中，對(duì)在圖像獲取部分103獲取的多個(gè)圖像中的任意的圖像執(zhí)行識(shí)別處理。
[0059]圖6是說(shuō)明識(shí)別部分104的處理方法的流程圖，示出了本實(shí)施例的人物的臉部以及臉部方向的檢測(cè)方法。
[0060]已經(jīng)提出有各種檢測(cè)人物臉部的方法，例如已知有“Paul.V1la，M.Jones:“Robust Real-Time Face Detect1n，，，Internat1nal Journal of ComputerVis1n (2004)，Volume:57，Issue:2，Publisher:Springer, Pages: 137-154” 等現(xiàn)有技術(shù)。在該等技術(shù)中，從學(xué)習(xí)樣本獲取臉部的圖像特征，并構(gòu)建識(shí)別器。通過(guò)該識(shí)別器來(lái)判斷臉部在圖像上的哪個(gè)部位。此外，將上述學(xué)習(xí)樣本劃分成正面和側(cè)面等各種局部樣本，然后針對(duì)各種局部樣本構(gòu)建識(shí)別器，由此也能夠識(shí)別臉部方向。以下參照?qǐng)D6進(jìn)行說(shuō)明。
[0061]S60是通過(guò)任意的窗口(檢測(cè)窗)對(duì)整體圖像進(jìn)行操作的步驟。此后，在某個(gè)任意的位置，使用上述識(shí)別器輸出表示是否檢測(cè)到了臉部的信息(S61)。在沒(méi)有檢測(cè)到臉部時(shí)，將窗口移動(dòng)到下一個(gè)位置并反復(fù)進(jìn)行相同的處理。在檢測(cè)到了臉部時(shí)，檢測(cè)臉部的朝向(S62) ο將結(jié)果輸出到規(guī)定的存儲(chǔ)器區(qū)域(S63)。在全部圖像內(nèi)反復(fù)進(jìn)行以上的處理，由此能夠檢測(cè)出臉部的位置和臉部的方向。通過(guò)檢測(cè)臉部的位置，同時(shí)還能夠檢測(cè)出人物所處的位置。最后，確認(rèn)圖像整體的處理(S64)。
[0062]在以上的說(shuō)明中，以臉部的檢測(cè)為例對(duì)識(shí)別部分104進(jìn)行了詳細(xì)的說(shuō)明，而除此以外還存在各種從圖像獲取信息的方法。例如，不檢測(cè)臉部，而是將識(shí)別器設(shè)置成檢測(cè)整個(gè)人物的形狀，由此能夠?qū)崿F(xiàn)對(duì)人物的檢測(cè)，并且同樣能夠檢測(cè)出身體的朝向。此外，通過(guò)檢測(cè)人物在圖像上的位置，自然而然就能夠檢測(cè)出人物的大小(在圖像上的面積)。另外，通過(guò)求出檢測(cè)區(qū)域內(nèi)的在時(shí)間上連續(xù)的多個(gè)幀(圖像)中移動(dòng)的位置，能夠進(jìn)行人物的追蹤處理。
[0063]在檢測(cè)對(duì)象為車(chē)輛時(shí)，能夠獲取車(chē)牌和駕駛員的臉部等任意的圖像上的信息。
[0064]通過(guò)獲取在上述處理中檢測(cè)出的位置、在圖5中所述的監(jiān)視區(qū)域501以及攝像機(jī)圖像502之間的對(duì)應(yīng)關(guān)系，能夠求出監(jiān)視區(qū)域501內(nèi)(在圖2至圖4的監(jiān)視區(qū)域205內(nèi)也一樣)的位置和可動(dòng)方向(圖2至圖4的移動(dòng)方向206)、臉部方向(圖2至圖4的臉部方向207)等。通過(guò)采用本結(jié)構(gòu)，能夠根據(jù)監(jiān)視區(qū)域501和攝像機(jī)圖像502的對(duì)應(yīng)關(guān)系，知道在攝像機(jī)圖像502內(nèi)朝向右方的人物在監(jiān)視區(qū)域內(nèi)朝向哪一個(gè)方向。也就是說(shuō)，不僅能夠獲取位置，還能夠獲取方向。
[0065]圖7是將在識(shí)別部分104中求出的結(jié)果存儲(chǔ)在識(shí)別結(jié)果105時(shí)的數(shù)據(jù)結(jié)構(gòu)的示例。該數(shù)據(jù)由物體ID(D70)、物體在實(shí)際空間中的位置(D71)、在圖像上的面積(D72)、臉部方向(D73)、移動(dòng)矢量(D74)以及其它的信息(D75)構(gòu)成。
[0066]面積(D72)因拍攝物體的各臺(tái)攝像機(jī)的不同而不同，所以如面積/攝像機(jī)I (D76)、面積/攝像機(jī)2 (D77)所示那樣，分別存儲(chǔ)在拍攝到物體的各臺(tái)攝像機(jī)中。
[0067]此外，移動(dòng)矢量(D74)具有從當(dāng)前時(shí)間點(diǎn)t 一直追溯到過(guò)去一定期間的信息，如位置(t) (D79)所示那樣進(jìn)行存儲(chǔ)，并根據(jù)該等信息來(lái)存儲(chǔ)移動(dòng)方向(D78)。移動(dòng)方向(D78)能夠根據(jù)位置(t) (D79)的信息的平均值等算出。該等信息也與臉部方向一樣，如圖5所示求出對(duì)應(yīng)關(guān)系，由此能夠相對(duì)于攝像機(jī)圖像上的方向，求出監(jiān)視區(qū)域內(nèi)的移動(dòng)方向。
[0068]其它信息(D75)也可以通過(guò)進(jìn)行識(shí)別部分104的處理來(lái)使其包含在數(shù)據(jù)中。
[0069]以下對(duì)圖1所示的顯示選擇部分106進(jìn)行說(shuō)明。首先對(duì)顯示選擇部分106中使用的攝像機(jī)配置信息107進(jìn)行說(shuō)明。
[0070]作為攝像機(jī)配置信息107，存在表示攝像機(jī)的位置關(guān)系的信息以及表示與移動(dòng)物體和攝像機(jī)圖像之間關(guān)系的信息。前者可以通過(guò)求出上述攝像機(jī)與監(jiān)視區(qū)域的對(duì)應(yīng)關(guān)系來(lái)得到(當(dāng)然也可以通過(guò)進(jìn)行詳細(xì)的實(shí)測(cè)來(lái)得到)。后者可以通過(guò)攝像機(jī)校正來(lái)得到。
[0071]圖8表示本實(shí)施例的攝像機(jī)的位置關(guān)系的信息的示例。
[0072]攝像機(jī)的位置關(guān)系由任意分配的攝像機(jī)ID(D80)、攝像機(jī)的俯角(D81)、攝像機(jī)的水平角(D82)、視角(D83)和設(shè)置位置(D84)構(gòu)成。分別存儲(chǔ)有角度和絕對(duì)位置。由此，能夠規(guī)定攝像機(jī)的朝向和所要拍攝的圖像，并且還能夠掌握與各臺(tái)攝像機(jī)之間的位置關(guān)系。
[0073]在通過(guò)上述攝像機(jī)校正技術(shù)求出的場(chǎng)合，能夠獲取圖5所示的監(jiān)視區(qū)域501和攝像機(jī)圖像502的透視投影變換的矩陣，根據(jù)實(shí)施方式，該信息也可以存儲(chǔ)在攝像機(jī)配置信息107中。此外，在攝像機(jī)的位置關(guān)系中，由于焦點(diǎn)距離、光軸方向的旋轉(zhuǎn)、攝像元件的大小也有關(guān)聯(lián)，所以能夠?qū)⑵渥鳛樾畔⒆芳印?br> [0074]圖9是表示圖2至圖4所示的實(shí)施例中的從上方觀察到的監(jiān)視區(qū)域205的俯視圖。
[0075]與圖2至圖4 一樣，在圖9中也示出了攝像機(jī)200?202、物體203、結(jié)構(gòu)物204。在此，假定經(jīng)由識(shí)別部分104獲取還包括移動(dòng)方向206和臉部方向207的數(shù)據(jù)。此外，同樣從攝像機(jī)配置信息107獲取了各臺(tái)攝像機(jī)的位置關(guān)系。
[0076]攝像機(jī)200?202以Φ ^?Φ 2的角度設(shè)置在監(jiān)視區(qū)域205的Xw-Yw空間內(nèi)的各個(gè)位置上。物體203正朝著移動(dòng)方向206的方向(角度θν)移動(dòng)，物體203的臉部方向207以Θ f定義。
[0077]使用該等信息，通過(guò)顯示選擇部分106執(zhí)行用于判斷要顯示的圖像的處理。
[0078]圖10表示根據(jù)攝像機(jī)配置信息107中的物體203和攝像機(jī)位置等求出的信息表的示例。信息表中的攝像機(jī)評(píng)價(jià)項(xiàng)目(D1000)由檢測(cè)出的物體與攝像機(jī)之間的距離(D1002)、檢測(cè)出的物體在攝像機(jī)圖像上的面積(D1003)、臉部方向(D1004)、移動(dòng)方向(D1005)構(gòu)成。評(píng)價(jià)值(D1001)是各臺(tái)攝像機(jī)的評(píng)價(jià)值。具體來(lái)說(shuō)是，攝像機(jī)評(píng)價(jià)值(D1000)根據(jù)在上述識(shí)別部分104中求出的物體203的數(shù)據(jù)和攝像機(jī)位置等算出，針對(duì)各臺(tái)攝像機(jī)算出并獲取攝像機(jī)評(píng)價(jià)值(D1000)，并將其作為獲取值(D1001)來(lái)顯示。
[0079]與攝像機(jī)之間的距離(D1002)根據(jù)在臉部檢測(cè)和人物檢測(cè)中檢測(cè)出的在圖像上的位置與監(jiān)視區(qū)域205的關(guān)系來(lái)求出。面積(D1003)同樣也根據(jù)檢測(cè)出的區(qū)域來(lái)求出。作為臉部方向(D1004)，能夠根據(jù)攝像機(jī)圖像上的臉部方向求出監(jiān)視區(qū)域205上的臉部方向0f，能夠根據(jù)與攝像機(jī)200?202的方向?Φ 2的角度的差分算出。例如，攝像機(jī)201(圖10中的攝像機(jī)2)的計(jì)算式如式I所示。
[0080](式I)
[0081]攝像機(jī)2的臉部方向=(<^?Θ f)
[0082]在此，由式I求出的臉部方向越接近180deg，則攝像機(jī)的拍攝方向與臉部方向的正對(duì)度越高，也就是臉部方向越是朝著攝像機(jī)方向。嚴(yán)格來(lái)說(shuō)，還可以相對(duì)于攝像機(jī)的俯角求出臉部在垂直方向上的角度，而在本實(shí)施例中，為了便于說(shuō)明，只對(duì)水平方向進(jìn)行說(shuō)明。
[0083]此外，由于移動(dòng)方向(D1005)也可以通過(guò)相同的方法求出，所以在此省略其說(shuō)明。
[0084]在其它的實(shí)施方式中，還能夠?qū)z測(cè)物體的特定部位時(shí)的檢測(cè)方向、例如包等攜帶物品的手持方向、手等部位的拍攝方向等目標(biāo)部位進(jìn)行定義。在物體為車(chē)輛的場(chǎng)合，還可以根據(jù)車(chē)牌和駕駛員的臉部等來(lái)生成信息表?？梢栽O(shè)置為能夠觀察某一特定行為(事件)的方向。例如，可以列舉出能夠?qū)θ宋锇磯喊粹o的動(dòng)作進(jìn)行拍攝的方向和用手拿起商品的動(dòng)作等。
[0085]該信息表存儲(chǔ)在攝像機(jī)配置信息107中。如此，通過(guò)同時(shí)使用預(yù)先獲取的攝像機(jī)配置信息和識(shí)別結(jié)果，可以更加詳細(xì)地進(jìn)行圖像的選擇。此外，通過(guò)將與攝像機(jī)的位置關(guān)系和識(shí)別處理的結(jié)果反饋給識(shí)別處理，能夠選擇適合于識(shí)別處理的攝像機(jī)和圖像上的位置，所以能夠進(jìn)一步提尚識(shí)別處理的精度。
[0086]以下參照?qǐng)D10所示的信息表說(shuō)明顯示選擇部分106的圖像顯示的切換方法。
[0087]在圖11中示出了在使用從各臺(tái)攝像機(jī)獲取的通過(guò)重復(fù)檢測(cè)同一物體而檢測(cè)出的圖像信息時(shí)對(duì)上述攝像機(jī)評(píng)價(jià)項(xiàng)目中的希望優(yōu)先獲取的攝像機(jī)評(píng)價(jià)項(xiàng)目設(shè)定優(yōu)先度的優(yōu)先度設(shè)定畫(huà)面1100的示例。該等優(yōu)先度例如通過(guò)圖1的輸入單元108來(lái)進(jìn)行設(shè)定。可以在畫(huà)面上設(shè)定各個(gè)優(yōu)先度(在本實(shí)施例中可以選擇O至5的優(yōu)先度)。O表示不使用信息，5表示能夠最為優(yōu)先地使用該信息。在此，還能夠選擇只使用一個(gè)信息進(jìn)行輸出的圖像，通過(guò)求出由數(shù)個(gè)信息綜合而成的評(píng)價(jià)值，能夠生成圖像選擇的基準(zhǔn)。在圖11所示的示例中，將優(yōu)先度設(shè)定為:距離dp = 0，面積sp = I，臉部方向Qfp = 3，移動(dòng)方向θ vp = I。
[0088]其中，將各臺(tái)攝像機(jī)的距離定義為d，將面積定義為S，將臉部方向定義為Θ f，將移動(dòng)方向定義為Θ V，并根據(jù)圖1所示的攝像機(jī)配置信息107針對(duì)各個(gè)值為所有的攝像機(jī)設(shè)定優(yōu)先順序。以攝像機(jī)I為例，定義攝像機(jī)I在所有攝像機(jī)中的順序。此時(shí)的結(jié)果為距離Dl = 3，面積SI = 1，臉部方向Θ fI = 1，移動(dòng)方向Θν1 = 3。由于是在攝像機(jī)中的順序，所以最小值為1，最大值為攝像機(jī)的臺(tái)數(shù)。
[0089]根據(jù)各臺(tái)攝像機(jī)的上述順序以及攝像機(jī)評(píng)價(jià)項(xiàng)目的優(yōu)先度，對(duì)各個(gè)任意的物體計(jì)算各臺(tái)攝像機(jī)的評(píng)價(jià)值，其方法如式2所示。評(píng)價(jià)值的運(yùn)算在圖1所示的顯示選擇部分106中進(jìn)行。
[0090]評(píng)價(jià)值(攝像機(jī)I)
[0091]= (Dl*dp+Sl*sp+Θ fl* Θ fp+θ ν?* θ νρ) ⑵
[0092]根據(jù)式2，能夠在顯示選擇部分106中，將評(píng)價(jià)值最小的攝像機(jī)確定為適合于觀察物體203的攝像機(jī)。
[0093]例如，針對(duì)圖4所示的圖像，根據(jù)圖10和圖11所示的各臺(tái)攝像機(jī)的攝像機(jī)評(píng)價(jià)項(xiàng)目的信息表和攝像機(jī)評(píng)價(jià)項(xiàng)目的優(yōu)先度進(jìn)行計(jì)算，其結(jié)果，能夠計(jì)算出圖4的攝像機(jī)圖像401上所示的圖像是最適合觀察物體203的圖像。
[0094]此外，由于針對(duì)每個(gè)物體計(jì)算各臺(tái)攝像機(jī)的評(píng)價(jià)值，所以能夠根據(jù)評(píng)價(jià)值分別定義適合各個(gè)移動(dòng)物體的攝像機(jī)的圖像。在存在有多個(gè)物體時(shí)，可以采用對(duì)拍攝尺寸最大的人物進(jìn)行控制或者僅對(duì)在輸入畫(huà)面等中選出的人進(jìn)行本發(fā)明的處理等應(yīng)對(duì)方法。
[0095]接著，參照?qǐng)D12對(duì)圖1所示的圖像顯示部分109進(jìn)行說(shuō)明。在此，通過(guò)顯示選擇部分106算出了從圖像獲取部分103獲取的圖像中的應(yīng)優(yōu)先顯示的攝像機(jī)以及從攝像機(jī)獲取的圖像。圖12所示的一部分圖像例與圖4所示的示例相同，在攝像機(jī)2的圖像中拍攝到的移動(dòng)人物的臉部方向朝著攝像機(jī)方向，該圖像是容易觀察的圖像。
[0096]圖12表示監(jiān)視系統(tǒng)的監(jiān)視畫(huà)面的一部分。其中，在小窗區(qū)域1200顯示拍攝監(jiān)視區(qū)域的各臺(tái)攝像機(jī)的圖像，顯示通過(guò)圖像記錄設(shè)備或者矩陣開(kāi)關(guān)等獲取的圖像。進(jìn)一步在大窗區(qū)域1201顯示由顯示選擇部分106選出的圖像。該等多畫(huà)面輸出的設(shè)定等的詳細(xì)情況在此不作說(shuō)明，而畫(huà)面配置可以根據(jù)所使用的攝像機(jī)臺(tái)數(shù)任意進(jìn)行設(shè)定。
[0097]通過(guò)將檢測(cè)到物體的檢測(cè)框1202重疊地輸出到大窗區(qū)域1201，還具有能夠引起監(jiān)視人員注意的作用。此外，使用臉部檢測(cè)的結(jié)果，還能夠?qū)⒏郊有畔?203輸出到畫(huà)面上。
[0098]在圖12所示的畫(huà)面例中，還具有控制記錄圖像等的再現(xiàn)控制部分1204，由此還能夠通過(guò)再現(xiàn)控制部分1204來(lái)再現(xiàn)記錄圖像。通過(guò)將圖10所示的信息表和識(shí)別結(jié)果105等與記錄圖像一起進(jìn)行保存，同樣還可以針對(duì)記錄圖像，提示容易觀察人物的圖像。并且，可以通過(guò)設(shè)定按鈕1205等來(lái)設(shè)定優(yōu)先度。
[0099]在圖13所示的畫(huà)面例中，示出了通過(guò)使用攝像機(jī)配置信息107，能夠方便地以視覺(jué)方式來(lái)理解攝像機(jī)與移動(dòng)物體之間的位置關(guān)系的一例。該畫(huà)面根據(jù)通過(guò)CG等生成監(jiān)視區(qū)域和攝像機(jī)的位置等而獲得的數(shù)據(jù)繪制，在該畫(huà)面中，將攝像機(jī)圖像1300?1302分別顯示在攝像機(jī)位置的附近。各個(gè)攝像機(jī)圖像能夠根據(jù)其在畫(huà)面上的位置，以一定系數(shù)改變大小后進(jìn)行顯示。
[0100]在畫(huà)面上觀察到的物體1303根據(jù)在識(shí)別部分104中算出的位置繪制而成。針對(duì)該物體1303，不使用通過(guò)CG等生成的人物的模型，而是通過(guò)提取存在于由顯示選擇部分106算出的攝像機(jī)的圖像上的移動(dòng)人物來(lái)生成數(shù)據(jù)，將所生成的數(shù)據(jù)重疊在畫(huà)面上，由此能夠同時(shí)觀察位置關(guān)系與物體1303的情況。此外，通過(guò)同時(shí)顯示臉部等附加信息1304，能夠進(jìn)一步詳細(xì)地進(jìn)行觀察。
[0101]圖14是表示存在有多個(gè)物體時(shí)的圖。圖14(a)與圖13—樣，示出了攝像機(jī)圖像1400a?1402a。此外，在畫(huà)面上繪出了物體1403a和物體1404a。
[0102]例如，希望以攝像機(jī)2圖像1400a和移動(dòng)物體1404a為中心觀察該圖像時(shí)，能夠根據(jù)用戶的指示轉(zhuǎn)換視點(diǎn)。在用戶通過(guò)鼠標(biāo)等輸入裝置指定其希望觀察的攝像機(jī)圖像或者在畫(huà)面上繪出的移動(dòng)物體的位置后，如圖14(b)所示，能夠切換為以攝像機(jī)I圖像1400b為中心的視點(diǎn)。通過(guò)切換視點(diǎn)，雖然移動(dòng)物體1403b和移動(dòng)物體1404b的位置發(fā)生了變化，但能夠使最容易進(jìn)行觀察的圖像重疊。此外，還能夠根據(jù)與視點(diǎn)之間的距離來(lái)變更各臺(tái)攝像機(jī)的圖像的圖像尺寸等。
[0103]如上所述，通過(guò)按照?qǐng)D像的重要度或者關(guān)注度等來(lái)改變顯示的大小，以附加重要信息的方式對(duì)圖像進(jìn)行提示，或者以與攝像機(jī)配置聯(lián)動(dòng)的方式對(duì)圖像進(jìn)行提示等，通過(guò)上述顯示方式，還能夠以視覺(jué)方式識(shí)別監(jiān)視區(qū)域內(nèi)的配置關(guān)系。由于能夠同時(shí)掌握?qǐng)D像的重要性和監(jiān)視區(qū)域的對(duì)應(yīng)關(guān)系，所以能夠減輕監(jiān)視人員的負(fù)擔(dān)，其結(jié)果，能夠提供一種功能更加強(qiáng)大的監(jiān)視系統(tǒng)。此外，根據(jù)優(yōu)先順序，對(duì)圖像顯示設(shè)定優(yōu)先順序，由此能夠提示或者記錄適合觀察物體的圖像，并且還能夠再現(xiàn)所記錄的圖像中的希望進(jìn)行觀察的圖像。
[0104]作為能夠應(yīng)用本發(fā)明的檢測(cè)物體，如上所述，可以列舉出人物，通過(guò)識(shí)別處理進(jìn)行臉部檢測(cè)，能夠從多臺(tái)攝像機(jī)的圖像中例如選擇并提示拍攝到臉部的圖像。此外，本發(fā)明除了人物以外，還能夠應(yīng)用于車(chē)輛、人攜帶的包、電腦的畫(huà)面和保險(xiǎn)箱的門(mén)等。在檢測(cè)物體為車(chē)輛時(shí)，例如在監(jiān)視駕駛員的臉部的場(chǎng)合，在檢測(cè)物體為包時(shí)，例如在監(jiān)視攜帶包的人物的臉部或者監(jiān)視包本身的場(chǎng)合，能夠確定適合監(jiān)視希望觀察的部分的攝像機(jī)的圖像。并且，在監(jiān)視朝向和畫(huà)面顯示發(fā)生了變更的電腦的畫(huà)面的場(chǎng)合，保險(xiǎn)箱的門(mén)被打開(kāi)了的場(chǎng)合等，能夠選擇適合于對(duì)發(fā)生了動(dòng)作和變化的部分進(jìn)行觀察的攝像機(jī)。并且還能夠不間斷地監(jiān)視電腦的畫(huà)面，或僅在保險(xiǎn)箱的門(mén)被打開(kāi)時(shí)監(jiān)視保險(xiǎn)箱門(mén)。另外，本發(fā)明不僅能夠應(yīng)用于可動(dòng)物體，并且也能夠應(yīng)用于靜止物體。例如，在監(jiān)視固定設(shè)置的保險(xiǎn)箱時(shí)，在希望將監(jiān)視區(qū)域從門(mén)側(cè)切換到側(cè)面的場(chǎng)合，通過(guò)采用本發(fā)明的結(jié)構(gòu)，能夠選擇適合于監(jiān)視側(cè)面的攝像機(jī)，并且能夠切換監(jiān)視畫(huà)面。
[0105]圖15表示將上述實(shí)施例應(yīng)用于圖像數(shù)據(jù)檢索時(shí)的結(jié)構(gòu)圖。圖15所示的各種功能塊的大部分與圖1所示的功能塊相同，所以在此只對(duì)與本實(shí)施例有關(guān)聯(lián)的部分進(jìn)行說(shuō)明。
[0106]由圖像獲取部分103獲取的圖像存儲(chǔ)在圖像數(shù)據(jù)1500中。監(jiān)視系統(tǒng)的檢索功能是獲取該圖像數(shù)據(jù)1500數(shù)據(jù)的手段之一。通過(guò)輸入單元1502將希望從圖像數(shù)據(jù)1500獲取的圖像的檢索條件輸入到檢索部分1501。檢索條件例如是時(shí)間段、作為檢索對(duì)象的攝像機(jī)、特定的人物等各種條件，在此，檢索部分1501還可以與圖1的識(shí)別部分104—樣具有識(shí)別功能。通過(guò)該識(shí)別功能獲取的信息同樣也可以與圖7所示的識(shí)別結(jié)果一樣進(jìn)行獲取。
[0107]在此，所獲取的識(shí)別結(jié)果與上述實(shí)施例一樣，用于在顯示選擇部分106對(duì)各臺(tái)所述攝像機(jī)的圖像設(shè)定優(yōu)先順序，選擇容易進(jìn)行觀察的圖像，通過(guò)圖像顯示部分109在顯示單元110中進(jìn)行顯示。
[0108]此外，在將圖像數(shù)據(jù)存儲(chǔ)在圖像數(shù)據(jù)1500中時(shí)，也可以設(shè)置成同時(shí)存儲(chǔ)識(shí)別結(jié)果105。此時(shí)，由于識(shí)別處理可以不在檢索部分1501進(jìn)行，所以能夠縮短檢索時(shí)間。
[0109]以下根據(jù)上述實(shí)施例，參照?qǐng)D16對(duì)用于提高識(shí)別性能的實(shí)施例進(jìn)行說(shuō)明。各種功能塊的一部分由于與圖1所示的功能塊相同，所以在此省略其說(shuō)明。由圖像獲取部分103獲取的圖像被發(fā)送到多臺(tái)攝像機(jī)識(shí)別部分1600中。在本實(shí)施例中，有時(shí)對(duì)多臺(tái)攝像機(jī)的圖像同時(shí)進(jìn)行處理，所以與識(shí)別部分104加以區(qū)分。由多臺(tái)攝像機(jī)識(shí)別部分1600處理后的結(jié)果被發(fā)送到圖像選擇部分1601。在此，圖像選擇部分1601采用與上述顯示選擇部分106相同的結(jié)構(gòu)。也就是說(shuō)，用于在獲取識(shí)別結(jié)果后，選擇適合于識(shí)別處理的圖像。
[0110]由多臺(tái)攝像機(jī)識(shí)別部分1600處理后的識(shí)別結(jié)果中，根據(jù)攝像機(jī)100?102的設(shè)置狀態(tài)，有些有高性能，還有些則沒(méi)有高性能。根據(jù)由多臺(tái)攝像機(jī)識(shí)別部分1600輸出的結(jié)果，在圖像選擇部分1601中，計(jì)算與式2所示方法同樣的評(píng)價(jià)值，輸出適合于識(shí)別處理的圖像，通過(guò)再次反饋到多臺(tái)攝像機(jī)識(shí)別部分1600，能夠提高識(shí)別性能。
[0111]例如，以臉部檢測(cè)為例，能夠根據(jù)識(shí)別結(jié)果(識(shí)別率)確定哪臺(tái)攝像機(jī)最適合于檢測(cè)臉部，此外，在同一個(gè)攝像機(jī)圖像上，可以算出能夠獲得良好的臉部檢測(cè)結(jié)果的區(qū)域和不能獲取良好的臉部檢測(cè)結(jié)果的區(qū)域。因此，在本實(shí)施例中，通過(guò)多臺(tái)攝像機(jī)識(shí)別部分1600，能夠定義出適合于進(jìn)行識(shí)別的攝像機(jī)和攝像機(jī)圖像內(nèi)的適合于進(jìn)行識(shí)別的區(qū)域，從而能夠?qū)崿F(xiàn)檢測(cè)精度更高的監(jiān)視系統(tǒng)。
[0112]此外，在人物的檢測(cè)位置的精度方面，在圖4的攝像機(jī)圖像400中，縱向的位置精度高，而在攝像機(jī)圖像401中，橫向的位置精度高。當(dāng)在監(jiān)視區(qū)域內(nèi)確定跨越多臺(tái)攝像機(jī)觀察的移動(dòng)物體的位置時(shí)，可以根據(jù)該等信息來(lái)選擇輸出結(jié)果。由此，能夠進(jìn)行高精度的位置檢測(cè)。
[0113]符號(hào)說(shuō)明
[0114]100?102攝像機(jī)
[0115]103圖像獲取部分
[0116]104識(shí)別部分
[0117]105識(shí)別結(jié)果
[0118]106顯示選擇部分
[0119]107攝像機(jī)配置信息
[0120]108輸入單元
[0121]109圖像顯示部分
[0122]110顯示單元
[0123]200 ?202，500 攝像機(jī)
[0124]203，1303，1403，1404 物體
[0125]204結(jié)構(gòu)物
[0126]205，501 監(jiān)視區(qū)域
[0127]206移動(dòng)方向
[0128]207臉部方向
[0129]300?302攝像區(qū)域
[0130]400 ?402，502，1300 ?1302，1400 ?1402 攝像機(jī)圖像
[0131]504攝像機(jī)圖像位置
[0132]505監(jiān)視區(qū)域位置
[0133]1100優(yōu)先度設(shè)定畫(huà)面
[0134]1200小窗區(qū)域
[0135]1201大窗區(qū)域
[0136]1202 檢測(cè)框
[0137]1203，1304 附加信息
[0138]1204再現(xiàn)控制部分
[0139]1205設(shè)定按鈕
[0140]1500圖像數(shù)據(jù)
[0141]1501檢索部分
[0142]1502輸入單元
[0143]1600多臺(tái)攝像機(jī)識(shí)別部分
[0144]1601圖像選擇部分
【權(quán)利要求】
1.一種圖像監(jiān)視系統(tǒng)，其特征在于， 具有多臺(tái)攝像機(jī)和識(shí)別部分， 所述多臺(tái)攝像機(jī)對(duì)監(jiān)視區(qū)域內(nèi)進(jìn)行攝像， 所述識(shí)別部分從通過(guò)所述多臺(tái)攝像機(jī)獲取的圖像中檢測(cè)物體， 還具有顯示選擇部分，在由所述多臺(tái)攝像機(jī)重復(fù)進(jìn)行攝像的監(jiān)視區(qū)域內(nèi)檢測(cè)到物體時(shí)，所述顯示選擇部分針對(duì)各臺(tái)攝像機(jī)，通過(guò)所述識(shí)別部分獲取作為所述物體的特征量的識(shí)別結(jié)果，并根據(jù)所述識(shí)別結(jié)果和所述識(shí)別結(jié)果的優(yōu)先度，對(duì)各臺(tái)所述攝像機(jī)的圖像設(shè)定與所述優(yōu)先度相對(duì)應(yīng)的優(yōu)先順序。
2.如權(quán)利要求1所述的圖像監(jiān)視系統(tǒng)，其特征在于， 所述顯示選擇部分根據(jù)所述識(shí)別結(jié)果和所述識(shí)別結(jié)果的優(yōu)先度，針對(duì)各臺(tái)所述攝像機(jī)計(jì)算與所述物體相關(guān)的評(píng)價(jià)值，并根據(jù)所述評(píng)價(jià)值，對(duì)各臺(tái)所述攝像機(jī)的圖像設(shè)定優(yōu)先順序。
3.如權(quán)利要求2所述的圖像監(jiān)視系統(tǒng)，其特征在于， 使用所述多臺(tái)攝像機(jī)中的各臺(tái)攝像機(jī)的攝像機(jī)設(shè)置信息，針對(duì)所述多臺(tái)攝像機(jī)，獲取與所述物體相關(guān)的攝像機(jī)配置信息，并且使用所述攝像機(jī)配置信息中的至少一個(gè)以上的攝像機(jī)配置信息來(lái)計(jì)算所述評(píng)價(jià)值。
4.如權(quán)利要求3所述的圖像監(jiān)視系統(tǒng)，其特征在于， 所述攝像機(jī)設(shè)置信息包括攝像機(jī)位置、俯角、水平角、視角、旋轉(zhuǎn)的信息，通過(guò)獲取所述多臺(tái)攝像機(jī)與所述監(jiān)視區(qū)域之間的對(duì)應(yīng)關(guān)系來(lái)進(jìn)行計(jì)算。
5.如權(quán)利要求1至4中的任一項(xiàng)所述的圖像監(jiān)視系統(tǒng)，其特征在于， 所述識(shí)別結(jié)果是所述物體的移動(dòng)方向、大小、規(guī)定區(qū)域。
6.如權(quán)利要求1至5中的任一項(xiàng)所述的圖像監(jiān)視系統(tǒng)，其特征在于， 使用所述多臺(tái)攝像機(jī)中的各臺(tái)攝像機(jī)的攝像機(jī)設(shè)置信息，獲取由所述物體與所述多臺(tái)攝像機(jī)之間的距離、所述物體在所述規(guī)定區(qū)域的方向以及所述移動(dòng)方向構(gòu)成的攝像機(jī)配置信息，并且使用所述攝像機(jī)配置信息中的至少一個(gè)以上的攝像機(jī)配置信息來(lái)計(jì)算所述評(píng)價(jià)值。
7.如權(quán)利要求1至6中的任一項(xiàng)所述的圖像監(jiān)視系統(tǒng)，其特征在于， 具有顯示部分，所述顯示部分按照所述優(yōu)先順序來(lái)改變各臺(tái)所述攝像機(jī)的輸出圖像的輸出形態(tài)。
8.如權(quán)利要求7所述的圖像監(jiān)視系統(tǒng)，其特征在于， 輸出到所述顯示部分的所述輸出圖像顯示所述監(jiān)視區(qū)域和所述多臺(tái)攝像機(jī)的位置，將所述多臺(tái)攝像機(jī)中的各臺(tái)攝像機(jī)獲取的所述圖像合成為輸出圖像后進(jìn)行顯示。
9.如權(quán)利要求7或者8所述的圖像監(jiān)視系統(tǒng)，其特征在于， 輸出到所述顯示部分的所述輸出圖像與作為附加信息的從所述識(shí)別結(jié)果獲取的所述移動(dòng)物體和所述規(guī)定區(qū)域進(jìn)行合成后輸出。
10.如權(quán)利要求7至9中的任一項(xiàng)所述的圖像監(jiān)視系統(tǒng)，其特征在于， 通過(guò)在輸出到所述顯示部分的所述輸出圖像中選擇作為監(jiān)視對(duì)象的所述移動(dòng)物體或者所述圖像，將所述輸出圖像重新構(gòu)造成以所述監(jiān)視對(duì)象為中心的配置后進(jìn)行輸出。
11.如權(quán)利要求1至10中的任一項(xiàng)所述的圖像監(jiān)視系統(tǒng)，其特征在于， 按照所述優(yōu)先順序，將各臺(tái)所述攝像機(jī)的輸出圖像記錄在記錄介質(zhì)上。
12.如權(quán)利要求1至11中的任一項(xiàng)所述的圖像監(jiān)視系統(tǒng)，其特征在于， 根據(jù)所述識(shí)別結(jié)果的精度來(lái)選擇在所述識(shí)別部分中進(jìn)行處理的所述多臺(tái)攝像機(jī)或者所述各臺(tái)攝像機(jī)的監(jiān)視區(qū)域。
13.—種監(jiān)視攝像機(jī)控制裝置，其特征在于，具有識(shí)別部分和顯示選擇部分，所述識(shí)別部分從通過(guò)多臺(tái)對(duì)監(jiān)視區(qū)域內(nèi)進(jìn)行攝像的攝像機(jī)獲取的圖像中檢測(cè)物體， 在由所述多臺(tái)攝像機(jī)重復(fù)進(jìn)行攝像的監(jiān)視區(qū)域內(nèi)檢測(cè)到物體時(shí)，所述顯示選擇部分針對(duì)各臺(tái)攝像機(jī)，通過(guò)所述識(shí)別部分獲取作為所述物體的特征量的識(shí)別結(jié)果，并根據(jù)所述識(shí)別結(jié)果和所述識(shí)別結(jié)果的優(yōu)先度，對(duì)各臺(tái)所述攝像機(jī)的圖像設(shè)定與所述優(yōu)先度相對(duì)應(yīng)的優(yōu)先順序。
【文檔編號(hào)】H04N7/18GK104509097SQ201280073508
【公開(kāi)日】2015年4月8日 申請(qǐng)日期:2012年5月30日 優(yōu)先權(quán)日:2012年5月30日
【發(fā)明者】伊藤誠(chéng)也, 弓場(chǎng)龍, 李媛 申請(qǐng)人:株式會(huì)社日立制作所