專利名稱:顏色校正處理裝置以及顏色校正處理方法
技術(shù)領(lǐng)域:
本發(fā)明(第1發(fā)明)涉及對用多個攝像裝置所拍攝到的圖像進行顏色校正處理的顏色校正處理裝置,且涉及可以提高對照明環(huán)境變化等的適應(yīng)性的顏色校正處理裝置。此外,本發(fā)明(第2發(fā)明)涉及對由攝像機拍攝所得的圖像進行校正的動態(tài)攝像機顏色校正裝置、及使用此動態(tài)攝像機顏色校正裝置的影像檢索裝置。
背景技術(shù):
關(guān)于第1發(fā)明,目前眾所周知有跟蹤監(jiān)視系統(tǒng),其用計算機對用多個攝像機所拍攝到的圖像進行圖像處理,并對人物等目標進行跟蹤監(jiān)視。在這種跟蹤監(jiān)視系統(tǒng)中,如果各攝像機的特性、照明環(huán)境、設(shè)置條件等不同,那么各攝像機所拍攝到的同一個目標(例如人物等)的圖像視覺、特別是目標的顏色視覺會因各攝像機而不同。因此,為了使用多個攝像機進行目標跟蹤,而必須實現(xiàn)在多個攝像機間產(chǎn)生不同顏色視覺的同一目標的一致性,即必須維持顏色的恒定性?,F(xiàn)有的跟蹤監(jiān)視系統(tǒng)中,通過使用目標的顏色信息,對多個攝像機間的目標的顏色進行校正處理,從而實現(xiàn)多個攝像機所拍攝到的同一目標的一致性。由此, 可提高多個攝像機間的目標一致性的精度,從而提高多個攝像機間的目標跟蹤精度。這種跟蹤監(jiān)視系統(tǒng)中,例如,在照明環(huán)境發(fā)生了變化的情況下,必須根據(jù)照明環(huán)境的變化來對目標的顏色信息進行更新?,F(xiàn)有的作為檢測照明環(huán)境變化的方法,眾所周知的是為了檢測圖像變化而對兩個圖像區(qū)域所對應(yīng)的像素間的偏差進行檢測的方法。此方法公開在例如美國專利第4779095號說明書中。此外,作為檢測照明環(huán)境的變化的另一方法,眾所周知的是如下方法,即為了檢測到新場景的開始而存儲影像,使用影像信號的代表值來實現(xiàn)對場景變化的檢測。此方法公開在例如美國專利第4823184號說明書中。此外,作為檢測照明環(huán)境的變化的其它方法,眾所周知的是如下方法,即根據(jù)多個圖像的特性,制成各個圖像的特征向量,當對各向量的差異進行計算所得的值(具有目標特征的值)相對于各圖像而出現(xiàn)變化時,檢測出場景的變化。此方法例如公開在美國專利第4912770號說明書中。然而,現(xiàn)有的跟蹤監(jiān)視系統(tǒng)中,例如,如果追加跟蹤對象的目標,那么隨之將追加目標的顏色信息。此時,即便是在已保存和新追加的目標相同的目標的顏色信息的情況下, 也將伴隨目標的追加而追加目標的顏色信息。這樣一來,如果追加了顏色校正處理所不需要的目標的顏色信息,那么目標的顏色信息將會變得過多。也就是說,如果目標的顏色信息增加,則用于顏色校正處理的信息量增多,因此顏色校正處理所需的時間變長,顏色校正處理的動作也將變得不穩(wěn)定。此外,在照明環(huán)境發(fā)生了變化的情況下,將無法使用此前所使用的目標的顏色信息,由此將增加相應(yīng)量的不必要的顏色信息。而且,在照明環(huán)境發(fā)生了變化時,必須立即對應(yīng)于此變化獲得新顏色信息。然而,現(xiàn)有的照明環(huán)境變化的檢測方法中,計算負荷非常大, 并不適于實時處理。第2發(fā)明中,現(xiàn)有的使用攝像機對人物或物體進行跟蹤、檢索的裝置,大多使用的是利用人物或物體的顏色信息的裝置。在使用顏色信息的情況下,為了對攝像機的個體差異、光源環(huán)境的影響進行校正,有如下方法,即利用設(shè)置好的攝像機進行一次比色圖表等特定顏色圖案的拍攝,并逐個地導(dǎo)入攝像機圖案。這種技術(shù)例如公開在日本專利特開平 11-186487號公報中。然而,在為監(jiān)視系統(tǒng)的情況下,通常是設(shè)置在屋內(nèi)、屋外的任意場所。特別是在屋外時,因日照等動態(tài)變化而使得監(jiān)視目標的顏色在視覺上隨著時間、天氣等不斷變化。因此,必須對暫時導(dǎo)入到所設(shè)置的攝像機中的攝像機參數(shù)進行動態(tài)更新。進而,考慮到所設(shè)置的攝像機臺數(shù)、日照環(huán)境的多樣性,必須使攝像機參數(shù)更新自動化。
發(fā)明內(nèi)容
發(fā)明要解決的問題本發(fā)明(第1發(fā)明)是在上述背景下完成的。本發(fā)明(第1發(fā)明)的目的在于提供一種計算負荷小且可以實時應(yīng)對照明環(huán)境變化的顏色校正處理裝置。本發(fā)明(第2發(fā)明)是在上述背景下完成的。本發(fā)明(第2發(fā)明)的目的在于提供一種不會受到攝像機設(shè)置環(huán)境、日照環(huán)境等攝像環(huán)境變動的影響,可以對圖像的顏色加以適當校正的顏色校正裝置及使用其的影像檢索裝置。解決問題的方法本發(fā)明(第1發(fā)明)的其中一種形式是顏色校正處理裝置,其具備顏色集合信息存儲部,其存儲包含作為顏色校正對象的源顏色的顏色信息、及顏色校正后的基準色的顏色信息的顏色集合信息;顏色校正部,其使用顏色集合將多個攝像裝置拍攝到的各源圖像中和源顏色在相似范圍內(nèi)的顏色校正為基準色;區(qū)域選擇部,其從各源圖像中選擇特定的源區(qū)域;區(qū)域顏色確定部,其確定源區(qū)域顏色作為代表源區(qū)域的顏色;以及顏色集合更新部,其使用源區(qū)域顏色,對顏色集合的源顏色進行更新。本發(fā)明(第1發(fā)明)的另外一種形式是顏色校正處理方法,存儲顏色集合信息,所述顏色集合信息包含作為顏色校正對象的源顏色的顏色信息、及顏色校正后的基準色的顏色信息;從由多個攝像裝置拍攝到的各源圖像中選擇特定的源區(qū)域;確定源區(qū)域顏色作為代表源區(qū)域的顏色;使用源區(qū)域顏色,對顏色集合的源顏色進行更新;使用顏色集合,將多個源圖像中和源顏色在相似的范圍內(nèi)的顏色校正為基準色。本發(fā)明(第2發(fā)明)的其中一種形式是動態(tài)攝像機顏色校正裝置,對從拍攝監(jiān)視區(qū)域的攝像部輸入的圖像進行顏色校正,其具備補色部,其根據(jù)特定的比色圖表來確定顏色校正參數(shù);顏色校正部,其根據(jù)顏色校正參數(shù),對攝像部拍攝到的圖像進行顏色校正并輸出顏色校正圖像;背景提取部,其從顏色校正圖像中提取背景圖像;背景確認部,其確認背景圖像是否為背景;顏色提取部,其從已確認的背景圖像中提取顏色信息;以及顏色比較部,其在已提取的顏色信息發(fā)生了變化的情況下,變更顏色校正參數(shù)。本發(fā)明(第2發(fā)明)的另外一種形式是影像檢索裝置,其具備上述的動態(tài)攝像機顏色校正裝置;運動區(qū)域提取部,其從經(jīng)顏色校正部校正過的攝像圖像中提取圖像內(nèi)發(fā)生運動的區(qū)域;人判別部,其判別經(jīng)運動區(qū)域提取部提取的區(qū)域中是否包含人物,并從區(qū)域中提取人物區(qū)域;區(qū)域分割部,其對經(jīng)人判別部提取的人物區(qū)域進行區(qū)塊分割;代表色計算部,其從經(jīng)區(qū)域分割部區(qū)塊分割而成的各區(qū)域中,提取顏色信息和紋理信息;數(shù)據(jù)庫,其存儲經(jīng)代表色計算部提取的顏色信息和紋理信息;人物檢索部,其對存儲在數(shù)據(jù)庫內(nèi)的顏色信息及紋理信息和用戶想要檢索的人物的顏色信息及紋理信息加以比較,并計算出得分; 以及檢索結(jié)果顯示部,其顯示經(jīng)人物檢索部計算出的得分。本發(fā)明(第2發(fā)明)的另外一種形式是影像檢索裝置,其具備上述的動態(tài)攝像機顏色校正裝置;運動域提取部,其從經(jīng)顏色校正部校正過的攝像圖像中提取圖像內(nèi)發(fā)生運動的區(qū)域;人判別部,其判別經(jīng)運動區(qū)域提取部提取的區(qū)域中是否包含人物,并從區(qū)域中提取人物區(qū)域;區(qū)域分割部,其對經(jīng)人判別部提取的人物區(qū)域進行區(qū)塊分割;代表色計算部, 其從經(jīng)區(qū)域分割部區(qū)塊分割而成的各區(qū)域中,提取顏色信息和紋理信息;數(shù)據(jù)庫,其存儲經(jīng)代表色計算部提取的顏色信息和紋理信息;人物檢索部,其對存儲在數(shù)據(jù)庫內(nèi)的顏色信息及紋理信息和用戶想要檢索的人物的顏色信息及紋理信息加以比較,計算出得分,并發(fā)送再現(xiàn)命令以再現(xiàn)特定得分的攝像圖像;壓縮部,其以規(guī)定的壓縮方式對經(jīng)顏色校正部校正的攝像圖像進行壓縮;存儲器,其存儲經(jīng)壓縮部壓縮的攝像圖像;展開部,其根據(jù)經(jīng)人物檢索部發(fā)送的再現(xiàn)命令,將存儲在存儲器中的經(jīng)壓縮部壓縮的攝像圖像讀出,并以規(guī)定的擴展方式擴展;以及顯示部,其顯示經(jīng)展開部展開的攝像圖像。本發(fā)明(第2發(fā)明)的另外一種形式是與多個攝像機連接的影像檢索裝置,其具備上述的動態(tài)攝像機顏色校正裝置;運動區(qū)域提取部,其從經(jīng)顏色校正部校正過的攝像圖像中提取圖像內(nèi)發(fā)生運動的區(qū)域;人判別部,其判別經(jīng)運動區(qū)域提取部提取的區(qū)域中是否包含人物,并從區(qū)域中提取人物區(qū)域;區(qū)域分割部,其對經(jīng)人判別部提取的人物區(qū)域進行區(qū)塊分割;代表色計算部,其從經(jīng)區(qū)域分割部區(qū)塊分割而成的各區(qū)域中,提取顏色信息和紋理信息;檢索人物數(shù)據(jù)庫,存儲特定人物的顏色信息和紋理信息;人物匹配部,其對存儲在檢索人物數(shù)據(jù)庫中的顏色信息及紋理信息和經(jīng)代表色計算部計算出的顏色信息及紋理信息加以比較,在為同一人物的情況下,發(fā)送攝像機切換命令,以使經(jīng)顏色校正部校正的拍攝有代表色計算部檢測出的人物的攝像圖像得以顯示;影像切換部,其根據(jù)經(jīng)人物匹配部發(fā)送的攝像機切換命令,切換到對經(jīng)顏色校正部校正過的攝像圖像進行拍攝的攝像機;以及顯示部,其對經(jīng)影像切換部切換且經(jīng)顏色校正部校正的攝像圖像進行監(jiān)視和顯示。本發(fā)明(第2發(fā)明)的另外一種形式是顏色校正裝置,根據(jù)顏色校正參數(shù)來對從拍攝監(jiān)視區(qū)域的攝像部輸入的圖像進行顏色校正,其具備背景區(qū)域提取部,其提取圖像中的背景區(qū)域;顏色信息提取部,其提取背景區(qū)域的顏色信息;顏色信息比較部,其對存儲在參考表中的初始運行時的背景區(qū)域的顏色信息和所提取的顏色信息加以比較;以及參數(shù)變更部,其根據(jù)比較結(jié)果來變更顏色校正參數(shù)。如以下所說明的那樣,本發(fā)明存在其它的形式。因此,本發(fā)明的公開,是要提供本發(fā)明的其中一部分形式,而不是限定此處所描述和請求保護的范圍。
圖1是本發(fā)明(第1發(fā)明)實施方式中的顏色校正處理裝置的框圖。
圖2是用以說明本發(fā)明實施方式中的攝像機圖像的概略圖。圖3是本發(fā)明實施方式中的區(qū)域選擇部的框圖。圖4是本發(fā)明實施方式中的區(qū)域顏色確定部的框圖。圖5是本發(fā)明實施方式中的顏色校正部的框圖。圖6是說明本發(fā)明實施方式中的顏色集合信息的表。圖7是本發(fā)明實施方式中的目標相似判定部的框圖。圖8是本發(fā)明實施方式中的照明變化檢測部的框圖。圖9是本發(fā)明實施方式中的顏色集合更新部的框圖。圖10是表示本發(fā)明實施方式中,使用源目標的目標顏色進行顏色校正處理以及源顏色更新處理時的整體流程的流程圖。圖11是表示本發(fā)明實施方式中,使用源目標的目標顏色進行顏色校正處理時的流程的流程圖。圖12是表示本發(fā)明實施方式中,使用源目標的目標顏色進行源顏色的更新處理時的流程的流程圖。圖13是表示本發(fā)明實施方式中,使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色,進行顏色校正處理以及源顏色的更新處理時的整體流程的流程圖。圖14是表示本發(fā)明實施方式中,使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色進行源顏色更新處理時的流程的流程圖。圖15是表示本發(fā)明實施方式中,使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色進行顏色校正處理時的流程的流程圖。圖16是本發(fā)明(第2發(fā)明)第1實施方式中的動態(tài)攝像機顏色校正裝置的框圖。圖17A是本發(fā)明第1實施方式中的比色圖表的示意圖。圖17B是理論上的UV色空間和比色化圖表的理論上的UV值的一例。圖17C是用攝像機對UV色空間和比色化圖表進行拍攝時的UV值的一例。圖18是用以說明本發(fā)明第1實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖19是用以說明本發(fā)明第1實施方式中的動態(tài)攝像機顏色校正裝置的顏色校正動作的示意圖。圖20是本發(fā)明第1實施方式中的動態(tài)攝像機顏色校正裝置的參考表的一例。圖21是用以說明本發(fā)明第1實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖22是本發(fā)明第2實施方式中的動態(tài)攝像機顏色校正裝置的框圖。圖23A是本發(fā)明第2實施方式中的用攝像機對UV色空間和背景色進行拍攝時的 UV值的一例。圖2 是用攝像機對UV色空間和背景色進行拍攝時的UV值的另一例。圖M是用以說明本發(fā)明第2實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖25是本發(fā)明第3實施方式中的動態(tài)攝像機顏色校正裝置的框圖。圖沈是用以說明本發(fā)明第3實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖27是本發(fā)明第3實施方式中的經(jīng)區(qū)塊分割后的背景圖像的一例。圖觀是本發(fā)明第4實施方式中的動態(tài)攝像機顏色校正裝置的框圖。圖四是用以說明本發(fā)明第4實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖30A是本發(fā)明第4實施方式中的當前圖像以及背景像素的一例。圖30B是依時序生成的背景像素的直方圖的一例。圖31是用以說明本發(fā)明第4實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖32是本發(fā)明第5實施方式中的動態(tài)攝像機顏色校正裝置的框圖。圖33是用以說明本發(fā)明第5實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖34是用以說明本發(fā)明第5實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。圖35是本發(fā)明第6實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的框圖。圖36是用以說明本發(fā)明第6實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。圖37是用以說明本發(fā)明第6實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作模仿圖。圖38是用以說明本發(fā)明第6實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。圖39是本發(fā)明第7實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的框圖。圖40是用以說明本發(fā)明第7實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。圖41是用以說明本發(fā)明第7實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。圖42是本發(fā)明第8實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的框圖。圖43是用以說明本發(fā)明第8實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。附圖標記說明1 顏色校正處理裝置2 攝像機5 源圖像獲取部6 區(qū)域選擇部(區(qū)域選擇單元)7 區(qū)域顏色確定部(區(qū)域顏色確定單元)8 顏色校正部(顏色校正單元)0075]9照明變化檢測部(照明變化檢測單元)0076]10顏色集合更新部(顏色集合更新單元)0077]11顏色集合信息存儲部(顏色集合信息存儲單元)0078]12目標相似判定部(目標相似判定單元)0079]13基準目標存儲部0080]14源目標提取部(源目標提取單元)0081]15背景圖像獲取部(背景圖像獲取單元)0082]16對應(yīng)區(qū)域搜索部(對應(yīng)區(qū)域搜索單元)0083]17目標顏色確定部(目標顏色確定單元)0084]18對應(yīng)區(qū)域顏色確定部(對應(yīng)區(qū)域顏色確定單元)0085]21區(qū)域分割部(區(qū)域分割單元)0086]24特征量獲取部0087]25特征量相似判定部0088]29顏色距離計算部0089]30照明變化判定部0090]35加權(quán)計算部0091]100、700、1000、1300、1700 動態(tài)攝像機間顏色校正裝0092]2000監(jiān)視裝置0093]110攝像機0094]120顏色校正部0095]121、]L 321 背景提取部0096]122、1322 背景確認部0097]123顏色提取部0098]124參考表0099]125顏色比較部0100]126,726 補色部0101]1027更新時刻判別部0102]1328,1329 緩沖器0103]1730背景變化確認部0104]2031運動區(qū)域提取部0105]2032人判別部0106]2033區(qū)域分割部0107]2034代表色計算部0108]2035DB0109]2036,2436 人物檢索部0110]2037檢索結(jié)果顯示部0111]2038鍵盤/鼠標0112]2439壓縮部0113]2440存儲器
2441展開部
2442顯示部
2743人物匹配部
2744檢索人物DB
2745影像切換部
200比色圖表的一例
210理論上的UV色空間
211比色圖表的UV值的一例
220攝像機拍攝后的UV色空間
221攝像機拍攝后的比色圖表的UV值的
400攝像機拍攝后的比色圖表圖像
401顏色校正處理區(qū)塊
402顏色校正后的比色圖表圖像
800,810攝像機拍攝后的UV色空間
801,811攝像機拍攝后的背景色的UV值的一例
具體實施例方式以下詳細說明本發(fā)明。但是,以下的詳細說明和附圖不是限定發(fā)明的。而是發(fā)明的范圍是由附上的權(quán)利要求書規(guī)定。以下詳細說明本發(fā)明。但是,以下的詳細說明和附圖不是限定發(fā)明的。而是發(fā)明的范圍是由附上的權(quán)利要求書規(guī)定。本發(fā)明(第1發(fā)明)的顏色校正處理裝置具備顏色集合信息存儲部,其存儲包含作為顏色校正對象的源顏色的顏色信息、及顏色校正后的基準色的顏色信息的顏色集合信息;顏色校正部,其使用顏色集合,將多個攝像裝置拍攝到的各源圖像中和源顏色在相似范圍內(nèi)的顏色校正為基準色;區(qū)域選擇部,其從各源圖像中選擇特定的源區(qū)域;區(qū)域顏色確定部,其確定源區(qū)域顏色作為代表源區(qū)域的顏色;以及顏色集合更新部,其使用源區(qū)域顏色,對顏色集合的源顏色進行更新。根據(jù)此結(jié)構(gòu),使用源區(qū)域的源區(qū)域顏色替換并更新顏色集合的源顏色。因此,即便在追加了跟蹤對象的目標的情況下,或照明環(huán)境發(fā)生了變化的情況下,也無需保存顏色校正處理所不需要的信息。由此,為了進行顏色校正處理而保存的信息量較少即可,從而使計算負荷得以減輕。因此,顏色校正處理所需的時間變短,顏色校正處理的動作穩(wěn)定。此外, 由于計算負荷小,所以也可以實時應(yīng)對照明環(huán)境的變化。此外,本發(fā)明的顏色校正處理裝置也可以具有如下結(jié)構(gòu),S卩,區(qū)域選擇部具備源目標提取部,所述源目標提取部從多個源圖像中,提取在背景圖像中移動的前景目標(例如人物等)來作為源目標;區(qū)域顏色確定部具備目標顏色確定部,所述目標顏色確定部將源目標的平均色確定為作為源區(qū)域顏色的目標顏色,在顏色校正處理裝置中,具備對源目標和規(guī)定的基準目標是否相似進行判定的目標相似判定部,顏色集合更新部在判定源目標和基準目標相似時,使用源目標的目標顏色,對顏色集合的源顏色進行更新。根據(jù)此結(jié)構(gòu),即便是在追加了跟蹤對象的目標的情況下,在源目標與基準目標相似時,使用源目標的目標顏色(源目標的平均色),對顏色集合的源顏色進行更新,從而無需保存顏色校正處理所不需要的顏色集合的信息。由此,為了進行顏色校正處理所保存的信息量較少即可,從而使計算負荷得以減輕。此外,本發(fā)明的顏色校正處理裝置也可以具有如下結(jié)構(gòu),即,目標相似判定部通過對源目標和基準目標的特征量進行比較,來判定源目標和基準目標的相似度。根據(jù)此結(jié)構(gòu),可以使用源目標和基準目標的特征量(例如移動速度、大小、縱橫比等)來判定目標的相似度,從而使得源目標和基準目標的一致性精度提高,由此使源目標的跟蹤精度得到提高。此外,本發(fā)明的顏色校正處理裝置也可以具有如下結(jié)構(gòu),S卩,顏色集合更新部將對源目標的目標顏色和顏色集合的源顏色進行加權(quán)平均處理所得的加權(quán)平均色,用作更新用的源顏色。根據(jù)此結(jié)構(gòu),即便是在源目標的目標顏色和顏色集合的源顏色的顏色差異較大的情況下,也可以通過調(diào)整加權(quán)的程度,來調(diào)整更新用的源顏色的顏色。此外,本發(fā)明的顏色校正處理裝置也可以具有如下結(jié)構(gòu),S卩,顏色集合信息存儲部中存儲有顏色集合信息,所述顏色集合信息包含獲取了源顏色的顏色信息的區(qū)域信息,區(qū)域選擇部具有從多個源圖像中獲取背景圖像的背景圖像獲取部,以及從背景圖像中搜索與源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域(例如行道樹或道路等)的對應(yīng)區(qū)域搜索部,區(qū)域顏色確定部具有對應(yīng)區(qū)域顏色確定部,所述對應(yīng)區(qū)域顏色確定部將對應(yīng)區(qū)域的平均色確定為作為源區(qū)域顏色的對應(yīng)區(qū)域顏色,在顏色校正處理裝置中具有照明變化檢測部,所述照明變化檢測部是根據(jù)對應(yīng)區(qū)域顏色來檢測源圖像中的照明環(huán)境變化,顏色集合更新部在判定照明環(huán)境發(fā)生了變化時,使用對應(yīng)區(qū)域顏色來更新顏色集合的源顏色。根據(jù)此結(jié)構(gòu),即便是在照明環(huán)境發(fā)生了變化的情況下,也可以在判定照明環(huán)境發(fā)生了變化時,使用對應(yīng)區(qū)域顏色來更新顏色集合的源顏色,從而無需保存顏色校正處理所不需要的顏色集合的信息。由此,為了進行顏色校正處理所保存的信息量較少即可,從而使計算負荷得以減輕。此外,本發(fā)明的顏色校正處理裝置也可以具有如下結(jié)構(gòu),S卩,照明變化檢測部具有顏色距離計算部,其計算出對應(yīng)區(qū)域顏色和源顏色的顏色距離;以及照明變化判定部, 其在對應(yīng)區(qū)域顏色和源顏色的顏色距離大于規(guī)定的臨界顏色距離時,判定照明環(huán)境發(fā)生了變化。根據(jù)此結(jié)構(gòu),可以使用對應(yīng)區(qū)域顏色和源顏色的顏色距離(色空間上的兩個色坐標間的距離)來判定照明環(huán)境有無發(fā)生變化,因此與現(xiàn)有的檢測照明環(huán)境變化的方法相比,計算負荷得以減輕,且對照明環(huán)境變化等的適應(yīng)性提高。此外,本發(fā)明的顏色校正處理裝置也可以具有如下結(jié)構(gòu),S卩,背景圖像獲取部以規(guī)定的時間間隔從多個源圖像中獲取背景圖像,照明變化檢測部以規(guī)定的時間間隔來檢測源圖像的照明環(huán)境變化。根據(jù)此結(jié)構(gòu),以規(guī)定的時間間隔從源圖像中獲取背景圖像,并檢測照明環(huán)境的變化。因此,可以根據(jù)照明環(huán)境發(fā)生變化的頻率來調(diào)整規(guī)定的時間間隔,以此來調(diào)整進行照明環(huán)境變化的檢測計算的頻率,從而與一直檢測照明環(huán)境變化的情況相比,計算負荷得以減輕。
此外,本發(fā)明的顏色校正處理裝置也可以具有如下構(gòu)成,即,顏色校正部具有將對應(yīng)區(qū)域分割為多個小區(qū)域的區(qū)域分割部,針對多個小區(qū)域中的每個小區(qū)域,使用對應(yīng)區(qū)域顏色來更新顏色集合的源顏色。根據(jù)此結(jié)構(gòu),在對應(yīng)區(qū)域(例如行道樹)由顏色各不相同的多個小區(qū)域(例如,樹葉部分和樹干部分)構(gòu)成時,可以使用多個小區(qū)域中的每個小區(qū)域的對應(yīng)區(qū)域顏色來更新源顏色,從而使對應(yīng)區(qū)域的一致性精度得到提高。本發(fā)明的顏色校正處理方法中,存儲顏色集合信息,所述顏色集合信息包含作為顏色校正對象的源顏色的顏色信息、及顏色校正后的基準色的顏色信息,從多個攝像裝置拍攝到的各源圖像中選擇特定的源區(qū)域,確定源區(qū)域顏色作為代表源區(qū)域的顏色,使用源區(qū)域顏色,對顏色集合的源顏色進行更新,并使用顏色集合,將多個源圖像中和源顏色在相似范圍內(nèi)的顏色校正為基準色。此外,本發(fā)明的顏色校正處理方法也可以為如下,S卩,從源圖像中提取在背景圖像中移動的前景目標來作為源目標,將源目標的平均色確定為作為源區(qū)域顏色的目標顏色, 判定源目標和規(guī)定的基準目標是否相似,并在判定源目標和基準目標相似時,使用源目標的目標顏色,對顏色集合的源顏色進行更新。此外,本發(fā)明的顏色校正處理方法也可以為如下,S卩,存儲顏色集合信息,所述顏色集合信息包含獲取了源顏色的顏色信息的區(qū)域信息,從多個源圖像中獲取背景圖像,并從背景圖像中搜索與源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域,將對應(yīng)區(qū)域的平均色確定為作為源區(qū)域顏色的對應(yīng)區(qū)域顏色,根據(jù)對應(yīng)區(qū)域顏色,來檢測源圖像中的照明環(huán)境的變化,并在判定照明環(huán)境發(fā)生了變化時,使用對應(yīng)區(qū)域顏色對顏色集合的源顏色進行更新。本發(fā)明(第1發(fā)明),通過設(shè)置有使用源區(qū)域顏色對顏色集合的源顏色進行更新的顏色集合更新部,而無需保存顏色校正處理所不需要的顏色集合的信息,從而使計算負荷得以減輕,且可實時應(yīng)對照明環(huán)境的變化。本發(fā)明(第2發(fā)明)的動態(tài)攝像機顏色校正裝置對從拍攝監(jiān)視區(qū)域的攝像部輸入的圖像進行顏色校正,其具備補色部,其根據(jù)特定的比色圖表來確定顏色校正參數(shù);顏色校正部,其根據(jù)顏色校正參數(shù),對攝像部所拍攝到的圖像進行顏色校正并輸出顏色校正圖像;背景提取部,其從顏色校正圖像中提取背景圖像;背景確認部,其確認背景圖像是否為背景;顏色提取部,其從被確認的背景圖像中提取顏色信息;以及顏色比較部,其在提取的顏色信息發(fā)生了變化的情況下,變更顏色校正參數(shù)。根據(jù)此結(jié)構(gòu),提取監(jiān)視區(qū)域內(nèi)的背景圖像,并確認背景圖像顏色的變化,對顏色校正參數(shù)進行逐次更新,由此不受攝像部攝像環(huán)境的變化影響可自動對攝像圖像進行顏色校正。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),即具有將背景圖像的顏色信息與背景圖像的位置信息相對應(yīng)地存儲的參考表。此外,在本發(fā)明的動態(tài)攝像機顏色校正裝置中,也可以具有如下結(jié)構(gòu),即,顏色校正部根據(jù)顏色比較部變更的顏色校正參數(shù),對全色空間的顏色校正參數(shù)進行更新。根據(jù)此結(jié)構(gòu),利用補色部并使用經(jīng)變更的背景像素的顏色來進行補色,并更新所有顏色校正參數(shù),由此可以實現(xiàn)更高精度的顏色校正。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),S卩,具有更新時刻判別部,所述更新時刻判別部檢測背景圖像的像素信息,并根據(jù)背景圖像的像素信息和作為基準的像素信息的差異,來判別是否使顏色比較部起作用。根據(jù)此結(jié)構(gòu),可以知道進行顏色比較的時刻。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),S卩,更新時刻判別部將背景圖像分割成規(guī)定的區(qū)域,并計算出各區(qū)域的平均亮度值。根據(jù)此結(jié)構(gòu),更新時刻判別部僅在與初始運行時相比發(fā)生較多的日照變動時,對顏色校正參數(shù)進行更新等,從而可以減輕進行顏色校正的CPU或者DSP的處理負荷。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),S卩,具有存儲經(jīng)顏色校正部校正過的圖像的第1緩沖器及第2緩沖器,背景提取部從存儲在第1緩沖器中的圖像中提取多個背景圖像群1,背景確認部從存儲在第2緩沖器中的圖像中提取多個背景圖像群2,顏色比較部檢測背景圖像群1以及背景圖像群2的像素信息,并根據(jù)背景圖像群 1以及背景圖像群2的像素信息的變化來進行顏色比較處理。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),即,背景提取部針對依時序存儲在第1緩沖器中的圖像的每個像素生成直方圖并提取頻率高的亮度,背景確認部針對依時序存儲在第2緩沖器中的圖像的每個像素生成直方圖并提取頻率高的亮度。根據(jù)此結(jié)構(gòu),利用背景提取部和背景確認部來提取多個背景像素,由此即便是在樹葉或旗幟等發(fā)生擺動的情況下等,也可以高精度地進行顏色校正。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),S卩,具有對經(jīng)背景確認部確認過的背景圖像中的物體是否移動過進行確認的背景變化確認部。此外,本發(fā)明的動態(tài)攝像機顏色校正裝置也可以具有如下結(jié)構(gòu),S卩,背景變化確認部求出前一幀的背景圖像和當前的背景圖像的差分。根據(jù)此結(jié)構(gòu),利用背景變化確認部對前一幀的背景圖像(群)和當前的背景圖像 (群)進行比較,由此,即便是在背景圖像中所含的??寇囕v等已移動的情況下等,也可以高精度進行顏色校正。此外,本發(fā)明的影像檢索裝置具備上述動態(tài)攝像機顏色校正裝置;運動區(qū)域提取部,其從經(jīng)顏色校正部校正過的攝像圖像中提取圖像內(nèi)發(fā)生過運動的區(qū)域;人判別部,其判別經(jīng)運動區(qū)域提取部提取的區(qū)域中是否包含人物等,并從區(qū)域中提取人物區(qū)域;區(qū)域分割部,其對經(jīng)人判別部提取的人物區(qū)域進行區(qū)塊分割;代表色計算部,其從經(jīng)區(qū)域分割部區(qū)塊分割而成的各區(qū)域中,提取顏色信息和紋理信息;數(shù)據(jù)庫,其存儲經(jīng)代表色計算部提取的顏色信息和紋理信息;人物檢索部,其對存儲在數(shù)據(jù)庫內(nèi)的顏色信息以及紋理信息和用戶想要檢索的人物的顏色信息以及紋理信息加以比較,并計算出得分;以及檢索結(jié)果顯示部, 其顯示經(jīng)人物檢索部計算出的得分。根據(jù)此結(jié)構(gòu),利用動態(tài)攝像機顏色校正裝置動態(tài)進行顏色校正,由此不會受到攝像機的個體差異、日照變動等的影響,可以實現(xiàn)準確的人物檢索。此外,本發(fā)明的影像檢索裝置具備上述動態(tài)攝像機顏色校正裝置;運動區(qū)域提取部,其從經(jīng)顏色校正部校正過的攝像圖像中提取圖像內(nèi)發(fā)生過運動的區(qū)域;人判別部,其判別經(jīng)運動區(qū)域提取部提取的區(qū)域中是否包含人物等,并從區(qū)域中提取人物區(qū)域;區(qū)域分割部,其對經(jīng)人判別部提取的人物區(qū)域進行區(qū)塊分割;代表色計算部,其從經(jīng)區(qū)域分割部區(qū)塊分割而成的各區(qū)域中,提取顏色信息和紋理信息;數(shù)據(jù)庫,其存儲經(jīng)代表色計算部提取的顏色信息和紋理信息;人物檢索部,其對存儲在數(shù)據(jù)庫內(nèi)的顏色信息以及紋理信息和用戶想要檢索的人物的顏色信息以及紋理信息加以比較,計算出得分,并發(fā)送再現(xiàn)命令以再現(xiàn)特定得分的攝像圖像;壓縮部,其以規(guī)定的壓縮方式對經(jīng)顏色校正部校正過的攝像圖像進行壓縮;存儲器,其存儲經(jīng)壓縮部壓縮的攝像圖像;展開部,其根據(jù)經(jīng)人物檢索部發(fā)送的再現(xiàn)命令,將存儲在存儲器中的經(jīng)壓縮部壓縮的攝像圖像讀出,并以規(guī)定的擴展方式擴展;以及顯示部,其將經(jīng)展開部展開的攝像圖像加以顯示。此外,本發(fā)明的影像檢索裝置也可以具有如下結(jié)構(gòu),即壓縮部從經(jīng)顏色校正部校正過的攝像圖像中間斷地選取任意幀,以規(guī)定的壓縮方式進行壓縮。根據(jù)此結(jié)構(gòu),由動態(tài)攝像機顏色校正裝置動態(tài)進行顏色校正,并將被顏色校正的影像存儲到存儲器中,且由顯示部顯示,由此不會受到攝像機的個體差異、日照變動等的影響,可以再現(xiàn)所需的人物影像。進而,本發(fā)明的影像檢索裝置與多個攝像機連接,其具備上述動態(tài)攝像機顏色校正裝置;運動區(qū)域提取部,其從經(jīng)顏色校正部校正過的攝像圖像中提取圖像內(nèi)發(fā)生過運動的區(qū)域;人判別部,其判別經(jīng)運動區(qū)域提取部提取的區(qū)域中是否包含人物等,并從區(qū)域中提取人物區(qū)域;區(qū)域分割部,其對經(jīng)人判別部提取的人物區(qū)域進行區(qū)塊分割;代表色計算部, 其從經(jīng)區(qū)域分割部區(qū)塊分割而成的各區(qū)域中,提取顏色信息和紋理信息;檢索人物數(shù)據(jù)庫, 其存儲特定人物的顏色信息和紋理信息;人物匹配部,其對存儲在檢索人物數(shù)據(jù)庫中的顏色信息以及紋理信息和經(jīng)代表色計算部計算出的顏色信息以及紋理信息加以比較,并在為同一人物的情況下,發(fā)送攝像機切換命令,以使經(jīng)顏色校正部校正的拍攝有代表色計算部檢測到的人物的攝像圖像得以顯示;影像切換部,其根據(jù)經(jīng)人物匹配部發(fā)送的攝像機切換命令,切換到對經(jīng)顏色校正部校正過的攝像圖像進行拍攝的攝像機;以及顯示部,其對經(jīng)影像切換部切換且經(jīng)顏色校正部校正的攝像圖像進行監(jiān)視和顯示。根據(jù)此結(jié)構(gòu),動態(tài)攝像機顏色校正裝置動態(tài)進行顏色校正,人物匹配部預(yù)先比較是否為存儲在檢索人物DB(Data Base)中的人物,在為同一人物的情況下,利用影像切換部切換攝像機,由此將不會受到攝像機的個體差異、日照變動等的影響,即便是所需的人物在攝像機間移動,也可以進行監(jiān)視。本發(fā)明(第2發(fā)明)中,自動提取監(jiān)視區(qū)域內(nèi)的背景圖像,并確認背景圖像顏色的變化,對顏色校正參數(shù)進行逐次更新,由此不受攝像部的攝像環(huán)境的變化的影響,可自動地對攝像圖像進行顏色校正。(第1發(fā)明的實施方式)以下,就本發(fā)明(第1發(fā)明)的實施方式的顏色校正處理裝置,使用圖1 圖9來說明。本實施方式中,如圖2所示,例示了跟蹤監(jiān)視系統(tǒng)中所使用的顏色校正處理裝置的情況,在此跟蹤監(jiān)視系統(tǒng)中,用計算機對兩個攝像機拍攝到的兩個攝像機圖像進行圖像處理, 對在此兩個攝像機圖像間移動的目標(例如人物等)進行跟蹤監(jiān)視。以下的說明中,將兩個攝像機稱作攝像機A以及攝像機B。而且,將攝像機A拍攝到的圖像稱作源圖像A,且將攝像機B拍攝到的圖像稱作源圖像B。本實施方式中,將攝像機A和攝像機B配置在彼此遠離的位置上(參考圖幻。而且,作為監(jiān)視對象的人物在攝像機A的源圖像A和攝像機B的源圖像B間移動。本發(fā)明實施方式的顏色校正處理裝置的框圖示于圖1。如圖1所示,顏色校正處理裝置1具備設(shè)置在設(shè)有兩個攝像機2 (攝像機A以及攝像機B)的監(jiān)視場所的兩個客戶端單元3 (客戶端單元A以及客戶端單元B);以及設(shè)置在中央監(jiān)視場所的一個服務(wù)器單元4。如圖1所示,客戶端單元3具備源圖像獲取部5、區(qū)域選擇部6、區(qū)域顏色確定部7、 顏色校正部8、照明變化檢測部9、顏色集合更新部10、及顏色集合信息存儲部11。此外,服務(wù)器單元4具備目標相似判定部12、及基準目標存儲部13。源圖像獲取部5,從攝像機2(攝像機A或者攝像機B)中獲取源圖像(源圖像A或者源圖像B)。本實施方式中,在源圖像獲取部5中,以預(yù)先設(shè)定的規(guī)定幀頻(例如,間隔1 秒或者間隔5秒等)獲取源圖像。圖3是表示區(qū)域選擇部6的結(jié)構(gòu)的框圖。如圖3所示,區(qū)域選擇部6具有源目標提取部14,所述源目標提取部14從源圖像中提取背景圖像中移動的前景目標作為源目標。 此外,區(qū)域選擇部6具備背景圖像獲取部15,其從源圖像中獲取將源目標除去后的背景圖像;對應(yīng)區(qū)域搜索部16,其從背景圖像中搜索與后述的顏色集合的源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域。本實施方式中,背景圖像的獲取是以規(guī)定的時間間隔(例如,間隔1分鐘或者間隔5分鐘)來進行的。這樣一來,區(qū)域選擇部6可以從源圖像中選擇特定的源區(qū)域(源目標、背景圖像的對應(yīng)區(qū)域)。圖4是表示區(qū)域顏色確定部7的結(jié)構(gòu)的框圖。如圖4所示,區(qū)域顏色確定部7具備目標顏色確定部17,所述目標顏色確定部17計算出源目標的平均色,并將所述平均色確定為目標顏色。例如,在源目標具有各種顏色的情況下,源目標的平均色成為與亮度相對應(yīng)的灰度等級的顏色信息?;蛘?,源目標的平均色也可以具有顏色信息,所述顏色信息包含RGB 顏色信息的各自的平均色。此外,區(qū)域顏色確定部7具備對應(yīng)區(qū)域顏色確定部18,所述對應(yīng)區(qū)域顏色確定部18計算出對應(yīng)區(qū)域的平均色,并將所述平均色確定為對應(yīng)區(qū)域顏色。例如,在對應(yīng)區(qū)域具有大致相同顏色的情況下,對應(yīng)區(qū)域的平均色成為代表大致相同顏色的中心顏色的顏色信息。即,對應(yīng)區(qū)域的平均色,也可以稱作對應(yīng)區(qū)域的代表色。作為此對應(yīng)區(qū)域的代表色,除了對應(yīng)區(qū)域的平均色以外,例如也可以使用對應(yīng)區(qū)域中所含的顏色的最頻值(最頻繁出現(xiàn)的顏色)。這樣一來,區(qū)域顏色確定部7可以確定源區(qū)域顏色(源目標顏色、對應(yīng)區(qū)域顏色)來作為代表源區(qū)域(源目標、對應(yīng)區(qū)域)的顏色。圖5是表示顏色校正部8的結(jié)構(gòu)的框圖。如圖5所示,顏色校正部8具備源目標存儲部19,所述源目標存儲部19存儲源目標的目標信息(目標的顏色信息或位置信息等)。 此外,顏色校正部8具備對應(yīng)區(qū)域存儲部20,其存儲對應(yīng)區(qū)域的對應(yīng)區(qū)域信息(對應(yīng)區(qū)域的顏色信息或位置信息等);區(qū)域分割部21,將對應(yīng)區(qū)域分割成多個小區(qū)域。此外,顏色校正部8具備相似區(qū)域搜索部22,其搜索源圖像的特定源區(qū)域(源目標、對應(yīng)區(qū)域或者小區(qū)域)中,具有和源顏色在相似范圍內(nèi)的顏色的區(qū)域;區(qū)域顏色替換部23,其將搜索到的區(qū)域的顏色替換為后述的顏色集合的基準色。這樣一來,顏色校正部8構(gòu)成為可以使用存儲在顏色集合信息存儲部11中的顏色集合信息,將源圖像(源圖像A或者源圖像B)中和源顏色在相似范圍內(nèi)的顏色校正為基準色。在顏色集合信息存儲部11中,例如,存儲有如圖6所示的顏色集合信息。顏色集合信息具有作為顏色校正對象的源顏色的顏色信息;表示已獲取了源顏色的顏色信息的原區(qū)域的區(qū)域信息;及顏色校正所使用的基準色的顏色信息。本實施方式中,例如,灰度等級的源顏色的顏色信息(灰度3、灰度2)作為從圖2所示的源圖像(源圖像A以及源圖像B)的源目標(例如人物)中獲取的顏色集合信息被存儲。基準色的顏色信息(灰度1),例如是從存儲在基準目標存儲部13中的人物的基準目標中獲取的。另外,此情況下,由于源目標(例如人物)在源畫面中移動,并非總是停留在固定區(qū)域,因此源顏色的區(qū)域信息并不是作為顏色集合信息而存儲的。此外,本實施方式中,例如,綠色的源顏色的顏色信息(綠色8、綠色6)和區(qū)域信息 (2b、4e)作為從圖2所示的源圖像(源圖像A以及源圖像B)的背景圖像的對應(yīng)域的小區(qū)域 (例如行道樹的樹葉部分)中獲取的顏色集合信息被存儲?;鶞噬念伾畔?綠色7),例如,是從存儲在基準目標存儲部13中的行道樹的基準目標的樹葉部分中獲取的。此外,褐色的源顏色的顏色信息(褐色2、褐色3)和區(qū)域信息(2c、4f)作為從背景圖像的對應(yīng)域的小區(qū)域(例如行道樹的樹干部分)中獲取的顏色集合信息被存儲?;鶞噬念伾畔?褐色7),例如是從存儲在基準目標存儲部13中的行道樹的基準目標的樹干部分中獲取的。圖7是表示目標相似判定部12的結(jié)構(gòu)的框圖。如圖7所示,目標相似判定部12 具備特征量獲取部對、及特征量相似判定部25。特征量獲取部M從顏色校正部8的源目標存儲部19中獲取源目標的特征量,并且從基準目標存儲部13中獲取基準目標的特征量。 例如,圖2中例示基準目標的例子。本實施方式中,例如使用行道樹、人物、及道路等目標作為基準目標。而且,例如使用目標的移動速度及大小、縱橫比等特征量作為目標的特征量。 特征量相似判定部25通過對源目標的特征量和基準目標的特征量進行比較,來判定源目標和基準目標的相似度。如此,使目標相似判定部12構(gòu)成為可以判定源目標和基準目標是否相似。圖8是表示照明變化檢測部9的結(jié)構(gòu)的框圖。如圖8所示,照明變化檢測部9具備顏色集合信息獲取部26,其從顏色集合信息存儲部11中獲取顏色集合信息;源顏色獲取部27,其根據(jù)顏色集合信息獲取與對應(yīng)區(qū)域(或者小區(qū)域)相對應(yīng)的源顏色(參考圖6)。 此外,照明變化檢測部9具備對應(yīng)區(qū)域顏色獲取部34,其獲取對應(yīng)區(qū)域的顏色信息(對應(yīng)區(qū)域顏色);顏色距離計算部四,其使用最小平方法等比較方法計算出所述源顏色和對應(yīng)區(qū)域顏色的顏色距離D ;以及照明變化判定部30,其在顏色距離D大于規(guī)定的臨界顏色距離 Ds時判定照明發(fā)生了變化。如此,照明變化檢測部9構(gòu)成為可以檢測出源圖像中的照明環(huán)境的變化。本實施方式中,源顏色和對應(yīng)區(qū)域顏色的顏色距離D,例如,可通過下述式1計算出。此處,源顏色的HSV色空間中的坐標為(hi、si、vl),而對應(yīng)區(qū)域顏色的HSV色空間中的坐標為(h2、s2、v2)。D = {(hl-h2)2+(sl-s2)2+(vl-v2)2}0. 5 (式 1)圖9是表示顏色集合更新部10的結(jié)構(gòu)的框圖。如圖9所示,顏色集合更新部10 具備顏色集合信息獲取部31、源顏色獲取部32、源區(qū)域信息獲取部33、區(qū)域顏色獲取部34、 加權(quán)計算部35、及源顏色替換部36。顏色集合更新部10中,在判定源目標和基準目標相似時,通過源區(qū)域信息獲取部 33獲取源目標的目標信息,并通過區(qū)域顏色獲取部34獲取源目標的目標顏色。此外,通過顏色集合信息獲取部31獲取顏色集合信息,且通過源顏色獲取部32獲取與源目標相對應(yīng)的源顏色。而且,在加權(quán)計算部35中,對目標顏色和源顏色進行加權(quán)平均處理,且在源顏色替換部36中,將加權(quán)平均處理前的舊的源顏色,替換為加權(quán)平均處理后的新的源顏色。如此使顏色集合更新部10構(gòu)成為可以使用源目標的目標顏色,來自動地更新顏色集合的源顏色。本實施方式中,在加權(quán)計算部35中,使用下述式2對目標顏色和源顏色進行加權(quán)平均處理。此處,Cs是進行加權(quán)平均處理前的(更新前的)顏色集合的源顏色的顏色信息, Co是目標顏色的顏色信息。此外,A是加權(quán)系數(shù)(0彡A彡1)。而且,Cs’是通過加權(quán)平均處理所得的(更新后的)顏色集合的源顏色的顏色信息。Cs,= (I-A) XCs+AXCo (式 2)此外,顏色集合更新部10中,在判定源圖像中的照明環(huán)境發(fā)生了變化時,通過源區(qū)域信息獲取部33,獲取對應(yīng)區(qū)域的對應(yīng)區(qū)域信息,且通過區(qū)域顏色獲取部34,獲取對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色。此外,通過顏色集合信息獲取部31獲取顏色集合信息,且通過源顏色獲取部32獲取與對應(yīng)區(qū)域相對應(yīng)的源顏色。而且,和上述相同,在加權(quán)計算部35中,對目標顏色和源顏色進行加權(quán)平均處理,且在源顏色替換部36中,將加權(quán)平均處理前的舊的源顏色,替換為加權(quán)平均處理后的新的源顏色。此時,上述式2中的Co,使用對應(yīng)區(qū)域顏色 (對應(yīng)區(qū)域的平均色)來代替目標顏色的顏色信息。如此使顏色集合更新部10構(gòu)成為可以使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色,自動地更新顏色集合的源顏色。使用圖10 圖15來說明以以上方式構(gòu)成的顏色校正處理裝置1的動作。首先,使用圖10 圖12來說明在本發(fā)明實施方式的顏色校正處理裝置1中,使用源目標的目標顏色,進行顏色校正處理以及源顏色的更新時的動作。圖10是表示在本實施方式的顏色校正處理裝置1中,使用源目標的目標顏色,進行顏色校正處理以及源顏色的更新處理時的整體流程的流程圖。本實施方式中,客戶端單元3的源圖像獲取部5,總是以規(guī)定的幀頻從攝像機2獲取源圖像。如圖10所示,在使用源目標的目標顏色進行顏色校正處理以及源顏色的更新處理時,首先,在區(qū)域選擇部6的源目標提取部14中,從源圖像中提取源目標(Sll)。接著,在區(qū)域顏色確定部7的目標顏色確定部17中,將源目標的代表色(例如源目標的平均色)確定為目標顏色(S12)。并且,在顏色校正部8中,使用源目標的目標顏色,進行顏色校正處理 (S13)。圖11是表示在顏色校正部8中,使用源目標的目標顏色進行顏色校正處理(S13) 時的流程的流程圖。如圖11所示,在使用目標顏色進行顏色校正時,首先,在源目標存儲部 19中存儲源目標的目標信息(S131)。并且,相似區(qū)域搜索部22從目標信息中獲取源目標的目標顏色的顏色信息(S132),并從顏色集合信息存儲部11中獲取顏色集合的源顏色的顏色信息(S 133)。并且,在相似區(qū)域搜索部22中,搜索具有和源顏色在相似范圍內(nèi)的顏色的源目標 (S134)。在搜索到具有和源顏色在相似范圍內(nèi)的顏色的源目標的情況下,在區(qū)域顏色替換部23中,將源目標的顏色替換為與此源顏色相對應(yīng)的基準色(S135),并結(jié)束顏色校正處理。另一方面,在未搜索到具有和源顏色在相似范圍內(nèi)的顏色的源目標的情況下,不進行顏色的替換便結(jié)束處理。在進行如上述那樣的顏色校正處理(SU)后,服務(wù)器單元4的目標相似判定部12 的特征量獲取部M獲取源目標和基準目標的特征量(S14)。并且,在目標相似判定部12的特征相似判定部中,根據(jù)源目標和基準目標的特征量,對源目標和基準目標進行相似判定(S15)。在判定源目標和基準目標相似的情況下,在客戶端單元3的顏色集合更新部10 中,使用源目標的目標顏色,進行源顏色的更新處理(S16)。另一方面,在判定源目標和基準目標不相似的情況下,不進行源顏色的更新便結(jié)束處理。圖12是表示在顏色集合更新部10中,使用源目標的目標顏色進行源顏色的更新處理(S16)時的流程的流程圖。如圖12所示,在使用目標顏色來進行源顏色的更新時,首先,通過顏色集合更新部10的源區(qū)域信息獲取部33,獲取源目標的目標信息(S161)。并且, 通過區(qū)域顏色獲取部34,從源目標的目標信息中獲取目標顏色(S16》。此外,顏色集合信息獲取部31中,從顏色集合信息存儲部11中獲取顏色集合信息(S163)。并且,在源顏色獲取部32中,從顏色集合信息中搜索并獲取與源目標相對應(yīng)的源顏色(S164)。此后,在顏色集合更新部10的加權(quán)計算部35中,對目標顏色和源顏色進行加權(quán)平均處理(S165),并根據(jù)目標顏色和源顏色來求得新的源顏色。并且,在源顏色替換部36中, 將顏色集合中的舊的源顏色替換為新的源顏色(S166)。這樣,使顏色集合的源顏色自動更新。其次,使用圖13 圖15來說明在本發(fā)明的實施方式的顏色校正處理裝置1中,使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色,進行顏色校正處理以及源顏色更新時的動作。圖13是表示在本實施方式的顏色校正處理裝置1中,使用背景圖像的對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色,進行顏色校正處理以及源顏色的更新處理時的整體流程的流程圖。本實施方式中,客戶端單元3的源圖像獲取部5也總是以規(guī)定的幀頻從攝像機2中獲取源圖像。如圖13所示,在使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色進行顏色校正處理以及源顏色的更新處理時,首先,在區(qū)域選擇部6的背景圖像獲取部15中,從源圖像中獲取背景圖像 (S21)。此背景圖像的獲取是以規(guī)定的時間間隔(例如,間隔1分鐘或者間隔5分鐘)來進行的。接著,在區(qū)域選擇部6的對應(yīng)區(qū)域搜索部16中,從背景圖像中搜索和顏色集合的源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域(S2》。并且,在區(qū)域顏色確定部7的對應(yīng)區(qū)域顏色確定部18中,計算出對應(yīng)區(qū)域的代表色(例如,對應(yīng)區(qū)域的平均色),并將所述代表色確定為對應(yīng)區(qū)域顏色(S23)。接著,在照明變化檢測部9中,分別獲取顏色集合的源顏色和對應(yīng)區(qū)域顏色,并通過顏色距離計算部四計算出顏色集合的源顏色和對應(yīng)區(qū)域顏色的顏色距離D (S24)。并且, 在照明變化判定部30中,判定顏色距離D是否大于臨界顏色距離Ds(S25)。在此判定的結(jié)果為顏色距離D大于臨界顏色距離Ds的情況下,判定照明環(huán)境發(fā)生了變化,并進行源顏色的更新處理6 )。另一方面,在判定結(jié)果為顏色距離D在臨界顏色距離Ds以下的情況下, 判定照明環(huán)境未發(fā)生變化,不進行源顏色的更新處理。圖14是表示在顏色集合更新部10中,使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色進行源顏色的更新處理(S26)時的流程的流程圖。如圖14所示,在使用對應(yīng)區(qū)域顏色進行源顏色的更新時,首先,通過顏色集合更新部10的源區(qū)域信息獲取部33獲取對應(yīng)區(qū)域的對應(yīng)區(qū)域信息(S^U)。并且,通過區(qū)域顏色獲取部34從對應(yīng)區(qū)域的對應(yīng)區(qū)域信息中獲取對應(yīng)區(qū)域顏色6 。此外,顏色集合信息獲取部31從顏色集合信息存儲部11中獲取顏色集合信息 (S263)。并且,在源顏色獲取部32中,從顏色集合信息中搜索并獲取與對應(yīng)區(qū)域相對應(yīng)的源顏色(S264)。
此后,在顏色集合更新部10的加權(quán)計算部35中,進行對應(yīng)區(qū)域顏色和源顏色的加權(quán)平均處理(S^^),并根據(jù)對應(yīng)區(qū)域顏色和源顏色求得新的源顏色。并且,在源顏色替換部 36中,將顏色集合中的舊的源顏色替換為新的源顏色(S^56)。這樣,使顏色集合的源顏色自動更新。如上所述,對一個顏色集合完成源顏色的更新處理(S26)后,對所有顏色集合是否完成源顏色的更新進行判斷(S27)。在此判斷結(jié)果為判斷出所有顏色集合并未完成顏色集合的更新的情況下,再次從背景圖像中,搜索和顏色集合的源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域(S22),并計算出平均色(S23)。并且,判定照明環(huán)境有無發(fā)生變化(SM S25), 并對剩余的顏色集合重復(fù)進行源顏色更新處理(S^)。并且,使用如上被更新的顏色集合,在顏色校正部8中進行顏色校正處理(S28)。圖15是表示在顏色校正部8中,使用對應(yīng)區(qū)域的對應(yīng)區(qū)域顏色進行顏色校正處理 (S28)時的流程的流程圖。如圖15所示,在使用對應(yīng)區(qū)域顏色進行顏色校正時,首先,在對應(yīng)區(qū)域存儲部20中存儲對應(yīng)區(qū)域的對應(yīng)區(qū)域信息(S^l)。其次,在顏色校正部8的區(qū)域分割部21中,判斷是否將對應(yīng)區(qū)域分割為小區(qū)域 (S^2)。本實施方式中,例如,在對應(yīng)區(qū)域由如行道樹那樣的多個顏色區(qū)域(例如,樹葉的綠色區(qū)域和樹干的褐色區(qū)域這兩個區(qū)域)構(gòu)成的情況下,判斷為必須將對應(yīng)區(qū)域分割為小區(qū)域,并進行區(qū)域分割處理(S^3)。另一方面,在對應(yīng)區(qū)域由如道路那樣的單一顏色區(qū)域 (例如路面的灰色區(qū)域)構(gòu)成的情況下,判斷為不必將對應(yīng)區(qū)域分割為小區(qū)域。此后,在顏色校正部8的區(qū)域搜索部中,從被存儲的對應(yīng)區(qū)域信息中,獲取對應(yīng)區(qū)域(或者小區(qū)域)的對應(yīng)區(qū)域顏色的顏色信息(S284),并從顏色集合信息存儲部11中,獲取顏色集合的源顏色的顏色信息(S^O。并且,在相似區(qū)域搜索部22中,搜索具有和源顏色在相似范圍內(nèi)的顏色的對應(yīng)區(qū)域(或者小區(qū)域)。在此檢索結(jié)果為搜索到具有和源顏色在相似范圍內(nèi)的顏色的對應(yīng)區(qū)域(或者小區(qū)域)的情況下,在區(qū)域顏色替換部23中,將對應(yīng)區(qū)域(或者小區(qū)域)的顏色替換為與此源顏色相對應(yīng)的基準色(S287),并結(jié)束顏色校正處理。另一方面,在未搜索到具有和源顏色在相似范圍內(nèi)的顏色的對應(yīng)區(qū)域(或者小區(qū)域)的情況下,不進行顏色的替換便結(jié)束處理。根據(jù)這樣的發(fā)明的實施方式中的顏色校正處理裝置1,通過設(shè)置有使用源區(qū)域顏色(目標顏色、對應(yīng)區(qū)域顏色)對顏色集合的源顏色進行更新的顏色集合更新部10,而無需保存顏色校正處理所不需要的顏色集合的信息,從而可以減輕計算負荷,并實時應(yīng)對照明環(huán)境的變化。S卩,本實施方式中,在顏色集合更新部10中,使用源區(qū)域(源目標、對應(yīng)區(qū)域)的源區(qū)域顏色(目標顏色、對應(yīng)區(qū)域顏色)來替換并更新顏色集合的源顏色。因此,即便是在追加跟蹤對象的目標的情況下,或照明環(huán)境發(fā)生了變化的情況下,也無需保存顏色校正處理所不需要的顏色集合信息。由此,為了進行顏色校正處理所保存的信息量較少即可,從而可以減輕計算負荷。因此,顏色校正處理所需的時間縮短,顏色校正處理的動作穩(wěn)定。此外, 因為計算負荷小,所以即便是照明環(huán)境發(fā)生變化也可以實時應(yīng)對。此外,本實施方式中,即便是在追加了跟蹤對象的目標的情況下,在目標相似判定部12中,也進行源目標是否和基準目標相似的判定。而且,在判定源目標和基準目標相似時,在顏色集合更新部10中,使用源目標的目標顏色(源目標的平均色)對顏色集合的源顏色進行更新。由此,無需保存顏色校正處理所不需要的顏色集合信息。因此,為了進行顏色校正處理所保存的信息量較少即可,從而計算負荷得以減輕。此外,本實施方式中,在目標相似判定部12中,可以使用源目標和基準目標的特征量(例如移動速度、小大、縱橫比等)來判定目標的相似度,因此使源目標和基準目標的一致性精度得到提高,源目標的跟蹤精度得以提高。此外,本實施方式中,在顏色集合更新部10中,將對目標顏色和源顏色進行加權(quán)平均處理所得的加權(quán)平均色用作更新用的源顏色。由此,即便是在源目標的目標顏色和顏色集合的源顏色之間顏色差異較大的情況下,也可以通過調(diào)整加權(quán)的程度,來調(diào)整更新用的源顏色的顏色。此外,本實施方式中,在照明環(huán)境發(fā)生了變化的情況下,在照明變化檢測部9中, 判定照明環(huán)境發(fā)生了變化。而且,在判定照明環(huán)境發(fā)生了變化時,在顏色集合更新部10中, 使用對應(yīng)區(qū)域顏色來更新顏色集合的源顏色。由此,無需保存顏色校正處理所不需要的顏色集合的信息。因此,為了進行顏色校正處理所保存的信息量較少即可,從而可以減輕計算負荷。此外,本實施方式中,在照明變化檢測部9中,使用對應(yīng)區(qū)域顏色和源顏色的顏色距離(色空間中的兩個色坐標間的距離)來判定照明環(huán)境有無發(fā)生變化。由此,相比于現(xiàn)有的檢測照明環(huán)境變化的方法,計算負荷得以減輕,從而使得對照明環(huán)境變化等的適應(yīng)性提尚。此外,本實施方式中,在區(qū)域選擇部6的背景圖像獲取部15中,以規(guī)定的時間間隔 (例如間隔1分鐘或者間隔5分鐘),從源圖像中獲取背景圖像。而且,在進行照明變化檢測時,根據(jù)此背景圖像檢測照明環(huán)境的變化。因此,通過根據(jù)照明環(huán)境變化的頻率調(diào)整規(guī)定的時間間隔,可以調(diào)整進行照明環(huán)境變化檢測計算的頻率,從而相比于一直檢測照明環(huán)境變化的情況,計算負荷得到減輕。此外,本實施方式中,在顏色校正部8中,當對應(yīng)區(qū)域(例如行道樹)由具有各不相同的顏色的多個小區(qū)域(例如樹葉部分和樹干部分)構(gòu)成時,使用多個小區(qū)域中的每個小區(qū)域的對應(yīng)區(qū)域顏色,更新源顏色。由此,對應(yīng)區(qū)域的一致性精度得到提高。以上,舉例說明了本發(fā)明的實施方式,但本發(fā)明的范圍并不限定于這些說明,而是可以在權(quán)利要求書中記載的范圍內(nèi)根據(jù)目的而進行變更、變形。例如,在以上說明中,作為攝像裝置,舉例說明了以規(guī)定的幀頻進行靜止圖像拍攝的攝像機2的情況,但本發(fā)明的范圍并不限定于此,通常也可以是進行動態(tài)圖像拍攝的攝像機(Video Camera)。此外,在以上說明中,以顏色校正處理裝置1由兩個客戶端單元3和一個服務(wù)器單元4構(gòu)成為例進行了說明,但本發(fā)明的范圍并不限定于此。例如,各客戶端單元3也可以構(gòu)成為具有服務(wù)器單元4的功能(目標相似判定單元、基準目標存儲單元)。此外,在以上說明中,舉例說明了作為攝像裝置的攝像機2為兩個的情況,但本發(fā)明的范圍并不限定于這些說明,即便是攝像裝置為三個以上的情況同樣也可以實施。此外,在以上說明中,舉例說明了攝像機A以及攝像機B的拍攝區(qū)域局部重疊的情況(參考圖2),但本發(fā)明的范圍并不限定于此,即便是攝像機A以及攝像機B的拍攝區(qū)域不重疊的情況同樣也可以實施。
此外,在以上說明中,以通過顏色校正處理裝置1自動進行顏色集合的選擇以及更新為例進行了說明,但本發(fā)明的范圍并不限定于此,也可以是用戶手動進行顏色集合的選擇,并使用此顏色集合的區(qū)域信息進行顏色集合的更新。(第2發(fā)明的實施方式)以下,使用附圖來說明本發(fā)明(第2發(fā)明)實施方式的動態(tài)攝像機顏色校正裝置。(第1實施方式)圖16表示本發(fā)明第1實施方式的動態(tài)攝像機顏色校正裝置的結(jié)構(gòu)。動態(tài)攝像機顏色校正裝置100與輸出彩色圖像的攝像機110連接。動態(tài)攝像機顏色校正裝置100由如下部分構(gòu)成補色部126,其根據(jù)特定的比色圖表確定顏色校正參數(shù);顏色校正部120,其根據(jù)顏色校正參數(shù),對攝像機110拍攝到的圖像進行顏色校正;背景提取部121,其從經(jīng)由顏色校正部120輸入的影像(顏色校正圖像)中提取背景信息;背景確認部122,其對經(jīng)由顏色校正部120輸入的影像的像素是否為背景像素進行確認;顏色提取部123,其根據(jù)從背景提取部121以及背景確認部122輸出的影像,計算出像素的位置信息和顏色信息;參考表 124,其將背景像素的位置信息和顏色信息表格化;顏色比較部125,其對存儲在參考表IM 中的位置信息以及顏色信息、和經(jīng)由背景確認部122以及顏色提取部123提取的位置信息以及顏色信息進行比較,在不一致的情況下向顏色校正部120發(fā)出顏色校正值變更命令。 另外,顏色校正參數(shù)包含于顏色校正部中。另外,圖16中,和動態(tài)攝像機顏色校正裝置100連接的攝像機110表示的是一例, 而并未限定攝像機110的數(shù)量。此外,圖16的粗箭頭表示影像信號,例如,當攝像機110輸出的是NTSC制式的信號時,粗箭頭表示的是NTSC制式的信號。關(guān)于如以上方式構(gòu)成的動態(tài)攝像機顏色校正裝置100,對初始運行動作和通常運行動作這兩種動作來進行說明。初始運行動作是,為進行動態(tài)顏色校正,在設(shè)置攝像機時僅進行一次的動作。通常運行動作是使用在所述初始運行動作時設(shè)定的初始值進行動態(tài)顏色校正的動作,此動作是本發(fā)明的主要部分。首先,使用圖17、圖18、圖19來說明初始運行動作。用攝像機對相同物體進行拍攝。當在早晨進行拍攝時,由于太陽的光量較弱,所以拍得較暗,當在白天進行拍攝時,由于太陽的光量較強,所以拍攝得較亮,而在傍晚進行拍攝時,拍攝得略帶紅色。因此,必須進行顏色校正以使早晨拍攝到的色空間和傍晚拍攝到的色空間等同于白天拍攝到的色空間。圖17A是比色圖表的示意圖,圖17B是理論上的UV色空間和比色圖表的理論上的 UV值的一例,圖17C是用攝像機對UV色空間和比色圖表進行拍攝時的UV值的一例。例如,RGB色空間中,R(紅色)為0 255,G(綠色)為0 255,B為0 255,色空間中存在有255X255X255 = 1677萬種顏色。為了使色空間相同,用攝像機對1677萬種顏色進行拍攝并加以顏色校正即可,但準備1677萬種顏色,并用攝像機進行拍攝,將耗費巨大工時,并不現(xiàn)實。因此,通常是使用如下方法,即,將三維RGB色空間變換成除去了亮度信息的二維UV空間,用攝像機對具有UV空間中的數(shù)種代表色的比色圖表200(圖17A) 進行拍攝,并補足代表色以外的顏色。圖17B表示在UV色空間中UV色空間在理論上可表現(xiàn)的范圍210。此外,表示比色
圖表200的代表色的理論值211a、211b、211c.....211η。將用攝像機110對比色圖表200
的代表色進行拍攝所得的圖像(由RGB這3種顏色構(gòu)成)再次變換到UV空間時,取得圖17C 中所示的 UV 值 221a、221b、221c、· · ·、221n。由于已知理論值211a和UV值22la、理論值211b和UV值221b、...、理論值211η 和UV值221η相對應(yīng),因此可以補足代表色以外的色空間220(圖17C)。另外,圖17中的代表色數(shù)表示的是一例,而并未限定代表數(shù)。此外,色空間不限定于UV色空間。圖18表示用以說明本發(fā)明第1實施方式中的動態(tài)攝像機顏色校正裝置的初始運行動作的流程圖。首先,攝像機110對比色圖表200進行拍攝(S300)。補色部1 從攝像機110的攝像圖像中提取比色圖表200 (S301),并對比色圖表200的固有顏色和攝像機110 拍攝到的比色圖表200的顏色加以比較(S302)。補色部1 根據(jù)比較結(jié)果,對比色圖表200 以外的顏色進行補色,并將顏色校正參數(shù)發(fā)送到顏色校正部120(S303)。圖19是用以說明動態(tài)攝像機顏色校正裝置的顏色校正動作的示意圖。例如,當在太陽光量較多的白天對比色圖表200進行拍攝時,攝像機110的攝像比色圖表400被拍攝得有些跳躍。但是,通過顏色校正部120,根據(jù)顏色校正參數(shù)進行顏色校正402,由此作為比色圖表200所固有的色空間的比色圖表402被輸出。返回圖18,攝像機110對監(jiān)視區(qū)域進行拍攝(S304)。攝像圖像是在由顏色校正部 120根據(jù)顏色校正參數(shù)進行顏色校正630 后,輸入到背景提取部121。在攝像機110所拍攝到的圖像中存在前景和背景。前景是指人、車輛之類的經(jīng)常運動的物體,背景是指墻壁、地面之類的不運動的物體。背景提取部121,通過僅提取除去了前景信息的背景信息來生成背景圖像(S306)。現(xiàn)示出進行背景提取(背景圖像的生成)的算法的一例。在作為數(shù)幀攝像機攝像圖像的攝像機攝像圖像群中,可以假定與前景相比背景中包含非常多的信息。通過使用從存在任意個數(shù)的母集團中獲取最頻值的最小平方中值法,將幀內(nèi)每個像素的最頻值作為背景像素,從而生成背景圖像。從由背景提取部121提取的背景圖像中,顏色提取部123獲取除去了例如Y(亮度)U、V(顏色)之類的亮度信號的顏色信息(S307)。經(jīng)變換的顏色信息與背景像素的位置信息相對應(yīng)地存儲到參考表124中(S308)。圖20表示參考表的一例。此參考表是攝像機110為NTSC制式、顏色信息為YUV 規(guī)格時的例子,位置為720 X 480,存儲的U、V范圍是從16到MO的范圍。圖21表示用以說明本發(fā)明第1實施方式中的動態(tài)攝像機顏色校正裝置的通常運行動作的流程圖。使用圖21來說明此通常運行動作。攝像機110,對監(jiān)視區(qū)域進行拍攝 (S600)。攝像圖像經(jīng)顏色校正部120被顏色校正(S601)后,被輸入到背景確認部122。背景確認部122使用差分法或者運動矢量法,根據(jù)所輸入的攝像圖像,按象素單位確認為背景還是前景(S602)。例如,在使用差分法的情況下,求出當前幀的攝像圖像和其前一幀的攝像圖像的差分,提取運動區(qū)域,并將此運動區(qū)域以外部分作為背景。關(guān)于經(jīng)背景確認部122確認為背景的像素,顏色提取部123獲取除去了亮度信號的顏色信息(S603)。獲取顏色信息的算法,與步驟S307相同。提取的顏色信息和此像素的位置信息被發(fā)送到顏色比較部125(S604)。顏色比較部125根據(jù)位置信息對經(jīng)由S604發(fā)送來的顏色信息和存儲在參考表 124中的顏色信息進行比較(S605)。在顏色信息的值不同的情況下(S606),判斷為因日照變動等而導(dǎo)致初始設(shè)定動作時所設(shè)定的色空間發(fā)生了變化,顏色比較部125將顏色校正值變更命令、參考表124的顏色信息及經(jīng)由背景確認部122的顏色信息發(fā)送到顏色校正部 122(S606)。顏色校正部120根據(jù)參考表124的顏色信息和經(jīng)由背景確認部122的顏色信息, 對顏色校正參數(shù)進行更新(變更),以將當前的背景色作為初始設(shè)定動作時的背景色輸出 (S607)。在顏色信息的值相同的情況下(S606),返回到步驟S600。根據(jù)這樣的本發(fā)明第1實施方式的動態(tài)攝像機顏色校正裝置,利用背景提取部 121、顏色提取部123,將初始設(shè)置時由攝像機110拍攝到的背景的位置/顏色信息保存到參考表124中,利用背景確認部122、顏色提取部123提取運行中的攝像機110的背景,利用顏色比較部125來進行是否因日照變動而導(dǎo)致色空間發(fā)生變化的比較,利用顏色校正部 122更新顏色校正參數(shù),由此,可以不受攝像機110的設(shè)置環(huán)境或日照變動等攝像環(huán)境的變化的影響而自動地對攝像圖像進行適當顏色校正。(第2實施方式)接著,說明本發(fā)明第2實施方式的動態(tài)攝像機顏色校正裝置。圖22表示本發(fā)明第 2實施方式的動態(tài)攝像機顏色校正裝置的結(jié)構(gòu)。另外,圖22中和圖16共用的部分標上相同的標記而省略其說明。圖22中,本實施方式涉及的動態(tài)攝像機顏色校正裝置700除具有實施方式1中所說明的顏色校正部120、背景提取部121、背景確認部122、顏色提取部123、參考表124、及顏色比較部125以外,還具有補色部726。關(guān)于以以上方式構(gòu)成的動態(tài)攝像機顏色校正裝置700,對初始運行動作和通常運行動作這兩種動作來進行說明。初始運行動作因與所述圖18的步驟S300 步驟S308相同,故省略說明。使用圖23、圖對來說明通常運行動作。圖23是用攝像機對UV色空間和背景色進行拍攝時的UV值的一例。此外,圖M是用以說明本發(fā)明第2實施方式中的動態(tài)攝像機顏色校正裝置的動作的流程圖。此處,圖M的步驟S900 步驟S907,因與前述圖21的步驟 S600 步驟S607相同,故省略說明。由攝像機110拍攝到的UV色空間,例如是圖17B所示的UV色空間220。此外,將
存儲在參考表124中的背景像素的U、V值設(shè)為801180 .....801η。因日照變動等而使
背景像素的顏色801a變化為811a。補色部7 從背景像素的顏色801a、802b.....801η中,搜索和背景像素的顏色
801a及81 Ia接近的顏色(S908)。如圖23那樣在和801b相接近的情況下,補色部7 使用除去顏色801a和801b后的811a、801c.....801η進行補色,并更新顏色校正參數(shù)(S909)。根據(jù)如以上所述的本發(fā)明第2實施方式的動態(tài)攝像機顏色校正裝置,利用補色部 726,使用經(jīng)變更的背景像素的顏色來進行補色,并更新全體顏色校正參數(shù),以此可以實現(xiàn)較高精度的顏色校正。(第3實施方式)接著,說明本發(fā)明第3實施方式的動態(tài)攝像機顏色校正裝置。圖25表示本發(fā)明第 3實施方式的動態(tài)攝像機顏色校正裝置的結(jié)構(gòu)。另外,在圖25中,對和圖16、圖22共用的部分標上相同標記并省略其說明。圖25中,本實施方式涉及的動態(tài)攝像機顏色校正裝置1000除具有實施方式1中說明的顏色校正部120、背景提取部121、背景確認部122、顏色提取部123、參考表124、顏色比較部125、及實施方式2中說明的補色部726以外,還具有更新時刻判別部1027。有關(guān)以以上方式構(gòu)成的動態(tài)攝像機顏色校正裝置1000,對初始運行動作和通常運行動作這兩種動作來進行說明。初始運行動作,因與前述圖18的步驟S300 步驟S308相同,故省略說明。使用圖26、圖27來說明通常運行動作。圖沈是用以說明本發(fā)明第3實施方式中的動態(tài)攝像機顏色校正裝置的動作流程圖。此處,圖26的步驟SllOO 步驟Sl 109,因與前述圖M的步驟S900 步驟S909相同,故省略說明。此外,圖27表示經(jīng)區(qū)塊分割后的背景圖像的一例。如圖27所示,更新時刻判別部1027將從背景確認部122輸入的背景圖像矩形分割成NXM個(SlllO)。另外,圖27中所示的N = 4、M = 4的16分割表示的是一例,但并未限定N、M的分割數(shù)。更新時刻判別部1027計算經(jīng)分割而成的各區(qū)域的平均亮度值(Sllll)。在首次通常運行動作的情況下,將首次的各區(qū)域的平均亮度值作為初始運行動作時的平均亮度值加以存儲(S1112)。更新時刻判別部1027,對經(jīng)分割而成的各區(qū)域的、初始運行動作時的平均亮度值和當前幀的平均亮度值進行比較(S1113)。在亮度值發(fā)生了較大變化的情況下(S1113 是),判斷為日照發(fā)生了變動,并進入步驟S1103 步驟S1109的處理。而在亮度值變化不大的情況下(S1113 否),判斷為日照未發(fā)生變動,返回到步驟S1100。根據(jù)這樣的本發(fā)明第3實施方式的動態(tài)攝像機顏色校正裝置,更新時刻判別部 1027檢測背景圖像的亮度值,并根據(jù)所述背景圖像的亮度值和初始運行時的亮度值(作為基準的亮度值)的差來判別是否使顏色比較部125起作用,僅在相比于初始運行時日照發(fā)生了較多變動時,進行顏色校正參數(shù)的更新,由此可以減輕進行顏色校正的CPU或者DSP的處理工作量。另外,更新時刻判別部也可以根據(jù)顏色信息,來判別是否使顏色比較部125起作用。(第4實施方式)接著,說明本發(fā)明第4實施方式的動態(tài)攝像機顏色校正裝置。圖觀表示本發(fā)明第 4實施方式的動態(tài)攝像機顏色校正裝置的結(jié)構(gòu)。另外,圖觀中對與圖16、圖22、圖25共用的部分標上相同標記并省略其說明。圖觀中,本實施方式涉及的動態(tài)攝像機顏色校正裝置1300,除具有實施方式1中說明的顏色校正部120、顏色提取部123、參考表124、顏色比較部125、及實施方式2中說明的補色部726、實施方式3中說明的更新時刻判別部1027以外,還具有背景提取部1321、背景確認部1322、緩沖器13 、及緩沖器13四。關(guān)于以上述方式構(gòu)成的動態(tài)攝像機顏色校正裝置1300,對初始運行動作和通常運行動作這兩種動作來進行說明。首先,使用圖四、圖30來說明初始運行動作。圖四是用以說明本發(fā)明第4實施方式的動態(tài)攝像機顏色校正裝置的動作的流程圖。此處,圖四的步驟 S1400 步驟S1405,因與前述圖18的步驟S300 步驟S305相同,故省略說明。圖30A是當前圖像以及背景圖像的一例,圖30B是依時序生成的背景像素的直方圖的一例。如圖30A所示,在家門前有樹葉,且樹葉隨風等搖動的情況下,在圖30A的矩形像素中,存在樹葉和家這兩種背景色。因此,背景提取部1321必須提取這兩種背景色。
以下,對提取兩種背景色的算法的一例進行說明。將根據(jù)顏色校正參數(shù)被顏色校正部120顏色校正的攝像圖像,存儲在緩沖器13 中(S1406)。背景提取部1321生成依時序存儲的攝像圖像的各像素的直方圖(圖30B) (S1407)。根據(jù)生成的直方圖,使用例如 Mixture of Gaussian法或者臨界值法等,提取頻率高的亮度b (樹葉的亮度)、亮度c (家的亮度)(S1408)。圖30B中,橫軸為亮度,但并不限定于亮度,也可以包含顏色。顏色提取部123,從亮度b、亮度c的各像素的位置信息及像素信息中,獲取除去了例如Y(亮度)U、V(顏色)之類的亮度信號的兩個顏色信息(S1409)。經(jīng)變換的顏色信息, 以像素的位置信息和兩個顏色信息相對應(yīng)的方式存儲到參考表124中(S1410)。接著,使用圖31來說明通常運行動作。圖31是用以說明本發(fā)明第4實施方式的動態(tài)攝像機顏色校正裝置的動作的流程圖。此處,圖31的步驟S1600 步驟S1609,因和前述圖M的步驟S900 步驟S909相同,故省略說明。用攝像機110拍攝到的監(jiān)視區(qū)域圖像,存儲到緩沖器13 中(S1614)。背景確認部1322生成依時序存儲的攝像圖像的各像素的直方圖(圖30B) (S1615)。根據(jù)生成的直方圖,使用例如Mixture of Gaussian法或者臨界值法等,提取頻率高的亮度b (樹葉的亮度)、亮度c (家的亮度)(S1616)。如圖27所示,更新時刻判別部1027將背景圖像矩形分割成NXM個(S1617)。另夕卜,圖27的N = 4、M = 4的16分割表示的是一例,并不限定N、M的分割數(shù)。計算出經(jīng)分割而成的各區(qū)域中,亮度b和亮度c這兩種區(qū)域的平均亮度值 (S1618)。在首次進行通常運行動作的情況下,將首次的各區(qū)域平均亮度值作為初始運行動作時的平均亮度值加以存儲(S1619)。對經(jīng)分割而成的各區(qū)域的、初始運行動作時的兩種平均亮度值,分別和兩種當前幀的平均亮度值加以比較(S1620)。在經(jīng)比較的兩種亮度值中的任何一個發(fā)生較大變化的情況下(S1620 是),進入步驟S1603 步驟S1609。而在經(jīng)比較的兩種亮度值中的任何一個均未發(fā)生較大變化的情況下(S1620:否),則返回到步驟S1600。此外,記載了提取兩種背景色的算法,但并不限定于兩種。根據(jù)這樣的本發(fā)明第4實施方式的動態(tài)攝像機顏色校正裝置,通過背景提取部 1321和背景確認部1322來提取多個背景像素,由此即便是在樹葉或旗幟等發(fā)生搖動的情況下,也可以高精度地進行顏色校正。(第5實施方式)接著,說明本發(fā)明第5實施方式的動態(tài)攝像機顏色校正裝置。圖32表示本發(fā)明第 5實施方式的動態(tài)攝像機顏色校正裝置的結(jié)構(gòu)。另外,圖32中對和圖16、圖22、圖25、圖觀共用的部分標上相同標記并省略其說明。圖32中,本實施方式涉及的動態(tài)攝像機顏色校正裝置1700,除具有實施方式1中說明的顏色校正部120、顏色提取部123、參考表124、顏色比較部125、及實施方式2中說明的補色部726、實施方式3中說明的更新時刻判別部1027、實施方式4中說明的背景提取部 1321、背景確認部1322、緩沖器13 、及緩沖器13 以外,還具有背景變化確認部1730。關(guān)于以上述方式構(gòu)成的動態(tài)攝像機顏色校正裝置1700,對初始運行動作和通常運行動作這兩種動作來進行說明。初始運行動作因與前述圖四的步驟S1400 步驟S1410 相同,故省略說明。
使用圖33、圖34來說明通常運行動作。圖33以及圖34是用以說明本發(fā)明第5 實施方式的動態(tài)攝像機顏色校正裝置的動作的流程圖。此處,圖33的步驟S1800 步驟 S1820,因與前述圖31的步驟S1600 步驟S1620相同,故省略說明。將經(jīng)背景確認部1322提取的背景圖像(群),發(fā)送到背景變化確認部1730。背景變化確認部1730求出前一幀的背景圖像(群)和當前的背景圖像(群)的差分(S1821)。背景變化確認部1730用當前幀的背景圖像(群)覆蓋前一個幀的背景圖像(群) 并保存(S1822)。在差分結(jié)果存在較大差異的情況下(S1823 是),進入步驟S1904 步驟 S1910(參考圖 34)。圖34的步驟S1904 步驟S1910,因與前述圖四的步驟S1404 步驟S1410相同,故省略說明。在差分結(jié)果不存在較大差異的情況下(S1823:否),進入步驟S1817 步驟S1820、步驟S1803 步驟S1809的處理。根據(jù)這樣的本發(fā)明第4實施方式的動態(tài)攝像機顏色校正裝置,通過由背景變化確認部1730對前一幀的背景圖像(群)和當前的背景圖像(群)進行比較,由此即便是在背景圖像中所含的??寇囕v等移動的情況下,也可以高精度地進行顏色校正。(第6實施方式)接著,說明本發(fā)明第6實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置。圖35表示本發(fā)明第6實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的結(jié)構(gòu)。另外,圖35中對與圖16共用的部分標上相同標記并省略其說明。圖35中,本實施方式的影像檢索裝置由攝像機110、監(jiān)視裝置2000、數(shù)據(jù)庫 (DB) 2035、人物檢索部2036、檢索結(jié)果顯示部2037、及鍵盤/鼠標2038構(gòu)成。監(jiān)視裝置2000由上述實施方式1涉及的動態(tài)攝像機顏色校正裝置100、運動域提取部2031、人判別部2032、區(qū)域分割部2033、代表色計算部2034構(gòu)成。關(guān)于以以上方式構(gòu)成的本實施方式6的影像檢索裝置,對存儲動作、檢索動作進行說明。首先,使用圖36、圖37來說明存儲動作。圖36是用以說明本發(fā)明第6實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。此外,圖37是此動作的說明圖。另外,動態(tài)攝像機顏色校正裝置100的動作因與上述實施方式1的動作相同,故省略說明。經(jīng)顏色校正部120處理過的攝像圖像被輸入到運動區(qū)域提取部2031 (S2100)。運動區(qū)域提取部2031進行背景差分處理,所述背景差分處理計算出被輸入的攝像圖像和預(yù)先保存的背景圖像的差分值(S2101)。接著,運動域提取部2031判別攝像圖像中是否有運動(S2102)。具體而言,運動區(qū)域提取部2031在S2102的背景差分處理中,在差分值大于預(yù)先決定的值的情況下判定影像中有運動,反之,判定圖像中無運動。另外,運動區(qū)域提取部2031可在S2101中,進行背景差分處理以外的處理,且在 S2102中,根據(jù)此背景差分處理以外的處理結(jié)果來判定圖像中是否有運動。在與輸入到運動區(qū)域提取部2031中的攝像圖像所對應(yīng)的影像中有運動的情況下,運動區(qū)域提取部2031提取此影像內(nèi)的運動區(qū)域(S2103)。進而,運動區(qū)域提取部2031 將運動區(qū)域的攝像圖像輸出到人判定部2032。人判定部2032如果被輸入有來自運動區(qū)域提取部2031的運動區(qū)域的攝像圖像,則進行橢圓霍夫處理(elliptic Hough process) (S2104) 0接著,人判定部2032判定是否滿足運動區(qū)域的攝像圖像是人物的條件(S2105)。具體而言,人判定部2032在通過S2104的橢圓霍夫處理,在運動區(qū)域內(nèi)可以檢測出類似于人臉的橢圓形狀的區(qū)域的情況下,判定滿足此運動區(qū)域是人物的條件。此外,在未檢測出類似于人臉的橢圓形狀的區(qū)域的情況下,則判定不滿足此運動區(qū)域是人物的條件。另外,人判定部2032在S2104中也可進行橢圓霍夫處理以外的處理(例如,導(dǎo)出存儲對象運動區(qū)域整體形狀、大小等的處理),且在S2105中,根據(jù)此橢圓霍夫處理以外的處理結(jié)果來判定是否滿足運動區(qū)域是人物的條件。在不滿足運動區(qū)域為人的條件的情況下(S2105 否),返回到步驟S2100。而在滿足運動區(qū)域為人的條件的情況下(S2105 是),人判定部2032將運動區(qū)域的攝像圖像輸出到區(qū)域分割部2033。區(qū)域分割部2033將來自人判定部2032的運動區(qū)域攝像圖像分割成多個區(qū)塊區(qū)域 (S2106)。例如,如圖37那樣,區(qū)域分割部2033將人分割成頭部、上半身、下半身、鞋子這四個部分。分割算法可以使用K-Mean法,也可以使用重復(fù)式區(qū)域擴展法。另外,對運動區(qū)域的分割數(shù)及區(qū)塊區(qū)域的形狀、分割算法并未作出特別限定。區(qū)域分割部2033將與被分割的各區(qū)塊區(qū)域相對應(yīng)的攝像圖像輸出到代表色計算部2034。代表色計算部2034對各區(qū)塊區(qū)域使用規(guī)定的顏色變換算法(例如,將RGB表色系變換成HSV表色系或Lab表色系、YUV表色系),計算出各區(qū)塊區(qū)域的代表色(S2107)。例如,也可以使用區(qū)域內(nèi)的顏色的平均值、最頻值、整個直方圖。進而,代表色計算部2034獲取各區(qū)塊區(qū)域的紋理信息(S2108)。例如,可以是基于二維加博變換的空間-頻率分析方法或縱、橫、斜向的邊緣直方圖。接著,代表色計算部2034將代表色信息、紋理信息輸出到DB2035中。DB2035存儲代表色信息、紋理信息(S2109)。另外,DB2035也可以將進行拍攝的攝像機110的識別編號、攝像日期及時間、縮略圖像與代表色信息、紋理信息相對應(yīng)地存儲。通過重復(fù)上述步驟S2100 步驟S2109的處理,DB2035中存儲著與多個人物相對應(yīng)的代表色信息、紋理信息。接著,使用圖38來說明檢索動作。圖38是用以說明本發(fā)明第6實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。首先,用戶利用鍵盤/鼠標2038,向人物檢索部2036發(fā)送人物檢索命令(S2300)。 人物檢索命令,例如可以是存儲在DB2035中的縮略圖像,也可以是紅色、藍色、黃色之類的 11種知覺代表色,也可以是日期及時間、攝像機110的識別編號。此外,也可以進行如下精確檢索,S卩,檢索具有上半身為紅色、下半身為黑色和白色的條紋狀紋理,在2005年11月11日10時10分 2005年11月11日20時45分之間, 由攝像機編號1拍攝到的人物。人物檢索部2036如果被輸入了人物檢索命令,則從DB2035中讀出與人物檢索命令相對應(yīng)的人物所對應(yīng)的代表色信息、紋理信息(S2301)。例如,在發(fā)出攝像機編號1的人物及人物檢索命令的情況下,并不讀出由攝像機編號2拍攝到的人物。接著,人物檢索部2036依照人物檢索命令,對與所讀出的人物相對應(yīng)的代表色信息、紋理信息進行得分計算(S2302)。例如,從DB2035中讀出人物A、人物B、人物C的代表色信息、紋理信息。此外,人物檢索命令是命令檢索和人物D的上半身顏色相似的人。使人物A的上半身顏色信息為二維坐標(Al、A2),人物B的上半身顏色信息為二維坐標(Bi、B2),人物C的上半身顏色信息為二維坐標(Cl、C2),人物D的上半身顏色信息為二維坐標(Dl、D2),計算出D的坐標和A、B、C的坐標間的歐幾里得距離(Euclidean distance)。另外,也可以使用歐幾里得距離以外的方法,進行得分計算。接著,檢索結(jié)果顯示部2037按照人物檢索部2036計算出的得分順序,顯示例如縮略圖像(S230;3)。另外,監(jiān)視裝置2000也可以具有實施方式2的動態(tài)攝像機顏色校正裝置 700、實施方式3的動態(tài)攝像機顏色校正裝置900、實施方式4的動態(tài)攝像機顏色校正裝置 1300、實施方式5的動態(tài)攝像機顏色校正裝置1700,來代替動態(tài)攝像機顏色校正裝置100。另外,本實施方式的監(jiān)視裝置2000中,動態(tài)攝像機顏色校正裝置100,也可以安裝在攝像機Iio內(nèi)部。此外,本實施方式6的監(jiān)視裝置2000中的運動區(qū)域提取部2031、人判定部2032、區(qū)域分割部2033、代表色計算部2034也可以安裝在攝像機110內(nèi)部。根據(jù)這樣的本發(fā)明第6實施方式,通過利用動態(tài)攝像機顏色校正裝置100動態(tài)進行顏色校正,由此不會受到攝像機的個體差異、日照變動等的影響,從而可以進行高精度的人物檢索。(第7實施方式)接著,說明本發(fā)明第7實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置。圖39表示本發(fā)明第7實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的結(jié)構(gòu)。另外,圖39中對與圖16、圖35共用的部分標上相同標記,并省略其說明。圖39中,本實施方式的影像檢索裝置,除具有攝像機110、實施方式6中說明的監(jiān)視裝置2000、DB2035、人物檢索部2036、及鍵盤/鼠標2038以外,還具有壓縮部M39、存儲器M40、展開部M41、及顯示部M42。監(jiān)視裝置2000由上述實施方式1涉及的動態(tài)攝像機顏色校正裝置100、上述實施方式6涉及的運動區(qū)域提取部2031、人判別部2032、區(qū)域分割部2033、及代表色計算部 2034構(gòu)成。關(guān)于以上述方式構(gòu)成的本實施方式7的影像檢索裝置,對DB存儲動作、存儲器存儲動作、及顯示動作來進行說明。存儲動作因與前述的圖36的步驟S2100 步驟S2109相同,故省略說明。使用圖40來說明存儲器存儲動作。圖40是用以說明本發(fā)明第7實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。顏色校正部120將經(jīng)過顏色校正的攝像圖像輸出到壓縮部M39中(S2500)。壓縮部M39將攝像圖像以規(guī)定的壓縮方式進行壓縮(S2501),并將壓縮后的攝像圖像存儲到存儲器M40中(S2502)。此處,作為規(guī)定的壓縮方式,可使用例如MPEG (Movging Picture Experts Group)方式、JPEG (Joint Photographic Experts Group)方式等。另外,存儲器M40也可以將進行拍攝的攝像機110的識別編號、攝像日期及時間與壓縮圖像相對應(yīng)地存儲。通過重復(fù)上述步驟S2500 步驟S2502的處理,將攝像圖像存儲到存儲器2440中。使用圖41來說明顯示動作。圖41是用以說明本發(fā)明第7實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。此處,圖41的步驟S2600 步驟S2602因與前述圖38的步驟S2300 步驟S2302相同,故省略說明。向展開部M41發(fā)送人物再現(xiàn)命令,以使由人物檢索部2036計算出的最高得分的人物的圖像得以再現(xiàn)(S26(X3)。例如,在最高得分為在2005年11月11日10時10分00秒由攝像機編號1拍攝的人物的情況下,人物再現(xiàn)命令要求展開2005年11月11日10時10 分00秒 2005年11月11日10時11分00秒的攝像機編號1的壓縮圖像。展開部M41依照人物再現(xiàn)命令,從存儲器對40中讀出壓縮圖像(S^04),并以規(guī)定的擴展方式加以擴展(S^505)。此處,規(guī)定的擴展方式是采用和壓縮部M39的壓縮方式相對應(yīng)的擴展方式。經(jīng)擴展的圖像顯示在顯示部M42中(S^06)。另外,監(jiān)視裝置2000也可以具有實施方式2的動態(tài)攝像機顏色校正裝置700、實施方式3的動態(tài)攝像機顏色校正裝置900、實施方式4的動態(tài)攝像機顏色校正裝置1300、實施方式5的動態(tài)攝像機顏色校正裝置1700,來代替動態(tài)攝像機顏色校正裝置100。此外,也可以通過壓縮部M39來選擇要壓縮的幀,并間斷地進行壓縮。由此,可以減少處理數(shù)據(jù)量。此外,動態(tài)攝像機顏色校正裝置100也可以安裝在攝像機110內(nèi)部。此外,運動區(qū)域提取部2031、人判定部2032、區(qū)域分割部2033、代表色計算部2034也可以安裝在攝像機110內(nèi)部。根據(jù)這樣的本發(fā)明的第7實施方式,通過動態(tài)攝像機顏色校正裝置100動態(tài)進行顏色校正,并將經(jīng)顏色校正過的影像存儲到存儲器M40中,且由顯示部M42來進行顯示, 由此不會受到攝像機的個體差異、日照變動等的影響,可以再現(xiàn)所需的人物影像。(第8實施方式)接著,說明本發(fā)明第8實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置。圖42表示本發(fā)明第7實施方式的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的結(jié)構(gòu)。另外,圖42中對與圖16、圖35、圖39共用的部分標上相同標記并省略其說明。圖42中,本實施方式的影像檢索裝置除具有攝像機110、實施方式6中說明的監(jiān)視裝置2000、及顯示部M42以外,還具有人物匹配部2743、及影像切換部2745。監(jiān)視裝置2000由上述實施方式1涉及的動態(tài)攝像機顏色校正裝置100、上述實施方式6涉及的運動域提取部2031、人判別部2032、區(qū)域分割部2033、及代表色計算部2034 構(gòu)成。使用圖43來說明以以上方式構(gòu)成的本實施方式8的影像檢索裝置。圖43是用以說明本發(fā)明第8實施方式中的包含動態(tài)攝像機顏色校正裝置的影像檢索裝置的動作的流程圖。此處,圖43的步驟S2800 步驟S2808因與前述圖36的步驟S2100 步驟S2108 相同,故省略說明。將由代表色計算部2034生成的人物的代表色信息、紋理信息,發(fā)送到人物匹配部 2743。此外,在檢索人物DB2744中預(yù)先存儲特定人物的代表色信息、紋理信息。 人物匹配部2743讀出存儲在檢索人物DB2744中的代表色信息、紋理信息 (S2809)。對從檢索人物DB2744中讀出的代表色信息、紋理信息和從代表色計算部2034發(fā)送的代表色信息、紋理信息加以比較膠810),來判別是否為同一人物。比較方法,例如,可以是前述得分計算(參考S23(^)中所描述的歐幾里得距離。 在為同一人物的情況下(S^ll 是),向影像切換部2745發(fā)送攝像機切換命令,以對與生成此人物的代表色信息、紋理信息的代表色計算部2034相對應(yīng)的攝像機識別編號進行監(jiān)視并顯示(S^12)。由顯示部對42來顯示經(jīng)切換的攝像圖像(S^13)。在并非是同一人物的情況下(S^ll 否),返回到步驟S2800。另外,監(jiān)視裝置2000也可以具有實施方式2的動態(tài)攝像機顏色校正裝置700、實施方式3的動態(tài)攝像機顏色校正裝置900、實施方式4的動態(tài)攝像機顏色校正裝置1300、實施方式5的動態(tài)攝像機顏色校正裝置1700,來代替動態(tài)攝像機顏色校正裝置100。此外,動態(tài)攝像機顏色校正裝置100也可以安裝在攝像機110內(nèi)部。此外,運動區(qū)域提取部2031、人判定部2032、區(qū)域分割部2033、代表色計算部2034也可以安裝在攝像機 110內(nèi)部。根據(jù)這樣的本發(fā)明的第7實施方式,通過動態(tài)攝像機顏色校正裝置100動態(tài)進行顏色校正,在人物匹配部2743中進行是否為預(yù)先存儲在檢索人物DB2744中的人物的比較, 并在為同一人物的情況下,由影像切換部2745來切換攝像機,由此不會受到攝像機的個體差異、日照變動等影響,即便所希望的人物在攝像機之間移動也可以進行監(jiān)視。以上說明了目前所能考慮到的本發(fā)明的較佳實施方式,但應(yīng)理解的是對本實施方式可進行多種變形,而且,旨在本發(fā)明的實質(zhì)精神和范圍內(nèi)的變形均包含在附上的權(quán)利要求書中。工業(yè)利用可能性如以上所述,本發(fā)明(第1發(fā)明)涉及的顏色校正處理裝置,無需保存顏色校正處理所不需要的顏色集合的信息,從而具有計算負荷減輕,可以實時應(yīng)對照明環(huán)境變化的效果,從而可以用作跟蹤監(jiān)視系統(tǒng)等中所使用的顏色校正處理裝置等。此外,如以上所述,本發(fā)明(第2發(fā)明)具有不受攝像機設(shè)置環(huán)境、日照環(huán)境等攝像環(huán)境變動的影響,可以適當?shù)匦U龍D像顏色的效果,從而可以用于動態(tài)攝像機顏色校正裝置以及使用其的影像檢索裝置等。
權(quán)利要求
1.一種顏色校正處理裝置,其特征在于具備顏色集合信息存儲部,其存儲包含作為顏色校正對象的源顏色的顏色信息、及顏色校正后的基準色的顏色信息的顏色集合信息;顏色校正部,其使用所述顏色集合信息,將多個攝像裝置拍攝到的各源圖像中和所述源顏色在相似范圍內(nèi)的顏色校正為所述基準色;區(qū)域選擇部,其從所述各源圖像中選擇特定的源區(qū)域; 區(qū)域顏色確定部,其確定源區(qū)域顏色作為代表所述源區(qū)域的顏色;以及顏色集合更新部,其使用所述源區(qū)域顏色,對所述顏色集合信息的源顏色進行更新, 所述顏色集合信息存儲部中存儲有顏色集合信息,所述顏色集合信息包含獲取了所述源顏色的顏色信息的區(qū)域信息,所述區(qū)域選擇部具備背景圖像獲取部以及對應(yīng)區(qū)域搜索部,所述背景圖像獲取部從所述多個源圖像中獲取背景圖像,所述對應(yīng)區(qū)域搜索部從所述背景圖像中搜索與所述源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域,所述區(qū)域顏色確定部具備對應(yīng)區(qū)域顏色確定部,所述對應(yīng)區(qū)域顏色確定部將所述對應(yīng)區(qū)域的平均色確定為作為所述源區(qū)域顏色的對應(yīng)區(qū)域顏色,顏色校正處理裝置中具備照明變化檢測部,所述照明變化檢測部根據(jù)所述對應(yīng)區(qū)域顏色檢測所述源圖像中的照明環(huán)境的變化,所述顏色集合更新部在判定照明環(huán)境發(fā)生了變化時,使用所述對應(yīng)區(qū)域顏色對所述顏色集合信息的源顏色進行更新。
2.根據(jù)權(quán)利要求1所述的顏色校正處理裝置,其特征在于 所述照明變化檢測部具備顏色距離計算部,其計算出所述對應(yīng)區(qū)域顏色和所述源顏色的顏色距離;以及照明變化判定部,其在所述對應(yīng)區(qū)域顏色和所述源顏色的顏色距離大于規(guī)定的臨界顏色距離時,判定照明環(huán)境發(fā)生了變化。
3.根據(jù)權(quán)利要求2所述的顏色校正處理裝置,其特征在于所述背景圖像獲取部以規(guī)定的時間間隔,從所述多個源圖像中獲取所述背景圖像, 所述照明變化檢測部以所述規(guī)定的時間間隔,來檢測所述源圖像中的照明環(huán)境的變化。
4.根據(jù)權(quán)利要求1至3中任一項所述的顏色校正處理裝置,其特征在于所述顏色校正部具備區(qū)域分割部,所述區(qū)域分割部將所述對應(yīng)區(qū)域分割成多個小區(qū)域,針對所述多個小區(qū)域中的每個小區(qū)域,將和所述源顏色在相似范圍內(nèi)的顏色校正成所述基準色。
5.一種顏色校正處理方法,其特征在于存儲顏色集合信息,所述顏色集合信息包含作為顏色校正對象的源顏色的顏色信息、 及顏色校正后的基準色的顏色信息,從用多個攝像裝置拍攝到的各源圖像中選擇特定的源區(qū)域, 確定源區(qū)域顏色來作為代表所述源區(qū)域的顏色, 使用所述源區(qū)域顏色,對所述顏色集合信息的源顏色進行更新,使用所述顏色集合信息,將所述多個源圖像中和所述源顏色在相似范圍內(nèi)的顏色校正為所述基準色,所述顏色校正處理方法還包括存儲顏色集合信息,所述顏色集合信息包含獲取了所述源顏色的顏色信息的區(qū)域信息。從所述多個源圖像中獲取背景圖像,從所述背景圖像中,搜索與所述源顏色的區(qū)域信息相對應(yīng)的對應(yīng)區(qū)域, 將所述對應(yīng)區(qū)域的平均色確定為作為所述源區(qū)域顏色的對應(yīng)區(qū)域顏色, 根據(jù)所述對應(yīng)區(qū)域顏色,來檢測所述源圖像中的照明環(huán)境的變化, 在判定照明環(huán)境發(fā)生了變化時,使用所述對應(yīng)區(qū)域顏色對所述顏色集合信息的源顏色進行更新。
6.根據(jù)權(quán)利要求5所述的顏色校正處理方法,其特征在于 從所述源圖像中,提取在背景圖像中移動的前景目標來作為源目標, 將所述源目標的平均色確定為作為所述源區(qū)域顏色的目標顏色, 判定所述源目標和規(guī)定的基準目標是否相似,在判定所述源目標和所述基準目標相似時,使用所述源目標的目標顏色,對所述顏色集合信息的源顏色進行更新。
全文摘要
本發(fā)明提供顏色校正處理裝置以及顏色校正處理方法,顏色校正處理裝置(1)具備顏色集合信息存儲部(11),其存儲包含源顏色和基準色的顏色集合信息;區(qū)域選擇部(6),其從用兩個攝像機(2)拍攝到的各源圖像中選擇特定的源區(qū)域;區(qū)域顏色確定部(7),其確定源區(qū)域顏色來作為代表源區(qū)域的顏色;顏色集合更新部(10),其使用源區(qū)域顏色來更新顏色集合的源顏色;顏色校正部(8),其使用顏色集合將兩個源圖像中與源顏色在相似范圍內(nèi)的顏色校正為基準色。本發(fā)明的顏色校正處理裝置無需保存顏色校正處理所不需要的顏色集合的信息,由此可減輕計算負荷,并可實時地應(yīng)對照明環(huán)境的變化。
文檔編號H04N9/73GK102164287SQ20111003507
公開日2011年8月24日 申請日期2007年1月5日 優(yōu)先權(quán)日2006年1月10日
發(fā)明者嚴海林, 外館弘理, 李作裕, 橫光澄男 申請人:松下電器產(chǎn)業(yè)株式會社