[0172]另外，在上述實施方式中，取得人物的動作路線，并基于該動作路線來取得統(tǒng)計信息(停留時間及停留度)，但是該統(tǒng)計信息取得處理不限定于基于動作路線。例如，可以取得關(guān)于人物框(人物存在的矩形的區(qū)域)的坐標信息作為人物的位置信息，并對各像素(檢測要素)計數(shù)位于人物框內(nèi)的次數(shù)，而取得各像素的計數(shù)值，通過對該各像素的計數(shù)值進行適當?shù)慕y(tǒng)計處理例如平均化處理，以對象區(qū)域(參照圖3A、圖3B)或網(wǎng)格(參照圖14A、圖14B)為單位進行匯總，取得對象區(qū)域或各網(wǎng)格的統(tǒng)計信息。另外，還可以取得關(guān)于人物框的中心點的坐標信息，對人物框的中心點位于對象區(qū)域或網(wǎng)格內(nèi)的次數(shù)進行計數(shù)，而取得對象區(qū)域或各網(wǎng)格的統(tǒng)計信息。
[0173]另外，在上述第一實施方式中，監(jiān)控所需的處理由設(shè)于店鋪的PC3進行，但是如圖1所示，上述所需的處理也可以由設(shè)于總部的PC11、構(gòu)成云計算系統(tǒng)的云計算機12進行。另夕卜，也可以通過多個信息處理裝置來分擔所需的處理，經(jīng)由IP網(wǎng)絡(luò)、LAN等通信介質(zhì)，在多個信息處理裝置之間交換信息。在該情況下，由執(zhí)行所需處理的多個信息處理裝置構(gòu)成監(jiān)控系統(tǒng)。
[0174]在這種結(jié)構(gòu)中，使設(shè)于店鋪的PC3等裝置進行監(jiān)控所需的處理中的至少運算量較大的處理，例如人物檢測處理即可。若這樣構(gòu)成，則可以減少剩余處理所需的信息的數(shù)據(jù)量，因此剩余處理即便由設(shè)置在與店鋪不同的場所的信息處理裝置、例如設(shè)置于總部的PC11進行，也能夠減輕通信負載，因此廣域網(wǎng)絡(luò)連接方式的系統(tǒng)的運用變得容易。
[0175]另外，可以使云計算機12進行監(jiān)控所需的處理中的至少運算量較大的處理，例如人物檢測處理。若這樣構(gòu)成，則可以減少剩余處理的運算量，因此在店鋪等使用者側(cè)不需要高速的信息處理裝置，能夠降低使用者所負擔的成本。
[0176]另外，也可以使云計算機12進行所需的全部處理，或者至少由云計算機12進行所需處理中的影像輸出處理，若這樣構(gòu)成，則除了設(shè)置店鋪、總部的PC3、11之外，在智能手機
13、平板電腦終端14等便攜型終端中也能夠顯示影像，由此除了店鋪、總部之外，在外出的目的地等任意場所均能夠確認店鋪內(nèi)的狀況。
[0177]另外，在本實施方式中，對使設(shè)于店鋪的PC3進行監(jiān)控所需的處理，并使PC3的監(jiān)視器7顯示遮罩條件設(shè)定畫面、監(jiān)控畫面，通過PC3進行所需的輸入及輸出的情況進行了說明，但是也可以通過與進行監(jiān)控所需的處理的信息處理裝置不同的信息處理裝置，例如設(shè)于總部的PC11、平板電腦終端14等便攜型終端進行所需的輸入及輸出。
[0178]另外，近年來，開發(fā)了作為監(jiān)視器而追求高畫質(zhì)化的4K電視機等，通過采用與這種4K電視機對應(yīng)的相機，能夠提高人物的識別性能，即使在存在很多人物的環(huán)境下，使用者也能夠根據(jù)遮罩重放影像而容易地掌握人物的行動。
[0179]本發(fā)明的監(jiān)控裝置、監(jiān)控系統(tǒng)及監(jiān)控方法具有使用者能夠通過一個監(jiān)控畫面而同時掌握預定期間內(nèi)的人物的活動狀況和某瞬間的人物的活動狀況的效果，作為生成并輸出將表示監(jiān)視區(qū)域的移動體的活動狀況的前景圖像重疊于背景圖像上的監(jiān)控影像的監(jiān)控裝置、監(jiān)控系統(tǒng)及監(jiān)控方法等是有用的。
【主權(quán)項】
1.一種監(jiān)控裝置，生成并輸出將表示監(jiān)視區(qū)域中的移動體的活動狀況的前景圖像重疊于背景圖像上的監(jiān)控影像，所述監(jiān)控裝置的特征在于，具有: 處理器；及 存儲指令的存儲器， 作為所述處理器的執(zhí)行所述指令的結(jié)構(gòu)，具備: 位置信息取得部，從所述監(jiān)視區(qū)域的影像中檢測出移動體，并取得各移動體的位置信息; 統(tǒng)計信息取得部，對由所述位置信息取得部取得的所述位置信息按照時間進行統(tǒng)計處理，并根據(jù)所述統(tǒng)計處理的對象期間的設(shè)定而取得與移動體的停留狀況相關(guān)的統(tǒng)計信息；第一前景圖像生成部，生成使由所述統(tǒng)計信息取得部取得的所述統(tǒng)計信息可視化的第一前景圖像； 第二前景圖像生成部，基于由所述位置信息取得部取得的所述位置信息，對應(yīng)各預定時刻生成與移動體的圖像區(qū)域?qū)?yīng)的第二前景圖像；及 影像輸出控制部，對應(yīng)各預定時刻生成并輸出將由所述第一前景圖像生成部及所述第二前景圖像生成部生成的所述第一前景圖像及所述第二前景圖像重疊于所述背景圖像上的所述監(jiān)控影像。2.根據(jù)權(quán)利要求1所述的監(jiān)控裝置，其特征在于， 所述監(jiān)控裝置還具備與所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式相關(guān)的顯示方式調(diào)整部， 所述顯示方式調(diào)整部對所述第一前景圖像及所述第二前景圖像混同的混同狀態(tài)進行檢測，并變更所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式以消除所述混同狀態(tài)。3.根據(jù)權(quán)利要求2所述的監(jiān)控裝置，其特征在于， 在變更所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式時，所述顯示方式調(diào)整部對決定顯示方式的顏色、圖案、輪廓線及透過率中的至少一個顯示要素進行變更。4.根據(jù)權(quán)利要求1所述的監(jiān)控裝置，其特征在于， 所述監(jiān)控裝置還具備與所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式相關(guān)的顯示方式設(shè)定部， 所述顯示方式設(shè)定部根據(jù)使用者的輸入操作來設(shè)定所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式。5.根據(jù)權(quán)利要求4所述的監(jiān)控裝置，其特征在于， 所述顯示方式設(shè)定部以不會產(chǎn)生所述第一前景圖像及所述第二前景圖像混同的混同狀態(tài)的方式對與所述顯示方式相關(guān)的使用者的輸入操作進行引導。6.根據(jù)權(quán)利要求5所述的監(jiān)控裝置，其特征在于， 所述顯示方式設(shè)定部在設(shè)定所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式時，以不會產(chǎn)生所述混同狀態(tài)的方式對能夠通過使用者的輸入操作進行選擇的顯示方式的備選進行限制。7.根據(jù)權(quán)利要求4所述的監(jiān)控裝置，其特征在于， 在設(shè)定所述第一前景圖像及所述第二前景圖像中的至少一方的顯示方式時，所述顯示方式設(shè)定部根據(jù)使用者的輸入操作對決定顯示方式的顏色、圖案、輪廓線及透過率中的至少一個顯示要素進行設(shè)定。8.根據(jù)權(quán)利要求1所述的監(jiān)控裝置，其特征在于， 所述監(jiān)控裝置還具備根據(jù)所述監(jiān)視區(qū)域的影像生成所述背景圖像的背景圖像生成部， 所述背景圖像生成部根據(jù)所述對象期間的設(shè)定來生成所述背景圖像， 所述影像輸出控制部將所述第一前景圖像重疊于所述對象期間與所述第一前景圖像的對象期間一致的所述背景圖像上。9.根據(jù)權(quán)利要求1所述的監(jiān)控裝置，其特征在于， 所述監(jiān)控裝置還具備與由所述統(tǒng)計信息取得部進行的處理相關(guān)的處理條件設(shè)定部，所述處理條件設(shè)定部根據(jù)使用者的任意指定所述對象期間的輸入操作來設(shè)定所述對象期間， 所述影像輸出控制部根據(jù)使用者的任意指定所述監(jiān)控影像的顯示時刻的輸入操作來生成并輸出所指定的顯示時刻的所述監(jiān)控影像。10.一種監(jiān)控系統(tǒng)，生成并輸出將表示監(jiān)視區(qū)域中的移動體的活動狀況的前景圖像重疊于背景圖像上的監(jiān)控影像，所述監(jiān)控系統(tǒng)的特征在于，具有: 拍攝監(jiān)視區(qū)域的相機；及 多個信息處理裝置， 所述多個信息處理裝置中的任一信息處理裝置具有:處理器及存儲指令的存儲器， 作為所述處理器的執(zhí)行所述指令的結(jié)構(gòu)，具備: 位置信息取得部，從所述監(jiān)視區(qū)域的影像中檢測出移動體，并取得各移動體的位置信息; 統(tǒng)計信息取得部，對由所述位置信息取得部取得的所述位置信息按照時間進行統(tǒng)計處理，并根據(jù)所述統(tǒng)計處理的對象期間的設(shè)定來取得與移動體的停留狀況相關(guān)的統(tǒng)計信息；第一前景圖像生成部，生成使由所述統(tǒng)計信息取得部取得的所述統(tǒng)計信息可視化的第一前景圖像； 第二前景圖像生成部，基于由所述位置信息取得部取得的所述位置信息，對應(yīng)各預定時刻生成與移動體的圖像區(qū)域?qū)?yīng)的第二前景圖像；及 影像輸出控制部，對應(yīng)各預定時刻生成并輸出將由所述第一前景圖像生成部及所述第二前景圖像生成部生成的所述第一前景圖像及所述第二前景圖像重疊于所述背景圖像上的所述監(jiān)控影像。11.一種監(jiān)控系統(tǒng)，生成并輸出將表示監(jiān)視區(qū)域中的移動體的活動狀況的前景圖像重疊于背景圖像上的監(jiān)控影像，所述監(jiān)控系統(tǒng)的特征在于，具有: 拍攝監(jiān)視區(qū)域的相機；及 信息處理裝置， 所述相機及所述信息處理裝置中的任一個具備: 位置信息取得部，從所述監(jiān)視區(qū)域的影像中檢測出移動體，并取得各移動體的位置信息; 統(tǒng)計信息取得部，對由所述位置信息取得部取得的所述位置信息按照時間進行統(tǒng)計處理，并根據(jù)所述統(tǒng)計處理的對象期間的設(shè)定來取得與移動體的停留狀況相關(guān)的統(tǒng)計信息；第一前景圖像生成部，生成使由所述統(tǒng)計信息取得部取得的所述統(tǒng)計信息可視化的第一前景圖像； 第二前景圖像生成部，基于由所述位置信息取得部取得的所述位置信息，對應(yīng)各預定時刻生成與移動體的圖像區(qū)域?qū)?yīng)的第二前景圖像；及 影像輸出控制部，對應(yīng)各預定時刻生成并輸出將由所述第一前景圖像生成部及所述第二前景圖像生成部生成的所述第一前景圖像及所述第二前景圖像重疊于所述背景圖像上的所述監(jiān)控影像。12.—種監(jiān)控方法，使信息處理裝置進行如下處理:生成并輸出將表示監(jiān)視區(qū)域中的移動體的活動狀況的前景圖像重疊于背景圖像上的監(jiān)控影像的處理， 所述監(jiān)控方法的特征在于， 由所述信息處理裝置的處理器執(zhí)行的存儲于存儲器的指令包括如下步驟: 從所述監(jiān)視區(qū)域的影像中檢測出移動體，并取得各移動體的位置信息； 對所述位置信息按照時間進行統(tǒng)計處理，并根據(jù)所述統(tǒng)計處理的對象期間的設(shè)定來取得與移動體的停留狀況相關(guān)的統(tǒng)計信息； 生成使所述統(tǒng)計信息可視化的第一前景圖像； 基于所述位置信息，對應(yīng)各預定時刻生成與移動體的圖像區(qū)域?qū)?yīng)的第二前景圖像；及 對應(yīng)各預定時刻生成并輸出將所述第一前景圖像及所述第二前景圖像重疊于所述背景圖像上的所述監(jiān)控影像。
【專利摘要】本發(fā)明涉及監(jiān)控裝置、監(jiān)控系統(tǒng)及監(jiān)控方法。從監(jiān)視區(qū)域的影像中檢測人物，并取得人物的位置信息。對該位置信息按照時間進行統(tǒng)計處理，并根據(jù)統(tǒng)計處理的對象期間的設(shè)定來取得與人物的停留狀況相關(guān)的統(tǒng)計信息，并生成熱圖圖像。另外，基于人物的位置信息，對應(yīng)各預定時刻生成與人物的圖像區(qū)域?qū)?yīng)的遮罩圖像。并且，對應(yīng)各預定時刻生成并輸出將熱圖圖像及遮罩圖像重疊在背景圖像上的監(jiān)控影像。
【IPC分類】H04N7/18
【公開號】CN105391973
【申請?zhí)枴緾N201510535913
【發(fā)明人】松本裕一, 吉田和麻
【申請人】松下知識產(chǎn)權(quán)經(jīng)營株式會社
【公開日】2016年3月9日
【申請日】2015年8月27日
【公告號】EP2991344A2, EP2991344A3, US20160063712