專利名稱：網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及視頻監(jiān)控應(yīng)用領(lǐng)域，尤其涉及一種主動(dòng)式網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)及方法。
背景技術(shù)：
為了適應(yīng)和諧社會(huì)的建設(shè)，我國(guó)的視頻監(jiān)控系統(tǒng)建設(shè)如火如荼，很多機(jī)構(gòu)、企業(yè)都 花費(fèi)了巨資構(gòu)建了視頻監(jiān)控系統(tǒng)，然而現(xiàn)有的規(guī)模巨大的監(jiān)控?cái)z像機(jī)雖然能夠提供其所監(jiān) 控到的視頻數(shù)據(jù)，但并未達(dá)到真正的視頻監(jiān)控目的。這是因?yàn)?，這些大量的監(jiān)控視頻錄像主 要用于事后追述，由于缺乏智能化的處理手段，這些監(jiān)控點(diǎn)的視頻信息得不到有效提取和 利用，對(duì)于海量的錄像資料又缺乏有效的檢索手段，尤其對(duì)于事前預(yù)警這種可以把一些重 大事件隱患抑制于萌芽之中的重要應(yīng)用，現(xiàn)有的視頻監(jiān)控系統(tǒng)仍難以實(shí)現(xiàn)，因此視頻監(jiān)控 系統(tǒng)的智能化成為視頻監(jiān)控應(yīng)用中重要的技術(shù)發(fā)展方向。 現(xiàn)有的視頻監(jiān)控平臺(tái)技術(shù)中，尚未考慮到智能圖像技術(shù)的融入，也未提供如何將 智能圖像識(shí)別能力集成在視頻監(jiān)控系統(tǒng)的技術(shù)方案。如果能夠提供一種將智能圖像識(shí)別能 力集成在視頻監(jiān)控系統(tǒng)的方案，將會(huì)使得監(jiān)控方式從被動(dòng)式監(jiān)控變?yōu)橹鲃?dòng)式監(jiān)控，監(jiān)控更 加有效。

發(fā)明內(nèi)容
本發(fā)明的目的是提出一種網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)及方法，能夠使監(jiān)控方式從被動(dòng) 式監(jiān)控變?yōu)橹鲃?dòng)式監(jiān)控，并及時(shí)對(duì)一些具有潛在威脅的時(shí)間進(jìn)行捕獲和處理，使得監(jiān)控更 加有效。 為實(shí)現(xiàn)上述目的，本發(fā)明提供了一種網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，包括網(wǎng)絡(luò)視頻監(jiān)控 平臺(tái)，還包括 智能圖像識(shí)別單元(Intelligent Video Unit,簡(jiǎn)稱IVU)，用于對(duì)所述網(wǎng)絡(luò)視頻監(jiān)
控平臺(tái)輸入的視頻信息進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出； 智能圖像管理服務(wù)器(Intelligent Video Management,簡(jiǎn)稱IVM)，用于對(duì)所述智
能圖像識(shí)別單元的能力集和智能圖像識(shí)別的策略進(jìn)行管理，并提供與所述網(wǎng)絡(luò)視頻監(jiān)控平 臺(tái)之間的接口。 進(jìn)一步的，所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)具體包括 中心管理服務(wù)器(Central Management Server,簡(jiǎn)稱CMS)，用于實(shí)現(xiàn)設(shè)備注冊(cè)、信 令轉(zhuǎn)發(fā)處理、設(shè)備控制、告警及信息和資源管理服務(wù)； 前端單元(Peripheral Unit，簡(jiǎn)稱PU)，用于采集監(jiān)控區(qū)域的視頻信息； 網(wǎng)絡(luò)錄像單元(Network Record Unit,簡(jiǎn)稱NRU)，用于存儲(chǔ)接收到的視頻信息，并
提供所述視頻信息的管理及檢索/回放； 視頻轉(zhuǎn)分發(fā)單元(Video Transfer and Distribute Unit,簡(jiǎn)稱VTDU)，用于將包 括所述視頻信息的視頻流從所述前端單元轉(zhuǎn)發(fā)或分發(fā)到所述網(wǎng)絡(luò)錄像單元以及客戶端單兀。 進(jìn)一步的，所述智能圖像識(shí)別單元具體包括 圖像識(shí)別模塊，用于對(duì)所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)輸入的視頻信息進(jìn)行識(shí)別； 參數(shù)設(shè)置模塊，用于根據(jù)所述智能圖像管理服務(wù)器下發(fā)的智能分析業(yè)務(wù)參數(shù)進(jìn)行
參數(shù)設(shè)置； 智能上報(bào)模塊，用于根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出。 進(jìn)一步的，所述智能圖像管理服務(wù)器具體包括 能力管理模塊，用于管理所述智能圖像識(shí)別單元的能力信息； 策略管理模塊，用于管理所述智能圖像識(shí)別單元的智能識(shí)別策略； 監(jiān)控平臺(tái)接口 ，用于接收所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)發(fā)出的能力或智能識(shí)別策略的查
詢，并將查詢結(jié)果反饋給所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)，以及接收所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的智能
調(diào)用請(qǐng)求，將符合要求的智能圖像識(shí)別單元的入口信息反饋給所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)。 進(jìn)一步的，所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)還包括 數(shù)據(jù)分析平臺(tái)(Data Analysis,簡(jiǎn)稱DA)接口 ，用于向外部的數(shù)據(jù)分析平臺(tái)發(fā)送 所述識(shí)別結(jié)果，并接收所述數(shù)據(jù)分析平臺(tái)根據(jù)預(yù)先配置的數(shù)據(jù)分析算法和策略對(duì)識(shí)別結(jié)果 進(jìn)行分析所得的分析結(jié)果而返回的報(bào)警信息。 為實(shí)現(xiàn)上述目的，本發(fā)明提供了一種網(wǎng)絡(luò)視頻智能監(jiān)控方法，包括 網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求； 所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求調(diào)度可用的智能圖像識(shí)別單元，
并向所述可用的智能圖像識(shí)別單元下發(fā)智能分析業(yè)務(wù)參數(shù)； 所述智能圖像識(shí)別單元根據(jù)所述智能分析業(yè)務(wù)參數(shù)啟動(dòng)智能分析，并經(jīng)由所述智 能圖像管理服務(wù)器向所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)返回表示啟動(dòng)成功的響應(yīng)； 所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)將需要智能識(shí)別的視頻信息發(fā)送到所述智能圖像識(shí)別單 元； 所述智能圖像識(shí)別單元對(duì)所述視頻信息進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳
輸通道向所述智能圖像管理服務(wù)器和所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)。 進(jìn)一步的，所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求調(diào)度可用的智能圖像
識(shí)別單元，并向所述可用的智能圖像識(shí)別單元下發(fā)智能分析業(yè)務(wù)參數(shù)的操作具體包括 所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求在所述智能圖像管理服務(wù)器自
身管理的智能圖像識(shí)別單元的能力集中調(diào)度可用的智能圖像識(shí)別單元； 所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求選擇智能圖像識(shí)別的策略向所 述可用的智能圖像識(shí)別單元下發(fā)與智能圖像識(shí)別的策略對(duì)應(yīng)的智能分析業(yè)務(wù)參數(shù)。
進(jìn)一步的，在所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求之 前，還包括 所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)接收客戶端單元發(fā)出的智能調(diào)用請(qǐng)求，并對(duì)所述客戶端單 元進(jìn)行鑒權(quán)，如果鑒權(quán)通過(guò)，則向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求，否則向所述客戶 端單元返回表示調(diào)用失敗的響應(yīng)。 進(jìn)一步的，在所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求之 前，還包括
所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)符合觸發(fā)條件時(shí)，向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng) 求。 進(jìn)一步的，所述根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道向所述智能圖像管理服務(wù)器和
所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)的操作具體為 根據(jù)識(shí)別結(jié)果所屬的種類選擇相應(yīng)的傳輸通道； 如果識(shí)別結(jié)果屬于行為識(shí)別類，則選擇報(bào)警通道向所述智能圖像管理服務(wù)器和所 述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)； 如果識(shí)別結(jié)果屬于數(shù)據(jù)獲取類，則通過(guò)數(shù)據(jù)通道向所述智能圖像管理服務(wù)器和所 述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)； 如果識(shí)別結(jié)構(gòu)屬于視頻診斷類，則通過(guò)故障管理報(bào)警通道向所述智能圖像管理服 務(wù)器和所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)。 基于上述技術(shù)方案，本發(fā)明利用IVM管理IVU的智能圖像識(shí)別能力，并提供對(duì)外的 接口管理和調(diào)用，從而實(shí)現(xiàn)智能圖像識(shí)別能力在監(jiān)控平臺(tái)的融入；本發(fā)明還利用IVU封裝 智能圖像識(shí)別算法對(duì)視頻信息進(jìn)行識(shí)別，并將識(shí)別結(jié)果作為系統(tǒng)的事件返回給監(jiān)控系統(tǒng)， 從而有效利用系統(tǒng)原有的聯(lián)動(dòng)系統(tǒng)或數(shù)據(jù)分析系統(tǒng)，組合實(shí)現(xiàn)復(fù)雜應(yīng)用。


此處所說(shuō)明的附圖用來(lái)提供對(duì)本發(fā)明的進(jìn)一步理解，構(gòu)成本申請(qǐng)的一部分，本發(fā)
明的示意性實(shí)施例及其說(shuō)明用于解釋本發(fā)明，并不構(gòu)成對(duì)本發(fā)明的不當(dāng)限定。在附圖中 圖1為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)的一實(shí)施例的結(jié)構(gòu)示意圖。
圖2為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)的一應(yīng)用場(chǎng)景實(shí)例的示意圖。 圖3為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控方法的一實(shí)施例的流程示意圖。 圖4為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控方法的另一實(shí)施例的應(yīng)用流程的信令示意圖。 圖5為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控方法的方法的另一實(shí)施例的應(yīng)用流程的信令示意圖。
具體實(shí)施例方式
下面通過(guò)附圖和實(shí)施例，對(duì)本發(fā)明的技術(shù)方案做進(jìn)一步的詳細(xì)描述。 如圖l所示，為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)的一實(shí)施例的結(jié)構(gòu)示意圖。在本實(shí)
施例中，網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)可以包括網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1、 IVU 2和IVM 3。其中網(wǎng)絡(luò)
視頻監(jiān)控平臺(tái)1可以采用現(xiàn)有的網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)進(jìn)行軟件流程上的簡(jiǎn)單升級(jí)，就可以實(shí)
現(xiàn)本實(shí)施例中網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的功能，網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1的結(jié)構(gòu)和功能將在后續(xù)進(jìn)行
詳細(xì)地描述。 IVU 2的主要負(fù)責(zé)對(duì)網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1輸入的視頻信息(視頻信息主要指的 是視頻、圖片類的數(shù)據(jù))進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出。被識(shí) 別的視頻信息可以被分為幾類信息，例如行為識(shí)別類、數(shù)據(jù)獲取類以及視頻診斷類等類別。 其中行為識(shí)別類信息包括例如越界檢測(cè)、可疑遺留物檢測(cè)、滯留檢測(cè)、徘徊/游蕩檢測(cè)、逗 留檢測(cè)、尾隨檢測(cè)、聚眾檢測(cè)、物品保全檢測(cè)、目標(biāo)移動(dòng)偵測(cè)、逆行檢測(cè)、火焰檢測(cè)、煙霧檢測(cè) 等，數(shù)據(jù)獲取類包括例如流量統(tǒng)計(jì)、數(shù)量統(tǒng)計(jì)、車速檢測(cè)、車牌識(shí)別、集裝箱號(hào)識(shí)別、人臉識(shí)別等，視頻診斷類例如包括視頻質(zhì)量不佳、攝像頭遮蓋檢測(cè)、攝像頭偏離預(yù)置位檢測(cè)等。在 IVU 2中可以包括一個(gè)或多個(gè)智能分析算法，并可以進(jìn)行算法的添加和刪除，也可以對(duì)算法 中的一些參數(shù)和條件進(jìn)行修改。 IVU 2可以具備自身能力集管理機(jī)制，在注冊(cè)到IVM 3的過(guò)程中將自身的能力集 上報(bào)給IVM 3。 IVU 2的能力集可以包括所采用的一個(gè)或多個(gè)智能分析算法的名稱、提供 商，還可以包括各種智能分析算法之間的制約關(guān)系。IVU 2可以根據(jù)IVM 3提供的智能分析 業(yè)務(wù)參數(shù)選擇對(duì)應(yīng)的智能分析算法，并設(shè)置相應(yīng)的參數(shù)和條件。 各類識(shí)別結(jié)果可以在網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)中發(fā)揮不同的作用，例如，行為識(shí)別 類信息在監(jiān)控系統(tǒng)中作為報(bào)警輸入新類型。數(shù)據(jù)獲取類信息在監(jiān)控系統(tǒng)中用于錄像索引、 抓拍圖片索引、智能PTZ、前端的字幕疊加等。 在IVU 2的一個(gè)具體實(shí)例中，可以具體包括圖像識(shí)別模塊、參數(shù)設(shè)置模塊和智能 上報(bào)模塊。其中，圖像識(shí)別模塊用于對(duì)網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)l輸入的視頻信息進(jìn)行識(shí)別。參 數(shù)設(shè)置模塊用于根據(jù)IVM 3下發(fā)的智能分析業(yè)務(wù)參數(shù)進(jìn)行參數(shù)設(shè)置。智能上報(bào)模塊用于根 據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出。 IVM 3主要負(fù)責(zé)對(duì)IVU 2的能力集和智能圖像識(shí)別的策略進(jìn)行管理，并提供與網(wǎng) 絡(luò)視頻監(jiān)控平臺(tái)1之間的接口 。 IVM 3可以通過(guò)SIP+XML協(xié)議對(duì)IVU 2進(jìn)行控制。具體來(lái) 說(shuō)，IVM 3可以接受IVU 2的能力集上報(bào)，對(duì)IVU 2的能力集保存，對(duì)IVU 2的能力集進(jìn)行 管理，并提供調(diào)度所轄I(yíng)VU 2的能力。IVM 3還可以支持各種用戶智能圖像識(shí)別的策略的配 置，保存并管理這些智能圖像識(shí)別的策略。IVM 3還提供了與網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)l之間的接 口 ，該接口可以用來(lái)接收網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1的IVU 2能力查詢并提供反饋，接收網(wǎng)絡(luò)視頻 監(jiān)控平臺(tái)1的智能圖像識(shí)別的策略的查詢并提供反饋，以及接收網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1的智 能調(diào)用，并將IVU 2的入口信息反饋給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1。 在IVM 3的一個(gè)具體實(shí)例中，可以具體包括能力管理模塊、策略管理模塊和監(jiān)控 平臺(tái)接口。其中能力管理模塊用于管理IVU 2的能力信息。策略管理模塊用于管理IVU 2 的智能識(shí)別策略。監(jiān)控平臺(tái)接口用于接收網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)l發(fā)出的能力或智能識(shí)別策略 的查詢，并將查詢結(jié)果反饋給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)l，以及接收網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1的智能調(diào) 用請(qǐng)求，將符合要求的IVU 2的入口信息反饋給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1。 如圖2所示，為發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)的一應(yīng)用場(chǎng)景實(shí)例的示意圖。在本 應(yīng)用場(chǎng)景實(shí)例中，網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)可以具體包括中心管理服務(wù)器CMS 11、前端單元PU 14、網(wǎng)絡(luò)錄像單元NRU 13和視頻轉(zhuǎn)分發(fā)單元VTDU 12。其中CMS 11用于實(shí)現(xiàn)設(shè)備注冊(cè)、信 令轉(zhuǎn)發(fā)處理、設(shè)備控制、告警及信息和資源管理服務(wù)。PU 14用于采集監(jiān)控區(qū)域的視頻信息。 NRU 13用于存儲(chǔ)接收到的視頻信息，并提供所述視頻信息的管理及檢索/回放。VTDU 12 用于將包括所述視頻信息的視頻流從PU 14轉(zhuǎn)發(fā)或分發(fā)到NRU 13以及客戶端單元CU 6。
IVM 3和IVU 2均可以通過(guò)HTTP+XML協(xié)議與網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1通信，IVU 2可 以通過(guò)RTP/RTCP協(xié)議從VTDU 12獲取視頻接口 。 在本應(yīng)用場(chǎng)景實(shí)例中，還包括前端接入網(wǎng)關(guān)PAG 7是PU 14的接入網(wǎng)關(guān)，客戶端接 入網(wǎng)關(guān)CAG 9是CU 6的接入單元。中心管理單元CCS 8起到接入處理服務(wù)器的作用。
在本發(fā)明中還可以利用第三方的數(shù)據(jù)分析平臺(tái)DA 4對(duì)IVU 2輸出的識(shí)別結(jié)果進(jìn) 行分析處理。網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)1通過(guò)數(shù)據(jù)分析平臺(tái)接口將接收到的識(shí)別結(jié)果發(fā)送給DA4，DA 4接收網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)l發(fā)出的識(shí)別結(jié)果，可以根據(jù)預(yù)先配置的數(shù)據(jù)分析算法和策 略對(duì)該識(shí)別結(jié)果進(jìn)行分析，并根據(jù)分析結(jié)果向網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)l返回報(bào)警信息。通過(guò)連 接外部DA 4的接口，本發(fā)明進(jìn)一步的擴(kuò)展了本發(fā)明的網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)的監(jiān)控能力。
如圖3所示，為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控方法的一實(shí)施例的流程示意圖。在本實(shí) 施例中，網(wǎng)絡(luò)視頻智能監(jiān)控流程包括以下步驟
步驟101、網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)向IVM發(fā)出智能調(diào)用請(qǐng)求； 步驟102、 IVM根據(jù)智能調(diào)用請(qǐng)求調(diào)度可用的IVU，并向可用的IVU下發(fā)智能分析 業(yè)務(wù)參數(shù)； 步驟103、 IVU根據(jù)智能分析業(yè)務(wù)參數(shù)啟動(dòng)智能分析，并經(jīng)由IVM向網(wǎng)絡(luò)視頻監(jiān)控 平臺(tái)返回表示啟動(dòng)成功的響應(yīng)； 步驟104、網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)將需要智能識(shí)別的視頻信息發(fā)送到IVU ; 步驟105、 IVU對(duì)視頻信息進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道向IVM
和網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)。 在本發(fā)明中的"智能圖像識(shí)別"就是要充分挖掘抽取視頻圖像資源中的關(guān)鍵信息， 并利用這種信息為用戶提供有價(jià)值的服務(wù)。通過(guò)本發(fā)明中的IVU+IVM+網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)， 可以提高報(bào)警精確度，減少漏分析或者誤分析的現(xiàn)象外，縮短響應(yīng)時(shí)間，提高響應(yīng)速度，形 成更為有效的現(xiàn)場(chǎng)數(shù)據(jù)，在安全威脅發(fā)生之前就能夠提示安全人員關(guān)注相關(guān)監(jiān)控畫面，為 潛在威脅做好準(zhǔn)備工作。 本實(shí)施例利用IVM管理IVU的智能圖像識(shí)別能力，并提供對(duì)外的接口管理和調(diào)用， 從而實(shí)現(xiàn)智能圖像識(shí)別能力在監(jiān)控平臺(tái)的融入；本發(fā)明還利用IVU封裝智能圖像識(shí)別算法 對(duì)視頻信息進(jìn)行識(shí)別，并將識(shí)別結(jié)果作為系統(tǒng)的事件返回給監(jiān)控系統(tǒng)，從而有效利用系統(tǒng) 原有的聯(lián)動(dòng)系統(tǒng)或數(shù)據(jù)分析系統(tǒng)，組合實(shí)現(xiàn)復(fù)雜應(yīng)用。相比傳統(tǒng)視頻監(jiān)控系統(tǒng)，采用智能視 頻分析業(yè)務(wù)具備以下優(yōu)勢(shì) 1、計(jì)算機(jī)自動(dòng)檢測(cè)和分析，對(duì)違反規(guī)則的行為示警，并實(shí)時(shí)分析處理，真正實(shí)現(xiàn)了 7 * 24全天候?qū)崟r(shí)監(jiān)控； 2、使閉路電視監(jiān)控系統(tǒng)，不僅有眼睛，而且有大腦。及時(shí)提醒工作人員，提升監(jiān)控 效率和工作質(zhì)量，更大地發(fā)揮監(jiān)控的威力與功能； 3、海量的錄像數(shù)據(jù)難以查看。使用智能系統(tǒng)，可以對(duì)視頻進(jìn)行基于事件的檢索，只 看有事件發(fā)生的視頻，大大提高了數(shù)據(jù)使用效率。 有了"智能圖像識(shí)別"這個(gè)靈敏的"大腦"，系統(tǒng)就能迅速的對(duì)一些具有潛在威脅的 事件進(jìn)行捕獲，并可通過(guò)一連串的智能化聯(lián)動(dòng)對(duì)事件作出處理，從而有效抑制人作為行為 主體所引發(fā)的一系列問(wèn)題，實(shí)現(xiàn)真正意義上的全天候智能監(jiān)控。 如圖4所示，為本發(fā)明網(wǎng)絡(luò)視頻智能監(jiān)控方法的另一實(shí)施例的應(yīng)用流程的信令示 意圖。本實(shí)施例的應(yīng)用流程包括 步驟201，網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的CMS需要通過(guò)觸發(fā)條件進(jìn)行是否智能調(diào)用的判斷， 觸發(fā)條件可以包括定時(shí)、聯(lián)動(dòng)等。 步驟202、CMS在滿足了觸發(fā)條件后，向IVM發(fā)起智能調(diào)用請(qǐng)求，在請(qǐng)求中可以同步 攜帶用戶信息。 步驟2Q3、 IVM利用自身管理的IVU能力集，根據(jù)智能調(diào)用請(qǐng)求選擇可用的IVU進(jìn)行調(diào)用。 步驟204、 IVM向可用的IVU下發(fā)智能調(diào)用請(qǐng)求相應(yīng)的智能分析業(yè)務(wù)參數(shù)。 步驟205、 IVU根據(jù)智能分析業(yè)務(wù)參數(shù)啟動(dòng)智能分析，并向IVM返回表示啟動(dòng)成功
的響應(yīng)。 步驟206、 IVM將該表示啟動(dòng)成功的響應(yīng)轉(zhuǎn)發(fā)給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的CMS。 步驟207 、 CMS向VTDU/NRU/PU發(fā)出媒體請(qǐng)求。 步驟208、 VTDU/NRU/PU根據(jù)該媒體請(qǐng)求向IVU發(fā)出視頻RTP流。 步驟209、 IVU對(duì)接收到的視頻RTP流中的視頻信息進(jìn)行識(shí)別。 步驟210、 IVU向IVM發(fā)出表示智能分析開始的通知消息。 步驟211、 IVM將表示智能分析開始的通知消息轉(zhuǎn)發(fā)給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的CMS。
步驟212、 IVU根據(jù)識(shí)別結(jié)果選擇相應(yīng)的輸出通道上報(bào)到IVM。
步驟213、 IVM將識(shí)別結(jié)果轉(zhuǎn)發(fā)給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的CMS。 在本實(shí)施例中，CMS可以根據(jù)觸發(fā)條件啟動(dòng)網(wǎng)絡(luò)視頻智能監(jiān)控，除此之外，本發(fā)明 還提供了 CMS根據(jù)接收的CU的智能調(diào)用請(qǐng)求來(lái)啟動(dòng)網(wǎng)絡(luò)視頻智能監(jiān)控的流程，具體如圖5 所示，包括 步驟301、 CU向CMS發(fā)出智能調(diào)用請(qǐng)求。 步驟302、 CMS對(duì)CU發(fā)出的智能調(diào)用請(qǐng)求進(jìn)行鑒權(quán)，如果鑒權(quán)失敗，則執(zhí)行步驟 303，否則執(zhí)行步驟304。 步驟303、 CMS向CU返回表示調(diào)用失敗的反饋消息。在反饋消息中還可以包括失 敗原因，CU可以重新提出智能調(diào)用請(qǐng)求。 步驟304 步驟313與上一應(yīng)用實(shí)例的步驟202 211近似，這里就不贅述了，在 步驟313之后，還包括以下步驟 步驟314、網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的CMS將將表示智能分析開始的通知消息轉(zhuǎn)發(fā)給CU。
步驟315、 IVU根據(jù)識(shí)別結(jié)果選擇相應(yīng)的輸出通道上報(bào)到IVM。
步驟316、 IVM將識(shí)別結(jié)果轉(zhuǎn)發(fā)給網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的CMS。
步驟317、 CMS將識(shí)別結(jié)果轉(zhuǎn)發(fā)給CU。 本實(shí)施例利用IVM管理IVU的智能圖像識(shí)別能力，并提供對(duì)外的接口管理和調(diào)用， 從而實(shí)現(xiàn)智能圖像識(shí)別能力在監(jiān)控平臺(tái)的融入；本發(fā)明還利用IVU封裝智能圖像識(shí)別算法 對(duì)視頻信息進(jìn)行識(shí)別，并將識(shí)別結(jié)果作為系統(tǒng)的事件返回給監(jiān)控系統(tǒng)，從而有效利用系統(tǒng) 原有的聯(lián)動(dòng)系統(tǒng)或數(shù)據(jù)分析系統(tǒng)，組合實(shí)現(xiàn)復(fù)雜應(yīng)用。 最后應(yīng)當(dāng)說(shuō)明的是以上實(shí)施例僅用以說(shuō)明本發(fā)明的技術(shù)方案而非對(duì)其限制；盡 管參照較佳實(shí)施例對(duì)本發(fā)明進(jìn)行了詳細(xì)的說(shuō)明，所屬領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解依然 可以對(duì)本發(fā)明的具體實(shí)施方式
進(jìn)行修改或者對(duì)部分技術(shù)特征進(jìn)行等同替換；而不脫離本發(fā) 明技術(shù)方案的精神，其均應(yīng)涵蓋在本發(fā)明請(qǐng)求保護(hù)的技術(shù)方案范圍當(dāng)中。
權(quán)利要求
一種網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，包括網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)，其特征在于，還包括智能圖像識(shí)別單元，用于對(duì)所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)輸入的視頻信息進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出；智能圖像管理服務(wù)器，用于對(duì)所述智能圖像識(shí)別單元的能力集和智能圖像識(shí)別的策略進(jìn)行管理，并提供與所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)之間的接口。
2. 根據(jù)權(quán)利要求1所述的網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，其特征在于，所述網(wǎng)絡(luò)視頻監(jiān)控平 臺(tái)具體包括中心管理服務(wù)器，用于實(shí)現(xiàn)設(shè)備注冊(cè)、信令轉(zhuǎn)發(fā)處理、設(shè)備控制、告警及信息和資源管 理服務(wù)；前端單元，用于采集監(jiān)控區(qū)域的視頻信息；網(wǎng)絡(luò)錄像單元，用于存儲(chǔ)接收到的視頻信息，并提供所述視頻信息的管理及檢索/回放；視頻轉(zhuǎn)分發(fā)單元，用于將包括所述視頻信息的視頻流從所述前端單元轉(zhuǎn)發(fā)或分發(fā)到所 述網(wǎng)絡(luò)錄像單元以及客戶端單元。
3. 根據(jù)權(quán)利要求1所述的網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，其特征在于，所述智能圖像識(shí)別單 元具體包括圖像識(shí)別模塊，用于對(duì)所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)輸入的視頻信息進(jìn)行識(shí)別； 參數(shù)設(shè)置模塊，用于根據(jù)所述智能圖像管理服務(wù)器下發(fā)的智能分析業(yè)務(wù)參數(shù)進(jìn)行參數(shù) 設(shè)置；智能上報(bào)模塊，用于根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出。
4. 根據(jù)權(quán)利要求1所述的網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，其特征在于，所述智能圖像管理服 務(wù)器具體包括能力管理模塊，用于管理所述智能圖像識(shí)別單元的能力信息； 策略管理模塊，用于管理所述智能圖像識(shí)別單元的智能識(shí)別策略；監(jiān)控平臺(tái)接口，用于接收所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)發(fā)出的能力或智能識(shí)別策略的查詢， 并將查詢結(jié)果反饋給所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)，以及接收所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)的智能調(diào)用 請(qǐng)求，將符合要求的智能圖像識(shí)別單元的入口信息反饋給所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)。
5. 根據(jù)權(quán)利要求1所述的網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，其特征在于，所述網(wǎng)絡(luò)視頻監(jiān)控平 臺(tái)還包括數(shù)據(jù)分析平臺(tái)接口，用于向外部的數(shù)據(jù)分析平臺(tái)發(fā)送所述識(shí)別結(jié)果，并接收所述數(shù)據(jù) 分析平臺(tái)根據(jù)預(yù)先配置的數(shù)據(jù)分析算法和策略對(duì)識(shí)別結(jié)果進(jìn)行分析所得的分析結(jié)果而返 回的報(bào)警信息。
6. —種網(wǎng)絡(luò)視頻智能監(jiān)控方法，其特征在于，包括 網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求；所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求調(diào)度可用的智能圖像識(shí)別單元，并向 所述可用的智能圖像識(shí)別單元下發(fā)智能分析業(yè)務(wù)參數(shù)；所述智能圖像識(shí)別單元根據(jù)所述智能分析業(yè)務(wù)參數(shù)啟動(dòng)智能分析，并經(jīng)由所述智能圖 像管理服務(wù)器向所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)返回表示啟動(dòng)成功的響應(yīng)；所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)將需要智能識(shí)別的視頻信息發(fā)送到所述智能圖像識(shí)別單元；所述智能圖像識(shí)別單元對(duì)所述視頻信息進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通 道向所述智能圖像管理服務(wù)器和所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)。
7. 根據(jù)權(quán)利要求6所述的網(wǎng)絡(luò)視頻智能監(jiān)控方法，其特征在于，所述智能圖像管理服 務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求調(diào)度可用的智能圖像識(shí)別單元，并向所述可用的智能圖像識(shí)別 單元下發(fā)智能分析業(yè)務(wù)參數(shù)的操作具體包括所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求在所述智能圖像管理服務(wù)器自身管 理的智能圖像識(shí)別單元的能力集中調(diào)度可用的智能圖像識(shí)別單元；所述智能圖像管理服務(wù)器根據(jù)所述智能調(diào)用請(qǐng)求選擇智能圖像識(shí)別的策略向所述可 用的智能圖像識(shí)別單元下發(fā)與智能圖像識(shí)別的策略對(duì)應(yīng)的智能分析業(yè)務(wù)參數(shù)。
8. 根據(jù)權(quán)利要求6所述的網(wǎng)絡(luò)視頻智能監(jiān)控方法，其特征在于，在所述網(wǎng)絡(luò)視頻監(jiān)控 平臺(tái)向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求之前，還包括所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)接收客戶端單元發(fā)出的智能調(diào)用請(qǐng)求，并對(duì)所述客戶端單元進(jìn) 行鑒權(quán)，如果鑒權(quán)通過(guò)，則向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求，否則向所述客戶端單 元返回表示調(diào)用失敗的響應(yīng)。
9. 根據(jù)權(quán)利要求6所述的網(wǎng)絡(luò)視頻智能監(jiān)控方法，其特征在于，在所述網(wǎng)絡(luò)視頻監(jiān)控 平臺(tái)向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求之前，還包括所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)符合觸發(fā)條件時(shí)，向智能圖像管理服務(wù)器發(fā)出智能調(diào)用請(qǐng)求。
10. 根據(jù)權(quán)利要求6所述的網(wǎng)絡(luò)視頻智能監(jiān)控方法，其特征在于，所述根據(jù)識(shí)別結(jié)果選 擇相應(yīng)的傳輸通道向所述智能圖像管理服務(wù)器和所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)的操作 具體為根據(jù)識(shí)別結(jié)果所屬的種類選擇相應(yīng)的傳輸通道；如果識(shí)別結(jié)果屬于行為識(shí)別類，則選擇報(bào)警通道向所述智能圖像管理服務(wù)器和所述網(wǎng) 絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)；如果識(shí)別結(jié)果屬于數(shù)據(jù)獲取類，則通過(guò)數(shù)據(jù)通道向所述智能圖像管理服務(wù)器和所述網(wǎng) 絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)；如果識(shí)別結(jié)構(gòu)屬于視頻診斷類，則通過(guò)故障管理報(bào)警通道向所述智能圖像管理服務(wù)器 和所述網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)逐級(jí)上報(bào)。
全文摘要
本發(fā)明涉及一種網(wǎng)絡(luò)視頻智能監(jiān)控系統(tǒng)，包括網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)，還包括IVU，用于對(duì)網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)輸入的視頻信息進(jìn)行識(shí)別，并根據(jù)識(shí)別結(jié)果選擇相應(yīng)的傳輸通道進(jìn)行輸出；IVM，用于對(duì)IVU的能力集和智能圖像識(shí)別的策略進(jìn)行管理，并提供與網(wǎng)絡(luò)視頻監(jiān)控平臺(tái)之間的接口。本發(fā)明還設(shè)計(jì)一種網(wǎng)絡(luò)視頻智能監(jiān)控方法。本實(shí)施例利用IVM管理IVU的智能圖像識(shí)別能力，并提供對(duì)外的接口管理和調(diào)用，從而實(shí)現(xiàn)智能圖像識(shí)別能力在監(jiān)控平臺(tái)的融入；本發(fā)明還利用IVU封裝智能圖像識(shí)別算法對(duì)視頻信息進(jìn)行識(shí)別，并將識(shí)別結(jié)果作為系統(tǒng)的事件返回給監(jiān)控系統(tǒng)，從而有效利用系統(tǒng)原有的聯(lián)動(dòng)系統(tǒng)或數(shù)據(jù)分析系統(tǒng)，組合實(shí)現(xiàn)復(fù)雜應(yīng)用。
文檔編號(hào)H04L12/28GK101702771SQ200910178348
公開日2010年5月5日 申請(qǐng)日期2009年11月6日 優(yōu)先權(quán)日2009年11月6日
發(fā)明者張艷霞, 曹寧, 梁篤國(guó), 鄧濤, 鄭澤民 申請(qǐng)人:中國(guó)電信股份有限公司