專利名稱：一種視頻摘要生成方法和裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，尤其是涉及一種視頻摘要生成方法和裝置。
背景技術(shù)：
在社會公共安全領(lǐng)域，視頻監(jiān)控系統(tǒng)成為維護社會治安、加強社會管理的一個重要組成部分。然而視頻錄像存在存儲數(shù)據(jù)量大、存儲時間長等特點，通過錄像尋找線索，獲取證據(jù)，依照傳統(tǒng)的做法逐一瀏覽相關(guān)視頻，是要耗費大量人力、物力以及時間的，效率極其低下，以至于錯過最佳破案時機。因此在視頻監(jiān)控系統(tǒng)中，對原始視頻進行濃縮，可以快速瀏覽，鎖定檢索對象，對于公安加快破案速度，提高大案、要案的破案效率具有重要指導(dǎo)意義。而現(xiàn)有技術(shù)中，對視頻濃縮所采用的方式為以自動或半自動的方式，先通過運動目標分析，提取運動目標，然后對各個目標的運動軌跡進行分析，將不同的目標拼接到一個共同的背景場景中，并將它們以某種方式進行組合形成視頻摘要。而很多情況下，公安機關(guān)所關(guān)注的僅為提取出的多個目標中的一個，其他目標的出現(xiàn)則會分散公安機關(guān)工作人員的注意力，造成干擾。綜上所述，現(xiàn)有技術(shù)中的視頻濃縮技術(shù)，存在無關(guān)目標干擾視頻瀏覽的技術(shù)問題。

發(fā)明內(nèi)容
本發(fā)明提出了一種視頻摘要生成方法和裝置，防止了無關(guān)目標對視頻瀏覽的干擾。為了達到上述目的，本發(fā)明的技術(shù)方案是這樣實現(xiàn)的:一種視頻摘要生成方法，其特征在于，包括步驟:步驟A，對每幀圖像進行前景檢測，檢測出前景中的目標；步驟B，對檢測到的目標進行跟蹤，提取目標的運動軌跡；步驟C，將目標按照該目標的顏色信息劃分為不同類；步驟D，分別對每一類目標進行軌跡排列，分別疊加到對應(yīng)的背景上，生成視頻摘要。其中，所述步驟C包括步驟:將每一像素點的RGB顏色空間轉(zhuǎn)換到HSV空間；根據(jù)每一像素點轉(zhuǎn)換后的HSV空間的h分量、V分量和s分量的具體數(shù)值，確定該像素點的顏色；統(tǒng)計每一目標的像素點顏色，將眾數(shù)的顏色作為該目標的顏色；將h分量劃分為多個區(qū)間，根據(jù)目標的顏色的h分量所屬的區(qū)間，將目標劃分為不同類。其中，所述步驟將每一像素點的RGB顏色空間轉(zhuǎn)換到HSV空間包括步驟:按照如下公式，根據(jù)每一像素點的r分量、g分量和b分量的值，計算該像素點的h分量、S分量和V分量的值:
權(quán)利要求
1.種視頻摘要生成方法，其特征在于，包括步驟: 步驟A，對每幀圖像進行前景檢測，檢測出前景中的目標； 步驟B，對檢測到的目標進行跟蹤，提取目標的運動軌跡； 步驟C，將目標按照該目標的顏色信息劃分為不同類； 步驟D，分別對每一類目標進行軌跡排列，分別疊加到對應(yīng)的背景上，生成視頻摘要。
2.據(jù)權(quán)利要求1所述的視頻摘要生成方法，其特征在于，所述步驟C包括步驟: 將每一像素點的RGB顏色空間轉(zhuǎn)換到HSV空間； 根據(jù)每一像素點轉(zhuǎn)換后的HSV空間的h分量、V分量和s分量的具體數(shù)值，確定該像素點的顏色； 統(tǒng)計每一目標的像素點顏色，將眾數(shù)的顏色作為該目標的顏色； 將h分量劃分為多個區(qū)間，根據(jù)目標的顏色的h分量所屬的區(qū)間，將目標劃分為不同類。
3.據(jù)權(quán)利要求2所述的視頻摘要生成方法，其特征在于，所述步驟將每一像素點的RGB顏色空間轉(zhuǎn)換到HSV空間包括步驟: 按照如下公式，根據(jù)每一像素點的r分量、g分量和b分量的值，計算該像素點的h分量、s分量和V分量的值:
4.據(jù)權(quán)利要求2所述的方法，其特征在于，所述步驟根據(jù)每一像素點轉(zhuǎn)換后的HSV空間的h分量、V分量和s分量的具體數(shù)值，確定該像素點的顏色包括步驟: 將V分量小于第一閾值的像素點確定為黑色； 將V分量大于第二閾值并且s分量小于第三閾值的像素點確定為白色； 將V分量在第一閾值和第二閾值之間且V分量小于第三閾值的像素點確定為灰色，其他顏色為彩色；對于彩色，將h分量的值從O到360均勻劃分為6個區(qū)間，即[0，60)、[60，120)、[120，180)、[180，240)、[240，300)和[300，360)，根據(jù)彩色像素點h分量的值所落入的區(qū)間，確定該像素點的顏色。
5.據(jù)權(quán)利要求1所述的方法，其特征在于，所述步驟A還包括步驟: 當拍攝環(huán)境中的單位時間內(nèi)光照變化幅度超過預(yù)設(shè)閾值時，將判定為背景點的像素的取值范圍縮小為原來的0.4-0.6倍； 用大于陰影區(qū)域的像素的閾值將圖像二值化，去除陰影。
6.據(jù)權(quán)利要求1所述的視頻摘要生成方法，其特征在于，所述步驟B中對檢測到的目標進行跟蹤包括步驟: 遍歷當前幀 檢測到的所有目標，和上一幀圖像所檢測到的目標進行比較，若滿足如下條件: Scross〉min (Spre，Stemp) X R Scross=W i dthcross X He i ghtcross ffidthcross=min (rightpre, righttemp) -max (Ieftpre, Iefttemp) Heightcross=min (Bottompre, Bottomtemp) -max (Toppre, Toptemp) 其中，Scross為前后兩幀的交叉面積，Widthcross為投影到水平方向上的交叉部分的長度^eighteross為投影到垂直方向上的交叉部分的長度；rightpM為前一幀輪廓的右邊界的值；righttemp為當前幀輪廓的右邊界的值；leftp,e為前一幀輪廓的左邊界的值；lefttemp為當前幀輪廓的左邊界的值；Bottoive為前一幀輪廓的下邊界的值；Bottomtenip為當前幀輪廓的下邊界的值；ΤορρΜ為前一幀輪廓的上邊界的值Joptenip為當前幀輪廓的上邊界的值；所述R為交叉比例； 則判定當前幀的目標與上一幀關(guān)聯(lián)，更新軌跡；若不滿足該條件，則判定不關(guān)聯(lián)，產(chǎn)生新的軌跡，若上一幀圖像存在沒有和當前幀檢測的目標關(guān)聯(lián)上的軌跡，則終止該軌跡的跟蹤，并將該軌跡存儲。
7.據(jù)權(quán)利要求1所述的視頻摘要生成方法，其特征在于，所述步驟B還包括步驟: 更新背景； 根據(jù)提取到的目標的數(shù)目，按照目標數(shù)目越多則前景檢測的頻率越高、背景更新頻率越低的原則，調(diào)整前景檢測的頻率和背景更新的頻率。
8.據(jù)權(quán)利要求7所述的視頻摘要生成方法，其特征在于，所述步驟調(diào)整前景檢測的頻率和背景更新的頻率包括步驟: 當提取到的目標數(shù)目為零時，隔3-6幀進行一次前景檢測，背景每一幀更新一次； 當提取到的目標數(shù)目為1-3個時，隔2幀進行一次前景檢測，背景每兩幀更新一次； 當提取到的目標數(shù)目為3個以上時，每幀都進行前景檢測，背景每三幀更新一次。
9.種視頻摘要生成裝置，其特征在于，包括前景檢測模塊、跟蹤模塊、分類模塊和生成模塊； 所述前景檢測模塊，用于對每幀圖像進行前景檢測，檢測出前景中的目標； 所述跟蹤模塊，用于對檢測到的目標進行跟蹤，提取目標的運動軌跡； 所述分類模塊，將目標按照該目標的顏色信息劃分為不同類； 所述生成模塊，用于分別對每一類目標進行軌跡排列，分別疊加到對應(yīng)的背景上，生成視頻摘要。
10.據(jù)權(quán)利要求9所述的視頻摘要生成裝置，其特征在于，所述分類模塊，用于將每一像素點的RGB顏色空間轉(zhuǎn)換到HSV空間，并根據(jù)每一像素點轉(zhuǎn)換后的HSV空間的h分量、V分量和s分量的具體數(shù)值，確定該像素點的顏色；統(tǒng)計每一目標的像素點顏色，將眾數(shù)的顏色作為該目標的顏色 ；將h分量劃分為多個區(qū)間，根據(jù)目標的顏色的h分量所屬的區(qū)間，將目標劃分為不同類。
全文摘要
本發(fā)明提出了一種視頻摘要生成方法，包括步驟對每幀圖像進行前景檢測，檢測出前景中的目標；對檢測到的目標進行跟蹤，提取目標的運動軌跡；將目標按照該目標的顏色信息劃分為不同類；分別對每一類目標進行軌跡排列，分別疊加到對應(yīng)的背景上，生成視頻摘要。本發(fā)明還提供一種視頻摘要生成裝置，包括前景檢測模塊、跟蹤模塊、分類模塊和生成模塊；前景檢測模塊，用于對每幀圖像進行前景檢測，檢測出前景中的目標；跟蹤模塊，用于對目標進行跟蹤，提取運動軌跡；分類模塊，將目標按照顏色信息劃分為不同類；生成模塊，用于分別對每一類目標進行軌跡排列，分別疊加到對應(yīng)的背景上，生成視頻摘要。該方法和裝置，能夠有效地防止無關(guān)目標的干擾。
文檔編號G06T7/20GK103092963SQ201310022108
公開日2013年5月8日 申請日期2013年1月21日 優(yōu)先權(quán)日2013年1月21日
發(fā)明者王海峰, 王曉萌, 何小波, 董博, 楊宇, 張凱歌 申請人:信幀電子技術(shù)(北京)有限公司