專利名稱：基于圖像識(shí)別的廣告投播系統(tǒng)及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種廣告投播系統(tǒng)及方法，特別是涉及一種基于圖像識(shí)別的廣告投播系統(tǒng)及方法。
背景技術(shù)：
隨著社會(huì)商業(yè)化的不斷推進(jìn)，廣告業(yè)務(wù)的多樣性也在不斷的發(fā)展。比如，電視廣告、戶外多媒體廣告、網(wǎng)絡(luò)廣告、報(bào)刊雜志廣告、海報(bào)等，這些廣告媒介的出現(xiàn)對(duì)產(chǎn)品的推廣起到了重要的作用。目前的廣告系統(tǒng)有一個(gè)共同點(diǎn)廣告形式主要是單向灌輸，觀眾是被動(dòng)接收，是否對(duì)產(chǎn)品感興趣就無從了解。這個(gè)共同點(diǎn)也是目前廣告系統(tǒng)的一大弱點(diǎn)，因?yàn)檫@種廣告方式
無法及時(shí)告知登廣告的公司廣告的效果怎樣、什么人群對(duì)相關(guān)產(chǎn)品感興趣等等，為了達(dá)到廣泛宣傳的目的而鋪天蓋地的做廣告，結(jié)果造成了較大的資源浪費(fèi)也不一定能夠起到最好的效果。

發(fā)明內(nèi)容
本發(fā)明要解決的技術(shù)問題是提供一種基于圖像識(shí)別的廣告投播系統(tǒng)及方法。本發(fā)明能將人體圖像識(shí)別與廣告投播系統(tǒng)、網(wǎng)絡(luò)系統(tǒng)相接合，真正實(shí)現(xiàn)人物行為的綜合分析與判斷，從而為個(gè)人或組織提供重要的信息來源。比如，具有圖像識(shí)別功能的智能廣告投播工具，通過廣告投播機(jī)上的攝像頭拍攝到的人物頭像、行為等，自動(dòng)分析在該地區(qū)人們對(duì)廣告內(nèi)容的關(guān)注程度、客戶類型、潛在客戶的數(shù)量等等，再通過聯(lián)網(wǎng)，分析一個(gè)較大地區(qū)的整體市場(chǎng)情況。因此，可解決以下等問題I)通過圖像識(shí)別自動(dòng)分析觀眾行為，比如有購買愿望、感興趣、一般、反感等；2)通過圖像識(shí)別統(tǒng)計(jì)分析確定相關(guān)地域客戶量，潛在客戶等；3)分析人體特征，包括性別、年齡等，以便能夠系統(tǒng)的分析和定位客戶群。為解決上述技術(shù)問題，本發(fā)明的基于圖像識(shí)別的廣告投播系統(tǒng)，包括廣告展示平臺(tái)，用于廣告的展示；圖像采集系統(tǒng)，用于對(duì)人物圖像的采集，并能將采集的圖像經(jīng)分析與處理后，得到的圖像數(shù)據(jù)傳送到網(wǎng)絡(luò)；數(shù)據(jù)分析處理模塊，用于對(duì)采集的圖像進(jìn)行分析與處理，以及將網(wǎng)絡(luò)內(nèi)的圖像采集系統(tǒng)的數(shù)據(jù)進(jìn)行匯總和整體分析，得到用戶需要的指標(biāo)數(shù)據(jù)。另外，本發(fā)明還提供一種基于圖像識(shí)別的廣告投播系統(tǒng)的實(shí)現(xiàn)方法，包括步驟(I)通過在廣告展示平臺(tái)加入圖像采集系統(tǒng)，實(shí)時(shí)采集廣告觀眾對(duì)廣告的關(guān)注程度；(2)結(jié)合人臉表情識(shí)別，圖像采集系統(tǒng)或數(shù)據(jù)分析處理模塊自動(dòng)分析廣告受眾對(duì)廣告的反饋；(3)結(jié)合人體特征分析識(shí)別，數(shù)據(jù)分析處理模塊自動(dòng)分析和預(yù)估客戶群體的年齡結(jié)構(gòu)和性別，為廣告后續(xù)投播提供參考。本發(fā)明通過結(jié)合人體動(dòng)作行為識(shí)別，人臉表情識(shí)別，人體特征識(shí)別，告知刊登廣告的公司對(duì)廣告感興趣的人數(shù)、可能購買該產(chǎn)品的人數(shù)、潛在客戶的人數(shù)、對(duì)產(chǎn)品感興趣的人的結(jié)構(gòu)(男女比率、年齡段等)、哪些地域?qū)Ξa(chǎn)品的關(guān)注更多等。通過這些信息，相關(guān)公司可以有針對(duì)性地制定廣告策略、營銷方式和產(chǎn)品結(jié)構(gòu)等，在較少資源投入情況下獲得較好的效果。因此，與傳統(tǒng)的廣告投播系統(tǒng)相比，本發(fā)明通過自動(dòng)圖像識(shí)別廣告播放過程中人物的信息反饋，可以增加廣告投播的準(zhǔn)確度和效率，具體體現(xiàn)在以下幾點(diǎn)(I)通過統(tǒng)計(jì)經(jīng)過廣告終端前經(jīng)過的人數(shù)，可以及時(shí)地獲得廣告受眾數(shù)據(jù)；(2)通過觀眾在廣告終端前的停留觀看與否以及觀看廣告時(shí)的表情，可以分析出潛在客戶對(duì)廣告的感興趣程度以及稱為真正客戶的可能性，便于廣告商品提供商可以在商 品未進(jìn)入市場(chǎng)前進(jìn)行預(yù)測(cè)分析；(3)通過分析與統(tǒng)計(jì)感興趣人群結(jié)構(gòu)(比如大人、小孩還是老人、男女等)，可以較快速的定位主要消費(fèi)群體。


下面結(jié)合附圖與具體實(shí)施方式
對(duì)本發(fā)明作進(jìn)一步詳細(xì)的說明圖I是本發(fā)明的系統(tǒng)組成示意圖，其中，100是廣告展示平臺(tái)、101是圖像采集系統(tǒng)、102是數(shù)據(jù)分析處理模塊、103是對(duì)關(guān)注該廣告的觀眾、104是路過的觀眾；圖2是本發(fā)明的實(shí)現(xiàn)流程圖。
具體實(shí)施例方式本發(fā)明的基于圖像識(shí)別的廣告投播系統(tǒng)，如圖I所示，包括廣告展示平臺(tái)100，用于廣告的展示；其中，廣告展示平臺(tái)100，包括電視機(jī)、廣告投播LED/LCD顯示屏、個(gè)人電腦、廣告宣傳海報(bào)等；圖像采集系統(tǒng)101，用于對(duì)人物(不同關(guān)注廣告程度的人物)圖像的采集，并能將采集的圖像經(jīng)分析與處理后，得到的圖像數(shù)據(jù)傳送到網(wǎng)絡(luò)；其中，圖像采集系統(tǒng)101，包括一般可見光攝像頭、紅外攝像頭、熱成像攝像頭等；該圖像采集系統(tǒng)101可以是一個(gè)，也可以是多個(gè)；另外，該圖像采集系統(tǒng)101，還可包含能檢測(cè)深度信息的攝像頭，其中，深度信息就是指成像物體離攝像頭的遠(yuǎn)近，這里主要是相對(duì)于通常的攝像頭而言的，通常攝像頭只能拍攝到平面的信息，比如，通用攝像頭拍攝到的一群人，從平面的角度看到這些人，只能通過其它非直觀方法分析那個(gè)站的靠攝像頭的前面，那個(gè)站在后面(通過人物的成像的大小或通過遮擋的方式判斷)，而具有深度檢測(cè)的攝像頭可以通過亮度直接說明物體離攝像頭的遠(yuǎn)近，如，離攝像頭月遠(yuǎn)，成像越暗，反之，成像越亮；而關(guān)于網(wǎng)絡(luò)，可以采用有線或無線的方式；數(shù)據(jù)分析處理模塊102，用于對(duì)采集的圖像進(jìn)行分析與處理，以及將網(wǎng)絡(luò)內(nèi)的圖像采集系統(tǒng)101的數(shù)據(jù)進(jìn)行匯總和整體分析，得到用戶需要的指標(biāo)數(shù)據(jù)。其中，對(duì)于數(shù)據(jù)進(jìn)行匯總和整體分析的內(nèi)容包含對(duì)廣告產(chǎn)品感興趣的群體人數(shù)、潛在客戶的人數(shù)、對(duì)產(chǎn)品感興趣的人群類型、區(qū)域產(chǎn)品推廣可能的銷量等。
另外，本發(fā)明的廣告投播系統(tǒng)還可包括關(guān)注廣告的觀眾103、路過的觀眾104。本發(fā)明的基于圖像識(shí)別的廣告投播系統(tǒng)中，對(duì)于圖像的分析與處理，可以在圖像采集系統(tǒng)101處理，也可以在數(shù)據(jù)分析處理模塊102處理。其中，圖像處理內(nèi)容包含人臉表情識(shí)別、人物性別分析識(shí)別、人物大概年齡段分析識(shí)別、人物站立與行走姿態(tài)識(shí)別、多個(gè)人物目標(biāo)識(shí)別等。因而，與傳統(tǒng)的廣告投播系統(tǒng)相比，本發(fā)明主要是多了一個(gè)圖像采集與分析機(jī)制，可以自動(dòng)的分析廣告投播的效果和信息的收集與分析，即觀眾在廣告系統(tǒng)前觀看廣告展示平臺(tái)展示得廣告，觀眾的影像被數(shù)據(jù)采集系統(tǒng)采集到以后，經(jīng)過初步的圖像處理(比如圖像濾波處理、壓縮等)，將圖像信息通過網(wǎng)絡(luò)匯總到數(shù)據(jù)分析處理模塊，進(jìn)行包括人體姿態(tài)、人臉表情、性別、年齡以及廣告受眾統(tǒng)計(jì)等相關(guān)的分析與處理。因此，對(duì)于本發(fā)明的廣告投播系統(tǒng)，其實(shí)現(xiàn)方法，包括步驟
(I)通過在廣告展示平臺(tái)100加入圖像采集系統(tǒng)101，實(shí)時(shí)采集廣告觀眾對(duì)廣告的關(guān)注程度；(2)結(jié)合人臉表情識(shí)別，圖像采集系統(tǒng)101或數(shù)據(jù)分析處理模塊102自動(dòng)分析廣告受眾對(duì)廣告的反饋；(3)結(jié)合人體特征分析識(shí)別，數(shù)據(jù)分析處理模塊102自動(dòng)分析和預(yù)估客戶群體的年齡結(jié)構(gòu)和性別，為廣告后續(xù)投播提供參考。其中，上述方法的具體實(shí)現(xiàn)步驟，如圖2所示，包括(I)圖像采集系統(tǒng)101進(jìn)行圖像采集，通過廣告展示平臺(tái)100周邊的圖像采集系統(tǒng)101拍攝正對(duì)廣告展示平臺(tái)100的一定區(qū)域的圖像；(2)分析識(shí)別是否有新的觀眾(人)進(jìn)入該圖像采集區(qū)域或有觀眾從圖像采集區(qū)域離去，如果沒有，分析圖像區(qū)域是否有觀眾存在，如果沒有，回到步驟(I)；如果是有觀眾進(jìn)入圖像采集區(qū)域，執(zhí)行步驟(3)，如果有觀眾從該區(qū)域離去，執(zhí)行步驟(5)；(3)分析新進(jìn)來觀眾的特征并為該觀眾建立一個(gè)ID號(hào)，為后面的分析提供參考；(4)根據(jù)上面建立的ID，在圖像采集范圍內(nèi)跟蹤該觀眾的具體動(dòng)作，分析該觀眾的年齡、性別，識(shí)別該觀眾的臉部表情，統(tǒng)計(jì)該觀眾觀看廣告的時(shí)間等；(5)如果檢測(cè)到觀眾從圖像采集區(qū)域內(nèi)離去，系統(tǒng)記錄離去人的ID號(hào)，做后續(xù)分析；(6)查找對(duì)應(yīng)ID號(hào)的觀眾過程中是否關(guān)注過廣告信息，如果沒有關(guān)注，僅僅是從廣告系統(tǒng)前的圖像采集區(qū)經(jīng)過，將該ID統(tǒng)計(jì)進(jìn)入潛在廣告受眾；如果關(guān)注過該廣告，獲取對(duì)應(yīng)ID觀眾的表情信息，分析是否對(duì)該廣告有興趣；(7)累計(jì)對(duì)該廣告有興趣的人數(shù)，并通過身體特征分析對(duì)廣告感興趣的人的年齡結(jié)構(gòu)和性別等。對(duì)于上述方法的具體步驟，詳細(xì)說明如下I)首先，是人體總體姿態(tài)的識(shí)別和分析當(dāng)一個(gè)人進(jìn)入圖像采集區(qū)域后，系統(tǒng)會(huì)根據(jù)人體大致的特征為這個(gè)人建立一個(gè)ID號(hào)。這個(gè)大致特征包含有人體的身高、胖瘦、穿著的式樣和顏色、頭發(fā)的長短、顏色和發(fā)型、皮膚的顏色等(這里不會(huì)涉及到人臉設(shè)別，因?yàn)橛邢喈?dāng)一部分人可能不會(huì)看廣告，系統(tǒng)無法得到正面的人臉信息)。身高、胖瘦和頭發(fā)長短的檢測(cè)方法較多，這里舉兩個(gè)例子a、通過具有深度檢測(cè)功能的攝像頭或多攝像圖協(xié)同工作(可以測(cè)試出人物的具體遠(yuǎn)近)獲得遠(yuǎn)近信息，結(jié)合人體的平面成像的高矮胖瘦尺寸，計(jì)算出實(shí)際人物的身高信息；b、通過在圖像采集區(qū)域設(shè)置一定的參考圖標(biāo)(比如，在地面上畫上類似斑馬線的條紋，根據(jù)觀眾站立在第幾根條紋上來判斷離廣告屏的距離)，分析觀眾離廣告屏的遠(yuǎn)近，再計(jì)算實(shí)際人物的高矮胖瘦。衣服、頭發(fā)和皮膚顏色直接根據(jù)攝像頭成像顏色進(jìn)行分析，考慮到這些信息僅僅是用來區(qū)別在圖像采集區(qū)域內(nèi)的人，只用看不同人的顏色對(duì)比即可，對(duì)系統(tǒng)環(huán)境光源要求不會(huì)太苛刻。衣服的式樣以及頭發(fā)發(fā)型等會(huì)在建立觀眾ID號(hào)前采集一定的樣本，在建立ID號(hào)時(shí)將樣本與ID號(hào)對(duì)應(yīng)，后續(xù)跟蹤人物時(shí)提供參考(為了提高人物跟蹤的準(zhǔn)確性，跟蹤過程中，當(dāng)人物的面向發(fā)生變化時(shí)，再去更新對(duì)應(yīng)ID號(hào)的樣本庫)。
2)其次，是人體的表情分析獲得了每個(gè)在圖像采集區(qū)域的人物ID號(hào)后，當(dāng)有人開始注視廣告屏幕時(shí)，圖像采集系統(tǒng)101可以采集到人物的臉部圖片，這時(shí)，為了判斷用戶對(duì)廣告的感興趣程度，需要對(duì)人物的表情進(jìn)行表情識(shí)別。表情識(shí)別的原理比較簡單，主要是根據(jù)嘴巴、眼睛、眉毛以及臉頰的特征變化來分析人物情緒的變化。目前已經(jīng)有較多機(jī)構(gòu)開發(fā)出了人臉相關(guān)的表情識(shí)別方法，普遍的做法是通過人臉表情的類庫比對(duì)分析，獲得人臉表情屬于哪一類表情的權(quán)重。在本系統(tǒng)中，將根據(jù)這些權(quán)重和情緒樣本庫中關(guān)于表情的分類進(jìn)行二次統(tǒng)計(jì)，總結(jié)出以下三種結(jié)果有趣地關(guān)注、無特別表情、覺得無聊而反感。比如聞興的微笑、驚奇、好奇等表情權(quán)重占較大比例(超過其他的表情)時(shí)，統(tǒng)計(jì)為該觀眾正在有趣的關(guān)注。3)最后，是人物的年齡判斷和性別判斷。這種判斷的依據(jù)類似于人臉識(shí)別，主要是通過人體的綜合特征庫進(jìn)行分析。比如性別識(shí)別需要通過采集人臉特征、頭發(fā)的長度和發(fā)型、衣服、鞋子的式樣和顏色等綜合判斷得出相應(yīng)的結(jié)果。年齡的判斷比較困難，主要也是通過人臉特征、頭發(fā)的發(fā)型、衣服、鞋子的式樣和顏色等綜合判斷，為了提高判斷的準(zhǔn)確率，這里還需要結(jié)合人物的動(dòng)作來輔助判斷。通過以上判斷，進(jìn)行統(tǒng)計(jì)和歸類，可以使廣告的受眾信息快速的傳遞給廣告商和做廣告的產(chǎn)品供應(yīng)商，可以比較準(zhǔn)確的分析出廣告的效果以及廣告投入的價(jià)值，便于相關(guān)人員可以及時(shí)調(diào)整廣告策略，對(duì)產(chǎn)品的推廣具有較大的推動(dòng)作用。
權(quán)利要求
1.一種基于圖像識(shí)別的廣告投播系統(tǒng)，其特征在于包括 廣告展示平臺(tái)，用于廣告的展示； 圖像采集系統(tǒng)，用于對(duì)人物圖像的采集，并能將采集的圖像經(jīng)分析與處理后，得到的圖像數(shù)據(jù)傳送到網(wǎng)絡(luò)； 數(shù)據(jù)分析處理模塊，用于對(duì)采集的圖像進(jìn)行分析與處理，以及將網(wǎng)絡(luò)內(nèi)的圖像采集系統(tǒng)的數(shù)據(jù)進(jìn)行匯總和整體分析，得到用戶需要的指標(biāo)數(shù)據(jù)。
2.如權(quán)利要求I所述的系統(tǒng)，其特征在于所述廣告投播系統(tǒng)，還包括關(guān)注廣告的觀眾、路過的觀眾。
3.如權(quán)利要求I所述的系統(tǒng)，其特征在于所述廣告展示平臺(tái)，包括電視機(jī)、廣告投播LED/IXD顯示屏、個(gè)人電腦、廣告宣傳海報(bào)。
4.如權(quán)利要求I所述的系統(tǒng)，其特征在于所述圖像采集系統(tǒng)，包括可見光攝像頭、紅外攝像頭、熱成像攝像頭； 其中，該圖像采集系統(tǒng)為一個(gè)或多個(gè)。
5.如權(quán)利要求4所述的系統(tǒng)，其特征在于所述圖像采集系統(tǒng)還可包含能檢測(cè)深度信息的攝像頭。
6.如權(quán)利要求I所述的系統(tǒng)，其特征在于所述圖像采集系統(tǒng)中，網(wǎng)絡(luò)為有線或無線的方式。
7.如權(quán)利要求I所述的系統(tǒng)，其特征在于所述圖像采集系統(tǒng)或數(shù)據(jù)分析處理模塊中，圖像處理內(nèi)容包含人臉表情識(shí)別、人物性別分析識(shí)別、人物大概年齡段分析識(shí)別、人物站立與行走姿態(tài)識(shí)別、多個(gè)人物目標(biāo)識(shí)別。
8.如權(quán)利要求I所述的系統(tǒng)，其特征在于所述數(shù)據(jù)分析處理模塊中，數(shù)據(jù)分析的內(nèi)容包含對(duì)廣告產(chǎn)品感興趣的群體人數(shù)、潛在客戶的人數(shù)、對(duì)產(chǎn)品感興趣的人群類型、區(qū)域產(chǎn)品推廣可能的銷量。
9.如權(quán)利要求I所述的基于圖像識(shí)別的廣告投播系統(tǒng)的實(shí)現(xiàn)方法，包括步驟 (1)通過在廣告展示平臺(tái)加入圖像采集系統(tǒng)，實(shí)時(shí)采集廣告觀眾對(duì)廣告的關(guān)注程度； (2)結(jié)合人臉表情識(shí)別，圖像采集系統(tǒng)或數(shù)據(jù)分析處理模塊自動(dòng)分析廣告觀眾對(duì)廣告的反饋； (3)結(jié)合人體特征分析識(shí)別，數(shù)據(jù)分析處理模塊自動(dòng)分析和預(yù)估客戶群體的年齡結(jié)構(gòu)和性別，為廣告后續(xù)投播提供參考。
10.如權(quán)利要求9所述的方法，其特征在于所述方法的具體步驟，包括 (1)圖像采集系統(tǒng)進(jìn)行圖像采集，通過廣告展示平臺(tái)周邊的圖像采集系統(tǒng)拍攝正對(duì)廣告展示平臺(tái)的一定區(qū)域的圖像； (2)分析識(shí)別是否有新的觀眾進(jìn)入該圖像采集區(qū)域或有觀眾從圖像采集區(qū)域離去，如果沒有，分析圖像區(qū)域是否有觀眾存在，如果沒有，回到步驟(I); 如果是有觀眾進(jìn)入圖像采集區(qū)域，執(zhí)行步驟(3)，如果有觀眾從該區(qū)域離去，執(zhí)行步驟(5)； (3)分析新進(jìn)來觀眾的特征并為該觀眾建立一個(gè)ID號(hào)，為后面的分析提供參考； (4)根據(jù)上面建立的ID，在圖像采集范圍內(nèi)跟蹤該觀眾的具體動(dòng)作，分析該觀眾的年齡、性別，識(shí)別該觀眾的臉部表情，統(tǒng)計(jì)該觀眾觀看廣告的時(shí)間；(5)如果檢測(cè)到觀眾從圖像采集區(qū)域內(nèi)離去，系統(tǒng)記錄離去人的ID號(hào)，做后續(xù)分析； (6)查找對(duì)應(yīng)ID號(hào)的觀眾過程中是否關(guān)注過廣告信息，如果沒有關(guān)注，僅僅是從廣告系統(tǒng)前的圖像采集區(qū)經(jīng)過，將該ID統(tǒng)計(jì)進(jìn)入潛在廣告受眾；如果關(guān)注過該廣告，獲取對(duì)應(yīng)ID觀眾的表情信息，分析是否對(duì)該廣告有興趣； (7)累計(jì)對(duì)該廣告有興趣的人數(shù)，并通過身體特征分析對(duì)廣告感興趣的人的年齡結(jié)構(gòu)和性別。
全文摘要
本發(fā)明公開了一種基于圖像識(shí)別的廣告投播系統(tǒng)及方法，該系統(tǒng)包括廣告展示平臺(tái)、圖像采集系統(tǒng)、數(shù)據(jù)分析處理模塊；其實(shí)現(xiàn)方法，包括通過在廣告展示平臺(tái)加入圖像采集系統(tǒng)，實(shí)時(shí)采集廣告觀眾對(duì)廣告的關(guān)注程度，并結(jié)合人臉表情識(shí)別，自動(dòng)分析廣告受眾對(duì)廣告的反饋，以及結(jié)合人體特征分析識(shí)別，自動(dòng)分析和預(yù)估客戶群體的年齡結(jié)構(gòu)和性別，為廣告后續(xù)投播提供參考。本發(fā)明能及時(shí)地獲得廣告觀眾數(shù)據(jù)，并能快速的傳遞給廣告商和做廣告的產(chǎn)品供應(yīng)商，可以比較準(zhǔn)確的分析出廣告的效果以及廣告投入的價(jià)值，便于相關(guān)人員可以及時(shí)調(diào)整廣告策略，對(duì)產(chǎn)品的推廣具有較大的推動(dòng)作用。
文檔編號(hào)G09F27/00GK102881239SQ20111019943
公開日2013年1月16日 申請(qǐng)日期2011年7月15日 優(yōu)先權(quán)日2011年7月15日
發(fā)明者喻應(yīng)東 申請(qǐng)人:鼎億數(shù)碼科技(上海)有限公司, 鼎億公司