智能電視留信系統(tǒng)和方法
【專利摘要】一種智能電視留信系統(tǒng)，包括：圖像采集模塊，用于采集外部圖像；語音采集模塊，用于采集外部語音；手勢識別模塊，用于識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式；語音識別模塊，用于識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾；人臉識別模塊，用于識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾；播放控制模塊，用于根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。還提供一種智能電視留信方法。本發(fā)明可以實現(xiàn)電視的視頻留信功能。
【專利說明】智能電視留信系統(tǒng)和方法

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像識別及電視機控制領(lǐng)域，特別是涉及一種智能電視留信系統(tǒng)和方法。

【背景技術(shù)】
[0002]電視作為一種大眾化的休閑家電產(chǎn)品早已普及進入千家萬戶，隨著經(jīng)濟發(fā)展與社會進步，特別是有線電視、數(shù)字電視技術(shù)的應(yīng)用與推廣，智能電視已經(jīng)成為新一代電視的代名詞。
[0003]我們外出離開家時，一般給家人留信都是寫紙條或者發(fā)信息，比較費時費力，特別是父母早晨上班前想給3歲的小孩告別，孩子還在睡覺，這時就不便吵醒孩子，于是會想到利用電視等電子產(chǎn)品實現(xiàn)留信。然而，現(xiàn)有智能電視應(yīng)用還局限在收看廣播電視、與用戶進行簡單交互等方面，不能利用電視結(jié)合人臉識別、手勢識別、語音識別等識別技術(shù)進行視頻留信功能，從而限制了智能電視的功能。


【發(fā)明內(nèi)容】

[0004]基于此，有必要提供一種可以實現(xiàn)視頻留信功能的智能電視留信系統(tǒng)和方法。
[0005]一種智能電視留信系統(tǒng)，包括:
[0006]圖像采集模塊，用于采集外部圖像，所述外部圖像包括用戶手勢和人臉；
[0007]聲音采集模塊，用于采集用戶語音；
[0008]手勢識別模塊，用于識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式；其中，啟動留信模式為啟動語音識別模塊的語音識別模式、啟動所述圖像采集模塊的錄像模式和所述語音采集模塊的錄音模式進行留信；關(guān)閉留信模式為關(guān)閉圖像采集模塊的錄像模式和語音采集模塊的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中；
[0009]語音識別模塊，用于識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾；
[0010]人臉識別模塊，用于識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾；
[0011]播放控制模塊，用于根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
[0012]在其中一個實施例中，所述語音識別模塊包括:
[0013]第一檢測單元，用于檢測是否存在與所述留信對象對應(yīng)的預(yù)存留信文件夾，若是，則獲取留信對象對應(yīng)的預(yù)存留信文件夾。
[0014]在其中一個實施例中，所述播放控制模塊包括:
[0015]第二檢測單元，用于檢測存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻是否被標(biāo)定，若否，播放存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻；
[0016]標(biāo)定單元，用于對播放后的留信視頻進行標(biāo)定。
[0017]在其中一個實施例中，還包括排序模塊，用于將存儲在同一個預(yù)存留信文件夾里的留信視頻按存儲時間的先后順序進行排序，所述播放控制模塊根據(jù)排序結(jié)果依次播放留?目視頻。
[0018]在其中一個實施例中，所述播放控制模塊還用于在播放留信視頻后啟動所述圖像采集模塊與所述語音采集模塊對外部圖像和語音進行采集，并將采集的圖像和語音作為反饋視頻存儲在留信者對應(yīng)的預(yù)存留信文件夾中。
[0019]一種智能電視留信方法，包括:
[0020]采集外部圖像和用戶語音，所述外部圖像包括用戶手勢和人臉；
[0021]識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式；其中，啟動留信模式為啟動語音識別模塊的語音識別模式、啟動所述圖像采集模塊的錄像模式和所述語音采集模塊的錄音模式進行留信；關(guān)閉留信模式為關(guān)閉圖像采集模塊的錄像模式和語音采集模塊的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中；
[0022]識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾；
[0023]識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾；
[0024]根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
[0025]在其中一個實施例中，所述獲取留信對象對應(yīng)的預(yù)存留信文件夾的步驟具體為:
[0026]檢測是否存在與所述留信對象對應(yīng)的預(yù)存留信文件夾，若是，則獲取留信對象對應(yīng)的預(yù)存留信文件夾。
[0027]在其中一個實施例中，根據(jù)所述對應(yīng)的預(yù)存留信文件夾播放留信視頻的步驟具體包括:
[0028]檢測存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻是否被標(biāo)定，若否，播放存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻；
[0029]標(biāo)定單元，用于對播放后的留信視頻進行標(biāo)定。
[0030]在其中一個實施例中，還包括將存儲在同一個預(yù)存留信文件夾里的留信視頻按存儲時間的先后順序進彳丁排序的步驟。
[0031]在其中一個實施例中，根據(jù)所述對應(yīng)的預(yù)存留信文件夾播放留信視頻的步驟后還包括:
[0032]對外部圖像和語音進行采集，并將采集的圖像和語音作為反饋視頻存儲在留信者對應(yīng)的預(yù)存留信文件夾中；
[0033]識別人臉并根據(jù)人臉識別結(jié)果輸出留信者對應(yīng)的預(yù)存文件夾；
[0034]根據(jù)留信者對應(yīng)的預(yù)存文件夾播放反饋視頻。
[0035]上述智能電視留信系統(tǒng)和方法通過識別用戶手勢的方式啟動留信模式以進行留信，通過語音識別模塊識別用戶語音并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾；留信之后再通過人臉識別的方式控制留信視頻的播放，這樣充分結(jié)合了人臉識別、手勢識別、語音識別等識別技術(shù)進行視頻留信功能，進一步擴展了智能電視的功能。

【專利附圖】

【附圖說明】
[0036]圖1為一實施例中智能電視留信系統(tǒng)框架圖；
[0037]圖2為一實施例中智能電視留信方法流程圖。

【具體實施方式】
[0038]請參考圖1，為一實施例中智能電視留信系統(tǒng)框架圖。
[0039]該智能電視留信系統(tǒng)包括圖像采集模塊110、手勢識別模塊120、語音采集模塊130、語音識別模塊140、人臉識別模塊150以及播放控制模塊160。
[0040]圖像采集模塊110外接一個專用的攝像頭，用于采集外部圖像，所述外部圖像包括用戶手勢或人臉。圖像采集模塊110可以設(shè)置為錄像模式進行錄像。
[0041]比如，媽媽早上要去上班，5歲寶寶還沒有起床，寶寶起床后不見媽媽，心情就會不好。那么，媽媽就可以在上班之前通過該智能電視留信系統(tǒng)給寶寶留信。媽媽只需在攝像頭可視的范圍內(nèi)做一個開啟語音識別模式的手勢即可。
[0042]手勢識別模塊120用于識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式。其中，啟動留信模式為啟動語音識別模塊140的語音識別模式、啟動圖像采集模塊110的錄像模式和語音采集模塊130的錄音模式進行留信。關(guān)閉留信模式為關(guān)閉圖像采集模塊110的錄像模式和語音采集模塊130的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中。
[0043]如果用戶做出啟動留信模式的手勢，手勢識別模塊120將該手勢與預(yù)設(shè)手勢模版進行對比，輸出手勢識別結(jié)果為啟動留信模式。
[0044]在本實施例中，預(yù)設(shè)手勢模版可以自定義設(shè)置。
[0045]留信模式啟動以后，就會自動開啟語音識別模塊140的語音識別模式。語音識別模塊140用于識別用戶輸入的語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾。比如，媽媽在攝像頭可視的范圍內(nèi)，人臉識別模塊150就會自動識別出媽媽。媽媽做出一個啟動留信模式的手勢之后，說:“寶寶。”這時，語音識別模塊140會識別媽媽的語音，并根據(jù)語音識別結(jié)果找到寶寶的信箱，然后再啟動圖像采集模塊110的錄像模式及語音采集模塊130的錄音模式進行留信。這樣，媽媽就可以將給寶寶說的話通過錄像的方式錄下來。
[0046]完成錄像之后，媽媽再次對著攝像頭做出一個關(guān)閉留信模式的手勢，根據(jù)手勢識別結(jié)果結(jié)束錄像，并將留信視頻存儲到該預(yù)存留信文件夾中。
[0047]可以理解，在其他實施例中，媽媽還可以離開攝像頭可視范圍表示留信結(jié)束以關(guān)閉留信模式。
[0048]進一步地，用戶還可以做出其他不同手勢，使得所述手勢識別結(jié)果為開機、關(guān)機等。
[0049]可以理解，在其他實施例中，媽媽還可以通過電視之外的其他智能終端(如手機、電腦等)進行留信，并將留信內(nèi)容發(fā)送到留信對象對應(yīng)的預(yù)存留信文件夾中。
[0050]在本實施例中，語音識別模塊140包括第一檢測單元，用于檢測是否存在與所述留信對象對應(yīng)的預(yù)存留信文件夾，若是，則獲取留信對象對應(yīng)的預(yù)存留信文件夾。
[0051]比如，寶寶被送去姥姥家暫住兩天，早上姥姥起床去買菜，怕寶寶醒來后不見姥姥會不開心，于是姥姥通過智能電視留信的方式給寶寶留信。但由于姥姥家的電視沒有注冊寶寶的信息，這時所述第一檢測單元就無法檢測到與寶寶對應(yīng)的預(yù)存留信文件夾，即無法通過智能電視給寶寶留信。這種情況，會提示用戶先注冊一個留信文件夾作為預(yù)存留信文件夾。
[0052]人臉識別模塊150用于識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾。
[0053]比如，早上媽媽給寶寶留信后去上班了，寶寶起床后到處找媽媽，當(dāng)寶寶進入攝像頭的可視范圍內(nèi)后，人臉識別模塊150便會識別出這是寶寶，于是輸出寶寶對應(yīng)的預(yù)存留信文件夾。
[0054]在本實施例中，人臉識別模塊150包括第二檢測單元和標(biāo)定單元。其中，所述第二檢測單元用于檢測存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻是否被標(biāo)定，若否，播放存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻。所述標(biāo)定單元用于對播放后的留信視頻進行標(biāo)定。
[0055]一般情況下，只有在留信對象第一次出現(xiàn)在攝像頭的可視范圍內(nèi)，留信視頻才會進行自動播放。當(dāng)留信視頻播放完之后，所述標(biāo)定單元便會對留信視頻進行標(biāo)定。如果媽媽或?qū)殞毾脒^一段時間再看，需要其他操作流程，才會播放。
[0056]播放控制模塊160用于根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
[0057]在其他實施例中，還包括排序模塊。所述排序模塊用于將存儲在同一個預(yù)存留信文件夾里的留信視頻按存儲時間的先后順序進行排序，播放控制模塊150根據(jù)排序結(jié)果依次播放留信視頻。
[0058]比如，媽媽在完成第一次錄像之后，突然記起還有其他事情要跟寶寶交待，于是進行第二次留信?；蛘甙职殖霾罨蛏习嘀耙步o寶寶留信了，那么寶寶對應(yīng)的預(yù)存留信文件夾里可能就會有多個留信視頻，這時所述排序模塊便會將存儲在寶寶對應(yīng)的預(yù)存留信文件夾里的所有留信視頻按存儲時間的先后順序進行排序。
[0059]進一步地，播放控制模塊160還用于在開始播放留信視頻后啟動圖像采集模塊110與語音采集模塊130對外部圖像和語音進行采集，并將采集的圖像和語音作為反饋視頻存儲在留信者對應(yīng)的預(yù)存留信文件夾中。
[0060]具體地，人臉識別模塊150在識別到是寶寶后，播放控制模塊160就會播放媽媽給寶寶錄的留信視頻。這時，播放控制模塊160會啟動圖像采集模塊110與語音采集模塊130將寶寶的表情、動作、語音等錄下來作為反饋視頻存儲在媽媽對應(yīng)的預(yù)存留信文件夾中。這樣，當(dāng)媽媽回來之后，人臉識別模塊150識別出媽媽的人臉之后，播放控制模塊160便會自動播放所述反饋視頻。
[0061]還提供一種智能電視留信方法，包括:
[0062]采集外部圖像和用戶語音，所述外部圖像包括用戶手勢和人臉；
[0063]識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式；其中，啟動留信模式為啟動語音識別模塊的語音識別模式、啟動所述圖像采集模塊的錄像模式和所述語音采集模塊的錄音模式進行留信；關(guān)閉留信模式為關(guān)閉圖像采集模塊的錄像模式和語音采集模塊的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中；
[0064]識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾；
[0065]識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾；
[0066]根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
[0067]請參考圖2，為一實施例中智能電視留信方法流程圖。
[0068]該智能電視留信方法包括:
[0069]步驟SllO:采集用戶手勢、人臉和語音。
[0070]步驟S120:識別用戶手勢，并根據(jù)手勢識別結(jié)果啟動留信模式。
[0071]其中，啟動留信模式為啟動語音識別模式、啟動錄像模式和錄音模式進行留信。即留信模式啟動后，會自動識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾。
[0072]在本實施例中，所述獲取留信對象對應(yīng)的預(yù)存留信文件夾的步驟具體為:
[0073]檢測是否存在與所述留信對象對應(yīng)的預(yù)存留信文件夾，若是，則獲取留信對象對應(yīng)的預(yù)存留信文件夾。
[0074]步驟S130:識別用戶手勢，并根據(jù)手勢識別結(jié)果關(guān)閉留信模式。
[0075]其中，關(guān)閉留信模式為關(guān)閉圖像采集模塊的錄像模式和語音采集模塊的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中
[0076]步驟S140:采集用戶人臉；
[0077]步驟S150:識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾。
[0078]步驟S160:根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
[0079]在本實施例中，步驟S160具體包括:
[0080]檢測存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻是否被標(biāo)定，若否，播放存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻；
[0081]標(biāo)定單元，用于對播放后的留信視頻進行標(biāo)定。
[0082]在其他實施例中，還包括將存儲在同一個預(yù)存留信文件夾里的留信視頻按存儲時間的先后順序進彳丁排序的步驟。
[0083]進一步地，步驟S160之后包括:
[0084]對外部圖像和語音進行采集，并將采集的圖像和語音作為反饋視頻存儲在留信者對應(yīng)的預(yù)存留信文件夾中；
[0085]識別人臉并根據(jù)人臉識別結(jié)果輸出留信者對應(yīng)的預(yù)存文件夾；
[0086]根據(jù)留信者對應(yīng)的預(yù)存文件夾播放反饋視頻。
[0087]上述智能電視留信系統(tǒng)和方法通過識別用戶手勢的方式啟動留信模式以進行留信，通過語音識別模塊識別用戶語音并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾；留信之后再通過人臉識別的方式控制留信視頻的播放，這樣充分結(jié)合了人臉識別、手勢識別、語音識別等識別技術(shù)進行視頻留信功能，進一步擴展了智能電視的功能。
[0088]以上所述實施例僅表達(dá)了本發(fā)明的幾種實施方式，其描述較為具體和詳細(xì)，但并不能因此而理解為對本發(fā)明專利范圍的限制。應(yīng)當(dāng)指出的是，對于本領(lǐng)域的普通技術(shù)人員來說，在不脫離本發(fā)明構(gòu)思的前提下，還可以做出若干變形和改進，這些都屬于本發(fā)明的保護范圍。因此，本發(fā)明專利的保護范圍應(yīng)以所附權(quán)利要求為準(zhǔn)。
【權(quán)利要求】
1.一種智能電視留信系統(tǒng)，其特征在于，包括: 圖像采集模塊，用于采集外部圖像，所述外部圖像包括用戶手勢和人臉； 語音采集模塊，用于采集用戶語音； 手勢識別模塊，用于識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式；其中，啟動留信模式為啟動語音識別模塊的語音識別模式、啟動所述圖像采集模塊的錄像模式和所述語音采集模塊的錄音模式進行留信；關(guān)閉留信模式為關(guān)閉圖像采集模塊的錄像模式和語音采集模塊的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中； 語音識別模塊，用于識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾； 人臉識別模塊，用于識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾； 播放控制模塊，用于根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
2.根據(jù)權(quán)利要求1所述的智能電視留信系統(tǒng)，其特征在于，所述語音識別模塊包括: 第一檢測單元，用于檢測是否存在與所述留信對象對應(yīng)的預(yù)存留信文件夾，若是，則獲取留信對象對應(yīng)的預(yù)存留信文件夾。
3.根據(jù)權(quán)利要求1所述的智能電視留信系統(tǒng)，其特征在于，所述播放控制模塊包括: 第二檢測單元，用于檢測存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻是否被標(biāo)定，若否，播放存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻； 標(biāo)定單元，用于對播放后的留信視頻進行標(biāo)定。
4.根據(jù)權(quán)利要求1所述的智能電視留信系統(tǒng)，其特征在于，還包括排序模塊，用于將存儲在同一個預(yù)存留信文件夾里的留信視頻按存儲時間的先后順序進行排序，所述播放控制模塊根據(jù)排序結(jié)果依次播放留信視頻。
5.根據(jù)權(quán)利要求1所述的智能電視留信系統(tǒng)，其特征在于，所述播放控制模塊還用于在開始播放留信視頻后啟動所述圖像采集模塊與所述語音采集模塊對外部圖像和語音進行采集，并將采集的圖像和語音作為反饋視頻存儲在留信者對應(yīng)的預(yù)存留信文件夾中。
6.一種智能電視留信方法，其特征在于，包括: 采集外部圖像和用戶語音，所述外部圖像包括用戶手勢和人臉； 識別用戶手勢并輸出手勢識別結(jié)果，所述手勢識別結(jié)果為啟動留信模式或關(guān)閉留信模式；其中，啟動留信模式為啟動語音識別模塊的語音識別模式、啟動所述圖像采集模塊的錄像模式和所述語音采集模塊的錄音模式進行留信；關(guān)閉留信模式為關(guān)閉圖像采集模塊的錄像模式和語音采集模塊的錄音模式以及將留信視頻存儲在留信對象對應(yīng)的預(yù)存留信文件夾中； 識別用戶語音，并根據(jù)語音識別結(jié)果獲取留信對象對應(yīng)的預(yù)存留信文件夾； 識別人臉并根據(jù)人臉識別結(jié)果輸出對應(yīng)的預(yù)存留信文件夾； 根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻。
7.根據(jù)權(quán)利要求6所述的智能電視留信方法，其特征在于，所述獲取留信對象對應(yīng)的預(yù)存留信文件夾的步驟具體為: 檢測是否存在與所述留信對象對應(yīng)的預(yù)存留信文件夾，若是，則獲取留信對象對應(yīng)的預(yù)存留信文件夾。
8.根據(jù)權(quán)利要求6所述的智能電視留信方法，其特征在于，根據(jù)所述對應(yīng)的預(yù)存留信文件夾播放留信視頻的步驟具體包括: 檢測存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻是否被標(biāo)定，若否，播放存儲在所述對應(yīng)的預(yù)存留信文件夾中的留信視頻； 標(biāo)定單元，用于對播放后的留信視頻進行標(biāo)定。
9.根據(jù)權(quán)利要求8所述的智能電視留信方法，其特征在于，還包括將存儲在同一個預(yù)存留信文件夾里的留信視頻按存儲時間的先后順序進行排序的步驟。
10.根據(jù)權(quán)利要求6所述的智能電視留信方法，其特征在于，根據(jù)所述對應(yīng)的預(yù)存留信文件夾開始播放留信視頻的步驟后還包括: 對外部圖像和語音進行采集，并將采集的圖像和語音作為反饋視頻存儲在留信者對應(yīng)的預(yù)存留信文件夾中； 識別人臉并根據(jù)人臉識別結(jié)果輸出留信者對應(yīng)的預(yù)存文件夾； 根據(jù)留信者對應(yīng)的預(yù)存文件夾播放反饋視頻。
【文檔編號】H04N21/41GK104519385SQ201410757947
【公開日】2015年4月15日 申請日期:2014年12月10日 優(yōu)先權(quán)日:2014年12月10日
【發(fā)明者】劉國華 申請人:深圳市國華識別科技開發(fā)有限公司