用于提供內(nèi)容的方法和電子設(shè)備的制造方法
【專利摘要】提供一種用于提供內(nèi)容的方法和電子設(shè)備。該電子設(shè)備包括：語(yǔ)音輸入模塊，其被配置為接收語(yǔ)音輸入；音頻輸出模塊；顯示器；存儲(chǔ)器，其被配置為存儲(chǔ)響應(yīng)于該語(yǔ)音輸入而提供內(nèi)容的語(yǔ)音識(shí)別應(yīng)用；以及處理器，其被配置為執(zhí)行該語(yǔ)音識(shí)別應(yīng)用，并且基于該語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或該電子設(shè)備的操作環(huán)境來(lái)確定將要通過(guò)該音頻輸出模塊或該顯示器輸出的內(nèi)容的輸出方案。
【專利說(shuō)明】用于提供內(nèi)容的方法和電子設(shè)備
[0001]對(duì)相關(guān)申請(qǐng)的交叉引用
[0002]本申請(qǐng)要求于2015年3月26日向韓國(guó)特許廳提交的序列號(hào)為10-2015-0042740的韓國(guó)專利申請(qǐng)的權(quán)益，通過(guò)引用將其全部?jī)?nèi)容合并于此。
技術(shù)領(lǐng)域
[0003]本公開涉及用于響應(yīng)于語(yǔ)音輸入而提供內(nèi)容的方法和電子設(shè)備。
【背景技術(shù)】
[0004]當(dāng)前，應(yīng)用于電子設(shè)備的用戶輸入界面被實(shí)現(xiàn)為支持基于語(yǔ)音輸入的用戶輸入以及基于用戶的物理操控的用戶輸入(例如，通過(guò)按鈕型鍵區(qū)、鍵盤、鼠標(biāo)、觸摸面板等的輸
Λ)ο
[0005]具有語(yǔ)音界面(諸如，基于用戶語(yǔ)音的界面)的電子設(shè)備接收用戶語(yǔ)音以將接收的用戶語(yǔ)音轉(zhuǎn)換為電信號(hào)并通過(guò)處理電信號(hào)執(zhí)行預(yù)先設(shè)定的功能。
[0006]提供上述信息作為背景信息來(lái)僅僅用于幫助理解本公開。關(guān)于任何上述內(nèi)容是否可能適用作為本公開內(nèi)容的現(xiàn)有技術(shù)，沒(méi)有判定，也沒(méi)有斷言。

【發(fā)明內(nèi)容】

[0007]本公開的各方面用于解決至少上述問(wèn)題和/或缺點(diǎn)并提供至少下述優(yōu)點(diǎn)。因此，本公開的一個(gè)方面在于提供能夠基于電子設(shè)備的操作環(huán)境或語(yǔ)音識(shí)別應(yīng)用的狀態(tài)以最適合的方式輸出與語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容的內(nèi)容提供方法、以及執(zhí)行該方法的電子設(shè)備。
[0008]根據(jù)本公開的一個(gè)方面，提供一種電子設(shè)備。該電子設(shè)備包括:語(yǔ)音輸入模塊，其被配置為接收語(yǔ)音輸入;音頻輸出模塊;視頻輸出模塊;存儲(chǔ)器，其被配置為存儲(chǔ)響應(yīng)于該語(yǔ)音輸入而提供內(nèi)容的語(yǔ)音識(shí)別應(yīng)用；以及處理器，其被配置為執(zhí)行該語(yǔ)音識(shí)別應(yīng)用，并且基于該語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或該電子設(shè)備的操作環(huán)境來(lái)確定將要通過(guò)該音頻輸出模塊或該視頻輸出模塊輸出的內(nèi)容的輸出方案。
[0009]通過(guò)結(jié)合附圖公開本公開的各種實(shí)施例的以下詳細(xì)描述，本公開的其他方面、優(yōu)點(diǎn)、和顯著特征對(duì)本領(lǐng)域技術(shù)人員將變得顯而易見(jiàn)。
【附圖說(shuō)明】
[0010]通過(guò)結(jié)合附圖的以下描述，本公開的特定實(shí)施例的上述和其他方面、特征、和優(yōu)點(diǎn)將變得更加明顯，其中:
[0011]圖1是示出根據(jù)本公開的實(shí)施例的電子設(shè)備的配置的框圖；
[0012]圖2是示出根據(jù)本公開的實(shí)施例的用于提供內(nèi)容的方法的流程圖；
[0013]圖3是示出根據(jù)本公開的實(shí)施例的用于基于語(yǔ)音識(shí)別應(yīng)用的狀態(tài)提供內(nèi)容的方法的流程圖；
[0014]圖4Α是示出根據(jù)本公開的實(shí)施例的其中語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行的電子設(shè)備的圖；
[0015]圖4B是示出根據(jù)本公開的實(shí)施例的其中語(yǔ)音識(shí)別應(yīng)用正在前臺(tái)運(yùn)行的電子設(shè)備的圖；
[0016]圖5A示出根據(jù)本公開的實(shí)施例的其中當(dāng)語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行時(shí)輸出圖標(biāo)的電子設(shè)備；
[0017]圖5B示出根據(jù)本公開的實(shí)施例的其中改變圖標(biāo)的形狀的電子設(shè)備；
[0018]圖6示出根據(jù)本公開的實(shí)施例的其中顯示內(nèi)容的詳細(xì)信息的電子設(shè)備；
[0019]圖7是示出根據(jù)本公開的實(shí)施例的用于基于語(yǔ)音輸入的分析來(lái)提供內(nèi)容的方法的流程圖；
[0020]圖8是示出根據(jù)本公開的實(shí)施例的用于基于用戶的視線的確定來(lái)提供內(nèi)容的方法的流程圖；以及
[0021]圖9是示出根據(jù)本公開的實(shí)施例的用于基于視頻處理來(lái)提供內(nèi)容的方法的流程圖。
[0022]應(yīng)當(dāng)注意，全部附圖中，類似的參考數(shù)字用于描述相同或相似的元件、特征、和結(jié)構(gòu)。
【具體實(shí)施方式】
[0023]提供參照附圖的以下描述以幫助全面理解由權(quán)利要求及其等價(jià)物限定的本公開的各種實(shí)施例。它包括各種具體細(xì)節(jié)用于幫助理解，但是這些將被認(rèn)為僅僅是示范性的。因此，本領(lǐng)域的技術(shù)人員將認(rèn)識(shí)到，可以對(duì)這里描述的各種實(shí)施例進(jìn)行各種變化和修改而脫離本公開的范圍和精神。另外，為了清楚和簡(jiǎn)潔起見(jiàn)，可以略去公知功能和構(gòu)造的描述。
[0024]以下說(shuō)明書和權(quán)利要求中使用的術(shù)語(yǔ)和詞語(yǔ)不限于字面含義，而是僅僅由發(fā)明人用于使得能夠清楚和一致地理解本公開。因此，本領(lǐng)域技術(shù)人員應(yīng)當(dāng)清楚，提供本公開的各種實(shí)施例的以下描述僅僅用于例示目的，而不是為了限制由所附權(quán)利要求及其等同物限定的本公開的目的。
[0025]應(yīng)當(dāng)理解，單數(shù)形式“一”、“一個(gè)”、和“該”包括復(fù)數(shù)對(duì)象，除非上下文清楚地另有指明。因此，例如，對(duì)“一個(gè)組件表面”的指代包括對(duì)一個(gè)或多個(gè)這樣的表面的指代。
[0026]根據(jù)本公開的各種實(shí)施例的電子設(shè)備可以包括智能電話機(jī)、平板個(gè)人計(jì)算機(jī)(PC)、移動(dòng)電話機(jī)、視頻電話機(jī)、電子書籍閱讀器、桌面PC、膝上PC、上網(wǎng)本計(jì)算機(jī)、工作站、服務(wù)器、個(gè)人數(shù)字助理(PDA)、便攜多媒體播放器(PMP)、運(yùn)動(dòng)圖像專家組(MPEG-1或MPEG-2)音頻層3(MP3)播放器、移動(dòng)醫(yī)療設(shè)備、相機(jī)、或可穿戴設(shè)備中的至少一個(gè)。根據(jù)本公開的各種實(shí)施例，可穿戴設(shè)備可以包括首飾型(例如，手表、戒指、手鐲、腳鐲、項(xiàng)鏈、眼鏡、隱形眼鏡、或頭戴式設(shè)備(HMD))、織物或衣物型(例如，電子服裝)、物理附件型(例如，皮膚墊或紋身)、或身體植入型(例如，可植入電路)中的至少一個(gè)。
[0027]根據(jù)各種實(shí)施例，電子設(shè)備可以是上述設(shè)備之一或其組合。根據(jù)實(shí)施例的電子設(shè)備可以是柔性電子設(shè)備。此外，根據(jù)實(shí)施例的電子設(shè)備可以不限于上述電子設(shè)備，且可以包括其他電子設(shè)備和根據(jù)技術(shù)的發(fā)展的新電子設(shè)備。
[0028]下文中，將參照【附圖說(shuō)明】根據(jù)本公開的實(shí)施例的電子設(shè)備。這里使用的術(shù)語(yǔ)“用戶”可以指使用電子設(shè)備的人，或者可以指使用電子設(shè)備的設(shè)備(例如，人工智能電子設(shè)備)。
[0029]圖1是示出根據(jù)本公開的實(shí)施例的電子設(shè)備的配置的框圖。
[0030]參照?qǐng)D1，根據(jù)本公開的實(shí)施例的電子設(shè)備100可以包括總線110、處理器120、存儲(chǔ)器130、語(yǔ)音輸入模塊140、音頻輸出模塊150、視頻輸出模塊160、和相機(jī)170。電子設(shè)備100可以不包括上述組件中的至少一種，或者可以進(jìn)一步包括其他組件。
[0031]總線110可以互連上述組件120至170，而且可以是用于在上述組件之間傳達(dá)通信(例如，控制消息和/或數(shù)據(jù))的電路。
[0032]處理器120可以包括中央處理單元(CPU)、應(yīng)用處理器(AP)、或通信處理器(CP)中的一個(gè)或多個(gè)。處理器120可以執(zhí)行例如數(shù)據(jù)處理或與電子設(shè)備100的至少一個(gè)其他組件的控制和/或通信相關(guān)聯(lián)的操作。
[0033]處理器120可以執(zhí)行存儲(chǔ)在存儲(chǔ)器130中的語(yǔ)音識(shí)別應(yīng)用(例如，S-Voice)，并可以基于語(yǔ)音識(shí)別應(yīng)用將語(yǔ)音輸入轉(zhuǎn)換為控制命令或內(nèi)容請(qǐng)求。如果語(yǔ)音輸入被轉(zhuǎn)換為控制命令，則處理器120可以基于控制命令控制電子設(shè)備100中包括的各種模塊。例如，在語(yǔ)音輸入是“開啟藍(lán)牙”的情況下，處理器120可以激活電子設(shè)備100中嵌入的藍(lán)牙模塊。
[0034]此外，如果語(yǔ)音輸入被轉(zhuǎn)換為內(nèi)容請(qǐng)求，則處理器120可以基于內(nèi)容請(qǐng)求輸出相應(yīng)的內(nèi)容。例如，如果例如“告訴我今天的天氣”的語(yǔ)音輸入被轉(zhuǎn)換為關(guān)于天氣內(nèi)容的請(qǐng)求時(shí)，處理器120可以向用戶提供天氣內(nèi)容。
[0035]根據(jù)本公開的實(shí)施例，處理器120可以基于語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或電子設(shè)備100的操作環(huán)境來(lái)確定將要通過(guò)音頻輸出模塊150或視頻輸出模塊160輸出的內(nèi)容的輸出方案。處理器120可以基于確定的輸出方案通過(guò)音頻輸出模塊150或視頻輸出模塊160輸出與語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容。
[0036]例如，在語(yǔ)音識(shí)別應(yīng)用正在電子設(shè)備100的前臺(tái)運(yùn)行的情況下，處理器120可以確定控制視頻輸出模塊160輸出與語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容的詳細(xì)信息。此外，在語(yǔ)音識(shí)別應(yīng)用正在電子設(shè)備的后臺(tái)運(yùn)行的情況下，處理器120可以確定控制視頻輸出模塊160輸出與內(nèi)容相關(guān)聯(lián)的圖標(biāo)。
[0037]本說(shuō)明書中，應(yīng)用正在前臺(tái)運(yùn)行應(yīng)當(dāng)被理解為在電子設(shè)備100的視頻輸出模塊160的整個(gè)區(qū)域或幾乎整個(gè)區(qū)域上顯示應(yīng)用的執(zhí)行畫面。此外，應(yīng)用正在后臺(tái)運(yùn)行的狀態(tài)應(yīng)當(dāng)被理解為應(yīng)用正在非前臺(tái)狀態(tài)下運(yùn)行。
[0038]例如，如果語(yǔ)音識(shí)別應(yīng)用正在前臺(tái)運(yùn)行，則可以在視頻輸出模塊160上顯示語(yǔ)音識(shí)別應(yīng)用的屏幕(例如，根據(jù)S-Voice顯示的屏幕，參照?qǐng)D4B)。此時(shí)，如果從用戶接收語(yǔ)音輸入，則處理器120可以響應(yīng)于語(yǔ)音輸入而在語(yǔ)音識(shí)別應(yīng)用的屏幕上顯示相應(yīng)的內(nèi)容。
[0039]然而，如果語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行，可以在視頻輸出模塊160上顯示與語(yǔ)音識(shí)別應(yīng)用不同的應(yīng)用的屏幕(例如，根據(jù)網(wǎng)頁(yè)瀏覽應(yīng)用顯示的屏幕，參照?qǐng)D4A)。此時(shí)，如果從用戶接收語(yǔ)音輸入，處理器120可以響應(yīng)于語(yǔ)音輸入而在另一應(yīng)用的屏幕上額外顯示與內(nèi)容相關(guān)聯(lián)的圖標(biāo)(例如，圖5A的第一圖標(biāo)501)。此時(shí)，如果用戶選擇該圖標(biāo)(例如，觸摸)，則處理器120可以響應(yīng)于選擇該圖標(biāo)而通過(guò)視頻輸出模塊160輸出與圖標(biāo)相關(guān)聯(lián)的內(nèi)容的詳細(xì)信息。
[0040]此外，如果在語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行的同時(shí)從用戶接收語(yǔ)音輸入，則處理器120可以顯示圖標(biāo)，并且可以同時(shí)基于內(nèi)容改變圖標(biāo)的形狀。
[0041]例如，可以以動(dòng)畫的形式動(dòng)態(tài)地實(shí)現(xiàn)與內(nèi)容相關(guān)聯(lián)的圖標(biāo)。此外，可以基于文本到語(yǔ)音(以下稱為“TTS”)通過(guò)音頻輸出模塊150向用戶提供與語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容。該情況下，處理器120可以在通過(guò)音頻輸出模塊150對(duì)內(nèi)容的輸出與在視頻輸出模塊160上顯示的圖標(biāo)的形狀改變之間執(zhí)行同步。
[0042]此外，根據(jù)本公開的實(shí)施例的處理器120可以分析從語(yǔ)音輸入模塊140接收的語(yǔ)音輸入，并且可以基于分析的結(jié)果檢測(cè)語(yǔ)音輸入中包括的噪聲和/或與語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量。處理器120可以基于檢測(cè)結(jié)果確定將要通過(guò)音頻輸出模塊150輸出的內(nèi)容的輸出方案。
[0043]例如，如果在語(yǔ)音輸入中檢測(cè)到滿足指定條件的噪聲，則處理器120可以確定控制音頻輸出模塊150輸出與語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容的摘要信息。此外，如果在語(yǔ)音輸入中未檢測(cè)到滿足規(guī)定條件的噪聲，則處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。
[0044]可以基于頻率、波形、或幅度的分析來(lái)檢測(cè)滿足指定條件的噪聲。例如，滿足指定條件的噪聲可以包括戶外空間的住宅(re s i dential)噪聲。此外，在確定語(yǔ)音輸入中是否包括滿足指定條件的噪聲時(shí)可以不考慮一般白噪聲。因此，處理器120可以確定用戶是在戶外公共空間還是在私人空間。
[0045]此外，根據(jù)實(shí)施例，如果在語(yǔ)音輸入中檢測(cè)到與語(yǔ)音輸入對(duì)應(yīng)的多個(gè)用戶，則處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的摘要信息。如果在語(yǔ)音輸入中檢測(cè)到與語(yǔ)音輸入對(duì)應(yīng)的一個(gè)用戶，則處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。
[0046]例如可以通過(guò)關(guān)于語(yǔ)音輸入的頻率分析來(lái)執(zhí)行與語(yǔ)音輸入對(duì)應(yīng)的用戶數(shù)量的檢測(cè)。處理器120可以通過(guò)頻率分析確定在電子設(shè)備100的附近是否僅僅存在使用電子設(shè)備100的用戶，或者在電子設(shè)備100的附近是否存在該用戶和其他用戶。
[0047]根據(jù)本公開的實(shí)施例，處理器120可以基于音頻輸出模塊150的輸出方案來(lái)確定視頻輸出模塊160的輸出方案。例如，如果在語(yǔ)音輸入中檢測(cè)到滿足指定條件的噪聲，或者如果在語(yǔ)音輸入中檢測(cè)到與語(yǔ)音輸入對(duì)應(yīng)的多個(gè)用戶，則處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的摘要信息，而且可以通過(guò)視頻輸出模塊160同時(shí)輸出內(nèi)容的詳細(xì)信息。
[0048]根據(jù)本公開的實(shí)施例的處理器120可以基于在相機(jī)170中確定視線的結(jié)果來(lái)確定將要通過(guò)音頻輸出模塊150輸出的內(nèi)容的輸出方案。
[0049]例如，如果確定用戶的視線朝向視頻輸出模塊160，則處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的摘要信息。如果確定用戶的視線未朝向視頻輸出模塊160，則處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。
[0050]處理器120可以基于音頻輸出模塊150的輸出方案來(lái)確定視頻輸出模塊160的輸出方案。例如，如果確定用戶的視線朝向視頻輸出模塊160，則處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的摘要信息，并且可以通過(guò)視頻輸出模塊160同時(shí)輸出內(nèi)容的詳細(xì)信息。
[0051]此外，根據(jù)本公開的實(shí)施例的處理器120可以基于相機(jī)170拍攝的電子設(shè)備100的附近的視頻來(lái)確定將要通過(guò)音頻輸出模塊150或視頻輸出模塊160輸出的內(nèi)容的輸出方案。
[0052]例如，處理器120可以基于拍攝的視頻中包括的用戶的數(shù)量來(lái)確定內(nèi)容的輸出方案。當(dāng)確定用戶的數(shù)量時(shí)，處理器120可以將面部識(shí)別算法用于拍攝的視頻，并且可以確定拍攝的視頻中包括的用戶的數(shù)量，或者可以識(shí)別特定用戶。
[0053]例如，如果確定拍攝的視頻中包括一個(gè)用戶，則處理器120可以確定控制音頻輸出模塊150和/或視頻輸出模塊160輸出內(nèi)容的詳細(xì)信息。反之，如果確定拍攝的視頻中包括多個(gè)用戶，則處理器120可以確定控制音頻輸出模塊150和/或視頻輸出模塊160輸出內(nèi)容的摘要信息或不輸出內(nèi)容的信息。
[0054]此外，作為另一示例，如果確定拍攝的視頻中包括電子設(shè)備100的已驗(yàn)證用戶，則處理器120可以確定控制音頻輸出模塊150和/或視頻輸出模塊160輸出內(nèi)容的詳細(xì)信息。反之，如果確定拍攝的視頻中包括未驗(yàn)證用戶，則處理器120可以確定控制音頻輸出模塊150和/或視頻輸出模塊160輸出內(nèi)容的摘要信息或不輸出內(nèi)容的信息。
[0055]內(nèi)容的摘要信息可以是內(nèi)容的一部分的信息或內(nèi)容的概括信息，或者可以對(duì)應(yīng)于內(nèi)容的一部分。在一些實(shí)施例中，內(nèi)容的摘要信息可以被理解為包括與內(nèi)容相關(guān)聯(lián)的圖標(biāo)。此外，內(nèi)容的詳細(xì)信息可以是關(guān)于內(nèi)容的所有信息。
[0056]可以基于諸如TTS的聲音輸出功能通過(guò)音頻輸出模塊150以聽(tīng)覺(jué)向用戶提供內(nèi)容的摘要信息和詳細(xì)信息。此外，可以通過(guò)視頻輸出模塊160以視覺(jué)向用戶提供內(nèi)容的摘要信息和詳細(xì)信息。
[0057]存儲(chǔ)器130可以包括易失性和/或非易失性存儲(chǔ)器。例如，存儲(chǔ)器130可以存儲(chǔ)與電子設(shè)備100的至少一個(gè)其他組件相關(guān)聯(lián)的指令或數(shù)據(jù)。根據(jù)本公開的實(shí)施例，存儲(chǔ)器130可以存儲(chǔ)軟件、執(zhí)行根據(jù)本公開的各種實(shí)施例的內(nèi)容提供方法的應(yīng)用程序、語(yǔ)音識(shí)別應(yīng)用、網(wǎng)頁(yè)瀏覽應(yīng)用以及用于執(zhí)行上述軟件或應(yīng)用的數(shù)據(jù)。例如，存儲(chǔ)器130可以存儲(chǔ)與語(yǔ)音輸入對(duì)應(yīng)的控制命令和/或內(nèi)容請(qǐng)求，或者可以存儲(chǔ)與內(nèi)容請(qǐng)求對(duì)應(yīng)的內(nèi)容的摘要信息和/或詳細(xì)?目息O
[0058]語(yǔ)音輸入模塊140可以接收從用戶發(fā)出的語(yǔ)音輸入?？梢岳斫?，語(yǔ)音輸入模塊140包括物理麥克風(fēng)，并且額外地包括執(zhí)行關(guān)于接收的語(yǔ)音輸入的信號(hào)處理的電路(例如，模數(shù)轉(zhuǎn)換器(ADC))。
[0059]音頻輸出模塊150可以包括揚(yáng)聲器、頭戴式耳機(jī)、耳塞式耳機(jī)、相應(yīng)的驅(qū)動(dòng)器、音頻輸出接口等?？梢酝ㄟ^(guò)音頻輸出模塊150將內(nèi)容的摘要信息或詳細(xì)信息輸出為聲音，以便以聽(tīng)覺(jué)向用戶提供。
[0060]例如，視頻輸出模塊160可以對(duì)應(yīng)于顯示器。顯示器可以包括例如液晶顯示器(IXD)、發(fā)光二極管(LED)顯示器、有機(jī)發(fā)光二極管(OLED)顯示器、微機(jī)電系統(tǒng)(MEMS)顯示器、或電子紙顯示器?？梢酝ㄟ^(guò)視頻輸出模塊160將內(nèi)容的摘要信息或詳細(xì)信息輸出為屏幕，以便以視覺(jué)向用戶提供。
[0061 ]視頻輸出模塊160例如可以向用戶顯示各種內(nèi)容(例如，文本、圖像、視頻、圖標(biāo)、符號(hào)等)。視頻輸出模塊160可以包括觸摸屏，而且例如可以接收使用電子筆或用戶身體的一部分進(jìn)行的觸摸、手勢(shì)、接近、或懸停輸入。
[0062 ]例如，相機(jī)170可以拍攝靜止圖像和視頻。根據(jù)本公開的實(shí)施例，相機(jī)170中的至少一個(gè)可以包括一個(gè)或多個(gè)圖像傳感器、透鏡、圖像處理模塊等。此外，電子設(shè)備100可以包括一個(gè)或多個(gè)相機(jī)170。相機(jī)170可以拍攝電子設(shè)備100的附近以及存在于電子設(shè)備100的附近的用戶身體的至少一部分(例如，臉)的視頻。
[0063]根據(jù)實(shí)施例，相機(jī)170(與處理器120結(jié)合)可以確定是否檢測(cè)到電子設(shè)備100的用戶。例如，可以在確定用戶的視線時(shí)使用用于跟蹤用戶的瞳孔的方法(所謂的眼跟蹤)。
[0064]圖2是示出根據(jù)本公開的實(shí)施例的用于提供內(nèi)容的方法的流程圖。
[0065]參照?qǐng)D2，在操作201中，語(yǔ)音輸入模塊140可以通過(guò)語(yǔ)音識(shí)別應(yīng)用從用戶接收語(yǔ)音輸入?？梢詫⒔邮盏恼Z(yǔ)音輸入提供給執(zhí)行語(yǔ)音識(shí)別應(yīng)用的處理器120。
[0066]在操作203中，處理器120可以基于語(yǔ)音輸入確定將要輸出的內(nèi)容，并可以基于語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或電子設(shè)備100的操作環(huán)境來(lái)確定內(nèi)容的輸出方案?？梢皂憫?yīng)于語(yǔ)音輸入通過(guò)語(yǔ)音識(shí)別應(yīng)用預(yù)先設(shè)置將要輸出的內(nèi)容。
[0067]在操作205中，處理器120可以使用音頻輸出模塊150或視頻輸出模塊160中的至少一個(gè)基于在操作203確定的輸出方案輸出與語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容。
[0068]圖3是示出根據(jù)本公開的實(shí)施例的用于基于語(yǔ)音識(shí)別應(yīng)用的狀態(tài)提供內(nèi)容的方法的流程圖。
[0069]參照?qǐng)D3，根據(jù)本公開的實(shí)施例的基于語(yǔ)音識(shí)別應(yīng)用的狀態(tài)的內(nèi)容提供方法可以包括操作301至操作317。
[0070]在操作301中，語(yǔ)音輸入模塊140可以接收來(lái)自用戶的語(yǔ)音輸入。例如，語(yǔ)音輸入可以是簡(jiǎn)單的詞語(yǔ)，諸如“天氣”、“日程表”、“藍(lán)牙”、“無(wú)線保真(W1-Fi)”等，或者可以是句子，諸如“告訴我今天的天氣”、“告訴我今天的日程表”、“念今天的新聞”、“開啟藍(lán)牙”、“開啟WiFi”等。此外，語(yǔ)音輸入可以是用于控制電子設(shè)備100中嵌入的特定模塊的控制命令(例如，“開啟藍(lán)牙”)，或者可以是請(qǐng)求特定內(nèi)容的內(nèi)容請(qǐng)求(例如，“告訴我今天的天氣”)。
[0071]在操作303中，處理器120可以確定接收的語(yǔ)音輸入是關(guān)于電子設(shè)備100中嵌入的模塊的控制命令還是請(qǐng)求輸出具體內(nèi)容的內(nèi)容請(qǐng)求。如果語(yǔ)音輸入對(duì)應(yīng)于內(nèi)容請(qǐng)求，則過(guò)程進(jìn)行到操作305，如果語(yǔ)音輸入對(duì)應(yīng)于控制命令，則過(guò)程進(jìn)行到操作317。例如，如果語(yǔ)音輸入對(duì)應(yīng)于“天氣”，則過(guò)程進(jìn)行到操作305。如果語(yǔ)音輸入對(duì)應(yīng)于“開啟藍(lán)牙”，則過(guò)程進(jìn)行到操作317。
[0072]在操作305中，處理器120可以確定語(yǔ)音識(shí)別應(yīng)用的狀態(tài)，并且可以確定語(yǔ)音識(shí)別應(yīng)用正運(yùn)行在后臺(tái)還是前臺(tái)。如果語(yǔ)音識(shí)別應(yīng)用正運(yùn)行在后臺(tái)，則過(guò)程進(jìn)行到操作307。如果語(yǔ)音識(shí)別應(yīng)用正運(yùn)行在前臺(tái)，則過(guò)程進(jìn)行到操作313。
[0073]圖4A是示出根據(jù)本公開的實(shí)施例的其中語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行的電子設(shè)備的圖。
[0074]參照?qǐng)D4A，網(wǎng)絡(luò)瀏覽應(yīng)用可以在電子設(shè)備100中正在前臺(tái)運(yùn)行。可以在電子設(shè)備100的視頻輸出模塊160上顯示網(wǎng)頁(yè)瀏覽應(yīng)用的屏幕400a。如果語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行，則可以不顯示語(yǔ)音識(shí)別應(yīng)用的屏幕。然而，由于語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行，電子設(shè)備100可以通過(guò)語(yǔ)音輸入模塊140接收來(lái)自用戶的語(yǔ)音輸入。根據(jù)本公開的實(shí)施例，在向電子設(shè)備100提供語(yǔ)音輸入(例如，“天氣”)之前，用戶可以提供預(yù)先規(guī)定的語(yǔ)音(例如，“Hi，Galaxy 以使得語(yǔ)音識(shí)別應(yīng)用的狀態(tài)從睡眠狀態(tài)切換到活動(dòng)狀態(tài)。
[0075]圖4B是示出根據(jù)本公開的實(shí)施例的其中語(yǔ)音識(shí)別應(yīng)用正在前臺(tái)運(yùn)行的電子設(shè)備的圖。
[0076]參照?qǐng)D4B，語(yǔ)音識(shí)別應(yīng)用可以在電子設(shè)備100中正在前臺(tái)運(yùn)行。可以在電子設(shè)備100的視頻輸出模塊160上顯示語(yǔ)音識(shí)別應(yīng)用的屏幕400b。根據(jù)本公開的實(shí)施例，在向電子設(shè)備100提供語(yǔ)音輸入之前，用戶可以提供預(yù)先規(guī)定的語(yǔ)音，或者可以選擇(觸摸)具有屏幕400b的底部所示的麥克風(fēng)的形狀的對(duì)象，以使得語(yǔ)音識(shí)別應(yīng)用的狀態(tài)從睡眠狀態(tài)切換到活動(dòng)狀態(tài)。
[0077]在操作307中，處理器120可以確定控制視頻輸出模塊160輸出與對(duì)應(yīng)于語(yǔ)音輸入(內(nèi)容請(qǐng)求)的內(nèi)容相關(guān)聯(lián)的圖標(biāo)。
[0078]圖5A示出根據(jù)本公開的實(shí)施例的當(dāng)語(yǔ)音識(shí)別應(yīng)用在電子設(shè)備中正在后臺(tái)運(yùn)行時(shí)輸出的圖標(biāo)。
[0079]參照?qǐng)D5A，可以在圖4A的屏幕400a之后顯示電子設(shè)備100的屏幕500a。例如，如果從用戶接收與“天氣”對(duì)應(yīng)的語(yǔ)音輸入，則電子設(shè)備100的處理器120可以在顯示網(wǎng)絡(luò)瀏覽應(yīng)用的屏幕500a上顯示與在其上接收語(yǔ)音輸入的一天的天氣(例如，多云有雨)相關(guān)聯(lián)的第一圖標(biāo)501。根據(jù)本公開的實(shí)施例，可以將動(dòng)態(tài)動(dòng)畫效果添加到第一圖標(biāo)501。例如，可以將諸如下雨的云的動(dòng)畫效果應(yīng)用于第一圖標(biāo)501。
[0080]根據(jù)本公開的實(shí)施例，處理器120可以響應(yīng)于關(guān)于第一圖標(biāo)501的選擇(例如，觸摸)而確定控制視頻輸出模塊160輸出與第一圖標(biāo)501相關(guān)的內(nèi)容的詳細(xì)信息。例如，如果用戶觸摸第一圖標(biāo)501，則視頻輸出模塊160可以從圖5A的屏幕500a切換到語(yǔ)音識(shí)別應(yīng)用的屏幕，并且可以在語(yǔ)音識(shí)別應(yīng)用的屏幕(例如，圖6的屏幕600)上輸出天氣內(nèi)容的詳細(xì)信息。[0081 ]在操作309中，處理器120可以確定基于相應(yīng)的內(nèi)容改變?cè)诓僮?07顯示的圖標(biāo)的形狀。
[0082]圖5B示出根據(jù)本公開的實(shí)施例基于相應(yīng)的內(nèi)容將圖5A的第一圖標(biāo)改變?yōu)榈诙D標(biāo)。
[0083]參照?qǐng)D5B，例如，如果從用戶接收與“天氣”對(duì)應(yīng)的語(yǔ)音輸入，則電子設(shè)備100的處理器120可以將圖5A的第一圖標(biāo)501改變?yōu)閳D5B的第二圖標(biāo)502，以使得象征地顯示在其上接收語(yǔ)音輸入的一天的天氣(例如，多云有雨之后在下午轉(zhuǎn)晴)。此外，根據(jù)實(shí)施例，在將圖5A的第一圖標(biāo)501改變?yōu)閳D5B的第二圖標(biāo)502時(shí)可以添加動(dòng)畫效果。利用這種動(dòng)畫效果，電子設(shè)備100可以更有效地向用戶提供相應(yīng)的天氣內(nèi)容。
[0084]在操作311中，處理器120可以與在操作309的圖標(biāo)的形狀改變同步地通過(guò)音頻輸出模塊150輸出相應(yīng)內(nèi)容。例如，與從圖5A的第一圖標(biāo)501變化為圖5B的第二圖標(biāo)502同步地，處理器120可以確定控制音頻輸出模塊150輸出天氣內(nèi)容，諸如“今天，上午有雨，下午晴”。例如，當(dāng)輸出與“今天，上午有雨”對(duì)應(yīng)的音頻時(shí)，可以輸出第一圖標(biāo)501。然而，當(dāng)輸出與“下午晴”對(duì)應(yīng)的音頻時(shí)，可以將第一圖標(biāo)501改變?yōu)榈诙D標(biāo)502。
[0085]在操作313，如果語(yǔ)音識(shí)別應(yīng)用正在前臺(tái)運(yùn)行，則處理器120可以確定控制視頻輸出模塊160輸出與語(yǔ)音輸入(內(nèi)容請(qǐng)求)對(duì)應(yīng)的內(nèi)容的詳細(xì)信息。
[0086]圖6示出根據(jù)本公開的實(shí)施例的來(lái)自用戶的語(yǔ)音輸入對(duì)應(yīng)于詞語(yǔ)“天氣”的情況。
[0087]參照?qǐng)D6，可以響應(yīng)于來(lái)自用戶的語(yǔ)音輸入在顯示圖4B的屏幕400b之后顯示屏幕600。例如，電子設(shè)備100的處理器120可以響應(yīng)于“天氣”的語(yǔ)音輸入而通過(guò)視頻輸出模塊160輸出電子設(shè)備100所處的區(qū)域的天氣的詳細(xì)信息(天氣內(nèi)容的詳細(xì)信息)。如圖6所示，天氣的詳細(xì)信息可以包括天氣信息、根據(jù)天氣的著裝建議、每周天氣等。
[0088]在操作315中，處理器120可以確定控制音頻輸出模塊150輸出與內(nèi)容請(qǐng)求對(duì)應(yīng)的內(nèi)容。例如，圖6示出處理器120基于TTS通過(guò)音頻輸出模塊150輸出內(nèi)容，諸如“以下是首爾瑞草2洞的天氣信息。今天有雨，您外出時(shí)穿上靴子吧”。
[0089]由于操作317對(duì)應(yīng)于接收的語(yǔ)音輸入與控制命令對(duì)應(yīng)的情況，處理器120可以執(zhí)行與控制命令對(duì)應(yīng)的功能。例如，在語(yǔ)音輸入對(duì)應(yīng)于“藍(lán)牙”或“開啟藍(lán)牙”的情況下，處理器120可以執(zhí)行控制以激活藍(lán)牙模塊。
[0090]根據(jù)本公開的實(shí)施例，處理器120可以執(zhí)行與控制命令對(duì)應(yīng)的功能，而且可以在視頻輸出模塊160的屏幕上同時(shí)顯示與對(duì)應(yīng)于控制命令的功能相關(guān)聯(lián)的圖標(biāo)。例如，如果如圖5A所示在網(wǎng)絡(luò)瀏覽應(yīng)用正在前臺(tái)運(yùn)行的同時(shí)語(yǔ)音輸入模塊140接收與“開啟藍(lán)牙”對(duì)應(yīng)的語(yǔ)音輸入，則處理器120可以激活藍(lán)牙模塊，而且與此同時(shí)，可以在視頻輸出模塊160的屏幕500a上顯不與監(jiān)牙相關(guān)聯(lián)的圖標(biāo)，而不是圖5A的第一圖標(biāo)501。
[0091 ]根據(jù)本公開的各種實(shí)施例，可以基于語(yǔ)音識(shí)別應(yīng)用的執(zhí)行狀態(tài)自動(dòng)地確定視頻輸出模塊160的輸出方案(例如，圖標(biāo)顯示或詳細(xì)信息提供)。如此，電子設(shè)備100可以根據(jù)語(yǔ)音識(shí)別有效地提供內(nèi)容而無(wú)需中斷用戶當(dāng)前使用電子設(shè)備100的境況(例如，視頻輸出模塊160的輸出境況)。
[0092]此外，根據(jù)本公開的實(shí)施例，在語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行的情況下，可以響應(yīng)于語(yǔ)音輸入而在視頻輸出模塊160上僅顯示不干擾不同應(yīng)用的圖標(biāo)。即，由于即使接收到語(yǔ)音輸入語(yǔ)音識(shí)別應(yīng)用也不在前臺(tái)運(yùn)行，用戶可以更有效地使用應(yīng)用。
[0093]圖7是示出根據(jù)本公開的實(shí)施例的用于基于語(yǔ)音輸入的分析來(lái)提供內(nèi)容的方法的流程圖。
[0094]參照?qǐng)D7，根據(jù)本公開的實(shí)施例的基于語(yǔ)音輸入的分析的內(nèi)容提供方法可以包括操作701至操作715。由于圖7的操作701、操作703、和操作715分別對(duì)應(yīng)于圖3的操作301、操作303、和操作317，將省略重復(fù)的描述。然而，在操作701接收的語(yǔ)音輸入可以對(duì)應(yīng)于“告訴我今天的日程表”。
[0095]在操作705中，處理器120可以分析語(yǔ)音輸入，并且可以檢測(cè)語(yǔ)音輸入中包括的噪聲和與語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量。檢測(cè)結(jié)果可以用于確定內(nèi)容的輸出方案。
[0096]在操作707中，處理器120可以確定語(yǔ)音輸入中是否包括滿足指定條件的噪聲。例如，處理器120可以確定語(yǔ)音輸入中是否包括通常在室外發(fā)生的噪聲。例如，在操作707確定噪聲是否滿足指定條件時(shí)可以不考慮在安靜的室內(nèi)產(chǎn)生的細(xì)微噪聲或根據(jù)電子設(shè)備100的內(nèi)部操作產(chǎn)生的噪聲。如果語(yǔ)音輸入中包括滿足指定條件的噪聲，則過(guò)程進(jìn)行到操作713，否則，過(guò)程進(jìn)行到操作709。
[0097]在操作709中，處理器120可以確定與語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量。例如，處理器120可以通過(guò)頻率或波形的分析來(lái)確定與語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量。如果與語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量是一個(gè)用戶，則過(guò)程進(jìn)行到操作711。如果與語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量是多個(gè)用戶，則過(guò)程進(jìn)行到操作713。
[0098]在操作711中，在語(yǔ)音輸入中不包括滿足指定條件的噪聲、且在語(yǔ)音輸入中檢測(cè)到與語(yǔ)音輸入對(duì)應(yīng)的一個(gè)用戶的情況下，處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。例如，當(dāng)用戶獨(dú)自在室內(nèi)而沒(méi)有周圍噪聲時(shí)，可以響應(yīng)于諸如“告訴我今天的日程表”的語(yǔ)音輸入以聽(tīng)覺(jué)向用戶提供日程表內(nèi)容的詳細(xì)信息，諸如“今天，上午9:30小組會(huì)議，晚上8點(diǎn)約會(huì)”。
[0099]在操作713中，在語(yǔ)音輸入中包括滿足指定條件的噪聲、且在語(yǔ)音輸入中檢測(cè)到與語(yǔ)音輸入對(duì)應(yīng)的多個(gè)用戶的情況下，處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的摘要信息。例如，響應(yīng)于諸如“告訴我今天的日程表”的語(yǔ)音輸入，可以以聽(tīng)覺(jué)向正與其他用戶交談或處于嘈雜的室外的用戶提供日程表內(nèi)容的摘要內(nèi)容，諸如“今天，有兩個(gè)日程”。
[0100]根據(jù)本公開的各種實(shí)施例，電子設(shè)備100可以分析語(yǔ)音輸入，并且可以掌握電子設(shè)備100的操作環(huán)境。電子設(shè)備100可以基于所掌握的操作環(huán)境來(lái)確定內(nèi)容的輸出方案。此外，由于通過(guò)在室內(nèi)存在一個(gè)用戶的情況和存在多個(gè)用戶的情況之間進(jìn)行區(qū)分來(lái)不同地設(shè)置內(nèi)容的輸出方案，可以不通過(guò)音頻輸出模塊150輸出如果內(nèi)容被外部知曉則會(huì)弓I起麻煩的諸如“日程表”的詳細(xì)信息的內(nèi)容。
[0101]圖8是示出根據(jù)本公開的實(shí)施例的用于基于用戶的視線的確定來(lái)提供內(nèi)容的方法的流程圖。
[0102]參考圖8，根據(jù)本公開的實(shí)施例，基于用戶視線的確定的內(nèi)容提供方法可以包括操作801至操作811。由于操作801、操作803、和操作811分別對(duì)應(yīng)于圖3的操作301、操作303、和操作317，重復(fù)的描述將被省略。然而，在操作801中，接收的語(yǔ)音輸入可以對(duì)應(yīng)于“念今天的新聞” O
[0103]在操作805中，處理器120可以確定電子設(shè)備100的用戶的視線是否朝向視頻輸出模塊160。處理器120可以基于確定用戶視線的結(jié)果來(lái)確定將要通過(guò)音頻輸出模塊150和/或視頻輸出模塊160輸出的內(nèi)容(例如，標(biāo)題新聞文章)的輸出方案。如果確定用戶的視線朝向視頻輸出模塊160，則過(guò)程進(jìn)行到操作807。如果確定用戶的視線未朝向視頻輸出模塊160，則過(guò)程進(jìn)行到操作809。
[0104]在操作807中，處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的摘要信息。例如，可以響應(yīng)于諸如“念今天的新聞”的語(yǔ)音輸入而通過(guò)音頻輸出模塊150以聽(tīng)覺(jué)向用戶僅提供標(biāo)題新聞文章的標(biāo)題(內(nèi)容的摘要信息)。
[0105]在操作809中，處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。例如，可以響應(yīng)于諸如“念今天的新聞”的語(yǔ)音輸入通過(guò)音頻輸出模塊150以聽(tīng)覺(jué)向用戶提供標(biāo)題新聞文章的標(biāo)題和內(nèi)容(內(nèi)容的詳細(xì)信息)。
[0106]根據(jù)本公開的各種實(shí)施例，可以基于用戶的視線是否朝向視頻輸出模塊160(即，電子設(shè)備100的操作環(huán)境)來(lái)確定內(nèi)容的輸出方案。例如，由于不需要通過(guò)音頻輸出模塊150向用戶重復(fù)地提供相同內(nèi)容的詳細(xì)信息，通過(guò)視頻輸出模塊160而被提供內(nèi)容的用戶可以增加關(guān)注于內(nèi)容獲取的能力。此外，當(dāng)用戶的視線難以朝向電子設(shè)備100的視頻輸出模塊160時(shí)，例如，當(dāng)用戶正在駕駛時(shí)，可以以聽(tīng)覺(jué)向用戶提供內(nèi)容的詳細(xì)信息。
[0107]圖9是示出根據(jù)本公開的實(shí)施例的用于基于視頻處理來(lái)提供內(nèi)容的方法的流程圖。
[0108]參考圖9，根據(jù)本公開的實(shí)施例的基于視頻處理的內(nèi)容提供方法可以包括操作901至操作911。由于圖9的操作901、操作903、和操作911分別對(duì)應(yīng)于圖3的操作301、操作303、和操作317，重復(fù)的描述將被省略。然而，在操作901接收的語(yǔ)音輸入可以對(duì)應(yīng)于“告訴我今天的日程表”。
[0109]在操作905中，處理器120可以確定從相機(jī)170獲得的視頻中是否包括一個(gè)用戶或者從相機(jī)170獲得的視頻中是否包括多個(gè)用戶。例如，處理器120可以確定相機(jī)170拍攝的視頻中包括多少個(gè)用戶。例如，處理器120可以通過(guò)面部識(shí)別算法來(lái)識(shí)別用戶的面部，因而可以基于面部識(shí)別算法來(lái)確定用戶的數(shù)量。如果視頻中包括一個(gè)用戶，則過(guò)程進(jìn)行到操作909，如果視頻中包括多個(gè)用戶，則過(guò)程進(jìn)行到操作907。
[0110]此外，根據(jù)實(shí)施例，處理器120可以通過(guò)面部識(shí)別算法識(shí)別特定用戶。例如，處理器120可以確定相機(jī)170拍攝的視頻中是否有電子設(shè)備100的已驗(yàn)證用戶。如果視頻中包括的用戶是已驗(yàn)證用戶，則進(jìn)程進(jìn)行到操作909。如果視頻中包括的用戶不是已驗(yàn)證用戶，則過(guò)程進(jìn)行到操作907。
[0111]在操作907中，處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的摘要信息。如果由相機(jī)170拍攝并從它接收的視頻中包括多個(gè)用戶(S卩，兩個(gè)或更多個(gè))，則處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的摘要信息。替換地和額外地，處理器120可以通過(guò)視頻輸出模塊160輸出與內(nèi)容相關(guān)聯(lián)的圖標(biāo)。
[0112]例如，在電子設(shè)備100的附近存在多個(gè)用戶的情況下，響應(yīng)于諸如“告訴我今天的日程表”的語(yǔ)音輸入，可以以聽(tīng)覺(jué)向電子設(shè)備100的用戶提供日程表內(nèi)容的摘要信息，諸如“今天，有兩個(gè)日程”。此外，可以以聽(tīng)覺(jué)向電子設(shè)備100的用戶提供日程表內(nèi)容的摘要信息，而且同時(shí)可以通過(guò)視頻輸出模塊160以視覺(jué)向其提供與內(nèi)容相關(guān)聯(lián)的圖標(biāo)(例如，與日程表內(nèi)容相關(guān)聯(lián)的日歷圖標(biāo))。
[0113]此外，根據(jù)實(shí)施例，如果從相機(jī)170接收的視頻中不包括電子設(shè)備100的用戶(已驗(yàn)證用戶)，則處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的摘要信息。替換地，如果接收的視頻中不包括電子設(shè)備100的已驗(yàn)證用戶，則處理器120甚至可以不輸出內(nèi)容的摘要信息。
[0114]在操作909中，處理器120可以確定控制音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。如果由相機(jī)170拍攝和從它接收的視頻中包括一個(gè)用戶，則處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。替換地和額外地，處理器120可以通過(guò)視頻輸出模塊160輸出內(nèi)容的詳細(xì)信息。
[0115]例如，當(dāng)電子設(shè)備100的附近僅存在一個(gè)用戶時(shí)，可以響應(yīng)于諸如“告訴我今天的日程表”的語(yǔ)音輸入以聽(tīng)覺(jué)向用戶提供日程表內(nèi)容的詳細(xì)信息，諸如“今天，上午9:30小組會(huì)議，晚上8點(diǎn)約會(huì)”。此外，可以以聽(tīng)覺(jué)向電子設(shè)備100的用戶提供日程表內(nèi)容的詳細(xì)信息，而且可以同時(shí)通過(guò)視頻輸出模塊160以視覺(jué)向其提供顯示內(nèi)容的詳細(xì)信息的屏幕。
[0116]此外，根據(jù)本公開的實(shí)施例，如果由相機(jī)170拍攝和從它接收的視頻中包括電子設(shè)備100的真實(shí)用戶(已驗(yàn)證用戶)，則處理器120可以通過(guò)音頻輸出模塊150輸出內(nèi)容的詳細(xì)信息。替換地，如果接收的視頻中包括電子設(shè)備100的真實(shí)用戶，則處理器120可以輸出內(nèi)容的摘要信息。
[0117]根據(jù)本公開的各種實(shí)施例，電子設(shè)備100可以通過(guò)分析從相機(jī)170獲得的視頻來(lái)掌握電子設(shè)備100的操作環(huán)境。電子設(shè)備100可以基于掌握的操作環(huán)境來(lái)確定內(nèi)容的輸出方案。此外，由于根據(jù)其中存在一個(gè)用戶的情況和其中存在多個(gè)用戶的情況而不同地設(shè)置內(nèi)容的輸出方案，可以不通過(guò)音頻輸出模塊150輸出如果內(nèi)容被外部知曉則會(huì)弓I起麻煩的諸如“日程表”的詳細(xì)信息的內(nèi)容。
[0118]此外，在其中識(shí)別特定用戶的實(shí)施例中，電子設(shè)備100可以使用面部識(shí)別算法來(lái)驗(yàn)證電子設(shè)備100的附近存在的用戶是否是真實(shí)用戶。因此，可以以更高的安全性向電子設(shè)備100的真實(shí)用戶提供如果內(nèi)容被外部知曉則會(huì)引起麻煩的內(nèi)容。
[0119]其間，圖3、7、8、和9中描述的內(nèi)容提供方法是示例，而且可以不限于參照附圖給出的描述。此外，可以組合圖3、7、8、和9中描述的內(nèi)容提供方法中的至少兩個(gè)或更多個(gè)。
[0120]例如，當(dāng)電子書應(yīng)用在電子設(shè)備100中在前臺(tái)運(yùn)行時(shí)，處于嘈雜的室外的用戶可以針對(duì)電子設(shè)備100執(zhí)行諸如“Hi ,Galaxy”和“告訴我今天的日程表”的語(yǔ)音輸入。該情況下，電子設(shè)備100可以在電子書應(yīng)用的屏幕上顯示與“日程表”相關(guān)聯(lián)的圖標(biāo)(例如，日歷形狀的圖標(biāo))。此外，電子設(shè)備100可以基于TTS與圖標(biāo)的顯示一起通過(guò)音頻輸出模塊150提供內(nèi)容的摘要信息，諸如“今天有一個(gè)日程”。
[0121]這里使用的術(shù)語(yǔ)“模塊”例如可以表示包括硬件、軟件、和固件的一個(gè)或多個(gè)組合的單元。術(shù)語(yǔ)“模塊”可以與術(shù)語(yǔ)“單元”、“邏輯”、“邏輯塊”、“組件”、和“電路”互換使用。“?！缐笨梢允羌山M件的最小單位，或者可以是其一部分。“模塊”可以是用于執(zhí)行一個(gè)或多個(gè)功能的最小單元，或其一部分?！澳K”可以機(jī)械或電子地實(shí)現(xiàn)。例如，“模塊”可以包括用于執(zhí)行已知或?qū)⒁_發(fā)的一些操作的專用集成電路(ASIC)芯片、現(xiàn)場(chǎng)可編程門陣列(FPGA)、和可編程邏輯器件中的至少一個(gè)。
[0122]根據(jù)本公開的各種實(shí)施例的裝置的至少一部分(例如，其模塊或功能)或方法(例如，操作)例如可以通過(guò)以程序模塊的形式存儲(chǔ)在計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中的指令來(lái)實(shí)現(xiàn)。所述指令當(dāng)由一個(gè)或多個(gè)處理器(例如，處理器120)執(zhí)行時(shí)可以致使一個(gè)或多個(gè)處理器執(zhí)行與所述指令對(duì)應(yīng)的功能。計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)例如可以是存儲(chǔ)器130。
[0123]計(jì)算機(jī)可讀記錄介質(zhì)可以包括硬盤、磁介質(zhì)、軟盤、磁介質(zhì)(例如，磁帶)、光學(xué)介質(zhì)(例如，小型光盤只讀存儲(chǔ)器(⑶-ROM)和數(shù)字多功能盤(DVD)、磁光介質(zhì)(例如，光磁盤)、和硬件設(shè)備(例如，R0M、隨機(jī)存取存儲(chǔ)器(RAM)、或閃速存儲(chǔ)器)。另外，程序指令可以不僅包括諸如由編譯器產(chǎn)生的事物的機(jī)械碼，而且還包括可以使用解釋器在計(jì)算機(jī)上執(zhí)行的高級(jí)語(yǔ)言代碼。上述硬件裝置可以被配置為作為一個(gè)或多個(gè)軟件模塊操作以執(zhí)行根據(jù)本公開的各種實(shí)施例的操作，反之亦然。
[0124]根據(jù)本公開的各種實(shí)施例的模塊或程序模塊可以包括上述組件的至少一個(gè)或多個(gè)，一些上述組件可以被省略，或者其中可以進(jìn)一步包括其他附加的組件。由模塊、程序模塊、或其他元件執(zhí)行的操作可以由連續(xù)方法、并行方法、重復(fù)方法、或啟發(fā)式方法來(lái)執(zhí)行。此夕卜，一部分操作可以以不同的順序執(zhí)行，被省略，或者可以添加其他操作。
[0125]根據(jù)本公開的實(shí)施例，電子設(shè)備可以掌握語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或電子設(shè)備的操作環(huán)境，并可以基于掌握的操作環(huán)境來(lái)確定內(nèi)容的輸出方案。利用該方法，可以以最適合用戶使用電子設(shè)備的境況的輸出方案來(lái)提供內(nèi)容。
[0126]雖然已經(jīng)參照其各種實(shí)施例示出和描述本公開，但是本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，其中可以在形式和細(xì)節(jié)上進(jìn)行各種變化而不背離由所附權(quán)利要求及其等價(jià)物限定的本公開的精神和范圍。
【主權(quán)項(xiàng)】
1.一種電子設(shè)備，包括: 語(yǔ)音輸入模塊，其被配置為接收語(yǔ)音輸入； 音頻輸出模塊； 顯示器； 存儲(chǔ)器，其被配置為存儲(chǔ)響應(yīng)于該語(yǔ)音輸入而提供內(nèi)容的語(yǔ)音識(shí)別應(yīng)用；以及 處理器，其被配置為: 執(zhí)行該語(yǔ)音識(shí)別應(yīng)用，并且 基于該語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或該電子設(shè)備的操作環(huán)境來(lái)確定將要通過(guò)該音頻輸出模塊或該顯不器輸出的內(nèi)容的輸出方案。2.如權(quán)利要求1所述的電子設(shè)備，其中，該處理器進(jìn)一步被配置為: 如果該語(yǔ)音識(shí)別應(yīng)用正在前臺(tái)運(yùn)行，則控制該顯示器輸出該內(nèi)容的詳細(xì)信息，以及 如果該語(yǔ)音識(shí)別應(yīng)用正在后臺(tái)運(yùn)行，則控制該顯示器輸出與該內(nèi)容相關(guān)聯(lián)的圖標(biāo)。3.如權(quán)利要求2所述的電子設(shè)備，其中，該處理器進(jìn)一步被配置為基于該內(nèi)容改變?cè)搱D標(biāo)的形狀。4.如權(quán)利要求3所述的電子設(shè)備，其中，該處理器進(jìn)一步被配置為同步音頻輸出模塊對(duì)該內(nèi)容的輸出和該圖標(biāo)的形狀改變。5.如權(quán)利要求3所述的電子設(shè)備，其中，該處理器進(jìn)一步被配置為響應(yīng)于選擇該圖標(biāo)而控制該顯示器輸出該內(nèi)容的詳細(xì)信息。6.如權(quán)利要求1所述的電子設(shè)備，其中，該處理器進(jìn)一步被配置為: 分析該語(yǔ)音輸入， 檢測(cè)該語(yǔ)音輸入中包括的噪聲或與該語(yǔ)音輸入對(duì)應(yīng)的用戶的數(shù)量；以及 基于檢測(cè)結(jié)果來(lái)確定將要通過(guò)該音頻輸出模塊輸出的內(nèi)容的輸出方案。7.如權(quán)利要求6所述的電子設(shè)備，其中，如果在該語(yǔ)音輸入中檢測(cè)到滿足指定條件的噪聲，則該處理器進(jìn)一步被配置為控制該音頻輸出模塊輸出該內(nèi)容的摘要信息。8.如權(quán)利要求6所述的電子設(shè)備，其中，如果在該語(yǔ)音輸入中未檢測(cè)到滿足指定條件的噪聲，則該處理器進(jìn)一步被配置為控制該音頻輸出模塊輸出該內(nèi)容的詳細(xì)信息。9.如權(quán)利要求6所述的電子設(shè)備，其中，如果在該語(yǔ)音輸入中檢測(cè)到與該語(yǔ)音輸入對(duì)應(yīng)的多個(gè)用戶，則該處理器進(jìn)一步被配置為控制該音頻輸出模塊輸出該內(nèi)容的摘要信息。10.如權(quán)利要求6所述的電子設(shè)備，其中，如果在該語(yǔ)音輸入中檢測(cè)到與該語(yǔ)音輸入對(duì)應(yīng)的一個(gè)用戶，則該處理器進(jìn)一步被配置為控制該音頻輸出模塊輸出該內(nèi)容的詳細(xì)信息。11.如權(quán)利要求1所述的電子設(shè)備，進(jìn)一步包括: 相機(jī)，其被配置為檢測(cè)該電子設(shè)備的用戶的視線， 其中，該處理器進(jìn)一步被配置為基于確定視線的結(jié)果來(lái)確定將要通過(guò)該音頻輸出模塊輸出的內(nèi)容的輸出方案。12.如權(quán)利要求11所述的電子設(shè)備，其中，如果確定用戶的視線朝向該顯示器，則該處理器進(jìn)一步被配置為控制該音頻輸出模塊輸出該內(nèi)容的摘要信息。13.如權(quán)利要求11所述的電子設(shè)備，其中，如果確定用戶的視線未朝向該顯示器，則該處理器進(jìn)一步被配置為控制該音頻輸出模塊輸出該內(nèi)容的詳細(xì)信息。14.如權(quán)利要求1所述的電子設(shè)備，進(jìn)一步包括: 相機(jī)，其被配置為拍攝該電子設(shè)備的附近的視頻，并且 其中，該處理器進(jìn)一步被配置為基于該電子設(shè)備的附近的視頻來(lái)確定將要通過(guò)該音頻輸出模塊或該顯不器輸出的內(nèi)容的輸出方案。15.—種用于在電子設(shè)備中提供內(nèi)容的方法，該方法包括: 通過(guò)語(yǔ)音識(shí)別應(yīng)用接收語(yǔ)音輸入； 基于該語(yǔ)音輸入來(lái)確定將要輸出的內(nèi)容； 基于該語(yǔ)音識(shí)別應(yīng)用的狀態(tài)或該電子設(shè)備的操作環(huán)境來(lái)確定內(nèi)容的輸出方案；以及基于確定的輸出方案，使用該電子設(shè)備的顯示器或音頻輸出模塊中的至少一個(gè)來(lái)輸出與該語(yǔ)音輸入對(duì)應(yīng)的內(nèi)容。
【文檔編號(hào)】G06F3/0484GK106020763SQ201610178076
【公開日】2016年10月12日
【申請(qǐng)日】2016年3月25日
【發(fā)明人】河慧敏, 李京俊, 李奉原, 李弦律, P.拉托雷
【申請(qǐng)人】三星電子株式會(huì)社