一種聲音波形的處理方法、裝置、移動終端及vr頭戴設(shè)備的制造方法
【專利摘要】一種聲音波形的處理方法，包括：采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)；根據(jù)所述虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學參數(shù)，確定所述聲波信號的音源到指定物體的實際距離，確定所述實際距離與所述音源到所述指定物體的默認距離的比例關(guān)系；根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行實時修正。通過本方案通過實現(xiàn)根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距離和相對角度，使用戶人眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏差，從而達到用戶體驗更優(yōu)。
【專利說明】
一種聲音波形的處理方法、裝置、移動終端及VR頭戴設(shè)備
技術(shù)領(lǐng)域
[0001]本申請涉及但不限于通信技術(shù)領(lǐng)域，尤指一種聲音波形的處理方法、裝置、移動終 端及VR頭戴設(shè)備。
【背景技術(shù)】
[0002]目前的技術(shù)，在VR(Virtual Reality，虛擬現(xiàn)實）頭戴設(shè)備提供的虛擬場景中，虛 擬物體發(fā)出的聲音不會和當前VR頭戴設(shè)備的光學參數(shù)進行關(guān)聯(lián)，其發(fā)聲方位和大小不會根 據(jù)發(fā)聲物體在用戶人眼感受到的像距進行實時調(diào)整。從而造成播放音頻時，人耳感受到發(fā) 聲物體發(fā)出的聲音距離，和人眼看到的發(fā)聲物體的像距存在一定程度的偏差，并無法根據(jù) 人眼感受到的像距實時調(diào)整，對于VR體驗中的用戶，這個因素很大程度上影響了用戶的沉 浸感程度。顯然，目前技術(shù)無法滿足用戶日益增長的沉浸感程度需求，且聲像偏差容易造成 疲勞感和眩暈感，造成不良的用戶體驗。

【發(fā)明內(nèi)容】

[0003] 本發(fā)明實施例提供了一種聲音波形的處理方法、裝置、移動終端及VR頭戴設(shè)備，實 現(xiàn)根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距離和相對角度，使用戶人 眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏差。
[0004] 本發(fā)明實施例提供了一種聲音波形的處理方法，適用于虛擬現(xiàn)實頭戴設(shè)備，包括：
[0005] 采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)；
[0006] 根據(jù)所述虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學參數(shù)，確定所述聲波信號的音源到 指定物體的實際距離，確定所述實際距離與所述音源到所述指定物體的默認距離的比例關(guān) 系；
[0007] 根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行實時修正。
[0008] 可選地，所述采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)，包括：
[0009] 啟動移動終端的錄音功能，實時采集聲波信號；
[0010]通過設(shè)置在所述指定物體上以兩個相對角度為180°的麥克風組成的麥克風陣列 采集所述聲波信號的頻率響應(yīng)、麥克風間時間差和麥克風間強度差；
[0011] 對照預設(shè)的音源角度數(shù)據(jù)庫，根據(jù)所述頻率響應(yīng)、麥克風間時間差和麥克風間強 度差得到所述聲波信號的音源角度數(shù)據(jù)。
[0012] 可選地，所述音源角度數(shù)據(jù)庫的生成方法為：
[0013] 在消聲實驗室環(huán)境下，以所述兩個相對角度為180°的麥克風的中點為圓心，在同 心圓上各個三維坐標點上，播放[20，20000 ] Hz的掃頻信號；
[0014] 啟動移動終端的錄音功能，通過所述麥克風陣列采集來自各個三維坐標點上的聲 波信號；
[0015] 通過所述各個三維坐標點上的聲波信號建立音源角度與頻率響應(yīng)、麥克風間時間 差和麥克風間強度差之間的對應(yīng)關(guān)系，形成音源角度數(shù)據(jù)庫。
[0016]可選地，所述根據(jù)所述音源角度數(shù)據(jù)對所述聲波信號進行實時修正，包括：
[0017]將所述聲波信號和所述音源角度數(shù)據(jù)發(fā)送至聆聽角度旋轉(zhuǎn)模塊；
[0018] 調(diào)用預設(shè)的頭相關(guān)傳遞函數(shù)，得到所述聲波信號在相位、頻率及強度上的第一補 償值；
[0019] 根據(jù)所述第一補償值對所述聲波信號進行實時修正，
[0020] 所述根據(jù)所述比例關(guān)系對所述聲波信號進行實時修正，包括：
[0021 ]根據(jù)所述比例關(guān)系確定所述聲波信號在強度上的第二補償值；
[0022]根據(jù)所述第二補償值對所述聲波信號進行實時修正。
[0023]本發(fā)明實施例還提供一種聲音波形的處理裝置，包括：
[0024]獲取模塊，用于采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)；
[0025] 確定模塊，用于根據(jù)虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學系數(shù)，確定所述聲波信 號的音源到指定物體的實際距離，確定所述實際距離與所述音源到所述指定物體的默認距 離的比例關(guān)系；
[0026] 修正模塊，用于根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行實時 修正。
[0027]可選地，所述獲取模塊包括：
[0028] 啟動錄音單元，用于啟動移動終端的錄音功能，實時采集聲波信號；
[0029] 參數(shù)采集單元，用于通過所述指定物體上以兩個相對角度為180°的麥克風組成的 麥克風陣列采集所述聲波信號的頻率響應(yīng)、麥克風間時間差和麥克風間強度差；
[0030] 對照單元，用于對照預設(shè)的音源角度數(shù)據(jù)庫，根據(jù)所述頻率響應(yīng)、麥克風間時間差 和麥克風間強度差得到所述聲波信號的音源角度數(shù)據(jù)。
[0031] 可選地，所述音源角度數(shù)據(jù)庫的生成方法為：
[0032] 在消聲實驗室環(huán)境下，以所述兩個相對角度為180°的麥克風的中點為圓心，在同 心圓上各個三維坐標點上，播放[20，20000 ] Hz的掃頻信號；
[0033]啟動移動終端的錄音功能，通過所述麥克風陣列采集來自各個三維坐標點上的聲 波信號；
[0034]通過所述各個三維坐標點上的聲波信號建立音源角度與頻率響應(yīng)、麥克風間時間 差和麥克風間強度差之間的對應(yīng)關(guān)系，形成音源角度數(shù)據(jù)庫。
[0035] 可選地，所述修正模塊包括：
[0036] 發(fā)送單元，用于將所述聲波信號和所述音源角度數(shù)據(jù)發(fā)送至聆聽角度旋轉(zhuǎn)模塊；
[0037] 調(diào)用單元，用于調(diào)用預設(shè)的頭相關(guān)傳遞函數(shù)，得到所述聲波信號在相位、頻率及強 度上的第一補償值；
[0038] 第一補償單元，用于根據(jù)所述第一補償值對所述聲波信號進行實時修正，
[0039] 確定單元，用于根據(jù)所述比例關(guān)系確定所述聲波信號在強度上的第二補償值；
[0040] 第二補償單元，用于根據(jù)所述第二補償值對所述聲波信號進行實時修正。
[0041] 本發(fā)明實施例還提供一種移動終端，包括錄音模塊，還包括上述的聲音波形的處 理裝置。
[0042] 本發(fā)明實施例還提供一種虛擬現(xiàn)實頭戴設(shè)備，包括光學鏡片，還包括上述的移動 終端。
[0043]綜上，本發(fā)明實施例提供一種聲音波形的處理方法、裝置、移動終端及VR頭戴設(shè) 備，實現(xiàn)根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距離和相對角度，使 用戶人眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏差，從而達到用戶 體驗更優(yōu)，沉浸感更佳的效果。
【附圖說明】
[0044]附圖用來提供對本發(fā)明技術(shù)方案的進一步理解，并且構(gòu)成說明書的一部分，與本 申請的實施例一起用于解釋本發(fā)明的技術(shù)方案，并不構(gòu)成對本發(fā)明技術(shù)方案的限制。
[0045] 圖1為實現(xiàn)本發(fā)明各個實施例的移動終端的硬件結(jié)構(gòu)示意圖；
[0046] 圖2為如圖1所示的移動終端的無線通信系統(tǒng)示意圖；
[0047]圖3為虛擬現(xiàn)實頭戴設(shè)備中顯示的虛擬場景的示意圖；
[0048] 圖4為虛擬現(xiàn)實頭戴設(shè)備的成像示意圖；
[0049] 圖5為本發(fā)明實施例一的一種聲音波形的處理方法的流程圖；
[0050] 圖6為圖5中步驟SlO的方法流程圖。
[0051 ]圖7為本發(fā)明實施例一的音源角度數(shù)據(jù)庫的生成方法的流程圖；
[0052]圖8為本發(fā)明實施例一的聲波采集示意圖；
[0053]圖9為本發(fā)明實施例一的根據(jù)音源角度數(shù)據(jù)對聲波信號進行實時修正的流程圖； [0054]圖10為本發(fā)明實施例一的根據(jù)比例關(guān)系對聲波信號進行實時修正的流程圖；
[0055]圖11為本發(fā)明實施例二的一種聲音波形的處理裝置的示意圖；
[0056]圖12為本發(fā)明實施例三的一種聲音波形的處理裝置的示意圖；
[0057] 圖13為本發(fā)明實施例四的一種聲音波形的處理裝置的示意圖；
[0058] 圖14為本發(fā)明實施例的移動終端的不意圖；
[0059] 圖15為本發(fā)明實施例的虛擬現(xiàn)實頭戴設(shè)備的示意圖。
[0060] 本發(fā)明目的的實現(xiàn)、功能特點及優(yōu)點將結(jié)合實施例，參照附圖做進一步說明。
【具體實施方式】
[0061] 應(yīng)當理解，此處所描述的具體實施例僅僅用以解釋本發(fā)明，并不用于限定本發(fā)明。
[0062] 現(xiàn)在將參考附圖描述實現(xiàn)本發(fā)明各個實施例的移動終端。在后續(xù)的描述中，使用 用于表示元件的諸如"模塊"、"部件"或"單元"的后綴僅為了有利于本發(fā)明的說明，其本身 并沒有特定的意義。因此，"模塊"與"部件"可以混合地使用。
[0063] 移動終端可以以各種形式來實施。例如，本發(fā)明中描述的終端可以包括諸如移動 電話、智能電話、筆記本電腦、數(shù)字廣播接收器、PDA(個人數(shù)字助理）、PAD(平板電腦）、PMP (便攜式多媒體播放器）、導航裝置等等的移動終端以及諸如數(shù)字TV、臺式計算機等等的固 定終端。下面，假設(shè)終端是移動終端。然而，本領(lǐng)域技術(shù)人員將理解的是，除了特別用于移動 目的的元件之外，根據(jù)本發(fā)明的實施方式的構(gòu)造也能夠應(yīng)用于固定類型的終端。
[0064] 圖1為實現(xiàn)本發(fā)明各個實施例的移動終端的硬件結(jié)構(gòu)示意。
[0065] 移動終端100可以包括無線通信單元110、A/V(音頻/視頻)輸入單元120、用戶輸入 單元130、感測單元140、輸出單元150、存儲器160、接口單元170、控制器180和電源單元190 等等。圖1示出了具有各種組件的移動終端，但是應(yīng)理解的是，并不要求實施所有示出的組 件?？梢蕴娲貙嵤└嗷蚋俚慕M件。將在下面詳細描述移動終端的元件。
[0066] 無線通信單元110通常包括一個或多個組件，其允許移動終端100與無線通信系統(tǒng) 或網(wǎng)絡(luò)之間的無線電通信。例如，無線通信單元可以包括廣播接收模塊111、移動通信模塊 112、無線互聯(lián)網(wǎng)模塊113、短程通信模塊114和位置信息模塊115中的至少一個。
[0067] 廣播接收模塊111經(jīng)由廣播信道從外部廣播管理服務(wù)器接收廣播信號和/或廣播 相關(guān)信息。廣播信道可以包括衛(wèi)星信道和/或地面信道。廣播管理服務(wù)器可以是生成并發(fā)送 廣播信號和/或廣播相關(guān)信息的服務(wù)器或者接收之前生成的廣播信號和/或廣播相關(guān)信息 并且將其發(fā)送給終端的服務(wù)器。廣播信號可以包括TV廣播信號、無線電廣播信號、數(shù)據(jù)廣播 信號等等。而且，廣播信號可以進一步包括與TV或無線電廣播信號組合的廣播信號。廣播相 關(guān)信息也可以經(jīng)由移動通信網(wǎng)絡(luò)提供，并且在該情況下，廣播相關(guān)信息可以由移動通信模 塊112來接收。廣播信號可以以各種形式存在，例如，其可以以數(shù)字多媒體廣播(DMB)的電子 節(jié)目指南(EPG)、數(shù)字視頻廣播手持(DVB-H)的電子服務(wù)指南(ESG)等等的形式而存在。廣播 接收模塊111可以通過使用各種類型的廣播系統(tǒng)接收信號廣播。特別地，廣播接收模塊111 可以通過使用諸如多媒體廣播-地面(DMB-T)、數(shù)字多媒體廣播-衛(wèi)星(DMB-S)、數(shù)字視頻廣 播-手持（DVB-H)，前向鏈路媒體(MediaFL0 @)的數(shù)據(jù)廣播系統(tǒng)、地面數(shù)字廣播綜合服務(wù) (ISDB-T)等等的數(shù)字廣播系統(tǒng)接收數(shù)字廣播。廣播接收模塊111可以被構(gòu)造為適合提供廣 播信號的各種廣播系統(tǒng)以及上述數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收的廣播信號和/ 或廣播相關(guān)信息可以存儲在存儲器160(或者其它類型的存儲介質(zhì)）中。
[0068] 移動通信模塊112將無線電信號發(fā)送到基站(例如，接入點、節(jié)點B等等）、外部終端 以及服務(wù)器中的至少一個和/或從其接收無線電信號。這樣的無線電信號可以包括語音通 話信號、視頻通話信號、或者根據(jù)文本和/或多媒體消息發(fā)送和/或接收的各種類型的數(shù)據(jù)。 [0069]無線互聯(lián)網(wǎng)模塊113支持移動終端的無線互聯(lián)網(wǎng)接入。該模塊可以內(nèi)部或外部地 耦接到終端。該模塊所涉及的無線互聯(lián)網(wǎng)接入技術(shù)可以包括WLAN(無線LAN)(Wi-Fi)、Wibro (無線寬帶）、Wimax (全球微波互聯(lián)接入）、HSDPA (高速下行鏈路分組接入)等等。
[0070] 短程通信模塊114是用于支持短程通信的模塊。短程通信技術(shù)的一些示例包括藍 牙?、射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、紫蜂?等等。
[0071] 位置信息模塊115是用于檢查或獲取移動終端的位置信息的模塊。位置信息模塊 的典型示例是GPS(全球定位系統(tǒng)）。根據(jù)當前的技術(shù)，GPS模塊115計算來自三個或更多衛(wèi)星 的距離信息和準確的時間信息并且對于計算的信息應(yīng)用三角測量法，從而根據(jù)經(jīng)度、煒度 和高度準確地計算三維當前位置信息。當前，用于計算位置和時間信息的方法使用三顆衛(wèi) 星并且通過使用另外的一顆衛(wèi)星校正計算出的位置和時間信息的誤差。此外，GPS模塊115 能夠通過實時地連續(xù)計算當前位置信息來計算速度信息。
[0072] A/V輸入單元120用于接收音頻或視頻信號。A/V輸入單元120可以包括相機121和 麥克風1220,相機121對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態(tài)圖 片或視頻的圖像數(shù)據(jù)進行處理。處理后的圖像幀可以顯示在顯示單元151上。經(jīng)相機121處 理后的圖像幀可以存儲在存儲器160(或其它存儲介質(zhì)）中或者經(jīng)由無線通信單元110進行 發(fā)送，可以根據(jù)移動終端的構(gòu)造提供兩個或更多相機1210。麥克風122可以在電話通話模 式、記錄模式、語音識別模式等等運行模式中經(jīng)由麥克風接收聲音(音頻數(shù)據(jù)），并且能夠?qū)?這樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語音)數(shù)據(jù)可以在電話通話模式的情況下轉(zhuǎn)換 為可經(jīng)由移動通信模塊112發(fā)送到移動通信基站的格式輸出。麥克風122可以實施各種類型 的噪聲消除（或抑制）算法以消除（或抑制)在接收和發(fā)送音頻信號的過程中產(chǎn)生的噪聲或 者干擾。
[0073] 用戶輸入單元130可以根據(jù)用戶輸入的命令生成鍵輸入數(shù)據(jù)以控制移動終端的各 種操作。用戶輸入單元130允許用戶輸入各種類型的信息，并且可以包括鍵盤、鍋仔片、觸摸 板(例如，檢測由于被接觸而導致的電阻、壓力、電容等等的變化的觸敏組件）、滾輪、搖桿等 等。特別地，當觸摸板以層的形式疊加在顯示單元151上時，可以形成觸摸屏。
[0074] 感測單元140檢測移動終端100的當前狀態(tài)，（例如，移動終端100的打開或關(guān)閉狀 態(tài)）、移動終端100的位置、用戶對于移動終端100的接觸（即，觸摸輸入）的有無、移動終端 100的取向、移動終端100的加速或減速移動和方向等等，并且生成用于控制移動終端100的 操作的命令或信號。例如，當移動終端100實施為滑動型移動電話時，感測單元140可以感測 該滑動型電話是打開還是關(guān)閉。另外，感測單元140能夠檢測電源單元190是否提供電力或 者接口單元170是否與外部裝置耦接。感測單元140可以包括接近傳感器1410將在下面結(jié)合 觸摸屏來對此進行描述。
[0075] 接口單元170用作至少一個外部裝置與移動終端100連接可以通過的接口。例如， 外部裝置可以包括有線或無線頭戴式耳機端口、外部電源(或電池充電器)端口、有線或無 線數(shù)據(jù)端口、存儲卡端口、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出（I/O)端 口、視頻I/O端口、耳機端口等等。識別模塊可以是存儲用于驗證用戶使用移動終端100的各 種信息并且可以包括用戶識別模塊(UIM)、客戶識別模塊(SIM)、通用客戶識別模塊(USM) 等等。另外，具有識別模塊的裝置(下面稱為"識別裝置")可以采取智能卡的形式，因此，識 別裝置可以經(jīng)由端口或其它連接裝置與移動終端100連接。接口單元170可以用于接收來自 外部裝置的輸入(例如，數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿咏K端100內(nèi)的 一個或多個元件或者可以用于在移動終端和外部裝置之間傳輸數(shù)據(jù)。
[0076] 另外，當移動終端100與外部底座連接時，接口單元170可以用作允許通過其將電 力從底座提供到移動終端100的路徑或者可以用作允許從底座輸入的各種命令信號通過其 傳輸?shù)揭苿咏K端的路徑。從底座輸入的各種命令信號或電力可以用作用于識別移動終端是 否準確地安裝在底座上的信號。輸出單元150被構(gòu)造為以視覺、音頻和/或觸覺方式提供輸 出信號（例如，音頻信號、視頻信號、警報信號、振動信號等等）。輸出單元150可以包括顯示 單元151、音頻輸出模塊152、警報單元153等等。
[0077] 顯示單元151可以顯示在移動終端100中處理的信息。例如，當移動終端100處于電 話通話模式時，顯示單元151可以顯示與通話或其它通信(例如，文本消息收發(fā)、多媒體文件 下載等等)相關(guān)的用戶界面(UI)或圖形用戶界面(GUI)。當移動終端100處于視頻通話模式 或者圖像捕獲模式時，顯示單元151可以顯示捕獲的圖像和/或接收的圖像、示出視頻或圖 像以及相關(guān)功能的UI或GUI等等。
[0078]同時，當顯示單元151和觸摸板以層的形式彼此疊加以形成觸摸屏時，顯示單元 151可以用作輸入裝置和輸出裝置。顯示單元151可以包括液晶顯示器(LCD)、薄膜晶體管 IXD(TFT-IXD)、有機發(fā)光二極管(OLED)顯示器、柔性顯示器、三維(3D)顯示器等等中的至少 一種。這些顯示器中的一些可以被構(gòu)造為透明狀以允許用戶從外部觀看，這可以稱為透明 顯示器，典型的透明顯示器可以例如為TOLED(透明有機發(fā)光二極管）顯示器等等。根據(jù)特定 想要的實施方式，移動終端100可以包括兩個或更多顯示單元(或其它顯示裝置），例如，移 動終端可以包括外部顯示單元(未示出）和內(nèi)部顯示單元(未示出）。觸摸屏可用于檢測觸摸 輸入壓力以及觸摸輸入位置和觸摸輸入面積。
[0079] 音頻輸出模塊152可以在移動終端處于呼叫信號接收模式、通話模式、記錄模式、 語音識別模式、廣播接收模式等等模式下時，將無線通信單元110接收的或者在存儲器160 中存儲的音頻數(shù)據(jù)轉(zhuǎn)換音頻信號并且輸出為聲音。而且，音頻輸出模塊152可以提供與移動 終端100執(zhí)行的特定功能相關(guān)的音頻輸出（例如，呼叫信號接收聲音、消息接收聲音等等）。 音頻輸出模塊152可以包括揚聲器、蜂鳴器等等。
[0080] 警報單元153可以提供輸出以將事件的發(fā)生通知給移動終端100。典型的事件可以 包括呼叫接收、消息接收、鍵信號輸入、觸摸輸入等等。除了音頻或視頻輸出之外，警報單元 153可以以不同的方式提供輸出以通知事件的發(fā)生。例如，警報單元153可以以振動的形式 提供輸出，當接收到呼叫、消息或一些其它進入通信(incoming communication)時，警報單 元153可以提供觸覺輸出（即，振動）以將其通知給用戶。通過提供這樣的觸覺輸出，即使在 用戶的移動電話處于用戶的口袋中時，用戶也能夠識別出各種事件的發(fā)生。警報單元153也 可以經(jīng)由顯示單元151或音頻輸出模塊152提供通知事件的發(fā)生的輸出。
[0081] 存儲器160可以存儲由控制器180執(zhí)行的處理和控制操作的軟件程序等等，或者可 以暫時地存儲己經(jīng)輸出或?qū)⒁敵龅臄?shù)據(jù)(例如，電話簿、消息、靜態(tài)圖像、視頻等等）。而 且，存儲器160可以存儲關(guān)于當觸摸施加到觸摸屏時輸出的各種方式的振動和音頻信號的 數(shù)據(jù)。
[0082] 存儲器160可以包括至少一種類型的存儲介質(zhì)，所述存儲介質(zhì)包括閃存、硬盤、多 媒體卡、卡型存儲器(例如，SD或DX存儲器等等）、隨機訪問存儲器(RAM)、靜態(tài)隨機訪問存儲 器（SRAM)、只讀存儲器(R0M)、電可擦除可編程只讀存儲器(EEPROM)、可編程只讀存儲器 (PROM)、磁性存儲器、磁盤、光盤等等。而且，移動終端100可以與通過網(wǎng)絡(luò)連接執(zhí)行存儲器 160的存儲功能的網(wǎng)絡(luò)存儲裝置協(xié)作。
[0083] 控制器180通?？刂埔苿咏K端的總體操作。例如，控制器180執(zhí)行與語音通話、數(shù)據(jù) 通信、視頻通話等等相關(guān)的控制和處理。另外，控制器180可以包括用于再現(xiàn)(或回放)多媒 體數(shù)據(jù)的多媒體模塊1810,多媒體模塊1810可以構(gòu)造在控制器180內(nèi)，或者可以構(gòu)造為與控 制器180分離?？刂破?80可以執(zhí)行模式識別處理，以將在觸摸屏上執(zhí)行的手寫輸入或者圖 片繪制輸入識別為字符或圖像。
[0084]電源單元190在控制器180的控制下接收外部電力或內(nèi)部電力并且提供操作各元 件和組件所需的適當?shù)碾娏Α?br>[0085]這里描述的各種實施方式可以以使用例如計算機軟件、硬件或其任何組合的計算 機可讀介質(zhì)來實施。對于硬件實施，這里描述的實施方式可以通過使用特定用途集成電路 (ASIC)、數(shù)字信號處理器(DSP)、數(shù)字信號處理裝置(DSPD)、可編程邏輯裝置(PLD)、現(xiàn)場可 編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、被設(shè)計為執(zhí)行這里描述的功能的 電子單元中的至少一種來實施，在一些情況下，這樣的實施方式可以在控制器180中實施。 對于軟件實施，諸如過程或功能的實施方式可以與允許執(zhí)行至少一種功能或操作的單獨的 軟件模塊來實施。軟件代碼可以由以任何適當?shù)木幊陶Z言編寫的軟件應(yīng)用程序(或程序)來 實施，軟件代碼可以存儲在存儲器160中并且由控制器180執(zhí)行。
[0086] 至此，己經(jīng)按照其功能描述了移動終端。下面，為了簡要起見，將描述諸如折疊型、 直板型、擺動型、滑動型移動終端等等的各種類型的移動終端中的滑動型移動終端作為示 例。因此，本發(fā)明能夠應(yīng)用于任何類型的移動終端，并且不限于滑動型移動終端。
[0087] 如圖1中所示的移動終端100可以被構(gòu)造為利用經(jīng)由幀或分組發(fā)送數(shù)據(jù)的諸如有 線和無線通信系統(tǒng)以及基于衛(wèi)星的通信系統(tǒng)來操作。
[0088] 現(xiàn)在將參考圖2描述其中根據(jù)本發(fā)明的移動終端能夠操作的通信系統(tǒng)。
[0089] 這樣的通信系統(tǒng)可以使用不同的空中接口和/或物理層。例如，由通信系統(tǒng)使用的 空中接口包括例如頻分多址(FDMA)、時分多址(TDMA)、碼分多址(CDMA)和通用移動通信系 統(tǒng)(UMTS)(特別地，長期演進(LTE))、全球移動通信系統(tǒng)(GSM)等等。作為非限制性示例，下 面的描述涉及CDM通信系統(tǒng)，但是這樣的教導同樣適用于其它類型的系統(tǒng)。
[0090] 參考圖2,⑶MA無線通信系統(tǒng)可以包括多個移動終端100、多個基站(BS)270、基站 控制器(BSC)275和移動交換中心(MSCUSOJSCSSO被構(gòu)造為與公共電話交換網(wǎng)絡(luò)(PSTN) 290形成接口。MSC280還被構(gòu)造為與可以經(jīng)由回程線路耦接到基站270的BSC275形成接口。 回程線路可以根據(jù)若干己知的接口中的任一種來構(gòu)造，所述接口包括例如E1/T1、ATM，IP、 PPP、幀中繼、HDSUADSL或xDSL。將理解的是，如圖2中所示的系統(tǒng)可以包括多個BSC2750。
[0091] 每個BS270可以服務(wù)一個或多個分區(qū)（或區(qū)域），由多向天線或指向特定方向的天 線覆蓋的每個分區(qū)放射狀地遠離BS270?；蛘?，每個分區(qū)可以由用于分集接收的兩個或更多 天線覆蓋。每個BS270可以被構(gòu)造為支持多個頻率分配，并且每個頻率分配具有特定頻譜 (例如，1·25ΜΗζ，5ΜΗζ 等等）。
[0092]分區(qū)與頻率分配的交叉可以被稱為CDMA信道。BS270也可以被稱為基站收發(fā)器子 系統(tǒng)（BTS)或者其它等效術(shù)語。在這樣的情況下，術(shù)語"基站"可以用于籠統(tǒng)地表示單個 BSC275和至少一個BS270?；疽部梢员环Q為〃蜂窩站〃?；蛘?，特定BS270的各分區(qū)可以被稱 為多個蜂窩站。
[0093]如圖2中所示，廣播發(fā)射器(ΒΤ)295將廣播信號發(fā)送給在系統(tǒng)內(nèi)操作的移動終端 100。如圖1中所示的廣播接收模塊111被設(shè)置在移動終端100處以接收由ΒΤ295發(fā)送的廣播 信號。在圖2中，示出了幾個全球定位系統(tǒng)(GPS)衛(wèi)星300。衛(wèi)星300幫助定位多個移動終端 100中的至少一個。
[0094]在圖2中，描繪了多個衛(wèi)星300,但是理解的是，可以利用任何數(shù)目的衛(wèi)星獲得有用 的定位信息。如圖1中所示的GPS模塊115通常被構(gòu)造為與衛(wèi)星300配合以獲得想要的定位信 息。替代GPS跟蹤技術(shù)或者在GPS跟蹤技術(shù)之外，可以使用可以跟蹤移動終端的位置的其它 技術(shù)。另外，至少一個GPS衛(wèi)星300可以選擇性地或者額外地處理衛(wèi)星DMB傳輸。
[0095]作為無線通信系統(tǒng)的一個典型操作，BS270接收來自各種移動終端100的反向鏈路 信號。移動終端100通常參與通話、消息收發(fā)和其它類型的通信。特定基站270接收的每個反 向鏈路信號被在特定BS270內(nèi)進行處理。獲得的數(shù)據(jù)被轉(zhuǎn)發(fā)給相關(guān)的BSC275 ASC提供通話 資源分配和包括BS270之間的軟切換過程的協(xié)調(diào)的移動管理功能。BSC275還將接收到的數(shù) 據(jù)路由到MSC280,其提供用于與PSTN290形成接口的額外的路由服務(wù)。類似地，PSTN290與 MSC280形成接口，MSC與BSC275形成接口，并且BSC275相應(yīng)地控制BS270以將正向鏈路信號 發(fā)送到移動終端100。
[0096]基于上述移動終端硬件結(jié)構(gòu)以及通信系統(tǒng)，提出本發(fā)明方法各個實施例。
[0097] VR頭戴設(shè)備提供的虛擬場景中，用戶透過光學鏡片觀察移動終端屏幕，看到的是 一個虛擬世界(virtual world)，在這個虛擬世界里，當前用戶視覺可見的僅為一小部分， 稱為用戶視覺范圍(matched zone)。同時，使用頭部追蹤設(shè)備對用戶當前在虛擬世界的前 進方向進行追蹤，在虛擬世界中也有一個用戶頭部的模型，隨著用戶真實的頭部動作轉(zhuǎn)向 或移動而動作，稱為用戶頭部匹配模型(user's matched head)。如圖3所示。
[0098] 所述的VR頭戴設(shè)備，應(yīng)至少裝配如下器件:光學鏡片、移動終端的插槽或夾具、音 頻元器件(有線耳機、藍牙耳機等）。
[0099] 所述的移動終端，應(yīng)至少裝配如下器件：顯示屏、處理器（CPU (Central Processing Unit，中央處理單元）、GPU(Graphical Processing Unit，圖形處理器）等）、音 頻輸出接口（耳機孔、藍牙芯片等）、頭部方位追蹤設(shè)備(陀螺儀等）。
[0100] 對于虛擬世界中的發(fā)聲物體，當前技術(shù)是根據(jù)虛擬世界中此物體相對于用戶頭部 匹配模型的位置，來確定音頻輸出的方位和強弱。
[0101] 如圖4所示，假設(shè)虛擬世界中存在兩個發(fā)聲物體，都進入到用戶視覺范圍，物體A相 對于用戶頭部匹配模型〇的向量為泛i ,物體B相對于用戶頭部匹配模型0的向量為涵，則物 體AB之間的位置向量為I ·這兩個物體的影像，通過投影到移動終端的顯示屏，并通過VR 頭戴設(shè)備的光學鏡片，從而進入人眼;發(fā)出的聲音，從移動終端的音頻輸出接口輸出到音頻 元器件，從而到達人耳。
[0102]由于VR頭戴設(shè)備的光學鏡片的存在，人眼觀察到的A、B物體，和虛擬世界中的理想 位置存在出入，而此時發(fā)聲物體的音頻輸出，仍然按照虛擬世界中的理想位置發(fā)出，由此出 現(xiàn)了聲像偏差的問題，很容易造成用戶的疲勞感和眩暈感。
[0103] 如圖4所示，A、B物體在人眼處成像的位置向量變?yōu)門7瓦'，和光學鏡片的焦距，放大 系數(shù)等光學系數(shù)密切相關(guān)。設(shè)光學鏡片到移動終端屏幕的距離為a，光學鏡片的焦距為f，則 物距b可誦付加下公忒i+算：
[0104]
[0105] 而相對位置的計算公式j(luò)
[0106] 式中，μ表示投影因子，表征虛擬世界投影到顯示屏的縮放比例;α表示光學鏡片的 放大系數(shù)，表征在當前物距下，所成虛像和實物的放大比例，如圖4所示。
[0107] 為了解決此問題，需要在移動終端上增加對VR頭戴設(shè)備的光學鏡片參數(shù)的適配操 作，針對播放的音頻進行實時的調(diào)整，例如上文計算出的Α、Β物體在人眼處所成虛像的位置 向量和虛擬世界中理想的位置向量E ,存在角度和距離的差異。
[0108] 以下通過具體實施例進行詳細說明。
[0109] 實施例一
[0110] 圖5為本發(fā)明實施例的一種聲音波形的處理方法的流程圖，本實施例的方法適用 于VR頭戴設(shè)備，下面結(jié)合圖5來描述本實施例的一種聲音波形的處理方法，如圖5所示，本實 施例的方法包括：
[0111] S10、采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)；
[0112] S20、根據(jù)所述虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學參數(shù)，確定所述聲波信號的音 源到指定物體的實際距離，確定所述實際距離與所述音源到所述指定物體的默認距離的比 例關(guān)系；
[0113] S30、根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行實時修正。
[0114]本實施例的方法，根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距 離和相對角度，使用戶人眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏 差，從而達到用戶體驗更優(yōu)，沉浸感更佳的效果。
[0115]在本實施例中，如圖6所示，所述步驟SlO包括：
[0116] Sll、啟動移動終端的錄音功能，實時采集聲波信號；
[0117] S12、通過設(shè)置在所述指定物體上以兩個相對角度為180°的麥克風組成的麥克風 陣列采集所述聲波信號的頻率響應(yīng)、麥克風間時間差和麥克風間強度差；
[0118] S13、對照預設(shè)的音源角度數(shù)據(jù)庫，根據(jù)所述頻率響應(yīng)、麥克風間時間差和麥克風 間強度差得到所述聲波信號的音源角度數(shù)據(jù)。
[0119]所述指定物體為標準人頭模型。
[0120] 在本實施例中，通過所述聲波信號的頻率響應(yīng)、麥克風間時間差（intermicrophone time difference，簡稱ITD) 和麥克風間強度差 （inter-mi crophone intensity difference，簡稱IID)可以準確定位出當前的音源角度。
[0121] 如圖7所示，本實施例中，所述步驟S13中的音源角度數(shù)據(jù)庫的生成方法為：
[0122] 步驟131、在消聲實驗室環(huán)境下，以所述兩個相對角度為180°的麥克風的中點為圓 心，在同心圓上各個三維坐標點上，播放[20，20000 ] Hz的掃頻信號；
[0123] 步驟132、啟動移動終端的錄音功能，通過所述麥克風陣列采集來自各個三維坐標 點上的聲波信號；
[0124] 步驟133、通過所述各個三維坐標點上的聲波信號建立音源角度與頻率響應(yīng)、麥克 風間時間差和麥克風間強度差之間的對應(yīng)關(guān)系，形成音源角度數(shù)據(jù)庫。
[0125] 在本實施例中，所述音源角度數(shù)據(jù)庫是在移動終端出廠前預先建立的，是具有"可 視音場"功能的移動終端所必須的。
[0126] 在消聲實驗室環(huán)境下，以兩個相對角度為180°的麥克風組成一個陣列，以此陣列 的中點為圓心，在同心圓上各個三維坐標點上，播放[20，20000 ]Hz的掃頻信號，通過麥克風 陣列采集來自各個三維坐標點上的聲音波形。
[0127]其采集聲波的方案如圖8所示，采用水平角度(Azimuth)、仰角（elevation)及前后 來表示音源角度數(shù)據(jù);在其他兩軸不變的情況下，單純改變一個角度，不同頻率的聲波的響 應(yīng)是不同的，再加上ITD、IID，三個條件可以準確定位出當前的音源角度。按照不同的辨別 效果，采集的坐標點之間可以用不同的間隔精度，一般而言，以1°至5°為精度可以滿足絕大 多數(shù)用戶的人耳辨別要求。全部采集完畢后，形成音源角度數(shù)據(jù)庫。
[0128] 音源數(shù)據(jù)庫保存在移動終端的存儲器中，作為判斷音樂文件原始的依據(jù)。在判斷 時，通過左右聲道的ITD、IID以及頻率響應(yīng)，和音源角度數(shù)據(jù)庫里保存的各個角度中的ITD、 IID以及頻率響應(yīng)進行比對，找出最為貼近的數(shù)據(jù)，即表示當前音樂回放角度是該數(shù)據(jù)對應(yīng) 的角度，如播放角度為前方〇度，仰角為〇度。
[0129] 在本實施例中，如圖9所示，步驟S30中根據(jù)所述音源角度數(shù)據(jù)對所述聲波信號進 行實時修正，包括：
[0130] S310、將所述聲波信號和所述音源角度數(shù)據(jù)發(fā)送至聆聽角度旋轉(zhuǎn)模塊；
[0131 ] S311、調(diào)用預設(shè)的HRTF(Head Related Transfer Function，頭相關(guān)變換函數(shù)），得 到所述聲波信號在相位及頻率上的第一補償值；
[0132] S312、根據(jù)所述第一補償值對所述聲波信號進行實時修正。
[0133] 在本實施例中，所述HRTF是預置于移動終端內(nèi)的聆聽角度旋轉(zhuǎn)模塊中，聆聽角度 旋轉(zhuǎn)模塊在接收傳輸過來的角度數(shù)據(jù)和原始聲波信號后，套用預置的HRTF模型，得到該原 始聲波信號在相位及頻率上應(yīng)該補償?shù)拇笮?，進而對原始聲波信號進行實時修正。
[0134] 根據(jù)光學參數(shù)適配后的發(fā)聲物體發(fā)出的聲波按照上述HRTF模型進行調(diào)整和補償， 如聆聽角度設(shè)置為前方偏左30度，仰角為45度，接收到上述設(shè)置后，聆聽角度旋轉(zhuǎn)模塊通過 查詢通用的HRTF模型，用作聲波補償?shù)闹笇藴省?br>[0135] 此HRTF模型的特征是，取一般人類頭部尺寸、繞射、反射、傳遞參數(shù)的平均值，或針 對目標人群(如亞洲人）的平均值或代表值，在消聲實驗室環(huán)境下，采用業(yè)界認可的標準的 仿真人頭模型，重復在移動終端上對VR頭戴設(shè)備的光學鏡片參數(shù)的進行適配操作，針對播 放的音頻進行實時的調(diào)整的實驗。只是把接收聲波的儀器變成該仿真人頭模型，同樣采集 三維空間各坐標點的掃頻信號的波形。
[0136] 當然，聲學學界中已有多個大型實驗室對這部分數(shù)據(jù)進行過測量，直接采用這些 實驗室發(fā)布的數(shù)據(jù)，作為移動終端中預置的HRTF模型，也是可以的。聆聽角度旋轉(zhuǎn)模塊得到 該原始聲波在相位、頻率、強度上應(yīng)該補償?shù)拇笮?，進而對原始聲波進行實時修正。
[0137] 在本實施例中，如圖10所示，步驟S30中根據(jù)所述比例關(guān)系對所述聲波信號進行實 時修正，包括：
[0138] S320、根據(jù)所述比例關(guān)系確定所述聲波信號在強度上的第二補償值；
[0139] S321、根據(jù)所述第二補償值對所述聲波信號進行實時修正。
[0140] 根據(jù)聲音在空氣中的傳播規(guī)律可知，聲音能量的大小和距離的平方成反比，由此 可計算出強度的補償?shù)拇笮?，進而對原始聲波進行實時修正。
[0141]最后，把經(jīng)過處理的聲音波形，通過輸出接口輸出給用戶，帶來準確的聲像適配的 播放效果，實現(xiàn)根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距離和相對角 度，使用戶人眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏差，從而達到 用戶體驗更優(yōu)，沉浸感更佳的效果。
[0142] 實施例二
[0143] 圖11為本發(fā)明實施例的一種聲音波形的處理裝置的示意圖，如圖11所示，本實施 例的一種聲音波形的處理裝置0001包括：
[0144] 獲取模塊1000，用于采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)；
[0145] 確定模塊2000,用于根據(jù)所述虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學系數(shù)，確定所 述聲波信號的音源到指定物體的實際距離和角度，確定所述實際距離與所述音源到所述指 定物體的默認距離的比例關(guān)系和角度；
[0146] 修正模塊3000,用于根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行 實時修正。
[0147] 本實施例的方法，根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距 離和相對角度，使用戶人眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏 差，從而達到用戶體驗更優(yōu)，沉浸感更佳的效果。
[0148] 實施例三
[0149] 圖12為本發(fā)明實施例的一種聲音波形的處理裝置的示意圖，如圖12所示，所述獲 取模塊1000包括：
[0150] 啟動錄音單元1010,用于啟動移動終端的錄音功能，實時采集聲波信號；
[0151] 參數(shù)采集單元1020,用于通過所述指定物體上以兩個相對角度為180°的麥克風組 成的麥克風陣列采集所述聲波信號的頻率響應(yīng)、麥克風間時間差和麥克風間強度差；
[0152] 對照單元1030,用于對照預設(shè)的音源角度數(shù)據(jù)庫，根據(jù)所述頻率響應(yīng)、麥克風間時 間差和麥克風間強度差得到所述聲波信號的音源角度數(shù)據(jù)。
[0153] 在本實施例中，通過所述聲波信號的頻率響應(yīng)、ITD和IID可以準確定位出當前的 音源角度。
[0154] 本實施例中，所述音源角度數(shù)據(jù)庫的生成方法為：
[0155] 在消聲實驗室環(huán)境下，以所述兩個相對角度為180°的麥克風的中點為圓心，在同 心圓上各個三維坐標點上，播放[20，20000 ]Hz的掃頻信號，通過麥克風陣列采集來自各個 三維坐標點上的聲音波形；
[0156] 啟動移動終端的錄音功能，通過所述麥克風陣列采集來自各個三維坐標點上的聲 波信號；
[0157] 通過所述各個三維坐標點上的聲波信號建立音源角度與頻率響應(yīng)、麥克風間時間 差和麥克風間強度差之間的對應(yīng)關(guān)系，形成音源角度數(shù)據(jù)庫。
[0158] 在本實施例中，所述音源角度數(shù)據(jù)庫是在移動終端出廠前預先建立的，是具有"可 視音場"功能的移動終端所必須的。
[0159]其采集聲波的方案如圖8所示，采用水平角度(Azimuth)、仰角（elevation)及前后 來表示音源角度數(shù)據(jù);在其他兩軸不變的情況下，單純改變一個角度，不同頻率的聲波的響 應(yīng)是不同的，再加上ITD、IID，三個條件可以準確定位出當前的音源角度。按照不同的辨別 效果，采集的坐標點之間可以用不同的間隔精度，一般而言，以1°至5°為精度可以滿足絕大 多數(shù)用戶的人耳辨別要求。全部采集完畢后，形成音源角度數(shù)據(jù)庫。
[0160] 音源數(shù)據(jù)庫保存在移動終端的存儲器中，作為判斷音樂文件原始的依據(jù)。在判斷 時，通過左右聲道的ITD、IID以及頻率響應(yīng)，和音源角度數(shù)據(jù)庫里保存的各個角度中的ITD、 IID以及頻率響應(yīng)進行比對，找出最為貼近的數(shù)據(jù)，即表示當前音樂回放角度是該數(shù)據(jù)對應(yīng) 的角度，如播放角度為前方〇度，仰角為〇度。
[0161] 實施例四
[0162] 圖13為本發(fā)明實施例的一種聲音波形的處理裝置的示意圖，如圖13所示，所述修 正模塊3000包括：
[0163] 發(fā)送單元3010,用于將所述聲波信號和所述音源角度數(shù)據(jù)發(fā)送至聆聽角度旋轉(zhuǎn)模 塊；
[0164] 調(diào)用單元3020,用于調(diào)用預設(shè)的頭相關(guān)傳遞函數(shù)，得到所述聲波信號在相位、頻率 及強度上的第一補償值；
[0165] 第一補償單元3030,用于根據(jù)所述第一補償值對所述聲波信號進行實時修正。
[0166] 在本實施例中，所述HRTF是預置于移動終端內(nèi)的聆聽角度旋轉(zhuǎn)模塊中，聆聽角度 旋轉(zhuǎn)模塊在接收傳輸過來的角度數(shù)據(jù)和原始聲波信號后，套用預置的HRTF模型，得到該原 始聲波信號在相位及頻率上應(yīng)該補償?shù)拇笮?，進而對原始聲波信號進行實時修正。
[0167] 根據(jù)光學參數(shù)適配后的發(fā)聲物體發(fā)出的聲波按照上述HRTF模型進行調(diào)整和補償， 如聆聽角度設(shè)置為前方偏左30度，仰角為45度，接收到上述設(shè)置后，聆聽角度旋轉(zhuǎn)模塊通過 查詢通用的HRTF模型，用作聲波補償?shù)闹笇藴省?br>[0168] 此HRTF模型的特征是，取一般人類頭部尺寸、繞射、反射、傳遞參數(shù)的平均值，或針 對目標人群(如亞洲人）的平均值或代表值，在消聲實驗室環(huán)境下，采用業(yè)界認可的標準的 仿真人頭模型，重復在移動終端上對VR頭戴設(shè)備的光學鏡片參數(shù)的進行適配操作，針對播 放的音頻進行實時的調(diào)整的實驗。只是把接收聲波的儀器變成該仿真人頭模型，同樣采集 三維空間各坐標點的掃頻信號的波形。
[0169] 當然，聲學學界中已有多個大型實驗室對這部分數(shù)據(jù)進行過測量，直接采用這些 實驗室發(fā)布的數(shù)據(jù)，作為移動終端中預置的HRTF模型，也是可以的。聆聽角度旋轉(zhuǎn)模塊得到 該原始聲波在相位、頻率、強度上應(yīng)該補償?shù)拇笮?，進而對原始聲波進行實時修正。
[0170] 所述修正模塊3000還可以包括：
[0171]確定單元3040,用于根據(jù)所述比例關(guān)系確定所述聲波信號在強度上的第二補償 值；
[0172]第二補償單元3050,用于根據(jù)所述第二補償值對所述聲波信號進行實時修正。
[0173]根據(jù)聲音在空氣中的傳播規(guī)律可知，聲音能量的大小和距離的平方成反比，由此 可計算出強度的補償?shù)拇笮。M而對原始聲波進行實時修正。
[0174]最后，把經(jīng)過處理的聲音波形，通過輸出接口輸出給用戶，帶來準確的聲像適配的 播放效果，實現(xiàn)根據(jù)VR頭戴設(shè)備的光學參數(shù)來實時調(diào)整發(fā)聲物體音頻播放的距離和相對角 度，使用戶人眼看到的和耳朵聽到的發(fā)聲物體處于同一位置，不會產(chǎn)生聲像偏差，從而達到 用戶體驗更優(yōu)，沉浸感更佳的效果。
[0175] 實施例五
[0176] 圖14為本發(fā)明實施例的移動終端的示意圖，如圖14所示，本實施例的移動終端 0002包括：
[0177] 用于接收聲波信號錄音模塊00021，和以上實施例中所述的任一聲音波形的處理 裝置0001。
[0178] 實施例六
[0179] 圖15為本發(fā)明實施例的虛擬現(xiàn)實頭戴設(shè)備的示意圖，如圖15所示，本實施例的虛 擬現(xiàn)實頭戴設(shè)備0003包括，上述的移到終端0002。
[0180]需要說明的是，在本文中，術(shù)語"包括"、"包含"或者其任何其他變體意在涵蓋非排 他性的包含，從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素，而 且還包括沒有明確列出的其他要素，或者是還包括為這種過程、方法、物品或者裝置所固有 的要素。在沒有更多限制的情況下，由語句"包括一個……"限定的要素，并不排除在包括該 要素的過程、方法、物品或者裝置中還存在另外的相同要素。
[0181] 上述本發(fā)明實施例序號僅僅為了描述，不代表實施例的優(yōu)劣。
[0182] 通過以上的實施方式的描述，本領(lǐng)域的技術(shù)人員可以清楚地了解到上述實施例方 法可借助軟件加必需的通用硬件平臺的方式來實現(xiàn)，當然也可以通過硬件，但很多情況下 前者是更佳的實施方式?；谶@樣的理解，本發(fā)明的技術(shù)方案本質(zhì)上或者說對現(xiàn)有技術(shù)做 出貢獻的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來，該計算機軟件產(chǎn)品存儲在一個存儲介質(zhì) (如ROM/RAM、磁碟、光盤)中，包括若干指令用以使得一臺終端設(shè)備(可以是手機，計算機，月艮 務(wù)器，空調(diào)器，或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個實施例所述的方法。
[0183]以上僅為本發(fā)明的優(yōu)選實施例，并非因此限制本發(fā)明的專利范圍，凡是利用本發(fā) 明說明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換，或直接或間接運用在其他相關(guān)的技 術(shù)領(lǐng)域，均同理包括在本發(fā)明的專利保護范圍內(nèi)。
【主權(quán)項】
1. 一種聲音波形的處理方法，適用于虛擬現(xiàn)實頭戴設(shè)備，其特征在于，包括： 采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)； 根據(jù)所述虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學參數(shù)，確定所述聲波信號的音源到指定 物體的實際距離，確定所述實際距離與所述音源到所述指定物體的默認距離的比例關(guān)系； 根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行實時修正。2. 根據(jù)權(quán)利要求1所述的聲音波形的處理方法，其特征在于，所述采集聲波信號，獲取 所述聲波信號的音源角度數(shù)據(jù)，包括： 啟動移動終端的錄音功能，實時采集聲波信號； 通過設(shè)置在所述指定物體上以兩個相對角度為180°的麥克風組成的麥克風陣列采集 所述聲波信號的頻率響應(yīng)、麥克風間時間差和麥克風間強度差； 對照預設(shè)的音源角度數(shù)據(jù)庫，根據(jù)所述頻率響應(yīng)、麥克風間時間差和麥克風間強度差 得到所述聲波信號的音源角度數(shù)據(jù)。3. 根據(jù)權(quán)利要求2所述的聲音波形的處理方法，其特征在于，所述音源角度數(shù)據(jù)庫的生 成方法為： 在消聲實驗室環(huán)境下，以所述兩個相對角度為180°的麥克風的中點為圓心，在同心圓 上各個三維坐標點上，播放[20，20000 ] Hz的掃頻信號； 啟動移動終端的錄音功能，通過所述麥克風陣列采集來自各個三維坐標點上的聲波信 號； 通過所述各個三維坐標點上的聲波信號建立音源角度與頻率響應(yīng)、麥克風間時間差和 麥克風間強度差之間的對應(yīng)關(guān)系，形成音源角度數(shù)據(jù)庫。4. 根據(jù)權(quán)利要求1所述的聲音波形的處理方法，其特征在于，所述根據(jù)所述音源角度數(shù) 據(jù)對所述聲波信號進行實時修正，包括： 將所述聲波信號和所述音源角度數(shù)據(jù)發(fā)送至聆聽角度旋轉(zhuǎn)模塊； 調(diào)用預設(shè)的頭相關(guān)傳遞函數(shù)，得到所述聲波信號在相位、頻率及強度上的第一補償值； 根據(jù)所述第一補償值對所述聲波信號進行實時修正， 所述根據(jù)所述比例關(guān)系對所述聲波信號進行實時修正，包括： 根據(jù)所述比例關(guān)系確定所述聲波信號在強度上的第二補償值； 根據(jù)所述第二補償值對所述聲波信號進行實時修正。5. -種聲音波形的處理裝置，其特征在于，包括： 獲取模塊，用于采集聲波信號，獲取所述聲波信號的音源角度數(shù)據(jù)； 確定模塊，用于根據(jù)虛擬現(xiàn)實頭戴設(shè)備的光學鏡片的光學系數(shù)，確定所述聲波信號的 音源到指定物體的實際距離，確定所述實際距離與所述音源到所述指定物體的默認距離的 比例關(guān)系； 修正模塊，用于根據(jù)所述音源角度數(shù)據(jù)和所述比例關(guān)系對所述聲波信號進行實時修 正。6. 根據(jù)權(quán)利要求5所述的聲音波形的處理裝置，其特征在于，所述獲取模塊包括： 啟動錄音單元，用于啟動移動終端的錄音功能，實時采集聲波信號； 參數(shù)采集單元，用于通過所述指定物體上以兩個相對角度為180°的麥克風組成的麥克 風陣列采集所述聲波信號的頻率響應(yīng)、麥克風間時間差和麥克風間強度差； 對照單元，用于對照預設(shè)的音源角度數(shù)據(jù)庫，根據(jù)所述頻率響應(yīng)、麥克風間時間差和麥 克風間強度差得到所述聲波信號的音源角度數(shù)據(jù)。7. 根據(jù)權(quán)利要求6所述的聲音波形的處理裝置，其特征在于，所述音源角度數(shù)據(jù)庫的生 成方法為： 在消聲實驗室環(huán)境下，以所述兩個相對角度為180°的麥克風的中點為圓心，在同心圓 上各個三維坐標點上，播放[20，20000 ] Hz的掃頻信號； 啟動移動終端的錄音功能，通過所述麥克風陣列采集來自各個三維坐標點上的聲波信 號； 通過所述各個三維坐標點上的聲波信號建立音源角度與頻率響應(yīng)、麥克風間時間差和 麥克風間強度差之間的對應(yīng)關(guān)系，形成音源角度數(shù)據(jù)庫。8. 根據(jù)權(quán)利要求5所述的聲音波形的處理裝置，其特征在于，所述修正模塊包括： 發(fā)送單元，用于將所述聲波信號和所述音源角度數(shù)據(jù)發(fā)送至聆聽角度旋轉(zhuǎn)模塊； 調(diào)用單元，用于調(diào)用預設(shè)的頭相關(guān)傳遞函數(shù)，得到所述聲波信號在相位、頻率及強度上 的第一補償值； 第一補償單元，用于根據(jù)所述第一補償值對所述聲波信號進行實時修正， 確定單元，用于根據(jù)所述比例關(guān)系確定所述聲波信號在強度上的第二補償值； 第二補償單元，用于根據(jù)所述第二補償值對所述聲波信號進行實時修正。9. 一種移動終端，包括錄音模塊，其特征在于，包括權(quán)利要求5-8任意一項所述的聲音 波形的處理裝置。10. -種虛擬現(xiàn)實頭戴設(shè)備，包括光學鏡片，其特征在于，包括權(quán)利要求9所述的移動終 端。
【文檔編號】H04S1/00GK105916096SQ201610379135
【公開日】2016年8月31日
【申請日】2016年5月31日
【發(fā)明人】張圣杰
【申請人】努比亞技術(shù)有限公司