一種基于節(jié)目聲音特征的多屏同步方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及視頻處理技術(shù)領(lǐng)域，更具體地，涉及一種基于節(jié)目聲音特征的多屏同步方法。
【背景技術(shù)】
[0002]視頻同步多是針對(duì)大屏幕或多個(gè)屏幕的顯示進(jìn)行同步處理。在各類大廳應(yīng)用中，用戶會(huì)安裝多塊大屏同步顯示多類不同的信息，方便進(jìn)行視頻指揮、視頻會(huì)議、遠(yuǎn)程會(huì)商等業(yè)務(wù)。而利用計(jì)算機(jī)顯卡支持多屏顯示的功能，也可以將計(jì)算機(jī)的內(nèi)容以更大的分辨率進(jìn)行輸出顯示。所需顯示的圖像經(jīng)由編碼器編碼接入網(wǎng)絡(luò)，經(jīng)網(wǎng)絡(luò)遠(yuǎn)傳，統(tǒng)一解碼上大屏，這種方式使圖像顯示的分辨率和尺寸符合大屏顯示需求。例如，將多路的HD(HighDefinit1n，分辨率達(dá)到 1920x1080 的高清信號(hào))或者 UHD (Ultra High Definit1n，分辨率3840x2160達(dá)到的超高清信號(hào))視頻，拼接成分辨率達(dá)到8Kx4K，16Κχ8Κ的超高分辨率視頻。多路視頻拼接時(shí)，各路播放設(shè)備輸出視頻要保持同步，以保證超高分辨率視頻在時(shí)域的同步性和畫面完整性。
[0003]現(xiàn)有技術(shù)中，通過(guò)軟件控制多路播放設(shè)備輸出視頻的同步。各路HD或者UHD播放設(shè)備通過(guò)網(wǎng)絡(luò)連接，其中一臺(tái)設(shè)定為主播放設(shè)備，其它設(shè)為從播放設(shè)備。由主播放設(shè)備發(fā)送一個(gè)視頻輸出的心跳信號(hào)，其它各路播放設(shè)備按照心跳信號(hào)，輸出視頻信號(hào)，從而實(shí)現(xiàn)各路視頻信號(hào)的同步。然而，對(duì)視頻信號(hào)的處理往往需要使同步設(shè)備支持多種不同格式的視頻源。
[0004]此外，視頻信號(hào)提供方，例如，電視臺(tái)，無(wú)法對(duì)各播放終端不同步問(wèn)題給與任何干預(yù)。這不利于在不同地區(qū)和場(chǎng)合的視頻信號(hào)處理方降低視頻同步(例如，公交車站廣告等的播放)所需的設(shè)備購(gòu)買和維護(hù)費(fèi)用。

【發(fā)明內(nèi)容】

[0005]本發(fā)明為了簡(jiǎn)化視頻同步對(duì)現(xiàn)場(chǎng)視頻同步硬件設(shè)備的依賴程度，本發(fā)明提供了一種基于節(jié)目聲音特征的多屏同步方法，包括:
[0006](I)獲取多個(gè)屏幕的各自的一段節(jié)目聲音信號(hào)，所述節(jié)目聲音信號(hào)包括頻率基本在1Hz以下的聲音；該頻率可以在不影響聲音播放的情況下，產(chǎn)生輔助視頻同步的效果。而現(xiàn)有技術(shù)中對(duì)其他特征的音頻進(jìn)行處理的技術(shù)要么需要以節(jié)目中的特定語(yǔ)言為標(biāo)志，要么需要以節(jié)目中的特定聲音為標(biāo)志，而這兩種情況都不利于本發(fā)明對(duì)通用視頻節(jié)目的多地低成本播放的技術(shù)效果。
[0007](2)采集所述的各段節(jié)目聲音信號(hào)的特征；
[0008](3)根據(jù)采集到的特征使所述各個(gè)屏幕的顯示同步化。
[0009]進(jìn)一步地，所述步驟(I)包括:
[0010]接收各屏幕各自的一段節(jié)目信號(hào)；
[0011]分解所述各段節(jié)目信號(hào)中的聲音信號(hào)和圖像信號(hào)；
[0012]對(duì)所述各段聲音信號(hào)進(jìn)行預(yù)處理。
[0013]進(jìn)一步地，所述步驟(2)包括:
[0014]計(jì)算該聲音信號(hào)的過(guò)零信息；
[0015]對(duì)各段聲音信號(hào)的過(guò)零信息進(jìn)行統(tǒng)計(jì)，得到過(guò)零統(tǒng)計(jì)信息；
[0016]計(jì)算各過(guò)零統(tǒng)計(jì)信息的均值。
[0017]進(jìn)一步地，所述步驟(2)包括:
[0018]計(jì)算該聲音信號(hào)的過(guò)零信息；
[0019]對(duì)各段聲音信號(hào)的過(guò)零信息進(jìn)行統(tǒng)計(jì)，得到過(guò)零統(tǒng)計(jì)信息；
[0020]計(jì)算各過(guò)零統(tǒng)計(jì)信息的均方差。
[0021]進(jìn)一步地，所述步驟(3)包括:
[0022]判斷采集到的特征是否超過(guò)預(yù)設(shè)閾值，如果超過(guò)，則使所述各個(gè)屏幕的顯示同步化。
[0023]進(jìn)一步地，使所述各個(gè)屏幕的顯示同步化包括:
[0024]根據(jù)各個(gè)屏幕自身的過(guò)零統(tǒng)計(jì)信息與計(jì)算得到的均值的差，對(duì)各個(gè)屏幕進(jìn)行信號(hào)延遲。
[0025]進(jìn)一步地，所述對(duì)各個(gè)屏幕進(jìn)行信號(hào)延遲是通過(guò)插入延遲視頻幀實(shí)現(xiàn)的。
[0026]進(jìn)一步地，所述預(yù)處理包括對(duì)聲音信號(hào)的放大和濾波，以得到頻率基本在1Hz和1Hz以下的低噪聲音信號(hào)。
[0027]本發(fā)明的有益效果是:改善了視頻播放時(shí)的用戶體驗(yàn)，從信號(hào)播放源(例如，電視臺(tái))智能化地消除了視頻信號(hào)不同步問(wèn)題，并降低了播放終端對(duì)視頻硬件編解碼的依賴性，降低了播放現(xiàn)場(chǎng)的硬件成本。利用本發(fā)明的技術(shù)方案，視頻播放現(xiàn)場(chǎng)只需要設(shè)置復(fù)用器、視頻輸入幀采集裝置以及處理器，而不需要同步器等成本較高的器件。
【附圖說(shuō)明】
[0028]圖1示出了根據(jù)本發(fā)明的基于節(jié)目聲音特征的多屏同步方法的流程框圖。
【具體實(shí)施方式】
[0029]如圖1所示的實(shí)施例中，多個(gè)待同步的屏幕所顯示的視頻格式采用H264、AV1、RMVB等格式中的至少兩種?；诠?jié)目聲音特征的多屏同步方法包括如下步驟:
[0030]在視頻信號(hào)提供源(例如，電視臺(tái)或視頻轉(zhuǎn)播/直播現(xiàn)場(chǎng)的視頻信號(hào)采集方或其他的視頻信號(hào)提供方)加入頻率為1Hz或1Hz以下的音頻信號(hào)，優(yōu)選地為加入頻率為5Hz
的音頻信號(hào)。
[0031]在待同步的多個(gè)屏幕處，接收各屏幕各自的時(shí)長(zhǎng)在I分鐘的電視節(jié)目信號(hào)；
[0032]利用復(fù)用器將所述各段I分鐘的節(jié)目信號(hào)分解為聲音信號(hào)和圖像信號(hào)；
[0033]對(duì)聲音信號(hào)的放大和濾波，以得到頻率基本在1Hz和1Hz以下的低噪聲音信號(hào)。
[0034]計(jì)算該聲音信號(hào)的過(guò)零點(diǎn)區(qū)間的正的極小值的個(gè)數(shù)。
[0035]統(tǒng)計(jì)各段聲音信號(hào)的各個(gè)過(guò)零點(diǎn)區(qū)間的正的極小值的個(gè)數(shù)之和。
[0036]對(duì)所有屏幕計(jì)算正的極小值的個(gè)數(shù)之和的均值。
[0037]在本發(fā)明的另一實(shí)施例中，還可以計(jì)算各過(guò)零統(tǒng)計(jì)信息的均方差而不是上述均值。
[0038]判斷采集到的各過(guò)零點(diǎn)區(qū)間的正的極小值是否超過(guò)預(yù)設(shè)閾值，如果超過(guò)，則使所述各個(gè)屏幕的顯示同步化。根據(jù)本發(fā)明的一個(gè)實(shí)施例，此步驟中，根據(jù)各個(gè)屏幕自身的過(guò)零統(tǒng)計(jì)信息與計(jì)算得到的均值的差，通過(guò)延遲各幀中輸入視頻信號(hào)的輸入幀生成延遲幀，通過(guò)向高于均值的屏幕的信號(hào)插入延遲視頻幀，對(duì)各個(gè)屏幕進(jìn)行信號(hào)延遲。該延遲幀的產(chǎn)生是將從輸入端輸入的視頻信號(hào)幀延遲一個(gè)幀的產(chǎn)生延遲幀。
[0039]上對(duì)本發(fā)明實(shí)施例所提供的一種多終端同步顯示方法進(jìn)行了詳細(xì)介紹，本文中應(yīng)用了具體個(gè)例對(duì)本發(fā)明的原理及實(shí)施方式進(jìn)行了闡述，以上實(shí)施例的說(shuō)明只是用于幫助理解本發(fā)明的系統(tǒng)及其核心思想；同時(shí)，對(duì)于本領(lǐng)域的一般技術(shù)人員，依據(jù)本發(fā)明的思想，在【具體實(shí)施方式】及應(yīng)用范圍上均會(huì)有改變之處，綜上，本說(shuō)明書內(nèi)容不應(yīng)理解為對(duì)本發(fā)明的限制。
【主權(quán)項(xiàng)】
1.一種基于節(jié)目聲音特征的多屏同步方法，其特征在于，包括: (1)獲取多個(gè)屏幕的各自的一段節(jié)目聲音信號(hào)，所述節(jié)目聲音信號(hào)包括頻率基本在1Hz以下的聲音； (2)采集所述的各段節(jié)目聲音信號(hào)的特征； (3)根據(jù)采集到的特征使所述各個(gè)屏幕的顯示同步化。
2.根據(jù)權(quán)利要求1的基于節(jié)目聲音特征的多屏同步方法，其特征在于，所述步驟(I)包括: 接收各屏幕各自的一段節(jié)目信號(hào)； 分解所述各段節(jié)目信號(hào)中的聲音信號(hào)和圖像信號(hào)； 對(duì)所述各段聲音信號(hào)進(jìn)行預(yù)處理。
3.根據(jù)權(quán)利要求1的基于節(jié)目聲音特征的多屏同步方法，其特征在于，所述步驟(2)包括: 計(jì)算該聲音信號(hào)的過(guò)零信息； 對(duì)各段聲音信號(hào)的過(guò)零信息進(jìn)行統(tǒng)計(jì)，得到過(guò)零統(tǒng)計(jì)信息； 計(jì)算各過(guò)零統(tǒng)計(jì)信息的均值。
4.根據(jù)權(quán)利要求1的基于節(jié)目聲音特征的多屏同步方法，其特征在于，所述步驟(2)包括: 計(jì)算該聲音信號(hào)的過(guò)零信息； 對(duì)各段聲音信號(hào)的過(guò)零信息進(jìn)行統(tǒng)計(jì)，得到過(guò)零統(tǒng)計(jì)信息； 計(jì)算各過(guò)零統(tǒng)計(jì)信息的均方差。
5.根據(jù)權(quán)利要求3的基于節(jié)目聲音特征的多屏同步方法，其特征在于，所述步驟(3)包括: 判斷采集到的特征是否超過(guò)預(yù)設(shè)閾值，如果超過(guò)，則使所述各個(gè)屏幕的顯示同步化。
6.根據(jù)權(quán)利要求5的基于節(jié)目聲音特征的多屏同步方法，其特征在于，使所述各個(gè)屏幕的顯示同步化包括: 根據(jù)各個(gè)屏幕自身的過(guò)零統(tǒng)計(jì)信息與計(jì)算得到的均值的差，對(duì)各個(gè)屏幕進(jìn)行信號(hào)延遲。
7.根據(jù)權(quán)利要求6的基于節(jié)目聲音特征的多屏同步方法，其特征在于，所述對(duì)各個(gè)屏幕進(jìn)行信號(hào)延遲是通過(guò)插入延遲視頻幀實(shí)現(xiàn)的。
8.根據(jù)權(quán)利要求2的基于節(jié)目聲音特征的多屏同步方法，其特征在于，所述預(yù)處理包括對(duì)聲音信號(hào)的放大和濾波，以得到頻率基本在1Hz和1Hz以下的低噪聲音信號(hào)。
【專利摘要】本發(fā)明為了簡(jiǎn)化視頻同步對(duì)現(xiàn)場(chǎng)視頻同步硬件設(shè)備的依賴程度，本發(fā)明提供了一種基于節(jié)目聲音特征的多屏同步方法，包括：(1)獲取多個(gè)屏幕的各自的一段節(jié)目聲音信號(hào)，所述節(jié)目聲音信號(hào)包括頻率基本在10Hz以下的聲音；該頻率可以在不影響聲音播放的情況下，產(chǎn)生輔助視頻同步的效果；(2)采集所述的各段節(jié)目聲音信號(hào)的特征；(3)根據(jù)采集到的特征使所述各個(gè)屏幕的顯示同步化。本發(fā)明改善了視頻播放時(shí)的用戶體驗(yàn)，從信號(hào)播放源智能化地消除了視頻信號(hào)不同步問(wèn)題，并降低了播放終端對(duì)視頻硬件編解碼的依賴性，降低了播放現(xiàn)場(chǎng)的硬件成本。
【IPC分類】H04N21-234, H04N5-04
【公開號(hào)】CN104796578
【申請(qǐng)?zhí)枴緾N201510213712
【發(fā)明人】董政
【申請(qǐng)人】成都陌云科技有限公司
【公開日】2015年7月22日
【申請(qǐng)日】2015年4月29日