智能手持終端點對點視頻和游戲的融合方法、裝置及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及移動互聯(lián)網(wǎng)多媒體技術(shù)領(lǐng)域，特別涉及基于激勵機制的智能手持終端點對點視頻和游戲的融合方法、裝置及系統(tǒng)。
【背景技術(shù)】
[0002]隨著智能手持終端(如智能手機、平板電腦等)的普及和WiFi，3G，4G等無線接入帶寬的提高，基于智能手持終端的點對點視頻應(yīng)用將會呈現(xiàn)爆炸性增長。另一方面，基于智能手持終端的互動游戲也將成為一大熱點，能夠打發(fā)用戶的碎片時間。在游戲的過程中添加視頻功能能極大地增強游戲的互動性，提高游戲?qū)τ脩舻奈?；反之，在視頻通話的過程中添加游戲功能則能增加用戶視頻通話過程中的趣味性，增進用戶之間的情感。而如果能讓點對點視頻和游戲有機地融合在一起，則能將用戶對視頻聊天和游戲的需求融合在一起，提高用戶對游戲的粘度。
[0003]因此，針對現(xiàn)有的視頻會話和游戲相互獨立和彼此隔離的處理方案，有必要提出一種新的視頻會話和游戲能有機融合的方法，提高用戶游戲時的互動性和趣味性。

【發(fā)明內(nèi)容】

[0004]本發(fā)明的目的旨在提供基于激勵機制的智能手持終端點對點視頻和游戲的融合方法、裝置及系統(tǒng)，提高用戶游戲時的互動性和趣味性。
[0005]第一方面，本發(fā)明提供一種智能手持設(shè)備點對點視頻和游戲的有機融合方法，包括:設(shè)置視頻窗口基于用戶在游戲中的游戲量化表現(xiàn)值的呈現(xiàn)策略；在游戲過程中實時計算接收端的游戲量化表現(xiàn)值，并據(jù)此由接收端依據(jù)自身的游戲表現(xiàn)控制發(fā)送端視頻窗口的呈現(xiàn)方式，或者，發(fā)送端依據(jù)接收端的游戲量化表現(xiàn)值實時調(diào)整編碼策略，進而通過發(fā)送端視頻編碼控制發(fā)送端視頻窗口在接收端的呈現(xiàn)方式。
[0006]進一步地，當由接收端依據(jù)自身的游戲表現(xiàn)控制發(fā)送端視頻窗口的呈現(xiàn)方式時，包括:接收端通過網(wǎng)絡(luò)傳輸接口與發(fā)送端進行數(shù)據(jù)交互傳輸，并從網(wǎng)絡(luò)傳輸接口接收視頻數(shù)據(jù)，并將其存放到為發(fā)送端開辟的遠端視頻緩沖區(qū)；接收端從網(wǎng)絡(luò)傳輸接口發(fā)送/接收游戲數(shù)據(jù)，并將接收到的游戲數(shù)據(jù)存放到本地游戲數(shù)據(jù)緩沖區(qū)；依據(jù)接收端用戶在游戲中的表現(xiàn)對接收端用戶的游戲表現(xiàn)進行量化評價，得到實時的游戲量化表現(xiàn)值，并依據(jù)視頻窗口呈現(xiàn)策略和接收端用戶當前的游戲量化表現(xiàn)值確定發(fā)送端視頻窗口的呈現(xiàn)方式；在接收端屏幕上呈現(xiàn)視頻和游戲融合后的界面。
[0007]進一步地，所述呈現(xiàn)方式包括如下之一:控制所呈現(xiàn)視頻的區(qū)域、控制所呈現(xiàn)視頻的分辨率/清晰度或控制所呈現(xiàn)視頻的明暗度。
[0008]進一步地，所述依據(jù)接收端用戶在游戲中的表現(xiàn)對接收端用戶的游戲表現(xiàn)進行量化評價包括:對于簡單的游戲，發(fā)送端可以依據(jù)接收端實時發(fā)送過來的游戲數(shù)據(jù)及發(fā)送端自身的游戲數(shù)據(jù)確定接收端的游戲量化表現(xiàn)值；或?qū)τ谛枰?wù)器同步的游戲，可以由服務(wù)器將接收端的游戲量化表現(xiàn)值發(fā)送給發(fā)送端。
[0009]進一步地，當由發(fā)送端依據(jù)接收端的游戲表現(xiàn)控制發(fā)送端視頻在接收端的呈現(xiàn)方式時，包括:發(fā)送端通過網(wǎng)絡(luò)接口發(fā)送/接收實時游戲數(shù)據(jù)，并獲取接收端發(fā)送的實時游戲量化表現(xiàn)值；發(fā)送端將依據(jù)接收端的游戲量化表現(xiàn)值和視頻呈現(xiàn)策略實時確定編碼策略，當編碼策略發(fā)生變化時，通知發(fā)送端的視頻編碼器調(diào)整發(fā)送端的編碼策略；發(fā)送端通過視頻編碼器依據(jù)編碼策略對視頻捕獲設(shè)備捕獲的原始視頻數(shù)據(jù)進行編碼；發(fā)送端將編碼后的視頻數(shù)據(jù)存放在視頻緩沖區(qū)，并通過網(wǎng)絡(luò)接口將視頻數(shù)據(jù)傳輸給接收端，使得接收端呈現(xiàn)視頻和游戲融合過的界面，并且接收端所呈現(xiàn)的視頻窗口依據(jù)發(fā)送端發(fā)送過來的原始數(shù)據(jù)進行解碼呈現(xiàn)。
[0010]進一步地，所述發(fā)送端獲取接收端的實時游戲量化表現(xiàn)值包括:對于簡單的游戲，發(fā)送端可以依據(jù)接收端實時發(fā)送過來的游戲數(shù)據(jù)及發(fā)送端自身的游戲數(shù)據(jù)確定接收端的游戲量化表現(xiàn)值；或?qū)τ谛枰?wù)器同步的游戲，由服務(wù)器將接收端的游戲量化表現(xiàn)值發(fā)送給發(fā)送端。
[0011]進一步地，所述編碼策略包括如下之一:編碼視頻區(qū)域、編碼的分辨率、編碼的幀速、分層編碼的層數(shù)或視頻的圖像的透明度。
[0012]第二方面，一種基于激勵機制的智能手持終端點對點視頻和游戲的融合裝置，由接收端依據(jù)自身的游戲表現(xiàn)控制發(fā)送端視頻窗口的呈現(xiàn)方式，包括:本地視頻數(shù)據(jù)采集模塊，用于采集本地視頻數(shù)據(jù)并將其存放到本地視頻緩沖區(qū)；視頻數(shù)據(jù)傳輸模塊，用于接收對端設(shè)備通過網(wǎng)絡(luò)傳輸過來的視頻數(shù)據(jù)，并將其暫存到遠端視頻緩沖區(qū)，并且將本地視頻數(shù)據(jù)采集模塊采集的視頻數(shù)據(jù)通過網(wǎng)絡(luò)傳輸?shù)綄Χ嗽O(shè)備；游戲數(shù)據(jù)傳輸模塊，用于將本地產(chǎn)生的實時游戲數(shù)據(jù)通過網(wǎng)絡(luò)傳輸?shù)綄Χ嗽O(shè)備，并且從網(wǎng)絡(luò)接收對端設(shè)備通過網(wǎng)絡(luò)傳輸過來的實時游戲數(shù)據(jù)，并將其緩存在遠端游戲數(shù)據(jù)緩沖區(qū)；游戲綜合表現(xiàn)評價模塊，用于對雙方用戶在游戲中的表現(xiàn)進行綜合評價，該評價值可以基于實時生成/獲得的游戲數(shù)據(jù)生成，或由服務(wù)器計算生成并發(fā)送過來；視頻窗口呈現(xiàn)策略模塊，用于描述用戶的游戲量化表現(xiàn)值和視頻呈現(xiàn)規(guī)則的關(guān)聯(lián)策略；視頻與游戲融合模塊，用于依據(jù)視頻窗口呈現(xiàn)策略對遠端視頻進行必要處理，而本地視頻則不做處理，并確定視頻窗口的呈現(xiàn)位置和大?。唤缑娉尸F(xiàn)模塊，用于將融合后的數(shù)據(jù)顯示在界面上；游戲數(shù)據(jù)生成模塊，用于依據(jù)當前游戲界面、游戲邏輯和用戶輸入，生成本地實時游戲數(shù)據(jù)，并置于本地游戲數(shù)據(jù)緩沖區(qū)。
[0013]第三方面，一種基于激勵機制的智能手持終端點對點視頻和游戲的融合裝置，由發(fā)送端依據(jù)接收端的游戲表現(xiàn)控制發(fā)送端視頻在接收端的呈現(xiàn)方式，包括:游戲數(shù)據(jù)傳輸模塊，用于將本地產(chǎn)生的實時游戲數(shù)據(jù)通過網(wǎng)絡(luò)傳輸?shù)綄Χ嗽O(shè)備，并且從網(wǎng)絡(luò)接收對端設(shè)備通過網(wǎng)絡(luò)傳輸過來的實時游戲數(shù)據(jù)，并將其緩存在遠端游戲數(shù)據(jù)緩沖區(qū)；游戲綜合表現(xiàn)評價模塊，用于對雙方用戶在游戲中的表現(xiàn)進行綜合評價，該評價值可以基于實時生成/獲得的游戲數(shù)據(jù)生成，也可以由服務(wù)器計算生成并發(fā)送過來；視頻窗口呈現(xiàn)策略，用于描述用戶的游戲量化表現(xiàn)值和視頻呈現(xiàn)規(guī)則的關(guān)聯(lián)策略；編碼策略生成模塊，用于基于視頻窗口呈現(xiàn)策略和接收端用戶的游戲綜合表現(xiàn)量化值，生成視頻編碼策略；本地視頻捕獲模塊，用于捕獲原始的本地視頻數(shù)據(jù)；視頻編碼器，用于根據(jù)視頻編碼策略和本地視頻捕獲的原始數(shù)據(jù)對視頻進行編碼，將編碼后的視頻數(shù)據(jù)存放到本地視頻數(shù)據(jù)緩沖區(qū)；視頻數(shù)據(jù)傳輸模塊，用于接收對端設(shè)備通過網(wǎng)絡(luò)傳輸過來的視頻數(shù)據(jù)，并將其暫存到遠端視頻緩沖區(qū)，并且將本地視頻數(shù)據(jù)采集模塊采集的視頻數(shù)據(jù)通過網(wǎng)絡(luò)傳輸?shù)綄Χ嗽O(shè)備；界面呈現(xiàn)模塊，用于將用戶的游戲數(shù)據(jù)、雙方的視頻數(shù)據(jù)經(jīng)過融合后呈現(xiàn)在用戶的顯示界面上；游戲數(shù)據(jù)生成模塊，用于依據(jù)當前游戲界面、游戲邏輯和用戶輸入，生成本地實時游戲數(shù)據(jù)，并置于本地游戲數(shù)據(jù)緩沖區(qū)。
[0014]第四方面，一種基于激勵機制的智能手持終端點對點視頻和游戲的融合系統(tǒng)，由接收端依據(jù)自身的游戲表現(xiàn)控制發(fā)送端視頻窗口的呈現(xiàn)方式，包括:接收端:接收端從網(wǎng)絡(luò)傳輸接口接收視頻數(shù)據(jù)，并將其存放到為發(fā)送端開辟的遠端視頻緩沖區(qū)，從本地視頻捕獲設(shè)備采集本地視頻數(shù)據(jù)，將其存放到本地視頻緩沖區(qū)，通過網(wǎng)絡(luò)傳輸接口將本地視頻緩沖區(qū)中的視頻數(shù)據(jù)傳輸給發(fā)送端；接收端從網(wǎng)絡(luò)傳輸接口接收游戲數(shù)據(jù)，并將接收到的游戲數(shù)據(jù)存放到為發(fā)送端開辟的遠端游戲數(shù)據(jù)緩沖區(qū)，依據(jù)接收端的用戶輸入、當前游戲界面和游戲邏輯實時生成本地游戲數(shù)據(jù)，置于本地游戲數(shù)據(jù)緩沖區(qū)，并通過網(wǎng)絡(luò)傳輸接口將其傳輸給發(fā)送端；獲取接收端用戶的游戲量化表現(xiàn)值，可以由接收端基于接收端用戶在游戲中的表現(xiàn)直接對其進行量化評價，得到實時的游戲量化表現(xiàn)值，也可以由游戲服務(wù)器計算出接收端的量化游戲表現(xiàn)值，并發(fā)送給接收端；接收端依據(jù)視頻窗口呈現(xiàn)策略和接收端用戶當前的游戲量化表現(xiàn)值確定對端(即發(fā)送端)視頻窗口的呈現(xiàn)方式，在接收端屏幕上呈現(xiàn)視頻和游戲融合后的界面；發(fā)送端:發(fā)送端從網(wǎng)絡(luò)傳輸接口接收視頻數(shù)據(jù)，并將其存放到為接收端開辟的遠端視頻緩沖區(qū)，從本地視頻捕獲設(shè)備采集本地視頻數(shù)據(jù)，將其存放到本地視頻緩沖區(qū)，通過網(wǎng)絡(luò)傳輸接口將本地視頻緩沖區(qū)中的視頻數(shù)據(jù)傳輸給接收端；發(fā)送端從網(wǎng)絡(luò)傳輸接口接收游戲數(shù)據(jù)，并將接收到的游戲數(shù)據(jù)存放到為接收端開辟的遠端游戲數(shù)據(jù)緩沖區(qū)，依據(jù)發(fā)收端的用戶輸入、當前游戲界面和游戲邏輯實時生成本地游戲數(shù)據(jù)，置于本地游戲數(shù)據(jù)緩沖區(qū)，并通過網(wǎng)絡(luò)傳輸接口將其傳輸給接收端。
[0015]第五方面，一種基于激勵機制的智能手持終端點對點視頻和游戲的融合系統(tǒng)，由發(fā)送端依據(jù)接收端的游戲表現(xiàn)控制發(fā)送端視頻在接收端的呈現(xiàn)方式，包括:發(fā)送端從網(wǎng)絡(luò)傳輸接口接收游戲數(shù)據(jù)，并將接收到的游戲數(shù)據(jù)存放到為接收端開辟的遠端游戲數(shù)據(jù)緩沖區(qū)，依據(jù)發(fā)送端的用戶輸入、當前游戲界面和游戲邏輯實時生成本地游戲數(shù)據(jù)，置于本地游戲數(shù)據(jù)緩沖區(qū)，并通過網(wǎng)絡(luò)傳輸接口將其傳輸給接收端；發(fā)送端獲取接收端發(fā)送的實時游戲量化表現(xiàn)值，發(fā)送端可以依據(jù)接收端實時發(fā)送過來的游戲數(shù)據(jù)及發(fā)送端自身的游戲數(shù)據(jù)確定接收端的游戲量化表現(xiàn)值，或由服務(wù)器計算接收端的游