本技術(shù)涉及視頻編解碼領(lǐng)域，具體涉及一種基于模板代價(jià)確定權(quán)重的方法、設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、當(dāng)今世界是一個(gè)被圖像、視頻包圍的多媒體社會(huì)，比如：隨處可見(jiàn)的廣告、醫(yī)療、安防、娛樂(lè)、會(huì)議電視等領(lǐng)域，無(wú)一不涉及圖像、視頻等媒體內(nèi)容。隨著視頻質(zhì)量的提升：從高清視頻逐漸轉(zhuǎn)向4k、8k等超高清視頻，屏幕內(nèi)容、全景視頻等多種視頻類(lèi)型的增加，以及網(wǎng)絡(luò)流媒體和實(shí)時(shí)通信的廣泛應(yīng)用，極大地增加了視頻傳輸或存儲(chǔ)的數(shù)據(jù)量，對(duì)視頻傳輸帶寬提出了極高的要求。視頻壓縮是一種將原始視頻通過(guò)各種編碼工具盡可能去除空間和時(shí)間的冗余信息，有效降低視頻的數(shù)據(jù)量，同時(shí)保證視頻質(zhì)量的技術(shù)，也稱(chēng)為視頻編碼，這是目前多媒體技術(shù)研究領(lǐng)域最為熱門(mén)的研究方向之一。

2、2020年，由國(guó)際標(biāo)準(zhǔn)化組織(international?organization?forstandardization，iso)/國(guó)際電工委員會(huì)(international?electrotechnicalcommission，iec)的動(dòng)態(tài)圖像專(zhuān)家組(moving?pictures?experts?group，mpeg)和國(guó)際電信聯(lián)盟電信標(biāo)準(zhǔn)分局(internatial?telecommunication?union-telecommunicationstandardization?sector，itu-t)的視頻編碼專(zhuān)家組(video?code?expert?group，vceg)的聯(lián)合專(zhuān)家組(joint?video?expert?teams，jvet)發(fā)布了通用視頻編碼標(biāo)準(zhǔn)(versatilevideo?coding，h.266/vvc)，此標(biāo)準(zhǔn)可以更好地支持8k超高清、屏幕內(nèi)容、高動(dòng)態(tài)和360°全景視頻等多種新視頻類(lèi)型，以及自適應(yīng)帶寬和分辨率的流媒體和實(shí)時(shí)通信等應(yīng)用。此后聯(lián)合專(zhuān)家組繼續(xù)探索新一代視頻編碼標(biāo)準(zhǔn)(enhanced?compression?model，ecm)。ecm標(biāo)準(zhǔn)沿用了h.266/vvc的編碼框架：基于塊的混合編碼框架?；旌暇幋a框架主要包括幀內(nèi)預(yù)測(cè)、幀間預(yù)測(cè)、變換、量化、熵編碼以及環(huán)路濾波等模塊，每個(gè)模塊都涵蓋了多種新的編碼技術(shù)，進(jìn)一步提高了編碼增益，但也需要極大的內(nèi)存。

3、聯(lián)合幀內(nèi)幀間預(yù)測(cè)(combined?inter?and?intra?prediction，ciip)模式是h.266/vvc中的一種預(yù)測(cè)技術(shù)，基本原理是當(dāng)前編碼單元(coding?unit，塊)同時(shí)使用幀內(nèi)預(yù)測(cè)和幀間預(yù)測(cè)得到兩個(gè)預(yù)測(cè)塊，并以其加權(quán)平均值作為最終預(yù)測(cè)值。為了避免運(yùn)算復(fù)雜度過(guò)高，h.266/vvc限制ciip的幀內(nèi)預(yù)測(cè)只采用平面的(planar)模式，幀間預(yù)測(cè)只采用常規(guī)合并(merge)模式。

4、在2021年7月的jvet-w次會(huì)議上，對(duì)于ciip模式的幀內(nèi)預(yù)測(cè)模式，提出以基于模板的幀內(nèi)模式推導(dǎo)(template-based?intra?mode?derivation，timd)方法得到的幀內(nèi)預(yù)測(cè)模式代替原來(lái)的planar模式，目的是無(wú)需增加信令傳輸就可以細(xì)化ciip模式的幀內(nèi)預(yù)測(cè)模式。在ciip模式結(jié)合timd時(shí)，即ciip-timd模式，對(duì)ciip模式的權(quán)重也提出了改進(jìn)，若timd推導(dǎo)出的幀內(nèi)預(yù)測(cè)模式為planar或(direct塊rrent，dc)模式，則加權(quán)系數(shù)保持不變。

5、在2021年10月的jvet-x次會(huì)議，基于ciip-timd模式，又提出了ciip-模板匹配(ciip-template?matching，ciip-tm)模式，即幀間預(yù)測(cè)部分為基于tm細(xì)化后的運(yùn)動(dòng)矢量(motion?vector，mv)候選，此時(shí)的幀間預(yù)測(cè)模式為模板匹配-merge(tm-merge)。采用模板匹配的方式的ciip模式中，幀間預(yù)測(cè)和幀內(nèi)預(yù)測(cè)的權(quán)重仍然是基于已有模板確定的，權(quán)重系數(shù)準(zhǔn)確性不足。

6、申請(qǐng)內(nèi)容

7、有鑒于此，本技術(shù)實(shí)施例期望提供一種基于模板代價(jià)確定權(quán)重的方法、設(shè)備及存儲(chǔ)介質(zhì)。

8、第一方面，本技術(shù)實(shí)施例提供一種基于模板代價(jià)確定權(quán)重的方法，應(yīng)用于編碼端，包括：

9、將待編碼的視頻流中的每個(gè)圖像幀劃分為多個(gè)塊；

10、對(duì)多個(gè)塊中的當(dāng)前塊進(jìn)行幀內(nèi)/幀間預(yù)測(cè)模式?jīng)Q策；

11、若確定當(dāng)前塊使用ciip模式，則基于模板代價(jià)確定幀內(nèi)預(yù)測(cè)權(quán)重和幀間預(yù)測(cè)權(quán)重；

12、根據(jù)當(dāng)前塊的幀內(nèi)預(yù)測(cè)值、幀內(nèi)預(yù)測(cè)權(quán)重、幀間預(yù)測(cè)值和幀間預(yù)測(cè)權(quán)重確定當(dāng)前塊的聯(lián)合預(yù)測(cè)值，將當(dāng)前塊的聯(lián)合預(yù)測(cè)值作為當(dāng)前塊的預(yù)測(cè)值；

13、將當(dāng)前塊基于模板代價(jià)確定幀內(nèi)預(yù)測(cè)權(quán)重和幀間預(yù)測(cè)權(quán)重的相關(guān)語(yǔ)法元素傳輸至解碼端。

14、第二方面，本技術(shù)實(shí)施例提供一種基于模板代價(jià)確定權(quán)重的方法，應(yīng)用于解碼端，包括：

15、接收編碼后的視頻碼流，并解析視頻碼流；

16、獲取解析后的視頻碼流中的塊，并讀取解析后的視頻碼流中與幀內(nèi)/幀間預(yù)測(cè)相關(guān)語(yǔ)法元素；

17、根據(jù)解析后的當(dāng)前塊和幀內(nèi)/幀間預(yù)測(cè)相關(guān)語(yǔ)法元素確定當(dāng)前塊的幀內(nèi)/幀間預(yù)測(cè)模式；

18、若確定當(dāng)前塊使用ciip模式，則基于模板代價(jià)確定幀內(nèi)預(yù)測(cè)權(quán)重和幀間預(yù)測(cè)權(quán)重；

19、根據(jù)當(dāng)前塊的幀內(nèi)預(yù)測(cè)值、幀內(nèi)預(yù)測(cè)權(quán)重、幀間預(yù)測(cè)值和幀間預(yù)測(cè)權(quán)重確定當(dāng)前塊的聯(lián)合預(yù)測(cè)值，將當(dāng)前塊的聯(lián)合預(yù)測(cè)值作為當(dāng)前塊的重建值；

20、根據(jù)解析后的多個(gè)塊中每一塊的重建值，得到解碼后的視頻流。

21、第三方面，本技術(shù)實(shí)施例提供一種基于模板代價(jià)確定權(quán)重的裝置，設(shè)置于編碼端，包括：

22、分割模塊，設(shè)置為將待編碼的視頻流中的每個(gè)圖像幀劃分為多個(gè)塊；

23、決策模塊，設(shè)置為對(duì)多個(gè)塊中的當(dāng)前塊進(jìn)行幀內(nèi)/幀間預(yù)測(cè)模式?jīng)Q策；

24、權(quán)重確定模塊，設(shè)置為若確定當(dāng)前塊使用ciip模式，則基于模板代價(jià)確定幀內(nèi)預(yù)測(cè)權(quán)重和幀間預(yù)測(cè)權(quán)重；

25、聯(lián)合預(yù)測(cè)模塊，設(shè)置為根據(jù)當(dāng)前塊的幀內(nèi)預(yù)測(cè)值、幀內(nèi)預(yù)測(cè)權(quán)重、幀間預(yù)測(cè)值和幀間預(yù)測(cè)權(quán)重確定當(dāng)前塊的聯(lián)合預(yù)測(cè)值，將當(dāng)前塊的聯(lián)合預(yù)測(cè)值作為當(dāng)前塊的預(yù)測(cè)值；

26、傳輸模塊，設(shè)置為將當(dāng)前塊基于模板代價(jià)確定幀內(nèi)預(yù)測(cè)權(quán)重和幀間預(yù)測(cè)權(quán)重的相關(guān)語(yǔ)法元素傳輸至解碼端。

27、第四方面，本技術(shù)實(shí)施例提供一種基于模板代價(jià)確定權(quán)重的裝置，設(shè)置于解碼端，包括：

28、接收模塊，設(shè)置為接收編碼后的視頻碼流，并解析視頻碼流；

29、獲取模塊，設(shè)置為獲取解析后的視頻碼流中的塊，并讀取解析后的視頻碼流中與幀內(nèi)/幀間預(yù)測(cè)相關(guān)語(yǔ)法元素；

30、模式確定模塊，設(shè)置為根據(jù)解析后的當(dāng)前塊和幀內(nèi)/幀間預(yù)測(cè)相關(guān)語(yǔ)法元素確定當(dāng)前塊的幀內(nèi)/幀間預(yù)測(cè)模式；

31、權(quán)重確定模塊，設(shè)置為若確定當(dāng)前塊使用ciip模式，則基于模板代價(jià)確定幀內(nèi)預(yù)測(cè)權(quán)重和幀間預(yù)測(cè)權(quán)重；

32、聯(lián)合預(yù)測(cè)模塊，設(shè)置為根據(jù)當(dāng)前塊的幀內(nèi)預(yù)測(cè)值、幀內(nèi)預(yù)測(cè)權(quán)重、幀間預(yù)測(cè)值和幀間預(yù)測(cè)權(quán)重確定當(dāng)前塊的聯(lián)合預(yù)測(cè)值，將當(dāng)前塊的聯(lián)合預(yù)測(cè)值作為當(dāng)前塊的重建值；

33、重建模塊，設(shè)置為根據(jù)解析后的多個(gè)塊中每一塊的重建值，得到解碼后的視頻流。

34、第五方面，本技術(shù)實(shí)施例提供一種基于模板代價(jià)確定權(quán)重的設(shè)備，包括：

35、存儲(chǔ)器，被配置為存儲(chǔ)程序；

36、處理器，被配置為執(zhí)行程序，當(dāng)程序被執(zhí)行時(shí)，執(zhí)行如第一方面任一種實(shí)現(xiàn)方式的基于模板代價(jià)確定權(quán)重的方法。

37、第六方面，本技術(shù)實(shí)施例提供一種基于模板代價(jià)確定權(quán)重的設(shè)備，包括：

38、存儲(chǔ)器，被配置為存儲(chǔ)程序；

39、處理器，被配置為執(zhí)行程序，當(dāng)程序被執(zhí)行時(shí)，執(zhí)行如第二方面任一種實(shí)現(xiàn)方式的基于模板代價(jià)確定權(quán)重的方法。

40、第七方面，本技術(shù)實(shí)施例提供一種非易失存儲(chǔ)介質(zhì)，存儲(chǔ)介質(zhì)包括存儲(chǔ)的程序，其特征在于，程序運(yùn)行時(shí)執(zhí)行第一方面任一種實(shí)現(xiàn)方式或第二方面任一種實(shí)現(xiàn)方式的基于模板代價(jià)確定權(quán)重的方法。

技術(shù)實(shí)現(xiàn)思路