冗余像素減輕的制作方法
【專利說(shuō)明】
【背景技術(shù)】
[0001]很多用戶可能與通過(guò)渲染技術(shù)生成的圖像數(shù)據(jù)(例如多維圖像)交互。在示例中，幾何圖形(例如數(shù)字表面模型)可表示場(chǎng)景(例如描繪城市的場(chǎng)景)的三維表面。最初，幾何圖形可包括一個(gè)或多個(gè)非紋理化像素(例如具有深度值，而非色值的像素)。相應(yīng)地，一個(gè)或多個(gè)紋理圖像可用于將幾何圖形紋理化以建立紋理化幾何圖形(例如可基于一個(gè)或多個(gè)紋理圖像將色值分配到幾何圖形內(nèi)的像素)。以該方式，可基于紋理化幾何圖形來(lái)渲染場(chǎng)景。

【發(fā)明內(nèi)容】

[0002]該
【發(fā)明內(nèi)容】
被提供以介紹在下文詳細(xì)描述中進(jìn)一步描述的以簡(jiǎn)化形式的概念的選擇。該
【發(fā)明內(nèi)容】
非旨在標(biāo)識(shí)所主張的主題的關(guān)鍵特征或必要特征，其也非旨在用于限制所主張的主題的范圍。
[0003]除了別的之外，本文提供了用于減輕用于紋理化幾何圖形的冗余像素貢獻(xiàn)的一種或多種系統(tǒng)和/或技術(shù)。即，幾何圖形可包括場(chǎng)景的多維表示?？烧J(rèn)識(shí)到，場(chǎng)景可圖示人、城市、位置、商業(yè)、房屋、數(shù)字渲染的視頻游戲人物、草、水等。最初，幾何圖形內(nèi)的像素可包括深度值，但是可不包括紋理值，例如色值。相應(yīng)地，可使用從各個(gè)視圖方向描繪場(chǎng)景的一個(gè)或多個(gè)紋理圖像來(lái)紋理化幾何圖形?？烧J(rèn)識(shí)到，多于一個(gè)紋理圖像可貢獻(xiàn)幾何圖形內(nèi)的像素的紋理值(例如來(lái)自北方觀看點(diǎn)的高速路的第一照片可描繪建筑筒的一部分，并且來(lái)自東北觀看點(diǎn)的高速路的第二照片可描繪建筑筒的該相同部分)。以該方式，冗余像素紋理貢獻(xiàn)可發(fā)生，這可導(dǎo)致在串流期間由于使用冗余數(shù)據(jù)用于紋理化所致的非高效數(shù)據(jù)存儲(chǔ)和/或非高效帶寬利用(例如基于圖像的服務(wù)，例如映射服務(wù)，可將多個(gè)紋理圖像串流到客戶端地圖應(yīng)用以在紋理化幾何圖形中使用，這可導(dǎo)致冗余紋理信息的傳輸)。
[0004]如本文提供的，可減輕用于紋理化幾何圖形的冗余像素紋理貢獻(xiàn)。在示例中，幾何圖形可表示場(chǎng)景(例如描繪城市的場(chǎng)景)的三維表面。從第一視圖方向描繪場(chǎng)景的第一紋理圖像(例如城市的自頂向下視圖)、從第二視圖方向描繪場(chǎng)景的第二紋理圖像(例如城市的斜視圖)和/或其他紋理圖像可用于紋理化(例如將色值分配到)在幾何圖形內(nèi)的像素。例如，可應(yīng)用第一紋理圖像到幾何圖形以識(shí)別由第一紋理圖像對(duì)幾何圖形的第一像素紋理貢獻(xiàn)(例如通過(guò)第一紋理圖像紋理化的幾何圖形內(nèi)的像素的識(shí)別)。第一像素紋理貢獻(xiàn)可識(shí)別通過(guò)第一紋理圖像紋理化的幾何圖形內(nèi)的紋理化幾何圖形像素。以該方式，可識(shí)別通過(guò)第一紋理圖像對(duì)幾何圖形的紋理貢獻(xiàn)(例如可由第一紋理圖像被分配紋理值的幾何圖形內(nèi)的像素的識(shí)別)。
[0005]第二紋理圖像可提供幾何圖形的已經(jīng)由第一紋理圖像紋理化的一個(gè)或多個(gè)像素的冗余像素紋理貢獻(xiàn)。例如，第二紋理圖像可提供對(duì)幾何圖形內(nèi)已經(jīng)由第一紋理圖像紋理化的像素進(jìn)行紋理化的冗余紋理化像素。因?yàn)榧y理化幾何圖形像素已經(jīng)被第一紋理圖像紋理化，可從第二紋理圖像去除掉冗余紋理化像素以生成修改的第二紋理圖像。例如，冗余紋理化像素可被圖像修補(bǔ)(例如被分配可高效用于壓縮的顏色，例如將冗余紋理化像素與其他像素進(jìn)行混合的顏色)。以該方式，修改的第二紋理圖像可被高效壓縮以減少被用于存儲(chǔ)和/或串流修改的第二紋理圖像(例如被壓縮)到客戶端以便由客戶端對(duì)幾何圖形紋理化的存儲(chǔ)資源和/或帶寬。
[0006]應(yīng)當(dāng)認(rèn)識(shí)到，在示例中，如本文使用的像素可包括一個(gè)或多個(gè)像素，并且不限于單個(gè)像素。在示例中，像素可包括任意尺寸的超像素。例如，超像素可對(duì)應(yīng)于8x8像素塊(例如在壓縮期間使用的像素的jpg塊)。以該方式，可從紋理圖像去除冗余超像素，這可改進(jìn)壓縮(例如與僅僅單個(gè)像素相反，去除8x8像素塊(例如這里去除多個(gè)像素可進(jìn)一步改進(jìn)壓縮))。
[0007]為了前述和相關(guān)目標(biāo)的完成，以下描述和附圖陳述某些圖示方面和實(shí)施方式。這些指示其中可采用一個(gè)或多個(gè)方面的各個(gè)方式中的僅一些。根據(jù)當(dāng)結(jié)合附圖考慮的以下詳細(xì)描述，本公開的其他方面、優(yōu)點(diǎn)和新穎特征將變得清楚。
【附圖說(shuō)明】
[0008]圖1是圖示減輕用于紋理化幾何圖形的冗余像素紋理貢獻(xiàn)的示例性方法的流程圖。
[0009]圖2是圖示用于減輕紋理化幾何圖形的冗余像素紋理貢獻(xiàn)的示例性系統(tǒng)的部件框圖。
[0010]圖3是圖示用于識(shí)別一個(gè)或多個(gè)冗余紋理化像素的示例性系統(tǒng)的部件框圖。
[0011]圖4是圖示用于去除冗余紋理化像素以生成修改的紋理圖像的示例性系統(tǒng)的部件框圖。
[0012]圖5是圖示用于將修改的紋理圖像串流到客戶端以在紋理化幾何圖形中使用的示例性系統(tǒng)的部件框圖。
[0013]圖6是示例性計(jì)算設(shè)備可讀介質(zhì)的圖示，其中可包括被配置為體現(xiàn)本文陳述的指配中的一個(gè)或多個(gè)指配的處理器可執(zhí)行指令。
[0014]圖7圖示示例性計(jì)算環(huán)境，其中可實(shí)施本文陳述的指配中的一個(gè)或多個(gè)。
【具體實(shí)施方式】
[0015]現(xiàn)在參考附圖描述主張的主題，其中在全部圖中同樣的參考數(shù)字一般用于指代同樣的元件。在以下描述中，為了解釋的目的，陳述許多特別細(xì)節(jié)以便提供對(duì)主張的主題的理解。然而，可明顯的是，可在不具有這些特別細(xì)節(jié)的情況下實(shí)踐主張的主題。在其他例子中，以框圖形式圖示結(jié)構(gòu)和設(shè)備以便促進(jìn)描述主張的主題。
[0016]通過(guò)圖1的示例性方法100圖示減輕用于紋理化幾何圖形的冗余像素紋理貢獻(xiàn)的實(shí)施例。在示例中，幾何圖形可表示場(chǎng)景(描繪城市的一部分的場(chǎng)景)的三維表面。該幾何圖形可包括具有深度值的一個(gè)或多個(gè)像素(例如有時(shí)被稱為3D點(diǎn))?？墒褂靡粋€(gè)或多個(gè)紋理圖像來(lái)紋理化幾何圖形。例如，RGB紋理圖像可包括具有色值和/或深度值的一個(gè)或多個(gè)像素(有時(shí)被稱為位置)。在紋理化期間基于具有類似深度值的3D點(diǎn)和位置來(lái)將幾何圖形的3D點(diǎn)投影到RGB紋理圖像內(nèi)的位置?？蓪⑽恢锰幍纳捣峙浣o幾何圖形的像素，因此將該像素紋理化以生成紋理化幾何圖形像素。可認(rèn)識(shí)到，可使用多于一個(gè)紋理圖像來(lái)紋理化幾何圖形，這可導(dǎo)致冗余像素紋理貢獻(xiàn)(例如在第一紋理圖像內(nèi)的第一位置和在第二紋理圖像內(nèi)的第二位置可都提供在幾何圖形內(nèi)的像素的色值)，使得由于冗余數(shù)據(jù)，紋理圖像可能不被高效地存儲(chǔ)和/或串流到客戶端。
[0017]相應(yīng)地，在104，可應(yīng)用第一紋理圖像到幾何圖形來(lái)識(shí)別由第一紋理圖像對(duì)幾何圖形的第一像素紋理貢獻(xiàn)。第一紋理圖像可根據(jù)第一視圖方向描繪由幾何圖形表示的場(chǎng)景(例如第一紋理圖像可包括NADIR圖像并且第一視圖方向可包括場(chǎng)景的鉛垂線視圖方向，例如城市的自頂向下視圖)。第一像素紋理貢獻(xiàn)可識(shí)別在幾何圖形內(nèi)由第一紋理圖像紋理化的紋理化幾何圖形像素。在示例中，可將與幾何圖形的第一像素相關(guān)聯(lián)的第一 3D點(diǎn)投影到第一紋理圖像內(nèi)的第一位置。與第一位置相關(guān)聯(lián)的第一紋理信息(例如第一位置的色值)可被識(shí)別為貢獻(xiàn)于第一像素。響應(yīng)于第一像素的深度對(duì)應(yīng)于第一位置的深度，第一紋理信息可被包括在第一像素紋理化貢獻(xiàn)內(nèi)(例如色值和/或被貢獻(xiàn)于對(duì)第一像素的紋理化的第一位置的指示)。以該方式，第一像素紋理貢獻(xiàn)可識(shí)別第一像素被第一紋理圖像紋理化(例如因此生成紋理化幾何圖形像素)(例如第一像素被與第一位置相關(guān)聯(lián)的色值紋理化)。
[0018]在106，可基于對(duì)應(yīng)于紋理化幾何圖形像素的冗余紋理化像素(例如在幾何圖形內(nèi)已經(jīng)被第一紋理圖形紋理化的第一像素)來(lái)識(shí)別針對(duì)該幾何圖形由第二紋理圖像提供的冗余紋理化像素。第二紋理圖像可根據(jù)第二視圖方向描繪由幾何圖形表示的場(chǎng)景(例如第二紋理圖像可從基本斜的視圖方向描繪城市)。在示例中，與幾何圖形的第一像素相關(guān)聯(lián)的第一 3D點(diǎn)可被投影到第二紋理圖像內(nèi)的第二位置。與第二位置相關(guān)聯(lián)的第二紋理信息(例如第二位置的色值)可以被識(shí)別為對(duì)第一像素有貢獻(xiàn)。響應(yīng)于第一像素的深度對(duì)應(yīng)于第二位置的深度，第二紋理信息可以被包括在第二像素紋理貢獻(xiàn)內(nèi)(例如色值和/或第二位置貢獻(xiàn)于對(duì)第一像素的紋理化的指示)。以該方式，第二像素紋理貢獻(xiàn)可識(shí)別第一像素被第二紋理圖像紋理化(例如被紋理化的幾何圖形像素)(例如第一像素被與第二位置相關(guān)聯(lián)的色值紋理化)。在確定冗余紋理化像素的示例中，可以評(píng)估第一像素紋理貢獻(xiàn)和第二像素紋理貢獻(xiàn)以確定第一紋理圖像和第二紋理圖像都貢獻(xiàn)于對(duì)第一像素進(jìn)行紋理化，因此建立冗余像素紋理貢獻(xiàn)。即，可以將冗余紋理化像素識(shí)別為在第二紋理圖像內(nèi)的第二位置，因?yàn)榈诙恢秘暙I(xiàn)于幾何圖形中已經(jīng)被第一紋理圖像內(nèi)的第一位置貢獻(xiàn)的第一像素。
[0019]在108，可以從第二紋理圖像去除冗余紋理化像素(例如第二位置)以生成修改的第二紋理圖像?？烧J(rèn)識(shí)到，可將各種圖像修改技術(shù)用于去除冗余紋理化像素。在示例中，冗余紋理化像素可