專利名稱：在文件中存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各個(gè)數(shù)據(jù)元素的方法以及所屬設(shè)備的制作方法
在文件中存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各個(gè)數(shù)據(jù)元素的方法以及所屬設(shè)備本發(fā)明涉及根據(jù)權(quán)利要求1的前序部分所述的方法以及根據(jù)權(quán)禾腰求10 的前序部分所述的設(shè)備。在許多應(yīng)用中需要不同質(zhì)量的媒體數(shù)據(jù)流，例如視頻數(shù)據(jù)流或者音頻數(shù)據(jù)流。例如移動(dòng)電話僅能夠再現(xiàn)具有小圖像分辨率(例如176X144像點(diǎn))的視頻 流。而便攜式計(jì)^m、例如平板(Tablet) PC能夠在其顯示器上顯示具有 高達(dá)1280X 768像點(diǎn)的視頻數(shù)據(jù)流。為了為具有不同終端設(shè)備特性的不同終端設(shè)備JI供媒體數(shù)據(jù)流，可以將媒 體數(shù)據(jù)流建立成不同質(zhì)量的多個(gè)數(shù)據(jù)流。這種實(shí)施方式有缺點(diǎn)，因?yàn)闉榱舜鎯?chǔ) 媒體數(shù)據(jù)流的所述大量數(shù)據(jù)流必須提供大的存儲(chǔ)器容量。在另一翅中，媒體娜流被編碼為基本數(shù)據(jù)流禾哆個(gè)分?jǐn)?shù)據(jù)流，在雌過把一個(gè)或者多個(gè)分?jǐn)?shù)據(jù)流添加到基本數(shù)據(jù)流，相對(duì)于基本數(shù)據(jù)流實(shí)1W質(zhì)量、 例如圖像質(zhì)量的改善。通皿種可定標(biāo)(skalierbare)編碼，終端設(shè)備可以ffi)l 把一個(gè)或者多個(gè)分娜流添加到基本數(shù)據(jù)流來如此獲得要解碼的具有可選質(zhì)量 的數(shù)據(jù)流，使得該數(shù)據(jù)流適用于特定終端設(shè)備的設(shè)備特性。通皿種可定標(biāo)編 碼實(shí)現(xiàn)， 一方面存在小的存儲(chǔ)位置需求，另一方面通過添加一個(gè)或者多個(gè)分?jǐn)?shù) 據(jù)流能夠匹配終端設(shè)備的設(shè)備特性。編碼后的媒體數(shù)據(jù)流、例如視頻數(shù)據(jù)流在文件中有組織地被存儲(chǔ)。從[l]例 如獲知一種存儲(chǔ)編碼后的媒體數(shù)據(jù)流的文件格式。根據(jù)文獻(xiàn)[l]的第七章節(jié)，該 文件格式支持"層"和"子序列"。在此明確指出，"層"和"子序列"限于讀 數(shù)據(jù)格式，而該信息不用于描述編解碼器的特性、即可定標(biāo)數(shù)據(jù)流。此外，參照文獻(xiàn)[2]，該文獻(xiàn)為可定標(biāo)性方向柳頃序、亦即為特別優(yōu)選的應(yīng) 用情況定義帶有固定結(jié)構(gòu)的特定分等級(jí)格式。在[2]中所建議的格式示出不支持 定標(biāo)方向的靈活定義的缺點(diǎn)。本發(fā)明所基于的任務(wù)在于，說明一種方法和設(shè)備，皿建立用于存儲(chǔ)可定 標(biāo)數(shù)據(jù)流的至少一個(gè)文件時(shí)，以簡(jiǎn)單而有效的方式既能夠靈活地定義定標(biāo)方向 又能夠使可定標(biāo)數(shù)據(jù)流與一個(gè)或者多個(gè)不同終端設(shè)備的設(shè)備特性相匹配。該任務(wù)從根據(jù)權(quán)利要求1的前序部分所述的方法出發(fā)M31其表征性特征來 解決。此外，該任務(wù)根據(jù)權(quán)利要求10的前序部分通過其表征性特征來解決。 本發(fā)明的其他改進(jìn)在從屬權(quán)禾腰求中給出。在用于在至少一個(gè)文件中存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各個(gè)數(shù)據(jù)元素的方法中，其 中該可定標(biāo)數(shù)據(jù)流的質(zhì)量級(jí)通過至少一個(gè)定標(biāo)特征以分別多個(gè)定標(biāo)級(jí)予以說 明，給定標(biāo)特征的每一定標(biāo)級(jí)分別分配至少一個(gè)數(shù)據(jù)元素，可定標(biāo)數(shù)據(jù)流在高 質(zhì)量級(jí)中通過至少一個(gè)以下數(shù)據(jù)元素來表示，即所述數(shù)據(jù)元素的相應(yīng)定標(biāo)特征 定標(biāo)級(jí)等于或者小于相應(yīng)定標(biāo)特征的分別屬于高質(zhì)量級(jí)的定標(biāo)級(jí)，給數(shù)據(jù)元素 分配時(shí)間指數(shù)，在該時(shí)間指數(shù)時(shí)應(yīng)該相對(duì)于其他數(shù)據(jù)元素顯示相應(yīng)的數(shù)據(jù)元素， 這樣給數(shù)據(jù)元素分配處理指數(shù)，使得為了處理該數(shù)據(jù)元素可以僅考慮具有相應(yīng) 處理指數(shù)的較低值的一個(gè)或者多個(gè)數(shù)據(jù)元素，這樣產(chǎn)生至少一個(gè)描述列表，使 得該描述列表包括針對(duì)數(shù)據(jù)元素所屬的描述元素，所述描述元素包括相應(yīng)定標(biāo) 特征的定標(biāo)級(jí)、時(shí)間指數(shù)和/或處理指數(shù)，在文件之一中有組織地存儲(chǔ)描述列表 中的至少一個(gè)以及所屬的 元素。i!31^發(fā)明的方法來實(shí)現(xiàn)，育灘以非常靈活的方式存儲(chǔ)娜元素和其描述， 所述描述以至少一個(gè)描述列表的形式表示。如果描述元素在描述列表中按照至少一個(gè)分類準(zhǔn)則、尤其是以從最低定標(biāo)級(jí)向最高定標(biāo)級(jí)分類的方式有組織地布置，貝u能夠ayi地找到為處理所需要的數(shù)據(jù)元素。^i&t也這樣產(chǎn)生描述列表，使得所述描述列表可被分配給終端設(shè)備功能性、 特別是終端設(shè)備的計(jì)算效率或者再現(xiàn)單元(Wiedergabeeinheit)。由此具有特定 終端設(shè)備功能性的終端設(shè)備能夠以簡(jiǎn)單的方式ffiil地在文件中找到自身所需要 的數(shù)據(jù)元素。此外，通過說明多個(gè)描述列表，能夠操作具有最大不同的終端設(shè) 備功能性的終端設(shè)備。如果優(yōu)選地在描述列表中添加用于找到所屬的數(shù)據(jù)元素的參照 (Verweise)，并且把數(shù)據(jù)元素有組織地存儲(chǔ)在文件之一內(nèi)在數(shù)據(jù)區(qū)域中，貝何 以彼此分開地管理描述列表和數(shù)據(jù)區(qū)域，并且例如在傳遞該文件或者多個(gè)文件 時(shí)彼此分開地傳輸所述描述列表和數(shù)據(jù)區(qū)域。在該傳輸時(shí)可以為描述列表和數(shù) 據(jù)區(qū)域分別使用特定的錯(cuò)誤保護(hù)，由此旨,相對(duì)于唯一的錯(cuò)誤保護(hù)實(shí)現(xiàn)帶寬。如果另外從屬于數(shù)據(jù)元素的參照中確定數(shù)據(jù)元素的處理指數(shù)的值，貝U能夠M^要存儲(chǔ)的描述列表的娜量。另外可以優(yōu)^t也根據(jù)屬于相應(yīng)數(shù)據(jù)元素的參照來有組織地將數(shù)據(jù)元素存儲(chǔ) 在數(shù)據(jù)區(qū)域中。因此能夠通過分別所存儲(chǔ)的數(shù)據(jù)元素的位置來確定所屬的處理 指數(shù)。由此一方面育^I多通過省略具體的處理指數(shù)減少數(shù)據(jù)容量。另一方面，為讀取M元素僅需在一個(gè)方向上處理娜區(qū)域，使得由itbi免了耗時(shí)的瑕囀。在本發(fā)明方法的另一可替代擴(kuò)展中，除了描述列表之外，在文件之一中有組織地存儲(chǔ)按照MPEG4 AVC可兼容數(shù)據(jù)元素用的MPEG4 AVC描述格式的數(shù) 據(jù)列表，用于說明最低質(zhì)量級(jí)之一。MPEG4 AVC描述格式從標(biāo)準(zhǔn)ISO/IEC MPEG4AVC獲知。由此實(shí)現(xiàn)，該文件也能由僅識(shí)別MPEG4AVC描述格式的 終端設(shè)備讀取和分析。此外，地由質(zhì)量級(jí)這樣形成質(zhì)量組，使得把質(zhì)量組分配給質(zhì)量級(jí)之一， 并且把用于處理的所有數(shù)據(jù)元素分配給所述質(zhì)量組。由此可以支持一種可定標(biāo) 編碼方法，其以分層(layered)方式支持多個(gè)定標(biāo)級(jí)。為此如果在描述列表中僅僅將為形成所述質(zhì)量組除了在對(duì)于所述質(zhì)量組次 低的質(zhì)量組內(nèi)列出的數(shù)據(jù)元素或者參照之外所添加或者所需要的數(shù)據(jù)元素或參 照分配給所述質(zhì)量組，則由此能夠保證對(duì)描述列表的緊湊且存儲(chǔ)器高效的表示。此外本發(fā)明涉及一種設(shè)備，用于在至少一個(gè)文件內(nèi)存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各 個(gè)數(shù)據(jù)元素，其中該可定標(biāo)數(shù)據(jù)流的質(zhì)量級(jí)通過至少一個(gè)定標(biāo)特征以分別多個(gè) 定標(biāo)級(jí)來描述，給定標(biāo)特征的每一定標(biāo)級(jí)分別分配至少一個(gè)數(shù)據(jù)元素，該可定 標(biāo)數(shù)據(jù)流在高質(zhì)量級(jí)中通過至少一個(gè)這樣的數(shù)據(jù)元素表示，即這樣的數(shù)據(jù)元素 的相應(yīng)定標(biāo)特征定標(biāo)級(jí)等于或者小于分別屬于該高質(zhì)量級(jí)的相應(yīng)定標(biāo)特征定標(biāo) 級(jí)，給數(shù)據(jù)元素分配時(shí)間指數(shù)，在該時(shí)間指數(shù)處應(yīng)該相對(duì)于其他數(shù)據(jù)元素表示 相應(yīng)的數(shù)據(jù)元素，具有生成器模塊，所述生成器模i央適用于給數(shù)據(jù)元素這樣分 配處理指數(shù)，使得為處理該數(shù)據(jù)元素可以僅考慮具有相應(yīng)處理指數(shù)的較小值的 一個(gè)或者多個(gè)數(shù)據(jù)元素，這樣產(chǎn)生至少一個(gè)描述列表，使得該描述列表對(duì)于數(shù) 據(jù)元素包括所屬的描述元素，其中所述描述元素包括相應(yīng)定標(biāo)特征的定標(biāo)級(jí)、 時(shí)間指數(shù)和/或處理指數(shù)，在文件之一中有組織地存儲(chǔ)至少一個(gè)描述列表以及所 屬的數(shù)據(jù)元素。M該設(shè)備可實(shí)現(xiàn)和執(zhí)行本發(fā)明的方法。該設(shè)備可以以硬件、以在處理器 上運(yùn)行的軟件或者由硬件和軟件的組合來實(shí)現(xiàn)。下面根據(jù)

圖1到15更詳細(xì)地說明本發(fā)明及其改進(jìn)。 圖1示出可定標(biāo)數(shù)據(jù)流的質(zhì)量級(jí)；圖2示出用于實(shí)現(xiàn)表示不同定標(biāo)特征(圖像重復(fù)率(Bildwiederholrate)和圖像^fj摔)的數(shù)據(jù)元素的實(shí)施方式；圖3示出用于每一質(zhì)量級(jí)的描述元素和 元素；圖4示出用于從多個(gè)圖像產(chǎn)生數(shù)據(jù)元素和用于建立重構(gòu)圖像的電路圖；圖5A示出用于為具有高圖像分辨率的質(zhì)量級(jí)建立重構(gòu)圖像的實(shí)施方式；圖5B示出用于為具有高圖像重復(fù)率的質(zhì)量級(jí)建立重構(gòu)圖像的實(shí)施方式；圖6示出按照?qǐng)D2或者3的質(zhì)量級(jí)或者數(shù)據(jù)元素的描述列表；圖7示出由描述列表和數(shù)據(jù)區(qū)域組成的文件的結(jié)構(gòu)；圖8A示出描述列表的變型；圖8B示出按照?qǐng)D8A的描述列表的二進(jìn)制表示；圖9示出用于在文件中存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各個(gè)數(shù)據(jù)元素的設(shè)備；圖10示出用于在網(wǎng)路中在視頻月艮務(wù)器內(nèi)應(yīng)用該設(shè)備的應(yīng)用例；圖11示出在考慮質(zhì)量組情況下的描述列表；圖12示出在考慮設(shè)備特性情況下的描述列表的另一個(gè)變型；圖13示出描述列表中圖像數(shù)的相關(guān)性；圖14示出兩個(gè)文件，其中在第一文件中有組織地存儲(chǔ)多個(gè)描述列表和 列表，在第二文件中有組織地存儲(chǔ)數(shù)據(jù)元素。具有相同功能和作用方式的元素在圖1到圖14中給予相同的參考符號(hào)。 根據(jù)視頻數(shù)據(jù)流來更詳細(xì)地說明用于在文件中存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各個(gè)數(shù)據(jù)元素的本發(fā)明方法。該視頻數(shù)據(jù)流表示可定標(biāo)數(shù)據(jù)流的可能類型。其他類型的可定標(biāo)數(shù)據(jù)流例如是語音信號(hào)、音樂作品或者可以以多個(gè)質(zhì)量級(jí)表示的數(shù)據(jù)記錄。可定標(biāo)視頻 流例如具有這樣的特性，即該數(shù)據(jù)流的部分離多以降低的 質(zhì)量、也就是說例如較低的清晰度、較低的空間或者時(shí)間^fJf率和/或以省略確 定對(duì)象的方式來解碼。在確定的編碼方法的情況下，能夠從整個(gè)數(shù)據(jù)流抽出任 意相關(guān)的子集，這導(dǎo)致降低的空間的和/或時(shí)間的分辨率和/或?qū)е伦儾畹那逦?度。此外可以根據(jù)應(yīng)用目的來標(biāo)記可定標(biāo)數(shù)據(jù)流SD的段，例如使得可定標(biāo) 流的確定場(chǎng)景僅可供確定的年齡組使用。在圖1中示出了 "可全定標(biāo)(M scalable)"視頻編碼的概念。在此，在軸 上繪出三個(gè)定標(biāo)特征圖像重復(fù)率T、空間^f,率(Ortsaufldsung) S和圖像清 晰度B。每一定標(biāo)特征T、 S、 B分別可分解成多個(gè)定標(biāo)級(jí)。在此，T0 = 7.5*s (fys — frames per second (幀每秒)=圖像每秒)、Tl = 15 fys禾口 T2 = 30 fys。 此外，在圖l中空間分辨率S的定標(biāo)級(jí)為S0 = QCIF (QCIF-Quarter Common Intermediate Format (四分之一通用中間格式)=176x144像點(diǎn))、SI =CIF (CIF -Common Intermediate Format (通用中間格式)=352x288像點(diǎn))和S2 = 4CIF (4CIF-4 times Common Interchange Format (四倍通用交換格式)=704x576像 點(diǎn))。最后，定標(biāo)特征圖像清晰度B包括兩個(gè)定標(biāo)級(jí)B0、 Bl，其中BO相應(yīng)于 粗量化，Bl相應(yīng)于細(xì)量化。在圖1中每個(gè)框悉示一個(gè)可能的質(zhì)量級(jí)Q0、、 Q4，其中每一質(zhì)量級(jí)通 過定標(biāo)特征T、 S、 B的定標(biāo)級(jí)的單獨(dú)三元組(Triple)表示。例如質(zhì)量級(jí)Q3通 過定標(biāo)特征T、 S、 B的定標(biāo)級(jí)T1、 Sl、 B0表征。在圖1中每一質(zhì)量級(jí)QO、、 Q4表示可定標(biāo)數(shù)據(jù)流SD的確定的質(zhì)量。在此，質(zhì)量級(jí)Q0的質(zhì)量低，因?yàn)椴?僅圖像重復(fù)率、空間分辨率、而且圖像清晰度都低或粗。為改善可定標(biāo)數(shù)據(jù)流 SD的質(zhì)量，例如選擇第二質(zhì)量級(jí)Q2。在此，空間分辨率S從QCIF被提高到 OF。因此，在"可全定標(biāo)"編碼方法中，如圖1所示，ffl)l沿表示於定標(biāo)特 征的定標(biāo)級(jí)的軸移動(dòng)，能夠?qū)崿F(xiàn)圖像質(zhì)量的改善。下面借助圖2到圖5B詳細(xì)探討可定標(biāo)數(shù)據(jù)流的產(chǎn)生或者編碼和處理或者 解碼。用于編碼和解碼可定標(biāo)數(shù)據(jù)流的方法為技術(shù)人員公知，例如對(duì)于SVC (SVC-Scalable Video Coding (可定標(biāo)視頻編碼))的ISO/IEC MPEG標(biāo)準(zhǔn)化行 動(dòng)。因此借助圖2到圖5B僅一般性地說明可定標(biāo)數(shù)據(jù)流的編碼和解碼。應(yīng)該產(chǎn) 生可定標(biāo)數(shù)據(jù)流或者可定標(biāo)數(shù)據(jù)流的數(shù)據(jù)元素，其能夠?qū)崿F(xiàn)圖像重復(fù)率T0=15 fys和Tl=30扭以及空間分辨率S0=QCIF和S1=CIF。如從圖3可見，由此能 夠?qū)崿F(xiàn)4個(gè)不同的質(zhì)量級(jí)Q0、…、Q3。對(duì)于每一個(gè)質(zhì)量級(jí)分別產(chǎn)生至少一個(gè)數(shù) 據(jù)元素D0、…、D5，所述 元素包含相應(yīng)質(zhì)量級(jí)Q0、…、Q3的相關(guān)f^。根據(jù)圖2詳細(xì)探討數(shù)據(jù)元素D0、…、D5的生成。為產(chǎn)生這些數(shù)據(jù)元素， 觀察三個(gè)圖像P0、 Pl、 P2，所述圖像例如在時(shí)刻t0、 tl、 t2被接收。這些圖像 P0、 Pl、 P2具有空間分辨率CIF。首先在第一步驟X10中圖像P0從CIF被轉(zhuǎn) 換為QCIF，例如借助二維子采樣(Subsampling)濾波器，并且可選地被壓縮，以便作為結(jié)果產(chǎn)生數(shù)據(jù)元素D0。類似地在步驟X12中為圖像P2執(zhí)行該步驟， 產(chǎn)生數(shù)據(jù)元素D1。為產(chǎn)生數(shù)據(jù)元素D2，在步驟Xll中例如首先把圖像P1從 CIF轉(zhuǎn)換為QCIF，然后M31解壓縮后的數(shù)據(jù)元素D0、 Dl (步驟X20、 X21) 產(chǎn)生B圖像形式的差圖像。壓縮該差圖像并且從而產(chǎn)生數(shù)據(jù)元素D2。在下一步驟X30中將解壓縮后的數(shù)據(jù)元素DO從QCIF放大為CIF，例如 fflil二維濾波器。然后在步驟X40中從圖像PO和被放大的且被解壓縮的 元 素DO確定差圖像并壓縮。該被壓縮的差圖像表示為數(shù)據(jù)元素D3。為#數(shù)據(jù) 元素D4類似iMl步驟X32和X42來進(jìn)行。為產(chǎn)生數(shù)據(jù)元素D5，首先在步驟X31中解壓縮數(shù)據(jù)元素D2并且將其從 QCIF放大為CIF。接著在考慮圖像Pl 、被解壓縮且被放大的圖像D2和被解壓 縮的和被重構(gòu)的圖像的情況下基于數(shù)據(jù)元素DO、 D3和數(shù)據(jù)元素D1和D4建立 差圖像。在此，在步驟X50中從被解壓縮的且從QCIF向CIF被放大的數(shù)據(jù)元 素DO連同被解壓縮的娜元素D3來確定重構(gòu)圖像之一。這類似地在步驟X51 為數(shù)據(jù)元素D1和D4執(zhí)行。在步驟X41中也實(shí)現(xiàn)差圖像的生成和對(duì)其的壓縮， 以便在那里產(chǎn)生數(shù)據(jù)元素D5。在圖3中沿定標(biāo)特征的定標(biāo)級(jí)繪出了在圖2中所產(chǎn)生的 元素的空間分 辨率S和重復(fù)頻率T。此外說明了相應(yīng)的時(shí)間指數(shù)ZIO、…、ZI5，在這些時(shí)間指數(shù)處應(yīng)輸出所屬的數(shù)據(jù)元素、亦即例如在像屏上顯示。此外在圖3中給每一數(shù)據(jù)元素D0、…、D5舉出所屬的處理指數(shù)V0、…、 V5。處理指數(shù)說明，必須以哪種順序MM數(shù)據(jù)元素，例如解壓縮和處理。 例如如果要處理 元素D4、亦即質(zhì)量級(jí)Q2 ，則必須至少處理數(shù)據(jù)元素Dl ， 例如解壓縮和放大。 一般處理指數(shù)表明，在處理所屬的M元素D4之前必須已 經(jīng)處理了帶有較小處理指數(shù)值V1的一個(gè)或者多個(gè)數(shù)據(jù)元素D1。在圖2的下面 部分中示出了所屬的數(shù)據(jù)元素DO、、 D5的相應(yīng)處理指數(shù)V0、…、V5的值。 該清單是示例性的，也可以通過一個(gè)或者多個(gè)可替代的順序棘示。在圖2或者3中僅觀察了少數(shù)幾個(gè)圖像，例如PO、 P1和P2。對(duì)于可定標(biāo) 數(shù)據(jù)流DS考慮大量圖像，為所述圖像分別產(chǎn)生數(shù)據(jù)元素。此外指出，壓縮或者 解壓縮是可選的。該壓縮或者解壓縮可以通過標(biāo)準(zhǔn)ISO/IECMPEG"4AVC實(shí)現(xiàn)。在圖4中可以看至,于從多個(gè)圖像產(chǎn)生數(shù)據(jù)元素以及用于建立重構(gòu)圖像的 電路圖。例如從圖2所知，借助編碼模塊COD從圖像PO、…P2產(chǎn)生數(shù)據(jù)元素D0、…、D5。通過艦解碼徵央DEC ,人一個(gè)或者多個(gè)娜元素產(chǎn)生一個(gè) 或者重構(gòu)圖像R1、 Rl'、 R2、 R2'。在此，重構(gòu)圖像R1、 R2具有低空間分辨率 S0，而圖像R1'、 R2，具有高空間分辨率S1。如果僅顯示低重復(fù)率TO的圖像、 即重構(gòu)圖像R1或者R1'，則重復(fù)率為T0 = 7.5 fys。如果另外顯示重構(gòu)圖像R2 或者R2'，貝U產(chǎn)生Tl = 15 fys的重構(gòu)翻流。在圖5A和圖5B中詳細(xì)說明用于產(chǎn)生重構(gòu)圖像的實(shí)施。例如如果重構(gòu)圖像 Rl相應(yīng)于圖3中所示的質(zhì)量級(jí)Q1，則為建立該重建圖像需要數(shù)據(jù)元素DO、 Dl 和D2。這一相關(guān)性可從圖2得知。如鵬擇了質(zhì)量級(jí)Q2，則如在圖5B中可見， 重構(gòu)圖像R2'M數(shù)據(jù)元素Dl和D2建立。根據(jù)在產(chǎn)生重構(gòu)圖像時(shí)的這種模塊化實(shí)施方式，終端設(shè)備可以根據(jù)其終端 設(shè)備功能性僅考慮質(zhì)量級(jí)并且從而僅考慮例如能夠處理或者表示的所述數(shù)據(jù)元 素。此外注意到，高質(zhì)量級(jí)的可定標(biāo)數(shù)據(jù)流既考慮該高質(zhì)量級(jí)的數(shù)據(jù)元素也考 慮較低質(zhì)量級(jí)的一個(gè)或者多個(gè)數(shù)據(jù)元素。這意味著，高質(zhì)量級(jí)的可定標(biāo)數(shù)據(jù)流 通過一個(gè)或者多個(gè)以下數(shù)據(jù)元素再現(xiàn)，即所述數(shù)據(jù)元素屬于等于或者小于分別 屬于該高質(zhì)量級(jí)的相應(yīng)定標(biāo)特征定標(biāo)級(jí)的相應(yīng)定標(biāo)特征定標(biāo)級(jí)。這種定標(biāo)也稱 為"可全定標(biāo)性"。例如如果高質(zhì)量級(jí)是Q3，則為產(chǎn)生該種質(zhì)量的可定標(biāo)數(shù)據(jù) 流DS必須考慮f(^分組D5，還要考慮例如較低質(zhì)量級(jí)的所有數(shù)據(jù)分組，確切 說D0、…、D4。在本發(fā)明方法的隨后步驟中，Mil對(duì)描述元素分M建立描述列表Ll，所 述描述元素例如包括定標(biāo)特征的定標(biāo)級(jí)、和/或時(shí)間指數(shù)ZI9、…、ZI5和/或處 理指數(shù)V0、…、V5。該分類的結(jié)果例如在圖6中示出。在此下面以下面的分類順細(xì)亍三個(gè)分類準(zhǔn)則1. 時(shí)間指數(shù)ZIO、…、Z15或者t0、…、t22. 圖像重復(fù)率T0、 Tl3. 空間分辨率S0、 Sl描述列表Ll在文件F中這樣來布置，使得根據(jù)分類參數(shù)的說明把所屬的 娜元素連同其處理指數(shù)一起來說明，例如"t0， T0， S0， V0， D0"。在圖7中可以看到圖6的描述列表的可替代表示形式。在此代替處理指數(shù) V0、…、V5和所屬的數(shù)據(jù)元素D0、…、D5，在該描述列表L1中加入相應(yīng)的參照VD0、…、VD5。該參照VD0、…、VD5具有兩個(gè)功能。 一方面，該參照 指向文件F的數(shù)據(jù)段DAT內(nèi)的項(xiàng)，在所述數(shù)據(jù)段內(nèi)有組織地存儲(chǔ)各個(gè)數(shù)據(jù)元素 D0、…、D5。因此可以通過參照VDO、…、VD5找到數(shù)據(jù)元素D0、…、D5。 這在圖7中用帶有參考符號(hào)VD0、…、VD5的虛線箭頭以符號(hào)方式表示。另一 方面，可以從參照VD0、…、VD5獲得屬于相應(yīng)數(shù)據(jù)元素D0、…、D5的處理 指數(shù)V0、…、V5。于是會(huì)的多從數(shù)據(jù)段DAT內(nèi)的數(shù)據(jù)元素DO的位置來確定處 理指數(shù)V0。如果M元素DO位于第一位置，貝ij所屬的處理指數(shù)為V(^0。如 果該數(shù)據(jù)元素DO位于第四位置，則處理指數(shù)為V0:3。這類似iikig用于其他的 M元素D1、…、D5。在按照?qǐng)D6和圖7的以上實(shí)施例中，數(shù)據(jù)元素和描述列表在一個(gè)唯一的文 件F中以分類的方式被存儲(chǔ)。 一般，所述 元素和貓鼠列表也可以被存儲(chǔ)在 多于一個(gè)唯一的文件中，例如在文件F中存儲(chǔ)描述列表Ll ，在另一文件F1中 存儲(chǔ)f^元素D0、、 D5。在圖8A中可以看到描述列表L2的另一替^(樣示形式。在此，在描述列表 L2內(nèi)不存在數(shù)據(jù)元素的這些項(xiàng)用標(biāo)記字"KREI (空閑的)"占用，而不是用參 照。在圖犯中表示圖8A的項(xiàng)的二進(jìn)制表示。這例如是描述列表L2'。在此，描述元素取下面的二進(jìn)制值 00: t0,01:tl， 10:t2 0:T0,1:T1 0: S0,1:S1VD0:000,…,VD5: 101,FREI: 111例如，第四行具有下面的位模式"00,1,1,111"。如果各個(gè)二進(jìn)制符號(hào)通MJ^參考符號(hào)代替，貝幅第四行讀作"t0,Tl,Sl,FREI"。作為二進(jìn)制符號(hào)的 參考符號(hào)t0、 tl、 T0、 Tl、 S0、 Sl、 D0、 Dl、 D2、 D3、 FREI的意義例如事先 由解碼器或者終端設(shè)備知曉，或者單獨(dú)地通知給所述解碼器或者終端設(shè)備。在圖6至8B中選擇了統(tǒng)一的分與頃序。録示本發(fā)明方法的一種可能的 實(shí)施方案。 一般，在對(duì)描述元素、亦即例如時(shí)間指數(shù)和定標(biāo)特征的定標(biāo)級(jí)進(jìn)行 分類時(shí)可以考慮每一個(gè)任意的順序。特別是在建立描述列表時(shí)可以注意終端設(shè) 備功能性，例如終端設(shè)備的計(jì)算效率或者再J見單元。例如在終端設(shè)備上最大可以處理和顯示具有空間分辨率S0=QCIF的可定標(biāo)數(shù)據(jù)流SD。在圖12中舉例示 出了按照下面的分勢(shì)頓序的描述列表L4:1. 空間^f,率S2. 時(shí)間指數(shù)或者時(shí)刻3. 圖像重復(fù)率T。在分析描述列表L4時(shí)，終端設(shè)備僅在文件F的具有空間分辨率S0作為第 一分類參數(shù)的該段中查找。在以空間^m率Sl開始的描述歹據(jù)L4的段中，終 端設(shè)備不必查找可能的數(shù)據(jù)元素，因?yàn)樵摻K端設(shè)備不能處理和顯示空間分辨率 Sl。此外可以用訪問指數(shù)標(biāo)記各個(gè)數(shù)據(jù)元素和/或定標(biāo)特征的定標(biāo)級(jí)和/或時(shí)間 指數(shù)。該訪問指數(shù)在選擇要處理的數(shù)據(jù)元素時(shí)能夠?qū)崿F(xiàn)附加的分類準(zhǔn)則。于是 可以fCT成年人允許該可定標(biāo)數(shù)據(jù)流時(shí)間段，而其余的時(shí)間段適用于從12到18 歲的年輕人。通過分別借助于訪問指數(shù)標(biāo)記時(shí)間指數(shù)ZIO、…、ZI5,可以禁止 或者允許對(duì)不希望的數(shù)據(jù)元素的處理。根據(jù)圖2的實(shí)施例，處理了三個(gè)圖像PO、…、P2。在此該處理(=編碼) 的影響長(zhǎng)度(Einflussl如ge)為GOP=2，因?yàn)槌粋€(gè)為處理所需要的輔助圖像 P0夕卜，該影響長(zhǎng)度包括圖像P1和P2。 一脫齡任意的影響長(zhǎng)度GOPtN"以 借助本發(fā)明方法表示。如麟擇較大的影響長(zhǎng)度GOP，例如GOP46，貝何以 提高定標(biāo)特征圖像重復(fù)率T的定標(biāo)級(jí)數(shù)。在圖13中舉例示出，影響長(zhǎng)度GOP、 GOPl、 GOP2可以隨時(shí)間t變化，例如GOP^2個(gè)圖像，GOP2二3個(gè)圖像。在本發(fā)明方法的一個(gè)擴(kuò)展中，在文件F中可以包含多于一個(gè)的描述列表L1 、 L2、 L3。在此，終端設(shè)備可以單獨(dú)纟 擇描述列表之一用于處理 元素。在 此例如M說明描述列表Ll的號(hào)碼能夠在處理 元素時(shí)給該終端設(shè)備規(guī)定 確定的實(shí)施方式。例如應(yīng)該僅使質(zhì)量組中的定標(biāo)性對(duì)于終端設(shè)備可能。為此指 示該終端設(shè)備僅處理描述列表L3 。該描述列表L3在后面予以說明。在本發(fā)明方法的可替代擴(kuò)展中，可以給文件F添加數(shù)據(jù)列表DL，其中通 過所述文件按照用于描述最低質(zhì)量級(jí)QO、 Ql之一的MPEG4AVC可兼容i^ 元素的MPEG4 AVC描述格式在文件F、 Fl之一中有組織地來存儲(chǔ)數(shù)據(jù)列表 DL。由此能夠在該文件中對(duì)于不能分析描述列表Ll的己經(jīng)存在的終端設(shè)備實(shí) 現(xiàn)后向兼容性。在圖14中在文件F中加入可選的數(shù)據(jù)列表DL。附加iM者可替代地，可以在一個(gè)文件F或者在多個(gè)文件F、 Fl中存儲(chǔ)描 述列表L1和數(shù)據(jù)區(qū)域DAT。如從圖14可見，在文件F中有組織地存儲(chǔ)描述列 表L1、…、L3，在另一文件F1中有組織地存儲(chǔ)數(shù)據(jù)區(qū)域DAT。在圖9中示出用于執(zhí)行本發(fā)明方法的設(shè)備的例示實(shí)施。在此，由照相機(jī)K 拍攝未編碼的圖像P1、 P3，并且傳遞給編碼模塊COD，所述編碼模塊COD產(chǎn) 生數(shù)據(jù)元素DO、、 D5。將這些數(shù)據(jù)元素DO、…、D5向生成器模±央GM傳 遞，所述生成器模i央M描述元素分類之后產(chǎn)生至少一個(gè)描述列表Ll，并且將 所述描述列表Ll有組織地存儲(chǔ)在至少一個(gè)文件F中。此外生成器模塊GM在 包括數(shù)據(jù)元素DO、…、D5的文件F、 F1之一內(nèi)，數(shù)據(jù)區(qū)域DAT。在此文件 F例如可以被存儲(chǔ)在存儲(chǔ)器模塊SM、特別是在固定盤上。在圖10中可以看到本發(fā)明設(shè)備的可能的應(yīng)用例。在網(wǎng)絡(luò)NET內(nèi)部存在視 頻服務(wù)器VX，該視頻服務(wù)器包括本發(fā)明設(shè)備。在該視頻服務(wù)器VX上可以耦合 帶有文件F的存儲(chǔ)器模i央SM。此外照相機(jī)K可以與該視頻月艮務(wù)器VX連接。 另外該視,測(cè)艮務(wù)器VX冑灘把帶有描述列表Ll和數(shù)據(jù)區(qū)域DAT的所建立的一 個(gè)或者多個(gè)文件向移動(dòng)無線電設(shè)備MG、例如GSM設(shè)備(GSM-Global System Mobile Communications (全球移動(dòng)通信系統(tǒng)))或者向計(jì)算機(jī)CG傳輸。在本發(fā)明方法的一種變型中，描述列表L3可以這樣產(chǎn)生，使得把屬于相 應(yīng)時(shí)間指數(shù)的數(shù)據(jù)元素組合到質(zhì)量組G1、…、G3內(nèi)。為此首先參照?qǐng)D3，在圖 3中示出質(zhì)量組G1、…、G3。在此在根據(jù)圖3的實(shí)施例中不再能夠有針對(duì)性地 ilil質(zhì)量組Gl、…、G3選擇所有質(zhì)量級(jí)。在圖3中可以找到三個(gè)質(zhì)量組Gl 、…、 G3。第一質(zhì)量組Gl僅包括質(zhì)量級(jí)Q0的數(shù)據(jù)元素D0、 Dl。第二質(zhì)量組G2包 括質(zhì)量級(jí)Q0和Q1的數(shù)據(jù)元素D0、 Dl、 D3、 D4。第三質(zhì)量組G3包括質(zhì)量級(jí) Q0、…、Q3的數(shù)據(jù)元素D0、…、D5。按照?qǐng)D3編組成質(zhì)量組，對(duì)于技術(shù)人員 公知為在可定標(biāo)編碼框架中的"分層編碼"。在此，這些層的特征在于，不再能 夠?qū)崿F(xiàn)定標(biāo)特征的定標(biāo)級(jí)的每一任意組合。在圖ll中示出描述列表L3的另一變型，該變型描述質(zhì)量組G1、…、G3，并且按照下面的分勢(shì)頓序建立1. 時(shí)間指數(shù)ZIO、…、ZI5，2. 質(zhì)量組G1、…、G3。在此代表定標(biāo)特征T、 S，說明相應(yīng)的質(zhì)量組G1、…、G3。在此，不^t于每一質(zhì)量組說明所有所屬的數(shù)據(jù)元素或者參照，而是可以例如按質(zhì)量組G3僅開列相對(duì)與次小的質(zhì)量級(jí)G2在處理或者解碼時(shí)另外必須被考慮的那些 元素或者參照。如果例如終端設(shè)備選擇質(zhì)量組G3，貝鵬了在那里列出的數(shù)據(jù)元 素或者參照之外3SI擇較低質(zhì)量組Gl和G2的所有數(shù)據(jù)元素或者參照。以這種 實(shí)船式在應(yīng)用質(zhì)量組時(shí)能夠?qū)崿F(xiàn)描述列表的緊湊和存儲(chǔ)器高效的表示。在上面的實(shí)施例中僅示出了具有定標(biāo)特征圖像重復(fù)率和(圖像)空間分辨 率的6個(gè)數(shù)據(jù)元素。根據(jù)本發(fā)明可以存在多個(gè)描述元素、亦即例如也可以存在 更大數(shù)目的定標(biāo)級(jí)和/或定標(biāo)特征。因此例如在圖l中除了圖像重復(fù)率T、空間 分辨率F之外，在第三維中還示出圖像清晰度B。在該文檔中所引用的文獻(xiàn)[1]ISO/IEC, "Coding of Moving Pictures and Audio, Information Technology - Coding of Audio-Visual Objects, Part 15: AVC Fileformat", ISO, JTC1/SC29/WG11, MPEG03/N5652, 21. M茲rz 2003.[2] M. Z. Wisharam et al., "Extensions to ISO/AVC Fileformat to Support the Storage of Scalable Videocoding (SVC) Bitstreams", ISO/IEC JTC1/SC29/WG11, MPEG2005/M12062, Buthan, Korea, April 2005.
權(quán)利要求
1.用于在至少一個(gè)文件(F、F1)中存儲(chǔ)可定標(biāo)數(shù)據(jù)流(SD)的各個(gè)數(shù)據(jù)元素(D0、...、D5)的方法，其中，a)可定標(biāo)數(shù)據(jù)流(SD)的質(zhì)量級(jí)(Q0、...、Q3)通過至少一個(gè)定標(biāo)特征(T、S、B)以分別多個(gè)定標(biāo)級(jí)(T0、T1、S0、S1、B0、B1)來描述，b)給定標(biāo)特征(T、S、B)的每一定標(biāo)級(jí)分別分配至少一個(gè)數(shù)據(jù)元素(D0、...、D3)，c)可定標(biāo)數(shù)據(jù)流(SD)在高質(zhì)量級(jí)(Q3)中通過至少一個(gè)以下數(shù)據(jù)元素(D0、...、D5)表示，即所述數(shù)據(jù)元素的相應(yīng)定標(biāo)特征(T、S、B)的定標(biāo)級(jí)等于或者小于相應(yīng)定標(biāo)特征(T、S、B)的分別屬于高質(zhì)量級(jí)(Q3)的定標(biāo)級(jí)(T0、T1、S0、S1、B0)，d)給數(shù)據(jù)元素(D0、D1)分配時(shí)間指數(shù)(ZI0、ZI1)，在該時(shí)間指數(shù)處相應(yīng)的數(shù)據(jù)元素(D0)應(yīng)該相對(duì)于另一數(shù)據(jù)元素(D1)來表示，其特征在于，e)給數(shù)據(jù)元素(D3)這樣分配處理指數(shù)(V3)，使得為了處理該數(shù)據(jù)元素(D3)可以僅考慮具有相應(yīng)處理指數(shù)(V0、...、V3)的較小值的一個(gè)或者多個(gè)數(shù)據(jù)元素(D0、...、D2)，f)這樣產(chǎn)生至少一個(gè)描述列表(L1、L2)，使得所述描述列表對(duì)于數(shù)據(jù)元素(D0、...、D5)包括所屬的描述元素，所述描述元素包括相應(yīng)定標(biāo)特征(T、S、B)的定標(biāo)級(jí)、時(shí)間指數(shù)(ZI0、...、ZI5)和/或處理指數(shù)(V0、...、V5)，g)在文件(F、F1)之一中有組織地存儲(chǔ)至少一個(gè)描述列表(L1)以及所屬的數(shù)據(jù)元素(D0、...、D5)。
2. 根據(jù)權(quán)利要求1的方法，其特征在于，在描述列表(Ll)中按照至少一個(gè)分類準(zhǔn)則、特別是以從最低定標(biāo)級(jí)(S0) 到最高定標(biāo)級(jí)(Sl)分類的方式有組織地布置描述元素。
3. 根據(jù)，權(quán)利要求之一的方法，其特征在于，這樣產(chǎn)生描述列表(Ll)，使得描述列表(Ll)可被分配給終端設(shè)備功能 性、特別是終端設(shè)備的計(jì)算效率或者再現(xiàn)單元。
4. 根據(jù)，權(quán)利要求之一的方法，其特征在于，給描述列表(Ll)添加參照(VD0、…、VD5)用于找到所屬的 元素 (D0、…、D5)，在文件(F、 Fl )之一內(nèi)的數(shù)據(jù)區(qū)域(DAT沖有組織地存儲(chǔ)數(shù)據(jù)元素(DO、…、D5)。
5. 根據(jù)J^權(quán)利要求的方法，其特征在于，從屬于數(shù)據(jù)元素(D2)的參照(VD2)中確定數(shù)據(jù)元素(D2)的處理指數(shù) (V2)的值。
6. 根據(jù)權(quán)利要求4或5之一的方法，其特征在于，在娜區(qū)域(DAT沖根據(jù)屬于相應(yīng)繊元素(D0、…、D5)的參照(VD0、…、 VD5)有組織地存儲(chǔ)數(shù)據(jù)元素(D0、…、D5)。
7. 根據(jù)，權(quán)利要求之一的方法，其特征在于，除了描述列表(Ll)之外，在文件(F、 Fl)之一中按照用于描述最低質(zhì) 量級(jí)(QO、 Ql)之一的MPEG4AVC可兼容數(shù)據(jù)元素的MPEG4AVC描述格 式有組織地存儲(chǔ)數(shù)據(jù)列表(DL)。
8. 根據(jù)戰(zhàn)權(quán)禾腰求之一的方法，其特征在于，由質(zhì)量級(jí)(QO、…、Q3)這樣形成質(zhì)量組(Gl、 G2、 G3)，使得把質(zhì)量 組(G2)分配給質(zhì)量級(jí)之一 (Q2)，并且把用于處理的所有數(shù)據(jù)元素(D3、 DO 或者D1和D4)分配給該質(zhì)量組(G2)。
9. 根據(jù)權(quán)利要求8的方法，其特征在于，在描述列表(L3)中僅給質(zhì)量組(G3)分配以下數(shù)據(jù)元素(D2、 D5)或 者參照(VD2、 VD5)，即所述數(shù)據(jù)元素(D2、 D5)或者參照(VD2、 VD5) 為形成該質(zhì)量組(G3)除了在對(duì)于該質(zhì)量組(G3)次低的質(zhì)量組(G2)內(nèi)所列 出的 元素(D3)或者參照(VD3)之外被添加。
10. 用于特別是按照戰(zhàn)權(quán)利要求之一在至少一個(gè)文件(F、 Fl)中存儲(chǔ)可 定標(biāo)繊流(SD)的各個(gè) 元素(D0、…、D5)的設(shè)備，其中，a) 可定標(biāo)數(shù)據(jù)流(SD)的質(zhì)量級(jí)(Q0、…、Q3) M31至少一個(gè)定標(biāo)特征 (T、 S、 B)以分別多個(gè)定標(biāo)級(jí)(T0、 Tl、 S0、 Sl、 B0、 Bl)來描述，b) 給定豐斜寺征(T、S、B)的每一定標(biāo)級(jí)分別分配至少一個(gè)數(shù)據(jù)元素(DO、…、D3)，c) 可定標(biāo)數(shù)據(jù)流(SD)在高質(zhì)量級(jí)(Q3)中通過至少一個(gè)以下數(shù)據(jù)元素(D0、…、D5)表示，即所述娜元素的相應(yīng)定標(biāo)特征(T、 S、 B)的定標(biāo)級(jí) 等于或者小于相應(yīng)定標(biāo)特征(T、 S、 B)的分別屬于該高質(zhì)量級(jí)(Q3)的定標(biāo) 級(jí)(T0、 Tl、 S0、 Sl、 B0)，d) 給 元素(D0、 Dl)分配時(shí)間指數(shù)(ZIO、 ZIl)，在該時(shí)間指數(shù)處相 應(yīng)的數(shù)據(jù)元素(D0)應(yīng)該相對(duì)于另一數(shù)據(jù)元素(Dl)來表示，其特征在于，生成器模塊，該生 模塊如此被構(gòu)造，使得e) 這樣給M元素(D3)分配處理指數(shù)(V3)，使得為了處理該M元素 (D3)可以僅考慮具有相應(yīng)處理指數(shù)(V0、…、V3)的較小值的一個(gè)或者多個(gè) 元素(D0、…、D2)，f) 這樣產(chǎn)生至少一個(gè)描述列表(Ll、 L2)，使得該描述列表對(duì)于數(shù)據(jù)元素 (D0、…、D5)包括所屬的描述元素，所述描述元素包括相應(yīng)定標(biāo)特征(T、 S、B)的定標(biāo)級(jí)、時(shí)間指數(shù)(ZIO、…、ZI5)禾口/或處理指數(shù)(V0、…、V5)，g) 在文件(F、 Fl)之一中有組織地存儲(chǔ)至少一個(gè)描述歹暖(Ll)以及所 屬的數(shù)據(jù)元素(D0、…、D5)。
全文摘要
本發(fā)明涉及一種用于在至少一個(gè)文件中存儲(chǔ)可定標(biāo)數(shù)據(jù)流的各個(gè)數(shù)據(jù)元素的方法，其中，可定標(biāo)數(shù)據(jù)流的質(zhì)量級(jí)通過至少一個(gè)定標(biāo)特征以分別多個(gè)定標(biāo)級(jí)來描述，并且給定標(biāo)特征的每一定標(biāo)級(jí)分別分配至少一個(gè)數(shù)據(jù)元素，其中給該數(shù)據(jù)元素這樣分配處理指數(shù)，使得為處理該數(shù)據(jù)元素可以僅考慮具有相應(yīng)處理指數(shù)的較低值的一個(gè)或者多個(gè)數(shù)據(jù)元素，這樣產(chǎn)生至少一個(gè)描述列表，使得該描述列表為數(shù)據(jù)元素包括所屬的描述元素，所述描述元素包括相應(yīng)定標(biāo)特征的定標(biāo)級(jí)、時(shí)間指數(shù)和/或處理指數(shù)，在文件之一中有組織地存儲(chǔ)至少一個(gè)描述列表和所屬的數(shù)據(jù)元素。此外本發(fā)明包括一種設(shè)備，利用所述設(shè)備可實(shí)現(xiàn)和執(zhí)行所述方法。
文檔編號(hào)G11B27/10GK101228586SQ200680026081
公開日2008年7月23日 申請(qǐng)日期2006年6月16日 優(yōu)先權(quán)日2005年7月20日
發(fā)明者A·赫特, P·阿蒙, T·拉思根 申請(qǐng)人:西門子公司