專利名稱:運動圖像再現(xiàn)方法、裝置以及程序的制作方法
技術領域:
本發(fā)明涉及在將編碼的動畫數(shù)據(jù)通過傳輸通路分發(fā),特別是通過窄帶的移動網(wǎng)絡或互聯(lián)網(wǎng)進行傳輸?shù)那闆r下,適于在接收側(cè)提高運動圖像的再現(xiàn)品質(zhì)的方法、裝置以及程序。
背景技術:
作為將運動圖像信號壓縮編碼后以窄的帶域高效率地進行傳輸?shù)姆椒?,例如公知有ITU-T(International Telecommunication UnionTelecommunication Standardization Sector國際電信聯(lián)盟電信標準化部)標準H.263和H.264、或者由ISO(International Organization of Standardization國際標準化組織)/IEC(International Electrotechnical Commission國際電工委員會)標準化了的MPEG(Moving Picture Experts Group運動圖象專家組)-4等。
另外,已知有即使在實施跳幀處理從而僅顯示一部分圖像數(shù)據(jù)的情況下,也能夠傳遞與原運動圖像數(shù)據(jù)所具有的運動相關的信息,從而能夠進行動感顯示的方法和裝置(例如參照專利文獻1)。在專利文獻1中,運動生成部根據(jù)構成圖像數(shù)據(jù)的每一像素的與圖像數(shù)據(jù)對應的運動向量,進行使用多個像素所具有的像素值的加權加法,從而生成實施了運動生成/賦予處理的圖像數(shù)據(jù)。另外,還已知有這樣的運動圖像解碼方法,通過所述方法,即使在由于通信線路的傳輸速率或壓縮運動圖像數(shù)據(jù)的數(shù)據(jù)量大而一個畫面的圖像的編碼需要花費較長時間的情況下,也能夠消除再現(xiàn)運動圖像的運動不流暢(例如參照專利文獻2)。在專利文獻2中,運動補償電路生成運動插值矢量數(shù)據(jù),并使得從幀存儲器讀出的圖像數(shù)據(jù)按每一幀根據(jù)各個運動插值矢量數(shù)據(jù)順次移位,同時寫入顯示存儲器中,所述運動插值矢量數(shù)據(jù)是將各個宏塊的運動矢量n等分而得的基準運動矢量數(shù)據(jù)的m倍。另外,還已知有能夠在接收側(cè)正確再現(xiàn)缺失的幀的運動圖像壓縮裝置(例如參照專利文獻3)。在專利文獻3中,動畫內(nèi)插部根據(jù)從相鄰傳輸幀求得的運動矢量逼近運動曲線,并根據(jù)相鄰傳輸幀之間的距離比來重構應內(nèi)插的插值幀。另外還已知有下述的結(jié)構,即估計缺失的像素塊的運動矢量,并通過用前幀的運動補償?shù)南袼貕K來置換該像素塊來使由于輸入信號的錯誤而引起的圖像品質(zhì)的惡化不明顯(例如參照專利文獻4)。同樣已知有下述的結(jié)構,即在傳輸通路中,為了減少發(fā)生傳輸錯誤時的解碼圖像的惡化,而從前幀或同一幀的周圍插補解碼圖像或運動矢量的一部分(例如參照專利文獻5)。另外,還已知有下述的結(jié)構,即根據(jù)運動矢量而在相鄰傳輸幀之間重構適當?shù)牟逯祹?,并進行幀內(nèi)插處理,由此在接收側(cè)正確地重構缺失的幀(例如參照專利文獻6)。
專利文獻1日本專利文獻特開2000-333131號公報(第6頁、圖1);專利文獻2日本專利文獻特開平07-67114號公報(第3頁、圖1);專利文獻3日本專利文獻特開平07-177514號公報(第3、5頁、圖1);專利文獻4日本專利文獻特開平08-9386號公報(第3頁、圖1);專利文獻5日本專利文獻特開平08-79742號公報(第3頁、圖1);專利文獻6日本專利文獻特開平10-271508號公報(第2、3頁、圖1)。
發(fā)明內(nèi)容
H.263、H.264、MPEG-4等壓縮方式由于壓縮率高而被公知。但是,當通過頻帶窄的移動傳輸通路(例如PDC(Personal digital Cellular個人數(shù)字蜂窩)便攜式電話的28.8kbps傳輸通路,或者第三代(3GPP)便攜式電話等的64kbps傳輸通路)或互聯(lián)網(wǎng)等來進行動畫內(nèi)容的發(fā)布等時,由于傳輸通路的頻帶窄,因而需要大幅減少每秒的動畫幀數(shù)(fps每秒的畫面數(shù))(例如在PDC中為2fps、在第三代(3GPP)中為5fps等)。
為此,在接收側(cè),特別是在運動較大的內(nèi)容中,會出現(xiàn)信息缺失大,難以充分再現(xiàn)運動,從而再現(xiàn)品質(zhì)大幅下降的問題。
因此,本發(fā)明的第一目的是提供一種運動圖像再現(xiàn)方法、裝置以及程序,其例如即使在移動傳輸通路或者互聯(lián)網(wǎng)等中傳輸速率慢,不能確保充足的fps(每秒的動畫幀數(shù))的情況下,也能夠在接收側(cè)增大fps,充分再現(xiàn)運動,從而改善運動圖像的品質(zhì)。
另外,本發(fā)明的第二目的是提供一種運動圖像再現(xiàn)方法、裝置以及程序,其僅通過接收側(cè)的處理就能夠直接使用現(xiàn)有的編碼器或壓縮編碼流,而不用在發(fā)送側(cè)進行任何改動。
另外,本發(fā)明的第三目的是提供一種僅在接收側(cè)追加很少的功能就能夠減少接收側(cè)的處理量的運動圖像再現(xiàn)方法、裝置以及程序。
為了達到上述目的,本申請中公開的發(fā)明大致具有如下構成本發(fā)明第一方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取部,從所述復原的畫面中提取特征參數(shù);以及圖像復原部,使用在時間上為過去的特征參數(shù)或在時間上為將來的特征參數(shù)中的任一個或者二者來實施預先確定的處理,由此復原沒有接收到的畫面。
本發(fā)明第二方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述被解碼的特征參數(shù)來復原畫面;以及圖像復原部,使用在時間上為過去的特征參數(shù)或在時間上為將來的特征參數(shù)中的任一個或者二者來實施預先確定的處理,由此復原沒有接收到的畫面。
本發(fā)明第三方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;以及圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)或在時間上為將來的特征參數(shù)中的任一個或者二者來實施預先確定的處理,然后在此基礎上復原沒有接收到的畫面。
本發(fā)明第四方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述解碼的特征參數(shù)來復原畫面;以及圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)或在時間上為將來的特征參數(shù)中的任一個或者二者來實施預先確定的處理,然后在此基礎上復原沒有接收到的畫面。
本發(fā)明第五方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取部,從所述復原的圖像中提取特征參數(shù);以及圖像復原部,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后在此基礎上復原沒有接收到的畫面。
本發(fā)明第六方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述解碼的特征參數(shù)來復原畫面;以及圖像復原部,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后在此基礎上復原沒有接收到的畫面。
本發(fā)明第七方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;以及圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,并在此基礎上復原沒有接收到的畫面。
本發(fā)明第八方面的裝置包括解碼部,接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述被解碼的特征參數(shù)來復原畫面;以及圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后在此基礎上復原沒有接收到的畫面。
本發(fā)明第一方面的方法包括由解碼部接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面的步驟;由特征參數(shù)提取部從所述解碼部所復原的畫面中提取特征參數(shù)的步驟;以及由圖像復原部使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)來實施預先確定的處理,由此復原沒有接收到的畫面的步驟。
根據(jù)本發(fā)明,與上述第二至第八方面的裝置發(fā)明相應地提供第二至第八方面的方法發(fā)明。另外,根據(jù)本發(fā)明,與上述各個方面的方法發(fā)明相應地提供在計算機或處理器中使所述處理步驟發(fā)揮功能的計算機程序。
根據(jù)本發(fā)明,接收被壓縮編碼的圖像信息來復原畫面,并從所述復原的畫面或者所述復原過程中的圖像信息中提取規(guī)定的特征參數(shù),然后根據(jù)所述特征參數(shù)和所述復原的畫面來復原與所述復原的畫面不同的畫面,由此可復原沒有接收到的畫面。
發(fā)明效果根據(jù)本發(fā)明,通過在接收側(cè)使用規(guī)定的特定參數(shù)來復原沒有接收到的圖像,例如即使在移動傳輸通路或互聯(lián)網(wǎng)等中傳輸速率慢,不能確保充足的幀數(shù)的情況下,也能夠在接收側(cè)增加圖像幀數(shù),從而能夠充分表現(xiàn)運動。由此,能夠改善運動圖像的品質(zhì)。
另外,根據(jù)本發(fā)明,由于僅通過接收側(cè)的處理就能夠達到上述目的,因而在發(fā)送側(cè)可以不作任何改動。因此,根據(jù)本發(fā)明,可以直接使用現(xiàn)有的編碼器和壓縮編碼流。
另外,根據(jù)本發(fā)明,由于僅在接收側(cè)追加很少的功能即可,因此抑制了成本的增加,且接收側(cè)的處理量也較小。
圖1是本發(fā)明第一實施方式的結(jié)構示意圖;圖2是本發(fā)明第二實施方式的結(jié)構示意圖;圖3是本發(fā)明第三實施方式的結(jié)構示意圖;圖4是本發(fā)明第四實施方式的結(jié)構示意圖;圖5是本發(fā)明第五實施方式的結(jié)構示意圖;圖6是本發(fā)明第六實施方式的結(jié)構示意圖;圖7是本發(fā)明第七實施方式的結(jié)構示意圖;圖8是本發(fā)明第八實施方式的結(jié)構示意圖。
標號說明200解碼單元201接收緩沖器
202可變長度解碼器203逆量化器204逆變換器205幀存儲器206運動補償預測器207加法器210特征參數(shù)提取部211幀存儲器212、222、231運動圖像復原器215、230插值器220小區(qū)間分割器221特征參數(shù)提取&判斷器225小區(qū)間分割&判斷器具體實施方式
下面參照附圖來更為詳細地說明本發(fā)明。圖1是本發(fā)明第一實施方式的運動圖像再現(xiàn)裝置的結(jié)構示意圖。參照圖1,該運動圖像再現(xiàn)裝置包括解碼單元200、特征參數(shù)提取器210、幀存儲器211、以及運動圖像復原器212。
解碼單元200包括接收緩沖器201、可變長度解碼器202、逆量化器203、逆變換器204、幀存儲器205、運動補償預測器206以及加法器207。
接收緩沖器201接收并臨時存儲將運動圖像壓縮編碼了的比特流,之后將存儲的接收編碼比特流輸出給可變長度解碼器202。這里,在發(fā)送側(cè)(圖中未示出)進行運動圖像的壓縮編碼,壓縮編碼所需的編碼器例如可以使用ITU-T標準的H.261、H.263、H.264、或者ISO/IEC標準的MPEG-4、或者這些之外的運動圖像壓縮編碼方式。
可變長度解碼器202對從接收緩沖器201輸出的接收編碼比特流進行可變長度解碼,并將被解碼的量化變換系數(shù)輸出給逆量化器203。
逆量化器203對從可變長度解碼器202輸出的量化變換系數(shù)進行逆量化運算,并將被逆量化的變換系數(shù)輸出給逆變換器204。
逆變換器204對從逆量化器203輸出的變換系數(shù),作為一個示例,進行離散余弦逆變換(I-DCT;Inverse Discrete Cosine Transform),并將變換后的運動圖像信號輸出給加法器207。
在本實施方式中,逆變換器204的逆變換采用了離散余弦逆變換,但也可以使用其它的變換(例如,在H.264的情況下使用逆整數(shù)變換)。
幀存儲器205臨時存儲從加法器207輸出的運動圖像信號。
運動補償預測器206使用從可變長度解碼器202輸出的特征參數(shù)對存儲在幀存儲器205中的運動圖像信號進行運動補償預測。運動補償預測器206向加法器207輸出作為進行運動補償預測的結(jié)果而得的運動圖像信號。
加法器207對從逆變換器204輸出的運動圖像信號和從運動補償預測器206輸出的運動圖像信號進行加法運算。在加法器207中進行加法運算后的運動圖像信號作為解碼單元輸出信號被輸出到幀存儲器205、幀存儲器211以及特征參數(shù)提取器210中。
特征參數(shù)提取器210從解碼單元輸出的運動圖像信號中至少提取一個特征參數(shù),并將其輸出給運動圖像復原器212。這里,特征參數(shù)例如可以使用運動矢量。
運動圖像復原器212輸入在時間上為過去的特征參數(shù)或在時間上為將來的特征參數(shù)中的任一個,或者輸入二者,并且,從幀存儲器211輸入在時間上為過去的圖像或在時間上為將來的圖像(解碼圖像)中的任一個,或者輸入二者,然后與上述特征參數(shù)進行組合,實施預先確定的處理,由此再現(xiàn)沒有接收到的運動圖像幀,然后進行輸出。作為預先確定的處理,例如可以使用利用運動矢量的運動補償(Motion Compensation)幀間預測的處理。
根據(jù)本發(fā)明第一實施方式的方法的處理過程包括以下步驟。由于由步驟1、2、3的順序序列來組成,因此沒有圖示流程圖(后面的實施方式與之相同)。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從該比特流復原畫面。
步驟2特征參數(shù)提取器210從解碼單元200所復原的畫面中提取特征參數(shù)。
步驟3運動圖像復原器212使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理(例如,利用運動矢量的運動補償幀間預測),由此來復原沒有接收到的畫面。
上述各個步驟可通過在構成運動圖像再現(xiàn)裝置的計算機(DSP(數(shù)字信號處理器)等處理器)上運行程序來實現(xiàn)其處理。后述的其它實施方式也一樣。
下面說明本發(fā)明的第二實施方式。圖2是本發(fā)明第二實施方式的結(jié)構示意圖。在圖2中,與圖1相同或等同的元件被標以相同的參照標號。參照圖2可知,本實施方式省略了特征參數(shù)提取器210。下面說明與圖1所示的所述第一實施方式的不同之處。
參照圖2,在本實施方式中,從可變長度解碼器202的輸出中提取特征參數(shù),并輸入到運動圖像復原器212中。因此不需要在所述第一實施方式中設置的特征參數(shù)提取器210。
根據(jù)本發(fā)明第二實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述被解碼的特征參數(shù)來復原畫面。
步驟2運動圖像復原器212使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)來實施預先確定的處理(例如,利用運動矢量的運動補償幀間預測),由此來復原沒有接收到的畫面。
下面說明本發(fā)明的第三實施方式。圖3是本發(fā)明第三實施方式的結(jié)構示意圖。在圖3中,與圖1相同或等同的元件被標以相同的參照標號。在本實施方式中,在解碼單元200(和圖1的上述第一實施方式相同)和運動圖像復原器222之間具有小區(qū)間分割器220和特征參數(shù)提取&判斷器221。下面對不同之處進行說明,并適當省略與圖1所示的第一實施方式相同部分的說明。
小區(qū)間分割器220將復原的畫面分割成預先確定的小區(qū)間,并輸出小區(qū)間的分界(demarcations)。小區(qū)間的大小例如可以采用宏塊(MB)或宏塊的整數(shù)倍大小。
特征參數(shù)提取&判斷器221在至少一個小區(qū)間中提取特征參數(shù),并輸出給運動圖像復原器222。特征參數(shù)例如可以使用運動矢量。
另外,特征參數(shù)提取&判斷器221判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原器222中的處理,并輸出判斷信號。例如,特征參數(shù)提取&判斷器221判斷小區(qū)間是運動區(qū)域還是靜止區(qū)域,并將判斷結(jié)果作為判斷信號進行輸出。
運動圖像復原器222輸入分割小區(qū)間的分界、至少一個小區(qū)間的判斷信號、以及至少一個小區(qū)間的特征參數(shù),并從幀存儲器211輸入過去的畫面或?qū)淼漠嬅嬷械娜我粋€,或者輸入二者,然后根據(jù)輸入的判斷信號,在至少一個小區(qū)間進行預先確定的處理,從而復原沒有接收到的畫面。這里,預先確定的處理例如可以使用利用運動矢量的運動補償幀間預測。
根據(jù)本發(fā)明第三實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從該比特流復原畫面。
步驟2小區(qū)間分割器220將畫面分割成預先確定了大小的小區(qū)間。
步驟3特征參數(shù)提取&判斷器221在至少一個小區(qū)間從所述復原的畫面提取特征參數(shù)并輸出給運動圖像復原器222,并且,確定是否使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)在運動圖像復原器222中實施預先確定的處理(例如,利用運動矢量的運動補償幀間預測),由此復原沒有接收到的畫面。
下面說明本發(fā)明的第四實施方式。圖4是本發(fā)明第四實施方式的結(jié)構示意圖。在圖4中,與圖1相同或等同的元件被標以相同的參照標號。在本實施方式中,在解碼單元200(和圖1所示的上述第一實施方式相同)和運動圖像復原器222之間具有小區(qū)間分割&判斷器225。下面對不同之處進行說明,并適當省略與圖1、圖3所示的第一、第三實施方式相同部分的說明。
小區(qū)間分割&判斷器225將復原的畫面分割成預先確定的小區(qū)間,并輸出小區(qū)間的分界。小區(qū)間的大小例如可以采用宏塊(MB)或宏塊的整數(shù)倍大小。
另外,小區(qū)間分割&判斷器225判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原器222中的處理,并輸出判斷信號。例如,小區(qū)間分割&判斷器225判斷小區(qū)間是運動區(qū)域還是靜止區(qū)域,并將判斷結(jié)果作為判斷信號進行輸出。
根據(jù)本發(fā)明第四實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述被解碼的特征參數(shù)來復原畫面。
步驟2小區(qū)間分割&判斷器225將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)在運動圖像復原器222中實施預先確定的處理(例如,利用運動矢量的運動補償幀間預測)。
步驟3運動圖像復原器222輸入分割小區(qū)間的分界、至少一個小區(qū)間的判斷信號、至少一個小區(qū)間的特征參數(shù),并從幀存儲器211輸入過去的畫面或?qū)淼漠嬅嬷械娜我粋€,或者輸入兩者,從而復原沒有接收到的畫面。
下面說明本發(fā)明的第五實施方式。圖5是本發(fā)明第五實施方式的結(jié)構示意圖。在圖5中,與圖1相同或等同的元件被標以相同的參照標號。在本實施方式中,在圖1所示的上述第一實施方式的特征參數(shù)提取器210和運動圖像復原器212之間具有插值器215。下面對不同之處進行說明,并適當省略與圖1所示的第一實施方式相同部分的說明。
插值器215輸入特征參數(shù)提取器210的輸出,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,并將插值后的特征參數(shù)輸出給運動圖像復原器212。特征參數(shù)例如可以使用運動矢量。運動圖像復原器212使用作為來自插值器215的特征參數(shù)的運動矢量來進行運動補償幀間預測,從而根據(jù)幀存儲器211的過去和/或?qū)淼漠嬅鎭韽驮\動圖像。
根據(jù)本發(fā)明第五實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從該比特流復原畫面。
步驟2特征參數(shù)提取器210從在解碼單元200中解碼的圖像中提取特征參數(shù)。
步驟3插值器215使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,并將插值后的特征參數(shù)輸出給運動圖像復原器212。
步驟4運動圖像復原器212輸入插值器215的輸出(被插值的特征參數(shù)),并從幀存儲器211中輸入過去的畫面或者將來的畫面中的任一個,或者輸入兩者,復原沒有接收到的畫面。
下面說明本發(fā)明的第六實施方式。圖6是本發(fā)明第六實施方式的結(jié)構示意圖。在圖6中,與圖1相同或等同的元件被標以相同的參照標號。在本實施方式中,在圖1所示的所述第一實施方式的解碼單元200的可變長度解碼器202和運動圖像復原器212之間具有插值器215。下面對不同之處進行說明,并適當省略與圖1、圖5所示的第一、第五實施方式相同部分的說明。
在本實施方式中,插值器215從可變長度解碼器202的輸出中輸入特征參數(shù)。因此,在本實施方式中不需要圖5所示的特征參數(shù)提取器210。
根據(jù)本發(fā)明第六實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從所述比特流解碼并輸出至少一個特征參數(shù),然后使用所述被解碼的特征參數(shù)來復原畫面。
步驟2插值器215從解碼單元200獲取在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個,并使用特征參數(shù)在時間方向上進行插值,運動圖像復原器212基于從插值器215輸出的在時間方向上進行插值的特征參數(shù)來復原沒有接收到的畫面。
下面說明本發(fā)明的第七實施方式。圖7是本發(fā)明第七實施方式的結(jié)構示意圖。在圖7中,與圖1相同或等同的元件被標以相同的參照標號。在本實施方式中,在解碼單元200和運動圖像復原器231之間具有小區(qū)間分割器220、特征參數(shù)提取&判斷器221、以及插值器230。下面對不同之處進行說明,并適當省略與圖1、圖3所示的第一、第三實施方式相同部分的說明。
小區(qū)間分割器220將復原的畫面分割成預先確定的小區(qū)間,并輸出小區(qū)間的分界。小區(qū)間的大小例如可以采用宏塊(MB)或宏塊的整數(shù)倍大小。
特征參數(shù)提取&判斷器221在至少一個小區(qū)間提取特征參數(shù),并輸出給運動圖像復原器231。作為特征參數(shù)例如可以使用運動矢量。
另外,特征參數(shù)提取&判斷器221判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原器222中的處理,并輸出判斷信號。例如,特征參數(shù)提取&判斷器221判斷小區(qū)間是運動區(qū)域還是靜止區(qū)域,并將判斷結(jié)果作為判斷信號進行輸出。
插值器230在至少一個小區(qū)間輸入小區(qū)間的分界和特征參數(shù)判斷信號,并根據(jù)判斷信號,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值。
運動圖像復原器231輸入分割小區(qū)間的分界、至少一個小區(qū)間的判斷信號、以及至少一個小區(qū)間的插值器230的輸出,并從幀存儲器211輸入過去的畫面或者將來的畫面中的任一個,或者輸入二者,然后根據(jù)判斷信號來在至少一個小區(qū)間進行預先確定的處理,從而復原沒有接收到的畫面。預先確定的處理例如可以使用運動補償幀間預測。
根據(jù)本發(fā)明第七實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從該比特流復原畫面。
步驟2小區(qū)間分割器220將畫面分割成預先確定了大小的小區(qū)間。
步驟3特征參數(shù)提取&判斷器221在至少一個小區(qū)間從所述復原的畫面提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值。
步驟4運動圖像復原器231輸入分割小區(qū)間的分界、至少一個小區(qū)間的判斷信號、至少一個小區(qū)間的插值器230的輸出,然后復原沒有接收到的畫面。
下面說明本發(fā)明的第八實施方式。圖8是本發(fā)明第八實施方式的結(jié)構示意圖。在圖8中,與圖7相同或等同的元件被標以相同的參照標號。在本實施方式中,在解碼單元200和運動圖像復原器231之間具有小區(qū)間分割&判斷器225和插值器230。下面對不同之處進行說明,并適當省略與圖1、圖7所示的第一、第七實施方式相同部分的說明。
小區(qū)間分割&判斷器225將復原的畫面分割成預先確定的小區(qū)間,并輸出小區(qū)間的分界。小區(qū)間的大小例如可以使用宏塊(MB)或宏塊的整數(shù)倍大小。
另外,小區(qū)間分割&判斷器225判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原器222中的處理,并輸出判斷信號。作為判斷的一個示例,判斷小區(qū)間是運動區(qū)域還是靜止區(qū)域,并將判斷結(jié)果作為判斷信號進行輸出。
由于插值器230從可變長度解碼器202的輸出中輸入特征參數(shù),因此不需要圖7所示的第七實施方式的特征參數(shù)提取&判斷器221。
根據(jù)本發(fā)明第八實施方式的方法的處理過程包括以下步驟。
步驟1解碼單元200接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),然后使用所述被解碼的特征參數(shù)來復原畫面。
步驟2小區(qū)間分割&判斷器225將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值。
步驟3運動圖像復原器231使用分割小區(qū)間的分界、至少一個小區(qū)間的判斷信號、以及來自解碼單元200的過去的特征參數(shù)和將來的特征參數(shù)中的至少一個來復原沒有接收到的畫面。
以上基于上述各個實施方式對本發(fā)明進行了說明,但本發(fā)明不限于上述各實施方式的結(jié)構,包括基于本發(fā)明原理的各種變形和修改是顯然的。
權利要求
1.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取部,從所述復原的畫面提取特征參數(shù);以及圖像復原部,使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,由此復原沒有接收到的畫面。
2.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部,使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,由此復原沒有接收到的畫面。
3.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;和圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述被復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,然后復原沒有接收到的畫面。
4.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,然后復原沒有接收到的畫面。
5.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取部,從所述被復原的圖像提取特征參數(shù);以及圖像復原部,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
6.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
7.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;和圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述被復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
8.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼部,接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部,將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
9.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;特征參數(shù)提取器,從所述解碼單元所輸出的運動圖像信號中提取特征參數(shù);以及運動圖像復原器,從所述特征參數(shù)提取器輸入特征參數(shù),從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
10.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;以及運動圖像復原器,從所述解碼器的輸出中輸入特征參數(shù),從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
11.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;小區(qū)間分割器,接收來自所述解碼單元的輸出,將復原的畫面分割成預先確定的小區(qū)間,并輸出小區(qū)間的分界;特征參數(shù)提取/判斷器,在至少一個小區(qū)間提取并輸出特征參數(shù),判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原處理,并輸出判斷信號;以及運動圖像復原器,從所述特征參數(shù)提取/判斷器輸入特征參數(shù)、判斷結(jié)果、小區(qū)間的信息,從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
12.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;小區(qū)間分割/判斷器,接收來自所述解碼單元的輸出,將復原的畫面分割成預先確定的小區(qū)間,輸出小區(qū)間的分界,在至少一個小區(qū)間提取并輸出特征參數(shù),判斷是否在至少一個小區(qū)間中使用特征參數(shù)進行運動圖像復原處理,并輸出判斷信號;以及運動圖像復原器,從所述解碼器輸入特征參數(shù),從所述小區(qū)間分割/判斷器輸入判斷結(jié)果、小區(qū)間的信息,從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
13.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;特征參數(shù)提取器,從所述解碼單元所輸出的運動圖像信號中提取特征參數(shù);插值器,輸入所述特征參數(shù)提取器的輸出,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值;以及運動圖像復原器,從所述插值器輸入特征參數(shù),從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述被插值的特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
14.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;插值器,輸入來自所述解碼單元的解碼器的特征參數(shù),使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值;以及運動圖像復原器,從所述插值器輸入特征參數(shù),從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述被插值的特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
15.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;小區(qū)間分割器,接收來自所述解碼單元的輸出,將復原的畫面分割成預先確定的小區(qū)間,并輸出小區(qū)間的分界;特征參數(shù)提取/判斷器,輸入來自所述小區(qū)間分割器的小區(qū)間的分割信息,并在至少一個小區(qū)間提取并輸出特征參數(shù),進而判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原處理,并輸出判斷信號;插值器,輸入來自所述特征參數(shù)提取/判斷器的特征參數(shù),使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值;以及運動圖像復原器,輸入在所述插值器被插值的特征參數(shù)、所述判斷結(jié)果、小區(qū)間的信息,從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
16.一種運動圖像再現(xiàn)裝置,其特征在于,包括解碼單元,其包括解碼器,接收并解碼將運動圖像壓縮編碼了的比特流,并輸出量化變換系數(shù);逆量化器,對從所述解碼器輸出的量化變換系數(shù)進行逆量化運算;逆變換器,對在所述逆量化器中逆量化的變換系數(shù)進行與編碼側(cè)的變換相反的變換;加法器,在一個輸入端中輸入在所述逆變換器中變換的運動圖像信號;以及運動補償預測器,使用從所述解碼器輸出的特征參數(shù)對從所述加法器輸出的運動圖像信號進行運動補償預測,并將獲得的運動圖像信號提供給所述加法器的另一輸入端,所述解碼單元將在所述加法器中相加從所述逆變換器輸出的運動圖像信號和從所述運動補償預測器輸出的運動圖像信號而得的運動圖像信號作為解碼單元輸出信號進行輸出;幀存儲器,存儲從所述解碼單元輸出的運動圖像信號;小區(qū)間分割/判斷器,接收來自所述解碼單元的輸出,將復原的畫面分割成預先確定的小區(qū)間,輸出小區(qū)間的分界,并且在至少一個小區(qū)間提取并輸出特征參數(shù),判斷是否在至少一個小區(qū)間使用特征參數(shù)進行運動圖像復原處理;插值器,輸入來自所述解碼器的特征參數(shù),并輸入所述小區(qū)間分割/判斷器的判斷結(jié)果以及小區(qū)間的分割信息,使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值;以及運動圖像復原器,輸入在所述插值器被插值的特征參數(shù),進而輸入所述判斷結(jié)果、小區(qū)間的分割信息,從所述幀存儲器輸入在時間上為過去和/或在時間上為將來的圖像,使用所述特征參數(shù)再現(xiàn)運動圖像幀,并輸出再現(xiàn)的運動圖像幀。
17.如權利要求9至16中任一項所述的運動圖像再現(xiàn)裝置,其特征在于,所述特征參數(shù)是運動矢量,所述運動圖像復原器通過進行作為幀間預測的利用運動矢量的運動圖像幀間預測來再現(xiàn)運動圖像幀。
18.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取部從所述解碼部所復原的畫面中提取特征參數(shù);以及圖像復原部使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,由此復原沒有接收到的畫面。
19.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,并從所述比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,由此復原沒有接收到的畫面。
20.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;和圖像復原部將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述被復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,然后復原沒有接收到的畫面。
21.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù)后,使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間中使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,然后復原沒有接收到的畫面。
22.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取部從所述復原的畫面中提取特征參數(shù);以及圖像復原部使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
23.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
24.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;和圖像復原部將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述被復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
25.一種運動圖像再現(xiàn)方法,其特征在于,包括下述步驟解碼部接收將運動圖像壓縮編碼了的比特流,從所述比特流中解碼并輸出至少一個特征參數(shù)后,并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
26.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理根據(jù)所述壓縮編碼的比特流來復原畫面;從所述復原的畫面中提取特征參數(shù);以及使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,由此復原沒有接收到的畫面。
27.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理從所述壓縮編碼的比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,由此復原沒有接收到的畫面。
28.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理根據(jù)所述壓縮編碼的比特流來復原畫面;和將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,然后復原沒有接收到的畫面的處理。
29.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理從所述壓縮編碼的比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和/或在時間上為將來的特征參數(shù)實施預先確定的處理,然后復原沒有接收到的畫面。
30.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理根據(jù)所述壓縮編碼的比特流來復原畫面;從所述復原的圖像中提取特征參數(shù);以及使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
31.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理從所述壓縮編碼的比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
32.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理根據(jù)所述壓縮編碼的比特流來復原畫面;和將畫面分割成預先確定了大小的小區(qū)間,在至少一個小區(qū)間從所述復原的畫面中提取特征參數(shù),并確定是否使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
33.一種程序,使構成接收將運動圖像壓縮編碼了的比特流來再現(xiàn)運動圖像的裝置的計算機執(zhí)行下述處理從所述壓縮編碼的比特流中解碼并輸出至少一個特征參數(shù),并使用所述被解碼的特征參數(shù)復原畫面;和圖像復原部將畫面分割成預先確定了大小的小區(qū)間,并確定是否在至少一個小區(qū)間使用在時間上為過去的特征參數(shù)和在時間上為將來的特征參數(shù)中的至少一個來在時間方向上進行插值,然后復原沒有接收到的畫面。
34.一種圖像再現(xiàn)裝置,其特征在于,包括接收并解碼被壓縮編碼了的圖像信息來復原畫面的單元;和從所述復原畫面提取規(guī)定的特征參數(shù),或者在所述解碼過程中提取規(guī)定的特征參數(shù),并根據(jù)所述提取的特征參數(shù)和所述復原畫面來復原與所述復原的畫面不同的畫面的單元。
35.一種圖像再現(xiàn)方法,其是利用圖像再現(xiàn)裝置再現(xiàn)畫面的方法,其特征在于,包括下述步驟接收壓縮編碼的圖像信息并對其進行解碼,由此復原畫面;從所述復原畫面中提取規(guī)定的特征參數(shù),或者在進行所述解碼時提取規(guī)定的特征參數(shù);以及根據(jù)所述提取的特征參數(shù)和所述復原的畫面來復原與所述復原的畫面不同的畫面。
36.一種程序,使構成接收被壓縮編碼的圖像信息來進行再現(xiàn)的裝置的計算機執(zhí)行下述處理接收并解碼所述圖像信息來復原畫面;從所述復原畫面中提取規(guī)定的特征參數(shù),或者在所述解碼過程中提取規(guī)定的特征參數(shù);以及根據(jù)所述特征參數(shù)和所述復原的畫面來復原與所述復原的畫面不同的畫面。
全文摘要
本發(fā)明提供了一種裝置和方法,其通過在接收側(cè)使用特征參數(shù)來復原沒有接收到的圖像,即使在傳輸線路的傳輸速率慢,不能確保充足的幀數(shù)的情況下,也能夠在接收側(cè)充分表現(xiàn)運動,從而改善運動圖像的品質(zhì)。所述裝置包括解碼單元(200),接收將運動圖像壓縮編碼了的比特流,并根據(jù)所述比特流來復原畫面;特征參數(shù)提取器(210),從所述復原的畫面中提取特征參數(shù);以及運動圖像復原器(212),使用在時間上為過去和在時間上為將來的特征參數(shù)中的任一個或者二者來實施預先確定的處理,由此復原沒有接收到的畫面。
文檔編號H04N7/32GK1898963SQ20048003804
公開日2007年1月17日 申請日期2004年10月27日 優(yōu)先權日2003年12月18日
發(fā)明者小澤一范 申請人:日本電氣株式會社