两个人的电影免费视频_国产精品久久久久久久久成人_97视频在线观看播放_久久这里只有精品777_亚洲熟女少妇二三区_4438x8成人网亚洲av_内谢国产内射夫妻免费视频_人妻精品久久久久中国字幕

再現(xiàn)裝置、再現(xiàn)系統(tǒng)、再現(xiàn)方法和及其記錄介質的制作方法

文檔序號:7943825閱讀:265來源:國知局
專利名稱:再現(xiàn)裝置、再現(xiàn)系統(tǒng)、再現(xiàn)方法和及其記錄介質的制作方法
技術領域
本發(fā)明涉及一種再現(xiàn)裝置、 一種再現(xiàn)系統(tǒng)、 一種再現(xiàn)方法、以及
一種記錄介質。
背景技術
已經(jīng)提出了各種再現(xiàn)裝置相關的技術,用于對在流傳送期間因包 15 括多個幀在內的接收圖像數(shù)據(jù)的異常幀導致其圖像質量下降的部分使 用插值技術,來對圖像進行再現(xiàn)。相關技術描述如下。
日本專利申請未審公開(JP-A) No.62-061485 (專利文獻l)公開 了使用幀來執(zhí)行插值處理的技術。
JP-ANo.62-061485 (專利文獻l)公開了一種幀間預測解碼裝置, 20 在后者的結構中,形成第二幀存儲器,用于存儲來自于存儲在第一幀 存儲器中的幀數(shù)據(jù)的之前的幀數(shù)據(jù),以便在對幀間預測編碼圖像信號 進行解碼時對幀間差異進行集成,從而在傳輸線發(fā)生錯誤時,輸出存 儲在第二幀存儲器中的幀數(shù)據(jù)。
當檢測到錯誤時,由于發(fā)送至顯示單元的數(shù)據(jù)是錯誤產生之前的 25先前的數(shù)據(jù),因此幀間預測解碼裝置在顯示單元上顯示無錯誤圖像。
JP-A No.03-022735 (專利文獻2)公開了一種根據(jù)對劣化圖像質 量進行插值處理的困難程度,在插值處理和重傳處理之間進行切換的 技術。
根據(jù)專利文獻2的用于發(fā)送圖像信號分組的裝置包括即使當在 30 傳輸線上丟失了圖像傳輸分量時也使用容易插值的圖像傳輸分量來形成分組的電路、當圖像信號分量丟失時使用不容易插值的圖像信號分 量來形成分組的電路、以及當分組丟失時使用分組的優(yōu)先顯示區(qū)為精 度較高的分組賦予較高優(yōu)先級的電路,所述精度會引起圖像劣化。
在用于發(fā)送圖像信號分組的裝置中,當在傳輸線上丟棄分組時, 5 首先丟棄第一組中的分組。由于很容易對第一組中的分組進行插值, 并且第一組中的分組不是重要圖像信息,因此即使丟棄第一組中的分 組圖像質量也不會下降太多。
JP-A No.2006-174280 (專利文獻3)公開了一種技術,用于確定 幀內存在的多個圖像劣化部分的優(yōu)先級并執(zhí)行插值處理以便保持實時 10 特性。
專利文獻3的圖像處理裝置包括缺陷檢測器,檢測來自接收到
的運動圖像數(shù)據(jù)的缺陷部分;確定單元,在運動圖像數(shù)據(jù)的一幀中存 在多個缺陷部分的情況下確定缺陷部分的優(yōu)先級;以及插值處理單元, 根據(jù)由確定單元確定的優(yōu)先級對缺陷部分執(zhí)行插值處理。 15 該圖像處理裝置的圖像伸縮(stretch)處理器,對由通信處理器接收
的運動圖像流數(shù)據(jù)執(zhí)行解碼處理,并輸出運動圖像數(shù)據(jù)。圖像缺陷檢 測器,檢測來自圖像伸縮處理器輸出的運動圖像數(shù)據(jù)的缺陷部分。插 值優(yōu)先級確定單元,在運動圖像數(shù)據(jù)的一幀內存在多個缺陷部分的情 況下確定缺陷部分的插值處理優(yōu)先級。插值處理器,根據(jù)由插值優(yōu)先 20 級確定單元確定的優(yōu)先級來對缺陷的部分執(zhí)行插值處理。
此外,存在被稱作前向糾錯(FEC)的技術,向發(fā)送端的預定數(shù) 據(jù)添加奇偶校驗(冗余數(shù)據(jù))以通過接收端執(zhí)行檢錯和糾錯處理,并 且使用不需要重傳處理并已經(jīng)完成接收的另一正常分組對丟失分組進 行插值。
25 此外,JP-A No.2003-284064 (專利文獻4)公開了一種技術,在
從圖像數(shù)據(jù)中檢測到錯誤的情況下,在接收端處采用自主控制來顯示 容易看見的圖像。
根據(jù)專利文獻4的圖像接收裝置包括接收單元,接收編碼圖像 數(shù)據(jù);再現(xiàn)單元,對接收到的圖像數(shù)據(jù)進行再現(xiàn);顯示單元,顯示由
30再現(xiàn)單元獲得的圖像;檢測單元,檢測接收到的圖像數(shù)據(jù)的錯誤;測
7量單元,測量接收到的圖像數(shù)據(jù)的容錯強度;以及切換單元,在從接 收到的圖像數(shù)據(jù)中檢測到錯誤的情況下,根據(jù)所測量的容錯強度來切 換顯示在顯示單元上的圖像。
在該圖像接收裝置中,可變長解碼器對幀編碼模式進行解碼;檢 5錯器在可變長解碼器的解碼操作期間檢測圖像數(shù)據(jù)的錯誤;接收間隔 測量單元基于幀編碼模式測量關鍵幀的接收間隔;切換控制器基于是 否存在錯誤、幀編碼模式和隨機訪問間隔,通過控制開關的連接/斷開 來切換顯示器上的圖像顯示。
JP-A No.2006-319583 (專利文獻5)公開了一種裝置,用于從發(fā) 10射機流出(stream)和傳送圖像和語音數(shù)據(jù)、接收圖像和語音數(shù)據(jù)、以及 基于接收到的圖像和語音數(shù)據(jù)來輸出圖像和語音。
根據(jù)專利文獻5的輸出裝置接收由不同裝置發(fā)送的數(shù)據(jù),在需要 時執(zhí)行丟失補償處理以補償接收數(shù)據(jù)的丟失,并基于數(shù)據(jù)執(zhí)行輸出處 理。該裝置包括檢測單元,檢測接收數(shù)據(jù)的丟失狀態(tài);計算單元, 15基于檢測到的丟失狀態(tài)來計算與數(shù)據(jù)輸出相關的延遲時間;以及根據(jù) 計算得到的延遲時間來對數(shù)據(jù)輸出進行延時的單元。
輸出裝置接收圖像和語音數(shù)據(jù),檢測來自接收圖像和語音數(shù)據(jù), 可以通過丟失補償處理而補償?shù)臄?shù)據(jù)丟失的數(shù)目,基于與檢測到的丟 失數(shù)目相對應的丟失補償處理所花費的時間來計算與接收圖像和語音 20數(shù)據(jù)相關的延遲時間,在丟失補償處理之后根據(jù)計算得到的延時時間 對圖像和語音數(shù)據(jù)進行延時,然后輸出經(jīng)延時的圖像和語音數(shù)據(jù)。
然而,在需要高度實時特性的情況下(諸如,視頻會議),優(yōu)選 地,圖像數(shù)據(jù)中的緩存數(shù)據(jù)量應盡量少些。當如專利文獻2那樣執(zhí)行重 傳時,緩存數(shù)據(jù)量增加從而破壞了實時特性。 25 此外,如果不能進行重傳處理(如在多播流媒體的情況下),則
不能如專利文獻2所描述的那樣執(zhí)行重傳處理。
此外,在異常幀的數(shù)量較大從而不能執(zhí)行插值處理的情況下,或 者當切換場景時,不能使用專利文獻1或專利文獻3中描述的技術來執(zhí) 行充分的插值處理,因而將導致圖像質量劣化。 30 此外,在FEC中,接收端需要處理由發(fā)送端添加的奇偶校驗。如果對傳送數(shù)據(jù)添加的奇偶校驗并非是由接收端定義的奇偶校驗,則接 收端不能執(zhí)行插值處理。
此外,說明書中描述的圖像數(shù)據(jù)異常性指圖像本身數(shù)據(jù)丟失且 不能到達接收端,或者圖像數(shù)據(jù)的一部分被破壞,而不是指在接收圖 5 像數(shù)據(jù)時的到達延時。此外,幀異常指由于圖像數(shù)據(jù)的異常導致解 碼后幀的不完整狀態(tài)。
此外,在專利文獻4和5的現(xiàn)有技術中,對主觀圖像質量劣化的防 止不夠充分。
這里,"主觀"表示觀看者對幀的圖像質量評價,并非是諸如峰 10 值信噪比(PSNR)值等幀的客觀圖像質量評價。
此外,"主觀"表示"依賴于個體評價者的判斷或心理狀態(tài)的評 分","客觀"表示"在不受評價者主觀影響下的常規(guī)評分"。由于即使 當觀看相同幀時,接受圖像質量的態(tài)度也取決于個人的判斷或心理狀 態(tài),因此認為通過觀看者的觀看作出的對圖像質量的評價是"主觀"
15的。

發(fā)明內容
因此,本發(fā)明的目的是提供一種再現(xiàn)裝置、 一種再現(xiàn)系統(tǒng)、 一種 再現(xiàn)方法、以及一種記錄介質,用于防止輸出幀主觀評價值的下降。
20 為了實現(xiàn)該目的,本發(fā)明提供了如下特征。
根據(jù)本發(fā)明的示例性優(yōu)點在于,由于不需要重傳,因此可以在流 傳送期間保持防止接收圖像數(shù)據(jù)的異常的實時特性,并且即使在不能 進行重傳的流環(huán)境下(如多播環(huán)境下),也可以在主觀上防止輸出幀的 質量降低。因此,可以實現(xiàn)一種再現(xiàn)裝置、 一種再現(xiàn)系統(tǒng)、 一種再現(xiàn)
25方法、以及一種記錄介質,用于防止輸出幀主觀評價值的降低。 <裝置>
在本發(fā)明的一個方面,提供了一種再現(xiàn)裝置,其中,當不能對通 過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常的幀進行插值時, 再現(xiàn)裝置在可以輸出正常幀之前保持已輸出幀。 30 <系統(tǒng)>在本發(fā)明的另一方面,提供了一種再現(xiàn)系統(tǒng),其包括再現(xiàn)裝置, 當不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常的幀進 行插值時,在可以輸出正常幀之前保持已輸出幀;圖像數(shù)據(jù)傳送服務 器,傳送圖像數(shù)據(jù);以及網(wǎng)絡,連接至圖像數(shù)據(jù)傳送器。
5 <方法>
在本發(fā)明的又一方面,提供了一種再現(xiàn)方法,其中,當不能對通 過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常的幀進行插值時, 該方法在可以輸出正常幀之前保持己輸出幀。
<記錄介質>
10 在本發(fā)明的又一方面,提供了一種記錄介質,用于記錄程序,所
述程序使計算機執(zhí)行如下方法當不能對通過對圖像數(shù)據(jù)進行解碼而 獲得的幀中被確認為異常的幀進行插值時,在可以輸出正常幀之前保 持己輸出幀。
1

圖l是根據(jù)本發(fā)明示例性實施例的、在流傳送中應用再現(xiàn)方法的 再現(xiàn)系統(tǒng)的方框圖的一個示例;
圖2是用于解釋圖1和圖3所示的再現(xiàn)系統(tǒng)所用的再現(xiàn)裝置的操作 的流程圖的一個示例; 20 圖3是根據(jù)本發(fā)明另一示例性實施例的、在流傳送中應用再現(xiàn)方
法的再現(xiàn)裝置的方框圖的一個示例;
圖4是用于解釋根據(jù)本發(fā)明另一示例性實施例的、應用再現(xiàn)方法
的再現(xiàn)系統(tǒng)所用的再現(xiàn)裝置的操作的流程圖的一個示例;
圖5示出了指定幀的數(shù)目X為幀的最大數(shù)目的情況下,幀、正常/
25異常、會巨/不能進行插值、應用/不應用輸出控制、以及輸出幀之間的 關系;
圖6示出了指定幀的數(shù)目X小于等于幀數(shù)n的情況下,幀、正常/異 常、肯g/不能進行插值、應用/不應用輸出控制、以及輸出幀之間的關 系;
30 圖7示出了指定幀的數(shù)目X為幀的最大數(shù)目的情況下,幀、正常/異常、能/不能進行插值、應用/不應用輸出控制、以及輸出幀之間的 其他關系;以及
圖8示出了指定幀的數(shù)目X小于等于幀數(shù)n的情況下,幀、正常/異 常、育巨/不能進行插值、應用/不應用輸出控制、以及輸出幀之間的其 5他關系。
具體實施例方式
首先,參照圖1至4使用第一和第二示例性實施例來描述根據(jù)本發(fā) 明的再現(xiàn)裝置的示例性實施例。 10 本發(fā)明提供了一種再現(xiàn)裝置、 一種再現(xiàn)系統(tǒng)、 一種再現(xiàn)方法、以
及一種記錄介質,用于在流傳送期間不對接收圖像數(shù)據(jù)的異常幀執(zhí)行 重傳的前提下,在主觀上防止輸出幀質量降低。 [第一示例性實施例]
第一示例性實施例描述了在流傳送期間對接收到的圖像數(shù)據(jù)的 15 異常幀執(zhí)行各種插值處理的情況。
根據(jù)該實施例的再現(xiàn)裝置只有在假如異常幀數(shù)量太大以致于不 能得到完全處理或由于場景切換不能執(zhí)行插值,下一關鍵幀出現(xiàn)之前 存在預定數(shù)量幀的情況下,通過在當前幀之后出現(xiàn)下一關鍵幀前不執(zhí) 行新圖像的輸出,來防止輸出圖像的主觀評價值的降低,。 20 "不執(zhí)行輸出"表示保持己輸出幀并且不執(zhí)行當前新幀的輸出。
這里,通常將關鍵幀近似有規(guī)律地插入運動圖像專家組(MPEG) 數(shù)據(jù)中。使用"近似"是由于從一關鍵幀到下一關鍵幀的幀數(shù)是變化 的因而不是恒定的。
此外,就MPEGl/2/4數(shù)據(jù)而言,"關鍵幀"被稱作I幀,就H.264/AVC 25數(shù)據(jù)而言,"關鍵幀"被稱作IDR幀。
對于當觀看者觀看幀時圖像數(shù)據(jù)的異常使幀連續(xù)失真(混亂/受到 干擾)達到0.3秒的情況以及幀在時間上暫停0.3秒的情況,本實施例 的主要目的在于,后者的主觀評價值提高。
通常,用于流媒體的圖像數(shù)據(jù)包括關鍵幀和關鍵幀間具有差分 30信息且數(shù)量不定的多個幀(例如,關鍵幀之間的15到900個幀)。關鍵幀是可以根據(jù)關鍵幀的信息被解碼成原始圖像的幀。此外, 在該實施例中,具有差分信息的幀是通過利用先前幀執(zhí)行差分計算(幀 間插值)而獲得的。即,如果出現(xiàn)了圖像質量劣化程度較高的幀,那 么由于通過對幀執(zhí)行差分計算而獲得的幀的圖像質量遭到破壞,在下 5 —關鍵幀出現(xiàn)之前圖像質量將持續(xù)遭到破壞,因而主觀圖像質量下降。
本實施例不具有依賴于諸如專利文獻3所述的FEC奇偶校驗等發(fā) 送端規(guī)范的缺陷。 <結構>
圖l是根據(jù)本發(fā)明示例性實施例的、包括在流傳送中應用再現(xiàn)方 10 法的再現(xiàn)裝置的再現(xiàn)系統(tǒng)的配置的一個示例。
再現(xiàn)系統(tǒng)包括圖像數(shù)據(jù)傳送服務器l、作為再現(xiàn)裝置的客戶端
2-1、以及網(wǎng)絡IO。
圖像數(shù)據(jù)傳送服務器l具有圖像數(shù)據(jù)傳送功能。
作為再現(xiàn)裝置的客戶端2-l包括存儲器單元3-l、作為第一單元 15 的圖像數(shù)據(jù)接收單元4-l、作為第二單元的解碼器5、插值處理器6、關 鍵幀間隔計算器7、作為第三單元的幀輸出控制器8、以及幀輸出單元9。
客戶端2-l可以是個人計算機(PC)或機頂盒(STB),客戶端可 以通過流接收圖像,并對來自圖像數(shù)據(jù)傳送服務器l的圖像數(shù)據(jù)進行解 碼以輸出幀。
20 存儲器單元3-l可以是磁盤存儲器單元或存儲器裝置,存儲器單元
不僅可以存儲從圖像傳送服務器l傳送而來的圖像數(shù)據(jù),還可以存儲諸 如計算得到的關鍵幀間隔等各種信息。
圖像數(shù)據(jù)可以被稱作運動圖像數(shù)據(jù),連續(xù)的相同幀(諸如風景) 的圖像數(shù)據(jù)、連續(xù)的不同幀(諸如步行的人)的圖像數(shù)據(jù)都是可應用
25 的。
圖像接收單元4-l接收流傳送圖像數(shù)據(jù),并且確定存在圖像數(shù)據(jù)的 異常幀。當圖像接收單元4-l接收來自圖像數(shù)據(jù)傳送服務器l的流傳送 圖像數(shù)據(jù),并在接收到的圖像數(shù)據(jù)中發(fā)現(xiàn)諸如丟失等錯誤時,存儲器 單元3-l將同時存儲丟失位置,使得當解碼器5讀取或輸出來自存儲器 30單元3-l的圖像數(shù)據(jù)時,解碼器5可以確定在圖像數(shù)據(jù)中存在丟失。解碼器5對接收到的圖像數(shù)據(jù)進行解碼以形成幀,解碼器5包括判 斷解碼幀是否是關鍵幀的功能,還包括判斷是否可以對異常幀執(zhí)行插 值的功能。
這里,可以根據(jù)編碼解碼器的標準使用各種方法來判斷解碼幀是 5 否是關鍵幀。通常,在解碼操作期間,可以根據(jù)數(shù)據(jù)中的報頭來判斷 解碼幀是否是關鍵幀。
插值處理器6使用來自由解碼器5獲得的先前幀的差分信息來執(zhí) 行插值(幀間插值),或在判定可以執(zhí)行幀內插值的情況下執(zhí)行圖像插 值。這里,幀內插值表示使用形成一幀的分組對幀進行插值。
10 關鍵幀間隔計算器7在解碼器5確定出關鍵幀的情況下計算關鍵 幀的出現(xiàn)間隔m。此外,關鍵幀間隔計算器7將關鍵幀出現(xiàn)間隔m與過 去的關鍵幀出現(xiàn)間隔m'進行比較以計算(近似計算)從當前異常幀(包 括不能執(zhí)行插值的幀)起幾幀后會出現(xiàn)關鍵幀,從而獲得估計值。這 是由于如果在判斷是否對當前異常幀采用不輸出新幀的措施時,不能
15 確定關鍵幀的出現(xiàn)間隔m,就無法判斷異常幀是否位于指定幀數(shù)目X 的范圍以內。
這里,對于使用哪個等式來計算關鍵幀出現(xiàn)間隔m而言,可以通 過測量關鍵幀出現(xiàn)間隔的平均值的方式來進行計算。在根據(jù)過去P次 出現(xiàn)頻率計算關鍵幀出現(xiàn)間隔的情況下,當每一間隔為N()時,關鍵幀 20 的間隔S可由例如等式1給出。
等式l
4, (1)
w =, 尸
此外,對于計算從當前異常幀起哪幀之后將出現(xiàn)密鑰幀而言,假 設自前一關鍵幀出現(xiàn)起到當前異常幀出現(xiàn)間的幀數(shù)為T,則等式2給出 25 了自當前幀起到下一關鍵幀出現(xiàn)間的幀數(shù)n。 N = S - T (2)
此外,由于對于每一幀,幀速率是常數(shù),因此可以根據(jù)幀數(shù)T和n 估計時間(位置)。
如果自不能進行插值的幀起到下一關鍵幀出現(xiàn)為止的幀數(shù)小于等于指定幀的數(shù)目X,幀輸出控制器8就控制幀輸出單元9保持已輸出 幀,直到可以輸出正常幀或插值完成幀為止。此外,如果自不能進行 插值的幀起到下一關鍵幀出現(xiàn)為止的幀數(shù)等于或大于指定幀的數(shù)目
X,幀輸出控制器8就控制幀輸出單元9直接輸出異常幀。 5 根據(jù)接收到的圖像數(shù)據(jù)是否異常、當接收到的圖像數(shù)據(jù)異常時根
據(jù)指定幀的數(shù)目X是否等于大于自當前關鍵幀起到下一關鍵幀出現(xiàn)為 止的幀數(shù)n、以及根據(jù)是否不能進行插值,來判斷是否執(zhí)行當前幀的輸 出。
艮P,如果接收到的圖像數(shù)據(jù)異常,不能進行插值,并且?guī)瑪?shù)n小 10于等于指定幀的數(shù)目X,那么"當不能對圖像數(shù)據(jù)己被解碼的幀中的 異常幀進行插值時,就在能夠輸出正常幀或插值完成幀之前保持已輸 出幀"。
另一方面,如果通過對接收到的圖像數(shù)據(jù)進行解碼而獲得的幀包 括異常幀,不能進行插值,并且?guī)瑪?shù)n大于指定幀的數(shù)目X,則"不能 15保持已輸出幀",而直接輸出當前異常幀。
幀輸出控制器8根據(jù)上述條件控制是否執(zhí)行輸出,并且?guī)敵鰡?元9對其予以響應執(zhí)行輸出。
幀輸出單元9是向外部輸出圖像數(shù)據(jù)的單元。 [操作]
20 參照圖1和圖2,圖1和圖2詳細地描述了觀看者觀看圖1再現(xiàn)系統(tǒng)
中的圖像數(shù)據(jù)的情況下的操作。圖2是用于解釋圖1所示的再現(xiàn)系統(tǒng)所 用的再現(xiàn)裝置的操作的示例性流程圖。該實施例描述了從圖像數(shù)據(jù)傳 送服務器接收圖像數(shù)據(jù)的情況。因此,在步驟S102中,接收圖像數(shù)據(jù)。 首先,在步驟S101中,觀看者在客戶端2-l中設置指定幀的數(shù)目X。 25 在步驟S102中,當圖像數(shù)據(jù)傳送服務器1通過網(wǎng)絡10向客戶端2-1
傳送圖像數(shù)據(jù)時,客戶端2-l的圖像接收單元4-l接收圖像數(shù)據(jù)。
在步驟S103中,客戶端2-l的解碼器5對接收到的圖像數(shù)據(jù)進行解 碼以產生幀。
在步驟S104中,判斷幀輸出控制器8是否控制輸出,即,幀輸出 30 控制器8是否保持已輸出幀。這是為了判斷不能進行插值的異常幀是否
14連續(xù)出現(xiàn)。
當幀輸出控制器8控制輸出時,在步驟S105中,判斷當前幀是否 為關鍵幀。這是由于關鍵幀具有可以獨立輸出正常圖像的信息。當在
步驟S105中判定當前幀是關鍵幀時,就在步驟S106中釋放輸出控制。 5 在輸出釋放之后,在步驟S117中,關鍵幀間隔計算器7計算關鍵
幀間的出現(xiàn)間隔m, S卩, 一關鍵幀和下一關鍵幀之間的幀數(shù)m。這是
為了計算(近似計算)從當前幀起幾幀后會出現(xiàn)關鍵幀。
在步驟S118中,存儲器單元3-l存儲關鍵幀的出現(xiàn)間隔m。
在步驟S119中,幀輸出單元9輸出正常的關鍵幀。在輸出關鍵幀 10之后,執(zhí)行步驟S102。
當在步驟S105中判定當前幀不是關鍵幀時,就在步驟S116中輸出 己輸出幀。在輸出已輸出幀后,執(zhí)行步驟S102。
當在步驟S104中幀輸出控制器8不控制輸出時,在步驟S105中判 斷當前幀是否為關鍵幀。 15 當判定當前幀是關鍵幀時,執(zhí)行步驟S117。
當判定當前幀不是關鍵幀時,執(zhí)行步驟S108。
在步驟S108中,判定當前幀是否為異常幀。當判定當前幀不是異 常幀時,執(zhí)行步驟S119并輸出正常幀。
在步驟S108中,當判定當前幀是異常幀時,解碼器5就在步驟S109 20 中判斷是否能進行插值。
當解碼器5判定能進行異常幀插值時,插值處理器6就在步驟S110
中執(zhí)行插值。
在步驟S111中,幀輸出單元9輸出經(jīng)插值處理的幀,并執(zhí)行步驟 S102。
25 當解碼器5判定不能進行異常幀插值時,關鍵幀間隔計算器7就在
步驟S112中計算到下一關鍵幀為止的幀數(shù)n。
在步驟S113中,存儲器單元3-l存儲到下一關鍵幀為止的幀數(shù)n, 以便將幀數(shù)n與指定幀的數(shù)目X進行比較。
在步驟S114中,幀輸出控制器8判斷幀數(shù)n是否小于等于指定幀的 30數(shù)目X (nSX)。 g卩,幀輸出控制器8根據(jù)幀數(shù)n和預先設置的指定幀的數(shù)目X之間的大小關系,控制幀輸出單元以保持已輸出幀,直到可以 輸出插值完成幀為止。
當判定幀數(shù)n小于等于指定幀的數(shù)目X時,幀輸出控制器8就在步 驟S115中設置輸出控制。 5 在步驟S116中,幀輸出單元9輸出已輸出幀,并執(zhí)行步驟S102。
當判定幀的數(shù)目n大于指定幀的數(shù)目X (n〉X)時,幀輸出控制器 8就在步驟S120中直接輸出異常幀。在輸出異常幀之后,執(zhí)行步驟 S102。
此外,在本說明書中不再對根據(jù)前幀進行插值的技術,或幀內插 10 值技術進行重復說明。
根據(jù)上述結構,對于流傳送期間接收到的圖像數(shù)據(jù)的異常幀,可 以保持實時特性,并且即使在不能進行重傳的流條件下(如多播條件 下),也可以在主觀上防止輸出幀質量的劣化。
這是由于本發(fā)明不需要重傳。 15 此外,根據(jù)上述結構,即使在存在許多異常幀的情況下,或者在
由于場景切換不能進行插值的情況下,也可以在主觀上防止輸出圖像 質量的劣化。這是由于獲得了關鍵幀間的間隔,并對輸出幀進行控制, 艮口,保持已輸出幀的輸出。
此外,根據(jù)上述結構,對于接收端來說,可以在不依賴于諸如專 20利文獻3所述的FEC奇偶校驗等發(fā)送端規(guī)范的情況下,在主觀上防止輸 出幀質量的劣化。這是由于當具體實現(xiàn)本發(fā)明時,除了所接收的圖像 數(shù)據(jù)以外不需要特別的信息或數(shù)據(jù)。 [第二示例性實施例] [結構]
25 圖3是根據(jù)本發(fā)明另一示例性實施例的、在流傳送中應用再現(xiàn)方
法的再現(xiàn)裝置的方框圖。
同時,相同的附圖標記用于如圖l所示的相同單元。 參照圖3,圖3詳細描述了對存儲器單元所記錄的以MPEG2傳輸流 (TS)(下文中稱作MPEG2-TS類型)復用(MUX)的圖像數(shù)據(jù)進行 30 再現(xiàn)。通常,MPEG2-TS類型廣泛用于諸如數(shù)字廣播和流的圖像數(shù)據(jù)的 傳送中。
圖像數(shù)據(jù)11是以MPEG2-TS類型的形式復用(MUL)的圖像數(shù)據(jù), 該圖像數(shù)據(jù)是再現(xiàn)對象。 5 作為再現(xiàn)裝置的客戶端2-2是可以輸出幀的裝置,如PC和STB。
存儲器單元3-2是磁盤存儲器單元(例如,數(shù)字通用盤(DVD)), 或存儲器設備。存儲器單元3-2存儲諸如計算得到的關鍵幀間隔等各種 信息。同時,不再重復對存儲操作程序的存儲器單元進行描述。 圖像數(shù)據(jù)讀取單元4-2從存儲器單元3-2讀取圖像數(shù)據(jù)11。 10 解碼器5包括對由圖像數(shù)據(jù)讀取單元4-2讀取的圖像數(shù)據(jù)ll進行
解碼的功能、判斷通過對圖像數(shù)據(jù)ll進行解碼而獲得的幀是否是關鍵 幀的功能、以及判斷是否能對通過對圖像數(shù)據(jù)ll進行解碼而獲得的幀 中的異常幀進行插值的功能。
當解碼器5判定可以根據(jù)前一幀進行插值或可以進行幀內插值 15時,插值處理器6就執(zhí)行圖像插值。
當解碼器5判定一個幀為關鍵幀時,關鍵幀間隔計算器7就計算關 鍵幀的出現(xiàn)間隔。此外,關鍵幀間隔計算器7將關鍵幀間隔與前一關鍵 幀間隔進行比較,以近似計算從當前異常幀起幾幀之后會出現(xiàn)關鍵幀。 幀輸出控制器8判斷幀輸出單元9是否執(zhí)行圖像輸出。 20 幀輸出單元9向外部輸出幀。
參照圖2描述圖3再現(xiàn)裝置的詳細的處理順序。 該實施例描述了讀取存儲器單元的圖像數(shù)據(jù)的情況。因此,在步 驟S102中,執(zhí)行圖像數(shù)據(jù)讀取。
首先,在步驟S101中,觀看者在客戶端2-2中設置指定幀的數(shù)目X。 25 在步驟S102中,客戶端2-2的圖像數(shù)據(jù)讀取單元4-2從存儲器單元
3-2讀取圖像數(shù)據(jù)。
在步驟S103中,解碼器5對幀形式的圖像數(shù)據(jù)進行解碼。 這里,在對圖像數(shù)據(jù)ll進行解碼之后,使用檢查MPEG2-TS型報 頭序號連續(xù)性的技術來判斷幀是否異常。當存在異常幀時,存儲器單 30元3-2存儲異常幀的位置,從而解碼器5可以確定在圖像數(shù)據(jù)11中存在異常幀。
由于步驟S104到S120與第一示例性實施例的那些步驟相同,因此 不再對其進行重復描述。
此外,指定幀的數(shù)目X的值并不固定為特定值,而可以根據(jù)幀速 5 率、關鍵幀間隔、或者是否根據(jù)關鍵幀間范圍程度修改本技術而發(fā)生 變化。當在步驟S114/否中判定幀的數(shù)目n大于指定幀的數(shù)目X時,輸 出圖像質量下降。因此,例如,可以通過將指定幀的數(shù)目X的值設置 為關鍵幀間隔的最大值,來完全防止圖像質量下降。
根據(jù)上述結構,對于流傳送期間接收到的圖像數(shù)據(jù)進行解碼后的 10 異常幀,可以保持實時特性,并且即使在不能進行重傳的流條件下(如 多播條件下),也可以在主觀上防止輸出幀質量的劣化。這是由于本發(fā) 明不需要重傳。
此外,根據(jù)上述結構,即使在存在多個異常幀的情況下、或在由 于場景切換不能進行插值的情況下,也能在主觀上防止輸出圖像質量 15的劣化。這是由于獲得了關鍵幀間的間隔,并對圖像輸出進行控制。 此外,根據(jù)上述結構,對于接收端來說,可以在不依賴于諸女卩專 利文獻3所述的FEC奇偶校驗等發(fā)送端規(guī)范的情況下,在主觀上防止輸 出幀質量的劣化。這是由于當具體實現(xiàn)本發(fā)明時,除了所接收的數(shù)據(jù) 以外不需要特別的信息或數(shù)據(jù)。 20 [第三示例性實施例]
接著,參照圖4描述本發(fā)明的又一示例性實施例。 圖4是用于解釋根據(jù)本發(fā)明另一示例性實施例的、應用再現(xiàn)方法
的再現(xiàn)系統(tǒng)所用的再現(xiàn)裝置的操作的流程圖的一個示例。
第一示例性實施例的再現(xiàn)裝置與圖4的再現(xiàn)裝置之間的不同點在
25于,在能對異常幀進行插值的情況下,可以基于前一關鍵幀或后一關 鍵幀中的差分信息來執(zhí)行插值。
根據(jù)該實施例,即使不能插值出前一幀,再現(xiàn)也是可能的。這是 由于可以使用來自關鍵幀的差分信息對數(shù)據(jù)進行插值。插值是使用來 自關鍵幀的數(shù)據(jù)和來自屬于目標幀的關鍵幀的差分信息來執(zhí)行的。在
30基于來自后一關鍵幀的差分信息進行插值的情況下,將從目標幀到后一關鍵幀間的幀的數(shù)目據(jù)存儲在緩沖存儲器(未示出)中,讀取并輸 出后一關鍵幀的數(shù)據(jù)和目標幀與關鍵幀的差分信息,從而執(zhí)行插值。 以下描述根據(jù)示例性實施例的再現(xiàn)裝置的操作。
首先,在步驟S201中,觀看者在客戶端2-l中設置指定幀的數(shù)目X。 5 在步驟S202中,當圖像數(shù)據(jù)傳送服務器1通過網(wǎng)絡10向客戶端2-1
傳送圖像數(shù)據(jù)時,客戶端2-l的圖像接收單元4-l接收圖像數(shù)據(jù)。
在步驟S203中,客戶端2-l的解碼器5對接收到的圖像數(shù)據(jù)進行解 碼以產生幀。
在步驟S204中,判斷當前幀是否為關鍵幀。當在步驟S209中判定 10當前幀是關鍵幀時,關鍵幀間隔計算器7就計算關鍵幀間的出現(xiàn)間隔 m, g卩, 一關鍵幀和下一關鍵幀間的幀的數(shù)目m。
在步驟S210中,存儲器單元3-l存儲關鍵幀的出現(xiàn)間隔m。 在步驟S216中,幀輸出單元9輸出正常的關鍵幀。在關鍵幀輸出 之后,執(zhí)行步驟S204。 15 當當前幀不是關鍵幀時,在步驟S205中,圖像接收單元4-l判斷當
前幀是否為異常幀。
這里,作為目標幀的當前幀可以根據(jù)以下4種方法得到差分信息。
(1) 所有幀具有來自前一關鍵幀的差分信息。
(2) 多個特定幀具有來自一關鍵幀的差分信息,并且如第一示 20 例性實施例中那樣其他幀具有來自前一幀的差分信息。
(3) 在具有來自一關鍵幀的差分信息的幀中,存在于關鍵幀間 前部的幀具有同前一關鍵幀的差分信息,并且存在于后部 的幀具有同后一關鍵幀的差分信息(假設如果關鍵幀間的 幀的數(shù)目設置為奇數(shù),則預先設置中心幀具有前一關鍵幀
25 的差分信息還是具有后一關鍵幀的差分信息)。
(4) 在具有來自一關鍵幀的差分信息的幀中,存在于關鍵幀間 前部的幀具有同前一關鍵幀的差分信息,并且存在于后部 的幀具有同后一關鍵幀的差分信息,并且如第一示例性實 施例中那樣,在某些幀中(如處于中央部分的幀)具有來
30 自前一幀的差分信息。相應地,分別對步驟S205后的操作進行描述。
(1) 在所有幀具有來自前一幀的差分信息的情況下,
當當前幀不是異常幀時,在步驟S216中,幀輸出單元9輸出正常 幀。在輸出正常幀之后,執(zhí)行步驟S202。 5 當在步驟S205中判定當前幀是異常幀時,在步驟S206中解碼器5
判斷是否能進行插值。
當解碼器5判定能進行插值時,在步驟S207中,插值處理器6基于
來自前一關鍵幀的差分信息來執(zhí)行插值。
在步驟S208中,從幀輸出單元9輸出經(jīng)插值處理的幀,并執(zhí)行步 10 驟S202。
當在步驟S206中解碼器5判定不能進行插值時,在步驟S211中, 關鍵幀間隔計算器7計算到下一關鍵幀的幀的數(shù)目n。
在步驟S212中,存儲器單元3-l存儲到下一關鍵幀的幀的數(shù)目n, 以便將幀的數(shù)目n與指定幀的數(shù)目X進行比較。 15 在步驟S213中,幀輸出控制器8判斷幀的數(shù)目n是否小于等于指定
幀的數(shù)目X(n《X)。 g卩,在步驟S214中,幀輸出控制器8根據(jù)幀的數(shù) 目n與預先設置的指定幀的數(shù)目X之間的大小關系,來控制幀輸出單
元,以在能夠輸出正常幀或插值完成幀之前保持已輸出幀。
當幀輸出控制器8判定幀的數(shù)目n小于等于指定幀的數(shù)目X時,在 20步驟S214中,幀輸出單元9輸出已輸出幀,并且執(zhí)行步驟S202。
當幀輸出控制器8判定幀的數(shù)目n大于指定幀的數(shù)目X (n>X)時,
在步驟S215中,直接輸出異常幀,并且執(zhí)行步驟S202。
(2) 在特定幀具有來自一關鍵幀的差分信息、并且如第一示例 性實施例中那樣其他幀具有來自前一幀的差分信息的情況下,
25 當當前幀不是異常幀時,在步驟S216中,幀輸出單元9輸出正常
幀。在輸出正常幀之后,執(zhí)行步驟S202。
在步驟S205中,當當前幀是異常幀時,在步驟S206中解碼器5判 斷是否能進行插值。
當解碼器5判定能進行插值時,在步驟S207中,插值處理器6基于
30來自前一關鍵幀的差分信息或來自前一幀的差分信息執(zhí)行插值。
20在步驟S208中,從幀輸出單元9輸出經(jīng)插值處理的幀,并且執(zhí)行 步驟S202。
當在步驟S206中解碼器5判定不能進行插值時,在步驟S211中, 關鍵幀間隔計算器7計算到下一關鍵幀的幀的數(shù)目n。 5 在步驟S212中,存儲器單元3-l存儲到下一關鍵幀的幀的數(shù)目n,
以便將幀的數(shù)目n與指定幀的數(shù)目X進行比較。
在步驟S213中,幀輸出控制器8判斷幀的數(shù)目n是否小于等于指定 幀的數(shù)目X(n《X)。 g卩,幀輸出控制器8根據(jù)幀的數(shù)目n與預先設置的 指定幀的數(shù)目X之間的大小關系,來控制幀輸出單元,以在能夠輸出
10 正常幀或插值完成幀之前保持已輸出幀。
當幀輸出控制器8判定幀的數(shù)目n小于等于指定幀的數(shù)目X時,在 步驟S214中,幀輸出單元9輸出已輸出幀,并且執(zhí)行步驟S202。
當幀輸出控制器8判定幀的數(shù)目n大于指定幀的數(shù)目X (n>X)時, 在步驟S215中,直接輸出異常幀,并且執(zhí)行步驟S202。 15 (3)在在具有來自一關鍵幀的差分信息的幀中,存在于關鍵幀
間前部的幀具有同前一關鍵幀的差分信息,并且存在于后部的幀具有 同后一關鍵幀的差分信息的情況下,
當當前幀不是異常幀時,在步驟S216中,幀輸出單元9輸出正常 幀。在輸出正常幀之后,執(zhí)行步驟S202。 20 當在步驟S205中判定當前幀是異常幀時,在步驟S206中,解碼器
5判斷是否能進行插值。
當解碼器5判定能進行插值時,在步驟S207中,通過將目標幀之后 的關鍵幀存儲在緩沖存儲器中,并讀取上述幀的方式,基于來自后一 關鍵幀的差分信息執(zhí)行插值。 25 在步驟S208中,幀輸出單元9輸出經(jīng)插值處理的幀,并且執(zhí)行步
驟S202。
(4)在在具有來自一關鍵幀的差分信息的幀中,存在于關鍵幀 間前部的幀具有同前一關鍵幀的差分信息,存在于后部的幀具有同后 一關鍵幀的差分信息,并且如第一示例性實施例中那樣,位于中央部 30分的幀具有來自前一幀的差分信息的情況下,當當前幀不是異常幀時,在步驟S216中,幀輸出單元9輸出正常 幀。在輸出正常幀之后,執(zhí)行步驟S202。
當在步驟S205中判定當前幀是異常幀時,在步驟S206中,解碼器 5判斷是否能進行插值。 5 當解碼器5判定能進行插值時,在步驟S207中,基于來自前一關鍵
幀的差分信息、來自后一關鍵幀的差分信息、或來自前一幀的差分信 息來執(zhí)行插值。
在步驟S208中,幀輸出單元9輸出經(jīng)插值處理的幀,并且執(zhí)行步 驟S202。
10 當在步驟S206中解碼器5判定不能進行插值時,在步驟S211中,
關鍵幀間隔計算器7計算到下一關鍵幀的幀的數(shù)目n。
在步驟S212中,存儲器單元3-l存儲到下一關鍵幀的幀的數(shù)目n, 以便將幀的數(shù)目n與指定幀的數(shù)目X進行比較。
在步驟S213中,幀輸出控制器8判斷幀的數(shù)目n是否小于等于指定 15幀的數(shù)目X(i^X)。即,幀輸出控制器8根據(jù)幀的數(shù)目n與預先設置的 指定幀的數(shù)目X之間的大小關系,來控制幀輸出單元,以在能夠輸出
正常幀或插值完成幀之前保持已輸出幀。
當幀輸出控制器8判定幀的數(shù)目n小于等于指定幀的數(shù)目X時,在 步驟S214中,從幀輸出單元9輸出已輸出幀,并且執(zhí)行步驟S202。 20 當幀輸出控制器8判定幀的數(shù)目n大于指定幀的數(shù)目X (n>X)時,
在步驟S215中,直接輸出異常幀,并且執(zhí)行步驟S202。 [程序和記錄介質]
使用使計算機執(zhí)行再現(xiàn)處理的再現(xiàn)程序來實現(xiàn)根據(jù)本發(fā)明的上 述再現(xiàn)裝置。
25 在一個示例性實施例中,當對于通過對圖像數(shù)據(jù)進行解碼而獲得
的幀中被確認為異常的幀來說不能進行插值時,再現(xiàn)程序使再現(xiàn)裝置 的計算機執(zhí)行在能夠輸出正常幀之前保持已輸出幀的處理。
艮口,當對于通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常 的幀來說不能進行插值時,根據(jù)該實施例的程序是使計算機執(zhí)行在能
30夠輸出正常幀之前保持已輸出幀的處理(a)的程序。此外,除了處理(a)以外,程序可以使計算機執(zhí)行處理(b): 在第一單元處判斷幀是否為異常;處理(C):在第二單元處判斷是否 能對由第一單元判定為異常的幀進行插值;以及處理(d):當通過第 二單元判定不能進行插值時,在第三單元處保持己輸出幀的輸出。
5 此外,除了處理(a)至(d)以外,該程序可以使計算機執(zhí)行處
理(e):當由第二單元判定不能進行插值的幀存在于距后一關鍵幀預
定幀數(shù)范圍內時,在第三單元處保持已輸出幀的輸出。
此外,除了處理(a)至(d)或(a)至(e)以外,該程序可以
使計算機執(zhí)行處理(f):當通過第二單元判定不能進行插值的幀并非 10存在于距后一關鍵幀預定幀數(shù)范圍內時,在第三單元處輸出該幀。
所述幀具有同前一幀的差分信息,并且除了處理(a)至(d)、 (a) 至(e)、或(a)至(f)以外,該程序可以使計算機執(zhí)行處理(g): 在第二單元處基于差分信息來執(zhí)行插值。
此外,除了處理(a)至(d)、 (a)至(e)、 (a)至(f)、以及(a) 15至(g)之一,該程序可以使計算機執(zhí)行處理(h):當已經(jīng)執(zhí)行了保持 輸出已輸出幀的處理時,在第三單元處保持輸出直到后一關鍵幀出現(xiàn) 為止。
此外,除了處理(a)至(d)、 (a)至(e)、 (a)至(f)、 (a)至 (g)、以及(a)至(h)之一,該程序還可以使計算機執(zhí)行處理(i): 20在第一單元處判斷一幀是否為關鍵幀;以及處理(j):在關鍵幀間隔 計算器處計算一關鍵幀和下一關鍵幀之間的幀間隔。
所述幀具有同前一幀的差分信息、同前一關鍵幀的差分信息、以 及同后一關鍵幀的差分信息中的至少一項,除了處理(a)至(d)以 夕卜,該程序可以使計算機執(zhí)行處理(k):在第二單元處基于有差分信 25息來執(zhí)行插值;以及(1),在第三單元處保持已輸出幀的輸出直到能 夠輸出正常幀為止。
根據(jù)上述結構,對于流傳送期間接收到的圖像數(shù)據(jù)進行解碼后的 異常幀,可以保持實時特性,并且即使在不能進行重傳的流條件下(如 多播條件下),也可以在主觀上防止輸出幀質量的劣化。這是由于本發(fā) 30 明不需要重傳。此外,根據(jù)上述結構,即使在存在許多異常幀的情況下,或者在 由于場景切換不能進行插值的情況下,也能在主觀上防止輸出圖像質 量的劣化。這是由于獲得了關鍵幀間的間隔,并對圖像輸出進行控制。
此外,根據(jù)上述結構,對于接收端來說,可以在不依賴于諸如FEC
5奇偶校驗等發(fā)送端規(guī)范的情況下,在主觀上防止輸出幀質量的劣化。
這是由于當具體實現(xiàn)本發(fā)明時,除了所接收的數(shù)據(jù)以外不需要特別的 信息或數(shù)據(jù)。
計算機的示例包括諸如個人計算機(PC)的通用計算機和工作站,
但計算機不僅限于此。
10 因此,當給定可以執(zhí)行再現(xiàn)程序的計算機環(huán)境時,可以在任何位
置實現(xiàn)根據(jù)本發(fā)明的再現(xiàn)裝置。
再現(xiàn)程序可以存儲在計算機可讀記錄介質中。
這里,記錄介質的示例包括計算機可讀記錄介質,如,光盤只讀
存儲器(CD-ROM)、軟盤(FD)、可記錄光盤(CD-R)、以及數(shù)字通 15用磁盤(DVD)。此外,記錄介質還包括半導體存儲器,如,閃存、
隨機存取存儲器(RAM)、只讀存儲器(ROM)、鐵電隨機存取存儲
器(FeRAM)、以及硬盤驅動器(HDD)。
此外,上述實施例介紹了本發(fā)明的優(yōu)選實施例的示例。本發(fā)明不
限于此,而可以在不背離本發(fā)明的精神和范圍的前提下,以各種修改 20的形式得以體現(xiàn)。例如,盡管在上述實施例中已經(jīng)對一關鍵幀和下一
關鍵幀之間的幀數(shù)變化的情況進行了描述,但是本發(fā)明不限于此,相
反可適用于一關鍵幀和下一關鍵幀之間的幀間隔固定的情況。在這種
情況下,不需要關鍵幀間隔計算器,并且需要將關鍵幀間隔存儲在存
儲器單元中。
25 首先,當不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為
異常的幀進行插值時,示例l中所描述的再現(xiàn)裝置在能夠輸出正常幀之 前保持已輸出幀。
在示例l的再現(xiàn)裝置中,示例2中所描述的再現(xiàn)裝置包括第一單 元,用于判斷幀是否異常;第二單元,用于判斷是否可對由第一單元
30確定為異常的幀進行插值;以及第三單元,用于在通過第二單元判定不能進行插值時,保持己輸出幀的輸出。
在示例2的再現(xiàn)裝置中,當通過第二單元判定不能進行插值的幀 存在于距后一關鍵幀預定幀數(shù)范圍內時,示例3中所述的再現(xiàn)裝置保持 已輸出幀的輸出。
5 在示例2或3的再現(xiàn)裝置中,當通過第二單元判定不能進行插值的
幀并非存在于距后一關鍵幀預定幀數(shù)范圍內時,示例4中所述的再現(xiàn)裝 置將該幀輸出。
在示例2、 3或4的再現(xiàn)裝置中,示例5中所述的再現(xiàn)裝置的特征在 于,幀具有同前一幀的差分信息,并且第二單元基于差分信息來執(zhí)行 10 插值。
在示例2至5之一的再現(xiàn)裝置中,示例6中所述的再現(xiàn)裝置的特征 在于,當已經(jīng)執(zhí)行了保持已輸出幀的輸出的處理時,第三單元在后一 關鍵幀出現(xiàn)之前繼續(xù)保持已輸出幀的輸出。
在示例3至6之一的再現(xiàn)裝置中,示例7中所述的再現(xiàn)裝置的特征
15在于,第一單元判斷所述幀是否為關鍵幀,并且所述裝置還包括關鍵 幀間隔計算器,計算從該關鍵幀到下一關鍵幀的幀間隔。
在示例2的再現(xiàn)裝置中,示例8中所述的再現(xiàn)裝置的特征在于,所
述幀具有同前一幀的差分信息、同前一關鍵幀的差分信息、以及同后 一關鍵幀的差分信息中的至少一種信息,并且第二單元基于差分信息 20來執(zhí)行插值,并且第三單元在能夠輸出正常幀之前保持已輸出幀的輸 出。
在示例1到8的再現(xiàn)裝置中,示例9中所述的再現(xiàn)裝置的特征在于, 所述圖像數(shù)據(jù)是從網(wǎng)絡傳送來的圖像數(shù)據(jù)或從存儲器介質讀取和輸出 的圖像數(shù)據(jù)。
25 示例10中所述的再現(xiàn)系統(tǒng)包括再現(xiàn)裝置,當不能對通過對圖像
數(shù)據(jù)進行解碼而獲得的幀中被確認為異常的幀進行插值時,在能夠輸 出正常幀之前保持已輸出幀;圖像數(shù)據(jù)傳送服務器,用于傳送圖像數(shù) 據(jù);以及網(wǎng)絡,連接至圖像數(shù)據(jù)傳送服務器。
在示例10的再現(xiàn)系統(tǒng)中,示例ll中所述的再現(xiàn)系統(tǒng)的特征在于,
30再現(xiàn)裝置包括第一單元,用于判斷幀是否異常;第二單元,用于判斷是否可對通過第一單元判定為異常的幀進行插值處理;以及第三單 元,用于當通過第二單元判定不能進行插值處理時,保持已輸出幀的 輸出。
示例12中所述的再現(xiàn)方法包括,當不能對通過對圖像數(shù)據(jù)進行解 5 碼而獲得的幀中被確認為異常的幀進行插值時,在可以輸出正常幀之 前保持己輸出幀。
在示例12的再現(xiàn)方法中,示例13中所述的再現(xiàn)方法包括判斷所 述幀是否異常、判斷是否可對被判定為異常的幀進行插值處理、并且 當被判定為不能進行插值時,保持已輸出幀的輸出。 10 在示例13的再現(xiàn)方法中,示例14中所述的再現(xiàn)方法包括,當被判
定不能進行插值的幀存在于距后一關鍵幀預定幀數(shù)范圍內時,保持已 輸出幀的輸出。
在示例13或14的再現(xiàn)方法中,示例15中所述的再現(xiàn)方法包括,當
被判定為不能進行插值的幀并非存在于距后一關鍵幀預定幀數(shù)范圍內
15時,輸出該幀。
在示例13、 14或15的再現(xiàn)方法中,示例16中所述的再現(xiàn)方法的特 征在于,所述幀具有同前一幀的差分信息,并且基于有差分信息來執(zhí) 行插值。
在示例13到16之一的再現(xiàn)方法中,示例17中所述的再現(xiàn)方法包 20括,當已經(jīng)執(zhí)行了保持已輸出幀的輸出的處理時,在后一關鍵幀出現(xiàn) 之前繼續(xù)輸出。
在示例14到17之一的再現(xiàn)方法中,示例18中所述的再現(xiàn)方法包 括,判斷所述幀是否為關鍵幀,并計算從一關鍵幀到下一關鍵幀的幀 間隔。
25 在示例13的再現(xiàn)方法中,示例19中所述的再現(xiàn)方法的特征在于,
所述幀具有同前一幀的差分信息、同前一關鍵幀的差分信息、以及同 后一關鍵幀的差分信息中的至少一種信息,該方法還包括基于差分 信息來執(zhí)行插值,并在能夠輸出正常幀之前保持已輸出幀的輸出。 在示例12到19之一的再現(xiàn)方法中,示例20中所述的再現(xiàn)方法的特
30征在于,圖像數(shù)據(jù)是從網(wǎng)絡傳送來的圖像數(shù)據(jù)或從存儲器介質讀取和
26輸出的圖像數(shù)據(jù)。
當不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常
的幀進行插值時,示例21中所述的程序使計算機在能夠輸出正常幀之
前執(zhí)行保持己輸出幀的處理。
5 在示例21的程序中,示例22中所描述的程序使計算機執(zhí)行以下處
理在第一單元處判斷所述幀是否異常;在第二單元處判斷是否可對 通過第一單元判定為異常的幀進行插值;以及當通過第二單元判定不 能進行插值處理時,在第三單元處保持已輸出幀的輸出。
在示例22的程序中,示例23中所述程序使計算機執(zhí)行以下處理 10 當通過第二單元判定不能進行插值處理的幀存在于距后一關鍵幀預定 幀數(shù)范圍內時,在第三單元處保持已輸出幀的輸出。
在示例22或23的程序中,當通過第二單元判定不能進行插值處理 的幀并非存在于距后一關鍵幀預定幀數(shù)范圍內時,示例24中所述的程 序使計算機執(zhí)行在第三單元輸出該幀的處理。 15 在示例22、 23或24的程序中,示例25中所述的程序的特征在于,
所述幀具有同前一幀的差分信息,并且該程序還使計算機在第二單元 處執(zhí)行基于差分信息來進行插值的處理。
在示例22至25之一的程序中,示例26中所述的程序使計算機執(zhí)行
以下處理當已經(jīng)執(zhí)行了保持已輸出幀的輸出的處理時,在第三單元 20 處繼續(xù)保持輸出直到后一關鍵幀出現(xiàn)為止。
在示例23至26之一的程序中,示例27中所述的程序還使計算機執(zhí)
行以下處理在第一單元處判斷所述幀是否為關鍵幀,并且在關鍵幀 間隔計算器處計算從所述關鍵幀到下一關鍵幀的幀間隔。
在示例22的程序中,示例28中所述的程序的特征在于,所述幀具 25 有同前一幀的差分信息、同前一關鍵幀的差分信息、以及同后一關鍵 幀的差分信息中的至少一種信息,并且該程序還使計算機執(zhí)行以下步 驟在第二單元處基于差分信息來執(zhí)行插值;并且在第三單元處保持 已輸出幀的輸出,直到能夠輸出正常幀為止。
在示例21至28的程序中,示例29中所述的程序的特征在于,圖像
30 數(shù)據(jù)是從網(wǎng)絡傳送來的圖像數(shù)據(jù)或從存儲器介質讀取和輸出的圖像數(shù)據(jù)。
示例30中所述的記錄介質在其上記錄了示例21至29之一的程序。 接著,參照圖2、 5至8描述根據(jù)本發(fā)明的再現(xiàn)方法的示例。 [示例I]
5 此處,可以以各種形式(例如,關鍵幀間間隔的一部分、幀數(shù)、
秒)來表示指定幀的數(shù)目X的單位。此外,當觀看者側可以改變指定 幀的數(shù)目X時,客戶端可以根據(jù)觀看者的偏好指示是否提高圖像的劣 化防止率,或是否執(zhí)行保持圖像運動平滑性(幀速率)的圖像再現(xiàn)。 首先,圖5描述了幀的情況(雖然圖5中示出了7個幀,但幀的數(shù) 10 目不限于此),幀1正常,幀2到5異常、幀6和7正常。假設幀1和幀6是 關鍵幀。
圖5是示出了在指定幀的數(shù)目X為幀的最大數(shù)目(例如,900)的
情況下,幀、正常/異常、能/不能進行插值、應用/不應用輸出控制、
以及輸出幀之間的關系。 15 對于幀l (關鍵幀),由于幀1正常,因此不應用輸出控制,并且
從幀輸出單元9輸出正常幀1 (與第三示例性實施例的情況相同)。
對于幀2,幀2異常,能進行插值,并且?guī)臄?shù)目11=4小于指定幀
的數(shù)目X,因而不應用輸出控制,并且從幀輸出單元9輸出已經(jīng)由插值
處理器6進行插值的幀2,(與第三示例性實施例的情況相同)。 20 對于幀3,幀3異常,不能進行插值,并且?guī)臄?shù)目11=3小于指定
幀的數(shù)目X,因而應用輸出控制,保持前一輸出幀2',并從幀輸出單
元9輸出幀2'(與第三示例性實施例的情況相同)。
對于幀4,幀4異常,并且不能進行插值。此時,已經(jīng)兩次判定不
能進行插值。即,就第一和第二示例性實施例而言,在圖2中流程圖的 25步驟S104中判定進行輸出控制,并且在步驟S105中判定所述幀不是關
鍵幀,因而執(zhí)行步驟S116,并輸出已輸出幀幀2,(與第三示例性實施
例的情況相同)。
對于幀5,幀5異常并且不能進行插值。此時,己經(jīng)三次判定不能 進行插值。即,就第一和第二示例性實施例而言,在圖2中流程圖的步 30驟S104中判定進行輸出控制,并且在步驟S105中判定幀不是關鍵幀,從而執(zhí)行步驟S116,輸出己輸出幀幀2,(與第三示例性實施例的情況 相同)。
對于幀6,由于幀6正常并且是關鍵幀,因此從幀輸出單元9輸出 正常幀6 (關鍵幀)(與第三示例性實施例的情況相同)。 5 對于幀7,由于幀7為正常,因此不應用輸出控制,并且從幀輸出
單元9輸出正常幀7 (與第三示例性實施例的情況相同)。
盡管將指定幀的數(shù)目x設置在關鍵幀間隔范圍內(即,小于等于
幀的數(shù)目n)會使圖像質量或多或少有所下降,但這樣做可以實現(xiàn)保持
10 幀運動平滑性的圖像再現(xiàn)。
圖6是示出了指定幀的數(shù)目X為2的情況下,幀、正常/異常、能/
不能進行插值、應用/不應用輸出控制、以及輸出幀之間的關系。
對于幀l,由于幀1正常,因此不應用輸出控制,并且從幀輸出單
元9輸出正常幀1 (關鍵幀)(與第三示例性實施例的情況相同)。 15 對于幀2,幀2異常,能進行插值,并且?guī)臄?shù)目11=4大于指定幀
的數(shù)目X,因而不應用輸出控制,并且從幀輸出單元9輸出插值后的幀
2,(與第三示例性實施例的情況相同)。
對于幀3,幀3異常,不能進行插值,并且?guī)臄?shù)目n-3大于指定
幀的數(shù)目X,因而根據(jù)圖2的流程圖直接從幀輸出單元9輸出異常幀3"
20 (與第三示例性實施例的情況相同)。
對于幀4,幀4異常,并且不能進行插值。此時,已經(jīng)兩次判定不 能進行插值。即,就第三示例性實施例而言,在圖2中流程圖的步驟 S104中判定進行輸出控制,并且在步驟S105中判定幀不是關鍵幀,因 而執(zhí)行步驟S116,直接輸出已輸出的異常幀幀3"(與第三示例性實施
25 例的情況相同)。
對于幀5,幀5異常,不能進行插值,并且?guī)臄?shù)目11=1小于指定 幀的數(shù)目X,因而根據(jù)圖2的流程圖從幀輸出單元9輸出前一幀異常幀 3"(與第三示例性實施例的情況相同)。
對于幀6,由于幀6正常,因為不應用輸出控制,并且從幀輸出單 30 元9輸出正常幀6 (關鍵幀)(與第三示例性實施例的情況相同)。對于幀7,由于幀7正常,因此不應用輸出控制,并且從幀輸出單
元9輸出正常幀7 (與第三示例性實施例的情況相同)。
圖7描述了幀1和2正常,幀3異常、幀4正常、幀5異常、幀6和7正 5常的情況。假設幀1和幀6是關鍵幀。
圖7示出了指定幀的數(shù)目X為幀的最大數(shù)目(例如,900)的情況 下,幀、正常/異常、能/不能進行插值、應用/不應用輸出控制、以及 輸出幀之間的其他關系。 , 對于幀l,由于幀1正常,因此不應用輸出控制,并且從幀輸出單
10'元9輸出正常幀1 (與第三示例性實施例的情況相同)。
對于幀2,由于幀2正常,因此不應用輸出控制,并且從幀輸出單 元9輸出正常幀2 (與第三示例性實施例的情況相同)。
對于幀3,幀3異常,能進行插值,并且?guī)臄?shù)目11=3小于指定幀 的數(shù)目X,因而不應用輸出控制,并且從幀輸出單元9輸出插值后的幀 153,(與第三示例性實施例的情況相同)。
對于幀4,由于幀4正常,并且不能進行插值,因此不應用輸出控 制,并從幀輸出單元9輸出正常幀4(與第三示例性實施例的情況相同)。 對于幀5,幀5異常,不能進行插值,并且?guī)臄?shù)目n-l小于指定 幀的數(shù)目X,因而應用輸出控制,保持先前的輸出圖像,并從幀輸出 20單元9輸出幀4 (與第三示例性實施例的情況相同)。
對于幀6,由于幀6正常,因此不應用輸出控制,并從幀輸出單元 9輸出正常幀6 (關鍵幀)(與第三示例性實施例的情況相同)。
對于幀7,由于幀7正常,因此不應用輸出控制,并從幀輸出單元 9輸出正常幀7 (與第三示例性實施例的情況相同)。 25 [示例IV]
圖8示出了指定幀的數(shù)目X為2的情況下,幀、正常/異常、會巨/不能 進行插值、應用/不應用輸出控制、以及輸出幀之間的其他關系。
對于幀l,由于幀1正常,因此不應用輸出控制,并且從幀輸出單 元9輸出正常幀1 (關鍵幀)(與第三示例性實施例的情況相同)。 30 對于幀2,由于幀2正常,因此不應用輸出控制,并且從幀輸出單元9輸出正常幀2 (與第三示例性實施例的情況相同)。
對于幀3,幀3異常,能進行插值,并且?guī)臄?shù)目11=3大于指定幀 的數(shù)目X,因而不應用輸出控制,并從幀輸出單元9輸出由插值處理器 6插值得到的幀3,(與第三示例性實施例的情況相同)。 5 對于幀4,由于幀4正常,因此不應用輸出控制,并從幀輸出單元
9輸出正常幀4 (與第三示例性實施例的情況相同)。
對于幀5,幀5異常,不能進行插值,并且?guī)臄?shù)目11=1小于指定 幀的數(shù)目X,因而應用輸出控制,保持并從幀輸出單元9輸出先前的輸 出幀4 (與第三示例性實施例的情況相同)。 10 對于幀6,由于幀6正常,因此不應用輸出控制,并從幀輸出單元
9輸出正常幀6 (關鍵幀)(與第三示例性實施例的情況相同)。
對于幀7,由于幀7正常,因此不應用輸出控制,并從幀輸出單元 9輸出正常幀7 (與第三示例性實施例的情況相同。
在圖5至8中,幀l、 2、 3、...表示經(jīng)解碼的幀,"正常/異常"表示 15 形成解碼幀l、 2、 3、...的分組發(fā)生是否遭到破壞或者發(fā)生丟失,"能/ 不能進行插值"表示在幀發(fā)生異常的情況下,是否能進行插值。"應用 /不應用輸出控制"表示,是在能夠輸出下一正常幀或插值完成幀之前 輸出前一輸出圖像,還是直接輸出異常幀。此外,"輸出幀"表示正常 幀l、 2、 3、…,插值后的幀l'、 2,、 3,、…,異常幀1"、 2"、 3"、...
20 中的一種。
這里,第一至第四示例性實施例揭示出,在指定幀的數(shù)目X大于 幀的數(shù)目n的情況下,將本發(fā)明應用于圖像數(shù)據(jù)異常的頻率較大。
因此,乍看起來當指定幀的數(shù)目X大于幀的數(shù)目n時圖像質量極 好。然而,在圖像數(shù)據(jù)的內容是驚悚影片或動作片的情況下,觀看者 25 期望觀看關鍵時刻。在這種情況下,可能的優(yōu)選情況是,雖然圖像數(shù) 據(jù)或多或少遭到破壞,但仍顯示相應的幀。在觀看者無論如何期望觀 看下一時刻內容的情況下,當再現(xiàn)暫停于前一場景時,會令觀看者不 滿意。此外,由于上述場景暫停,平滑度將會降低。
因此,期望獲得關鍵時刻而不是高圖像質量的觀看者可以將指定 30幀的數(shù)目X設置為下限。優(yōu)先考慮圖像質量的觀看者可以將指定幀的
31數(shù)目X設置為幀的數(shù)目n的上限。
根據(jù)本發(fā)明的效果在于,對于流傳送期間接收到圖像數(shù)據(jù)的異常 幀,可以保持實時特性,并且即使在不能進行重傳的流條件下(如多
5播條件下),也可以在主觀上防止輸出幀質量的劣化。這是由于本發(fā)明
不需要重傳。
根據(jù)本發(fā)明的另一效果在于,即使在存在多個異常幀的情況下, 或者在由于場景切換不能進行插值的情況下,也可以在主觀上防止輸 出幀質量的劣化。這是由于獲得了關鍵幀間的間隔,并對輸出幀進行
10 控制。
根據(jù)本發(fā)明的又一效果在于,對于接收端來說,可以在不依賴于
諸如FEC奇偶校驗等發(fā)送端規(guī)范的情況下,在主觀上防止輸出圖像質 量的劣化。這是由于當具體實現(xiàn)本發(fā)明時,除了所接收的數(shù)據(jù)以外不 需要特別的信息或數(shù)據(jù)。
15 此外,提供上述實施例作為本發(fā)明的示例性優(yōu)選實施例,但本發(fā)
明不限于此,而可以在不背離本發(fā)明的精神和范圍的前提下,以各種 修改形式得以體現(xiàn)。例如,盡管上述實施例中己經(jīng)針對流傳輸?shù)那闆r 進行了解釋,但本發(fā)明不限于流媒體,相反可適用于甚至是存儲器單 元中的圖像數(shù)據(jù),只要圖像數(shù)據(jù)的類型是可以確定異常幀出現(xiàn)次數(shù)的
20 類型即可。
在存儲器單元中的圖像數(shù)據(jù)存在異常的情況下,不能執(zhí)行與在流 中進行重傳相對應的重新讀取/輸入,因而本發(fā)明有效。
權利要求
1、一種再現(xiàn)裝置,其中,當不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常的幀進行插值時,所述再現(xiàn)裝置在能夠輸出正常幀之前保持已輸出幀。
2、 根據(jù)權利要求l所述的再現(xiàn)裝置,包括 第一單元,判斷所述幀是否異常;第二單元,判斷是否能對通過第一單元判定為異常的幀進行插值 處理;以及第三單元,當通過第二單元判定不能進行插值處理時,保持已輸出幀的輸出。
3、 根據(jù)權利要求2所述的再現(xiàn)裝置,其中,當通過第二單元判定 不能進行插值處理的幀存在于距后一關鍵幀預定幀數(shù)范圍內時,第三 單元保持己輸出幀的輸出。
4、根據(jù)權利要求2所述的再現(xiàn)裝置,其中,當通過第二單元判定不能進行插值處理的幀并非存在于距后一關鍵幀預定幀數(shù)范圍內時,第三單元就輸出所述幀。
5、根據(jù)權利要求2所述的再現(xiàn)裝置,其中,所述幀具有同前一幀的差分信息,并且第二單元基于所述差分信息來進行插值。 20
6、根據(jù)權利要求2所述的再現(xiàn)裝置,其中,當執(zhí)行保持輸出已輸出幀的處理時,第三單元在后一關鍵幀出現(xiàn)之前持續(xù)保持輸出。
7、 根據(jù)權利要求3所述的再現(xiàn)裝置,其中,第一單元判斷所述幀 是否為關鍵幀,并且所述裝置還包括關鍵幀間隔計算器,計算從所述關鍵幀到下一 25 關鍵幀的幀間隔。
8、 根據(jù)權利要求2所述的再現(xiàn)裝置,其中,所述幀具有同前一幀的差分信息、同前一關鍵幀的差分信息、以及同后一關鍵幀的差分信 息中的至少一種信息,第二單元基于所述差分信息來進行插值,并且 第三單元在能夠輸出正常幀之前保持輸出已輸出幀。
9、根據(jù)權利要求l所述的再現(xiàn)裝置,其中,所述圖像數(shù)據(jù)包括從網(wǎng)絡傳送過來的圖像數(shù)據(jù)、或從存儲器介質中讀出的圖像數(shù)據(jù)。
10、 一種再現(xiàn)系統(tǒng),包括再現(xiàn)裝置,當不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確 認為異常的幀進行插值時,在能夠輸出正常幀之前保持已輸出幀; 5 圖像數(shù)據(jù)傳送服務器,傳送圖像數(shù)據(jù);以及網(wǎng)絡,連接至所述圖像數(shù)據(jù)傳送服務器。
11、 根據(jù)權利要求10所述的再現(xiàn)系統(tǒng),其中,所述再現(xiàn)裝置包括 第一單元,判斷幀是否異常;第二單元,判斷是否能對通過第一單元判定為異常的幀進行插值 10處理;以及第三單元,當通過第二單元判斷不能進行插值處理時,保持已輸 出幀的輸出。
12、 一種再現(xiàn)方法,其中,當不能對通過對圖像數(shù)據(jù)進行解碼而 獲得的幀中被確認為異常的幀進行插值時,所述方法在能夠輸出正常 幀之前保持己輸出幀。
13、 根據(jù)權利要求12所述的再現(xiàn)方法,包括判斷所述幀是否異常;判斷是否能對被判定為異常的幀進行插值處理;以及 當判定不能進行插值處理時,保持輸出已輸出幀。
14、根據(jù)權利要求13所述的再現(xiàn)方法,還包括當判定為不能進行插值處理的幀存在于距后一關鍵幀預定幀數(shù) 范圍內時,保持己輸出幀的輸出。
15、 根據(jù)權利要求13所述的方法,還包括當判定為不能進行插值處理的幀并非存在于距后一關鍵幀預定 25幀數(shù)范圍內時,輸出所述幀。
16、 根據(jù)權利要求13所述的再現(xiàn)方法,其中,所述幀具有同前一幀的差分信息,并且所述插值是基于所述差分信息執(zhí)行的。
17、 根據(jù)權利要求13所述的再現(xiàn)方法,其中,當己執(zhí)行保持輸出 己輸出幀的處理時,在后一關鍵幀出現(xiàn)之前持續(xù)保持所述輸出。
18、根據(jù)權利要求14所述的再現(xiàn)方法,還包括判斷所述幀是否為關鍵幀;以及 計算從所述關鍵幀到下一關鍵幀的幀間隔。
19、 根據(jù)權利要求13所述的再現(xiàn)方法,其中,所述幀具有同前一 幀的差分信息、同前一關鍵幀的差分信息、以及同后一關鍵幀的差分 信息中的至少一種信息,并且所述方法還包括 基于所述差分信息進行插值;以及 在能夠輸出正常幀之前保持已輸出幀的輸出。
20、 根據(jù)權利要求12所述的再現(xiàn)方法,所述圖像數(shù)據(jù)是從網(wǎng)絡傳 送過來的圖像數(shù)據(jù)、或從存儲器介質讀出的圖像數(shù)據(jù)。
21、 一種記錄程序的記錄介質,所述程序用于使計算機執(zhí)行以下處理當不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常 的幀進行插值時,在能夠輸出正常幀之前保持已輸出幀。
22、根據(jù)權利要求21所述的記錄程序的記錄介質,其中,所述程 序還使計算機執(zhí)行以下處理 15 在第一單元處,判斷所述幀是否異常;在第二單元處,判斷是否能對通過第一單元判定為異常的幀進行 插值處理;以及在第三單元處,當通過第二單元判定不能進行插值處理時,保持 已輸出幀的輸出。
23、根據(jù)權利要求22所述的記錄程序的記錄介質,其中,所述程序還使計算機執(zhí)行以下處理當通過第二單元判定不能進行插值處理 的幀存在于距后一關鍵幀預定幀數(shù)范圍內時,在第三單元處保持已輸 出幀的輸出。
24、 根據(jù)權利要求22所述的記錄程序的記錄介質,其中,所述程 25序還使計算機執(zhí)行以下處理當通過第二單元判定不能進行插值處理的幀并非存在于距后一關鍵幀預定幀數(shù)范圍內時,在第三單元處輸出 所述幀。
25、 根據(jù)權利要求22所述的記錄程序的記錄介質,其中,所述幀 具有同前一幀的差分信息,并且所述程序還使計算機在第二單元處基 于所述差分信息來進行插值處理。
26、 根據(jù)權利要求22所述的記錄程序的記錄介質,其中,所述程 序還使計算機執(zhí)行以下處理當己執(zhí)行保持輸出已輸出幀的處理時,在第三單元處后一關鍵幀出現(xiàn)之前持續(xù)保持所述輸出。
27、 根據(jù)權利要求23所述的記錄程序的記錄介質,其中,所述程 5 序還使計算機執(zhí)行以下處理在第一單元處,判斷所述幀是否為關鍵幀;以及 在關鍵幀間隔計算器處,計算從所述關鍵幀到下一關鍵幀的幀間隔。
28、 根據(jù)權利要求22所述的記錄程序的記錄介質,其中,所述幀 10具有同前一幀的差分信息、同前一關鍵幀的差分信息、以及同后一關鍵幀的差分信息中的至少一種信息,所述程序使計算機執(zhí)行以下處理 在第二單元處,基于所述差分信息進行插值;以及 在第三單元處,在能夠輸出正常幀之前保持已輸出幀的輸出。
29、 根據(jù)權利要求21所述的記錄程序的記錄介質,其中,所述圖 15像數(shù)據(jù)包括從網(wǎng)絡傳送過來的圖像數(shù)據(jù)、或從存儲器介質讀出的圖像數(shù)據(jù)。
全文摘要
本發(fā)明提供了一種再現(xiàn)裝置、一種再現(xiàn)系統(tǒng)、一種再現(xiàn)方法、以及一種記錄介質,用于防止輸出幀主觀評價值的降低。因此,如果不能對通過對圖像數(shù)據(jù)進行解碼而獲得的幀中被確認為異常的幀進行插值,那么在可以輸出正常幀之前保持已輸出幀。
文檔編號H04N7/64GK101483783SQ200910001338
公開日2009年7月15日 申請日期2009年1月7日 優(yōu)先權日2008年1月7日
發(fā)明者原田千尋 申請人:日本電氣株式會社
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
康乐县| 牟定县| 许昌市| 泰兴市| 民丰县| 亳州市| 安仁县| 太康县| 陆川县| 阿图什市| 开远市| 临沧市| 山西省| 沈阳市| 东海县| 莱州市| 马山县| 包头市| 鹤岗市| 绥中县| 台湾省| 伊宁县| 青川县| 龙南县| 临泽县| 登封市| 邢台市| 濉溪县| 金乡县| 石首市| 西吉县| 疏勒县| 南投市| 玛曲县| 白水县| 清镇市| 嘉黎县| 舒兰市| 于田县| 延安市| 昭平县|