專(zhuān)利名稱(chēng)：內(nèi)容處理設(shè)備和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種內(nèi)容處理設(shè)備和方法，且更具體地，涉及一種能夠從內(nèi)容中簡(jiǎn)單地提取所期望的場(chǎng)景(scene)并且在短時(shí)間中生成特別重要場(chǎng)景的摘要(digest)的內(nèi)容 處理設(shè)備和方法。
背景技術(shù)：
近來(lái)，已經(jīng)在BS廣播和CS廣播以及地面廣播中廣播了各種內(nèi)容。此外，近來(lái)，隨 著HDD記錄器已經(jīng)變得普遍，已經(jīng)通常使用了長(zhǎng)時(shí)間記錄和時(shí)移(time-shift)重放。然而，由于觀(guān)看時(shí)間有限，所以用戶(hù)很難觀(guān)看所有的視頻。因此，要解決的問(wèn)題在 于如何自動(dòng)地生成視頻的摘要并有效地抓取其內(nèi)容。在這些環(huán)境中，已經(jīng)開(kāi)發(fā)了一種摘 要生成技術(shù)，所述摘要生成技術(shù)能夠通過(guò)分析在內(nèi)容中包括的畫(huà)面、聲音、字幕等、僅提取 可能重要的場(chǎng)景并且重放有關(guān)的重要場(chǎng)景來(lái)在短時(shí)間中觀(guān)看內(nèi)容的所有片段(印isode) (例如，參考日本未審查專(zhuān)利申請(qǐng)公開(kāi)No. 2000-23062、2005-252372、2002-344871和 2005-115607)。此外，為了防止重復(fù)地觀(guān)看相同的場(chǎng)景，已經(jīng)提出了一種用于針對(duì)內(nèi)容的預(yù)定 場(chǎng)景、在時(shí)間上的回顧方向中搜索相同畫(huà)面場(chǎng)景的部分(具有相同畫(huà)面特征的圖案) 的方法(例如，參考 Yashugi Yukinobu、Babaguchi Noboru> 禾口 Kitahashi Tadahiro 的〃 Detection of Identical Events from Spots Video byComparing Camera Works (通 過(guò)比較相機(jī)作品來(lái)從體育視頻中檢測(cè)同一事件)，“Proceedings of The Institute of Electronics,Information and CommunicationEngineers,Vol. 2001,Information System 2pp. 359-360 (電子信息通信工程師學(xué)會(huì)的學(xué)報(bào)，卷2001，信息系統(tǒng)2第359-360頁(yè)))。然而，在日本未審查專(zhuān)利申請(qǐng)公開(kāi)No. 2000-23062,2005-252372,2002-344871和 2005-115607中公開(kāi)的技術(shù)具有以下問(wèn)題，即難以從在內(nèi)容中包括的畫(huà)面、聲音、字幕等中 提取重要的場(chǎng)景，因?yàn)樗鎏崛∪Q于內(nèi)容的細(xì)節(jié)。此外，在由Yashugi Yukinobu等人所著述的文章中公開(kāi)的方法具有以下問(wèn)題，即 需要花費(fèi)大量時(shí)間來(lái)執(zhí)行用于分析畫(huà)面并搜索同一畫(huà)面場(chǎng)景的部分的處理。

發(fā)明內(nèi)容
期望提供一種能夠在內(nèi)容中簡(jiǎn)單地提取所期望的場(chǎng)景并且在短時(shí)間中生成特別 重要場(chǎng)景的摘要的內(nèi)容處理設(shè)備和方法。根據(jù)本發(fā)明的實(shí)施例，提供了一種內(nèi)容處理設(shè)備，包括內(nèi)容數(shù)據(jù)獲取部件，用于 獲取內(nèi)容的數(shù)據(jù)；區(qū)域(section)檢測(cè)部件，用于從所獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀 的交叉衰落(cross-fade)區(qū)域，所述多個(gè)幀構(gòu)成其中逐漸地改變預(yù)定場(chǎng)景的最終圖像并 且利用下一場(chǎng)景的圖像來(lái)取代所述最終圖像的部分；場(chǎng)景指定部件，用于基于所檢測(cè)到的 交叉衰落區(qū)域來(lái)指定回顧場(chǎng)景，其中按照預(yù)定的間隔來(lái)改變多個(gè)場(chǎng)景；類(lèi)似場(chǎng)景搜索部件， 用于從由內(nèi)容數(shù)據(jù)獲取部件所獲取的不同內(nèi)容的數(shù)據(jù)中搜索與在所指定的回顧場(chǎng)景中包括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景；以及摘要生成部件，用于通過(guò)組合所搜索到的場(chǎng)景來(lái)生成所述 不同內(nèi)容的摘要。所述區(qū)域檢測(cè)部件可以包括比率計(jì)算部件，用于計(jì)算所述內(nèi)容數(shù)據(jù)中單調(diào)改變 的像素與要處理幀的占有比，所述單調(diào)改變像素的值被單調(diào)地改變；活度(activity)比率 計(jì)算部件，用于計(jì)算要處理幀與在要處理幀之前的幀之間的活度比率；候選幀確定部件，用 于基于所計(jì)算的單調(diào)改變像素的占有比和所計(jì)算的活度比率來(lái)確定要處理的幀是否是交 叉衰落區(qū)域中的候選幀；以及連續(xù)幀計(jì)數(shù)部件，用于通過(guò)對(duì)連續(xù)地出現(xiàn)的候選幀進(jìn)行計(jì)數(shù) 來(lái)從所述內(nèi)容數(shù)據(jù)中檢測(cè)交叉衰落區(qū)域。 所述比率計(jì)算部件可以將要處理幀設(shè)置為當(dāng)前幀，通過(guò)對(duì)當(dāng)前幀的關(guān)注像素的值 和與所述關(guān)注像素對(duì)應(yīng)的過(guò)去幀和將來(lái)幀中的像素的值進(jìn)行比較，確定當(dāng)前幀的關(guān)注像素 是否是單調(diào)改變的像素，并且計(jì)算被確定為單調(diào)改變像素的所述像素與構(gòu)成所述當(dāng)前幀的 所有像素的比率。在其中改變所述關(guān)注像素和與所述關(guān)注像素對(duì)應(yīng)的像素的值、以隨著時(shí)間的經(jīng)過(guò) 而增加的情況下，或者在其中改變所述關(guān)注像素和與所述關(guān)注像素對(duì)應(yīng)的像素的值、以隨 著時(shí)間的經(jīng)過(guò)而降低的情況下，如果根據(jù)時(shí)間經(jīng)過(guò)的改變量大于預(yù)定的閾值，則可以將所 述關(guān)注像素確定為單調(diào)改變的像素。如果第一幀的特征量與時(shí)間上在所述第一幀之前預(yù)定數(shù)目的幀的第二幀的特征 量之間的差值等于或大于預(yù)定的閾值，則可以將所述第一幀設(shè)置為要處理的幀。在其中連續(xù)出現(xiàn)的候選幀的數(shù)目等于或大于預(yù)定的閾值的情況下，如果所述連續(xù) 候選幀的最初候選幀的特征量與其最終候選幀的特征量之間的差值等于或大于預(yù)定的閾 值，則所述區(qū)域檢測(cè)部件可以將從最初候選幀到最終候選幀的區(qū)域檢測(cè)為交叉衰落區(qū)域。在其中在小于閾值的時(shí)間距離中連續(xù)地檢測(cè)到預(yù)定數(shù)目或更多的交叉衰落區(qū)域 的情況下，所述場(chǎng)景指定部件可以將從所述交叉衰落區(qū)域的最初交叉衰落區(qū)域到最終交叉 衰落區(qū)域的部分指定為回顧場(chǎng)景。所述類(lèi)似場(chǎng)景搜索部件可以從不同內(nèi)容的數(shù)據(jù)中搜索與在所指定的回顧場(chǎng)景中 的交叉衰落區(qū)域之間插入的部分對(duì)應(yīng)的場(chǎng)景類(lèi)似的場(chǎng)景，以及所述摘要生成部件可以通過(guò) 對(duì)添加有所搜索到的場(chǎng)景之前或之后的預(yù)定數(shù)目的連續(xù)幀的數(shù)據(jù)進(jìn)行組合來(lái)生成所述摘要。所述搜索部件可以從不同內(nèi)容的數(shù)據(jù)中搜索與時(shí)間上定位在與在所指定的回顧 場(chǎng)景中的交叉衰落區(qū)域之間插入的部分對(duì)應(yīng)的場(chǎng)景中的最早點(diǎn)處的第一場(chǎng)景類(lèi)似的第二 場(chǎng)景，以及所述搜索部件可以從在不同內(nèi)容數(shù)據(jù)中時(shí)間上晚于所述第二場(chǎng)景的部分中，搜 索與時(shí)間上晚于和在所指定的回顧場(chǎng)景之中的交叉衰落區(qū)域之間插入的部分對(duì)應(yīng)的場(chǎng)景 中的第一場(chǎng)景的第三場(chǎng)景類(lèi)似的第四場(chǎng)景。 根據(jù)本發(fā)明的另一實(shí)施例，提供了一種內(nèi)容處理方法，包括以下步驟獲取內(nèi)容的 數(shù)據(jù)；從所獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀的交叉衰落區(qū)域，所述多個(gè)幀構(gòu)成其中逐漸 地改變預(yù)定場(chǎng)景的最終圖像并且利用下一場(chǎng)景的圖像來(lái)取代所述最終圖像的部分；基于所 檢測(cè)到的交叉衰落區(qū)域來(lái)指定回顧場(chǎng)景，其中按照預(yù)定的間隔來(lái)改變多個(gè)場(chǎng)景；從由內(nèi)容 數(shù)據(jù)獲取部件所獲取的不同內(nèi)容的數(shù)據(jù)中搜索與在所指定的回顧場(chǎng)景中包括的多個(gè)場(chǎng)景 類(lèi)似的場(chǎng)景；以及通過(guò)組合所搜索到的場(chǎng)景來(lái)生成所述不同內(nèi)容的摘要。
根據(jù)本發(fā)明的又一實(shí)施例，獲取內(nèi)容的數(shù)據(jù)；從所獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀的交叉衰落區(qū)域，所述多個(gè)幀構(gòu)成其中逐漸地改變預(yù)定場(chǎng)景的最終圖像并且利用下一 場(chǎng)景的圖像來(lái)取代所述最終圖像的部分；基于所檢測(cè)到的交叉衰落區(qū)域來(lái)搜索回顧場(chǎng)景， 其中按照預(yù)定的區(qū)間來(lái)改變多個(gè)場(chǎng)景；從由內(nèi)容數(shù)據(jù)獲取部件所獲取的不同內(nèi)容的數(shù)據(jù)中 搜索與在所指定的回顧場(chǎng)景中包括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景；以及通過(guò)組合所搜索到的場(chǎng)景 來(lái)生成所述不同內(nèi)容的摘要。根據(jù)本發(fā)明，可能從內(nèi)容中簡(jiǎn)單地提取所期望的場(chǎng)景并且在短時(shí)間中生成利用特別重要場(chǎng)景而構(gòu)成的摘要。


圖1是圖示了根據(jù)本發(fā)明實(shí)施例的內(nèi)容處理設(shè)備的示例的視圖。圖2是圖示了圖1所示的內(nèi)容處理設(shè)備的配置的示例的框圖。圖3是圖示了由圖2所示的控制單元所運(yùn)行的軟件的功能配置的示例的框圖。圖4是圖示了圖3所示的特定場(chǎng)景檢測(cè)單元的詳細(xì)配置的示例的框圖。圖5是圖示了圖4所示的單調(diào)改變像素檢測(cè)單元的處理的視圖。圖6是圖示了圖4所示的區(qū)域確定單元的處理的視圖。圖7是圖示了交叉衰落區(qū)域檢測(cè)處理的示例的流程圖。圖8是圖示了候選幀提取處理的示例的流程圖。圖9是圖示了幀確定處理的示例的流程圖。圖10是圖示了體育節(jié)目的內(nèi)容的重放場(chǎng)景的示例的視圖。圖11是圖示了戲劇系列節(jié)目(drama series)等的內(nèi)容的回顧場(chǎng)景的示例的視 圖。圖12是圖示了摘要生成處理的示例的流程圖。圖13是圖示了圖3所示的摘要生成單元的處理的視圖。圖14是圖示了個(gè)人計(jì)算機(jī)的配置的示例的框圖。
具體實(shí)施例方式下面，參考附圖來(lái)對(duì)本發(fā)明的示例性實(shí)施例進(jìn)行描述。圖1是圖示了根據(jù)本發(fā)明實(shí)施例的內(nèi)容處理設(shè)備的示例的視圖。將該圖所示的內(nèi) 容處理設(shè)備1配置為例如HDD (硬盤(pán)驅(qū)動(dòng)器)記錄器，所述HDD記錄器連接到配置為電視機(jī) 等的顯示器2。圖2是圖示了圖1所示的內(nèi)容處理設(shè)備1的配置的示例的框圖。將內(nèi)容處理設(shè)備1配置為例如根據(jù)由用戶(hù)所設(shè)置的記錄計(jì)劃來(lái)記錄TV廣播節(jié)目。 內(nèi)容處理設(shè)備1可以在具有大存儲(chǔ)容量的HDD 40中記錄大量的內(nèi)容。另外，內(nèi)容處理設(shè)備1包括用CPU(中央處理單元)31、R0M(只讀存儲(chǔ)器)32和 RAM(隨機(jī)存取存儲(chǔ)器)33構(gòu)成的控制單元30?？刂茊卧?0是控制內(nèi)容處理設(shè)備1的全部 操作的主控制器?？刂茊卧?0允許內(nèi)容處理設(shè)備1通過(guò)運(yùn)行軟件(例如，程序等)來(lái)執(zhí)行 預(yù)定的處理。用DSP (數(shù)字信號(hào)處理器)、通用GPU (圖形處理單元)等構(gòu)成圖形處理控制器43，以生成圖像數(shù)據(jù)。另外，圖形處理控制器34例如生成GUI (圖形用戶(hù)界面)圖像，用戶(hù)可以 通過(guò)所述⑶I圖像來(lái)輸入各種設(shè)置。輸入控制器35通過(guò)總線(xiàn)47來(lái)向CPU 31供應(yīng)與用戶(hù)操縱對(duì)應(yīng)的輸入信號(hào)(即，指 示用戶(hù)指令的輸入信號(hào)(操縱信息))，通過(guò)輸入單元36(例如，按鈕、開(kāi)關(guān)或鍵盤(pán)等)的用 戶(hù)操縱來(lái)獲得所述輸入信號(hào)。另外，輸入控制器35允許輸入單元36作為光接收單元來(lái)接 收從遙控器(未示出)傳送的、與用戶(hù)操縱對(duì)應(yīng)的紅外信號(hào)，并將所述紅外信號(hào)轉(zhuǎn)換為電信 號(hào)，并且向CPU 31供應(yīng)所述電信號(hào)。HDD I/F 39基于控制單元30的控制來(lái)控制HDD 40對(duì)于數(shù)據(jù)的訪(fǎng)問(wèn)。
HDD 40是可以存儲(chǔ)包括采用預(yù)定文件格式的節(jié)目或內(nèi)容的各種數(shù)據(jù)的隨機(jī)存取 存儲(chǔ)單元。HDD 40通過(guò)HDD I/F 39連接到總線(xiàn)47。如果從解碼器43供應(yīng)了諸如作為節(jié) 目的內(nèi)容和EPG數(shù)據(jù)的各種數(shù)據(jù)，則HDD 40記錄所述數(shù)據(jù)。如果存在用于讀取的請(qǐng)求，則 HDD 40輸出所記錄的數(shù)據(jù)。另外，控制單元30例如基于通過(guò)總線(xiàn)47從輸入控制器35供應(yīng)的輸入信號(hào)(操縱 信息)，控制HDD I/F 39、HDD 40、調(diào)諧器41、解調(diào)器42、解碼器43等，以運(yùn)行內(nèi)容記錄或重 放。另外，向調(diào)諧器41供應(yīng)通過(guò)天線(xiàn)(未示出)接收的廣播波。根據(jù)預(yù)定的格式來(lái)配 置所述廣播波，并且其例如包括EPG數(shù)據(jù)。廣播波可以是任何類(lèi)型的廣播波，即衛(wèi)星廣播波 或地面廣播波。另外，通過(guò)任意通信線(xiàn)(即，有線(xiàn)通信線(xiàn)或無(wú)線(xiàn)通信線(xiàn))來(lái)傳送所述廣播波。調(diào)諧器41例如基于控制單元30的控制來(lái)對(duì)預(yù)定信道的廣播波執(zhí)行調(diào)諧，即選擇 臺(tái)，并且向解調(diào)器42輸出所接收的數(shù)據(jù)。解調(diào)器42對(duì)數(shù)字調(diào)制的接收數(shù)據(jù)進(jìn)行解調(diào)，并且向解碼器43輸出所述數(shù)據(jù)。例如，在數(shù)字衛(wèi)星廣播的情況下，由調(diào)諧器41接收并由解調(diào)器42解調(diào)的數(shù)字?jǐn)?shù)據(jù) 是以下傳輸流，其中對(duì)以MPEG2 (運(yùn)動(dòng)圖像專(zhuān)家組2)方案壓縮的AV數(shù)據(jù)和用于數(shù)據(jù)廣播的 數(shù)據(jù)進(jìn)行多路復(fù)用。前者的AV數(shù)據(jù)是構(gòu)成廣播節(jié)目主體的圖像數(shù)據(jù)和聲音數(shù)據(jù)，而后者的 用于數(shù)據(jù)廣播的數(shù)據(jù)包括附加到廣播節(jié)目主體的數(shù)據(jù)(例如，EPG數(shù)據(jù))。解碼器43從自解調(diào)器42供應(yīng)的傳輸流中分離以MPEG2方案壓縮的AV數(shù)據(jù)和用 于數(shù)據(jù)廣播的數(shù)據(jù)(例如，EPG數(shù)據(jù))。通過(guò)總線(xiàn)47和HDD I/F 39來(lái)向HDD 40供應(yīng)所分 離的用于數(shù)據(jù)廣播的數(shù)據(jù)，以便將所述數(shù)據(jù)記錄在其中。在其中要查看所接收的節(jié)目(內(nèi)容)的情況下，解碼器43進(jìn)一步從AV數(shù)據(jù)中分 離所壓縮的圖像數(shù)據(jù)和所壓縮的聲音數(shù)據(jù)。將所分離的聲音數(shù)據(jù)解碼為PCM(脈沖編碼調(diào) 制)數(shù)據(jù)，并且其后通過(guò)混頻器45輸出到揚(yáng)聲器13。另外，對(duì)所分離的圖像數(shù)據(jù)進(jìn)行解碼， 并且其后通過(guò)編排器46供應(yīng)到顯示器2。另外，在其中指令將所接收的節(jié)目(內(nèi)容)記錄在HDD 40中的情況下，解碼器43 通過(guò)總線(xiàn)47和HDD I/F 39來(lái)向HDD 40輸出分離前的AV數(shù)據(jù)(包括多路復(fù)用的圖像數(shù)據(jù) 和聲音數(shù)據(jù)的AV數(shù)據(jù))。另外，在其中指令重放在HDD 40中記錄的節(jié)目的情況下，解碼器 43從通過(guò)總線(xiàn)47和HDD I/F 39而自HDD 40輸入的AV數(shù)據(jù)中分離所壓縮的圖像數(shù)據(jù)和所 壓縮的聲音數(shù)據(jù)。接下來(lái)，解碼器43對(duì)所壓縮的圖像數(shù)據(jù)和所壓縮的聲音數(shù)據(jù)進(jìn)行解碼， 并且向混頻器45和編排器46供應(yīng)所解碼的圖像數(shù)據(jù)和所解碼器的聲音數(shù)據(jù)。如果必要，則混頻器45組合從解碼器43供應(yīng)的聲音數(shù)據(jù)和在HDD 40中記錄的聲音數(shù)據(jù)，并且向顯示器2的揚(yáng)聲器等供應(yīng)所組合的聲音數(shù)據(jù)。如果必要，則編排器46組合從解碼器43供應(yīng)的圖像數(shù)據(jù)和從圖形處理控制器34供應(yīng)的圖像數(shù)據(jù)，并且向顯示器2供應(yīng)所組合的圖像數(shù)據(jù)。另外，可以將內(nèi)容處理設(shè)備1配置為連接到諸如因特網(wǎng)的網(wǎng)絡(luò)，使得記錄通過(guò)因 特網(wǎng)而傳送的內(nèi)容。另外，盡管描述了其中在HDD 40中記錄內(nèi)容的配置，但是也可以將內(nèi) 容記錄在安裝在驅(qū)動(dòng)器49上的可移除介質(zhì)50 (例如，DVD (數(shù)字多功能盤(pán)))中。內(nèi)容處理設(shè)備1配置為分析所記錄內(nèi)容的數(shù)據(jù)，并且檢測(cè)其中包括諸如回顧場(chǎng)景 和重放場(chǎng)景之類(lèi)的特定場(chǎng)景的區(qū)域。在這里，例如將回顧場(chǎng)景設(shè)置為在戲劇系列節(jié)目的開(kāi) 頭處包括的場(chǎng)景，以解釋先前片段的回顧。另外，可以將重放場(chǎng)景設(shè)置為其中例如在諸如職 業(yè)棒球比賽的直播的體育節(jié)目中重放非常優(yōu)秀動(dòng)作的場(chǎng)景。另外，內(nèi)容處理設(shè)備1可以通過(guò)從所記錄內(nèi)容的數(shù)據(jù)中搜索與所檢測(cè)區(qū)域中的場(chǎng) 景類(lèi)似的場(chǎng)景并組合搜索到的場(chǎng)景來(lái)生成摘要。在這里，由于配置摘要以使得僅從在內(nèi)容 中包括的場(chǎng)景中提取可能重要的場(chǎng)景并且重放有關(guān)的重要場(chǎng)景，所以可以在短時(shí)間中觀(guān)看 所述內(nèi)容的所有片段。圖3是圖示了由圖2所示的控制單元30所運(yùn)行的軟件的功能配置的示例的框圖。數(shù)據(jù)獲取單元101從HDD 40中讀取并獲取例如要從其中檢測(cè)包括特定場(chǎng)景的區(qū) 域的內(nèi)容數(shù)據(jù)、或要從其中生成摘要的內(nèi)容數(shù)據(jù)。如稍后所述，特定場(chǎng)景檢測(cè)單元102分析從數(shù)據(jù)獲取單元101供應(yīng)的內(nèi)容數(shù)據(jù)，以 便從其中指定了回顧場(chǎng)景、重放場(chǎng)景等的特征區(qū)域中檢測(cè)稍后所述的交叉衰落區(qū)域。摘要生成單元103基于由特定場(chǎng)景檢測(cè)單元102所檢測(cè)到的交叉衰落區(qū)域來(lái)指定 回顧場(chǎng)景、重放場(chǎng)景等。另外，摘要生成單元103例如從自數(shù)據(jù)獲取單元101供應(yīng)的內(nèi)容數(shù) 據(jù)中搜索與在回顧場(chǎng)景中包括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景。接下來(lái)，摘要生成單元103通過(guò)組 合所搜索到的場(chǎng)景來(lái)生成摘要。圖4是圖示了圖3所示的特定場(chǎng)景檢測(cè)單元102的詳細(xì)配置的示例的框圖。特定 場(chǎng)景檢測(cè)單元102檢測(cè)交叉衰落，以便指定回顧場(chǎng)景、重放場(chǎng)景等。在這里，交叉衰落包括 構(gòu)成例如以下部分的多個(gè)幀，在所述部分中逐漸地改變預(yù)定場(chǎng)景的最終圖像并且利用下一 場(chǎng)景的圖像來(lái)取代所述最終圖像。在大多數(shù)常規(guī)內(nèi)容中，由于在回顧場(chǎng)景和重放場(chǎng)景前后 插入交叉衰落，所以特定場(chǎng)景檢測(cè)單元102可以通過(guò)檢測(cè)交叉衰落來(lái)指定回顧場(chǎng)景、重放 場(chǎng)景等。圖4所示的特征量計(jì)算單元121計(jì)算預(yù)定幀的圖像的特征量。例如，特征量計(jì)算 單元121計(jì)算像素的亮度值的直方圖作為像素的特征量。特征量計(jì)算單元121將要處理的 幀設(shè)置為當(dāng)前幀，并且提取在要處理幀之前η個(gè)幀的過(guò)去幀，以計(jì)算所述過(guò)去幀的像素的 亮度值的直方圖。接下來(lái)，特征量計(jì)算單元121計(jì)算當(dāng)前幀的直方圖元素與過(guò)去幀的直方 圖元素之間差值的絕對(duì)值之和，并且確定所獲得的絕對(duì)值之和的值是否等于或大于預(yù)定的 閾值。如果差值的絕對(duì)值之和等于或大于預(yù)定的閾值，則特征量計(jì)算單元121對(duì)于所述幀 執(zhí)行單調(diào)改變像素檢測(cè)單元122的處理和活度(activity)計(jì)算單元123的處理。換言之，在其中針對(duì)過(guò)去幀的圖像的改變度小的情況下(例如，在其中直方圖元 素之間差值的絕對(duì)值之和小的情況下)，所述幀不可能是交叉衰落的幀。因此，特征量計(jì)算 單元121僅選擇具有針對(duì)過(guò)去幀的高圖像改變度的幀。
單調(diào)改變像素檢測(cè)單元122確定構(gòu)成所指定的(所選擇的)幀的每個(gè)像素是否是 單調(diào)改變的像素。單調(diào)改變像素檢測(cè)單元122提取時(shí)間上在當(dāng)前幀(其是指定幀)之前重 放的過(guò)去幀和時(shí)間上在當(dāng)前幀之后重放的將來(lái)幀。在這里，可以將過(guò)去幀和將來(lái)幀中的每 一個(gè)與當(dāng)前幀分離預(yù)定數(shù)目的幀。另外，過(guò)去幀和將來(lái)幀中的每一個(gè)可以是當(dāng)前幀的連續(xù) 幀。單調(diào)改變像素檢測(cè)單元122提取過(guò)去幀、當(dāng)前幀和將來(lái)幀的每一幀中相同坐標(biāo)位 置處的一個(gè)像素，并且比較過(guò)去幀的像素值vl、當(dāng)前幀的像素值v2和將來(lái)幀的像素值v3。例如，如圖5所示，將在作為運(yùn)動(dòng)圖像的內(nèi)容中包括的多個(gè)幀之中的第η幀201設(shè)置為作為要處理幀的當(dāng)前幀。因此，將第(η-1)幀202設(shè)置為過(guò)去幀，并且將第(η+1)幀設(shè) 置為將來(lái)幀203。例如，將當(dāng)前幀201中的坐標(biāo)位置(x，y)處的像素設(shè)置為關(guān)注的像素，并 且從幀202和幀203中提取與所述像素相同坐標(biāo)位置處的像素。將幀201中關(guān)注像素的 值設(shè)置為v2 ；將幀202中坐標(biāo)位置(x，y)處像素的值設(shè)置為vl ；并且將幀203中坐標(biāo)位置 (x，y)處像素的值設(shè)置為v3。如上所述，單調(diào)改變像素檢測(cè)單元122確定關(guān)注的像素是否是單調(diào)改變的像 素。在這里，作為用于確定關(guān)注的像素是否是單調(diào)改變像素的函數(shù)，如下地定義函數(shù) mono (單)，所述函數(shù)mono具有關(guān)注的像素、與關(guān)注像素對(duì)應(yīng)的過(guò)去幀的像素、和與關(guān)注像 素對(duì)應(yīng)的將來(lái)幀的像素的值作為變量。在其中前述像素的值Vl到v3滿(mǎn)足等式⑴或(2)的情況下，通過(guò)等式(3)來(lái)表 達(dá)函數(shù)mono ο[等式1](vl < v2 < v3、v2~vl < ΤΗ、和 v3_v2 < ΤΗ). . . (1)[等式2](ν3 < v2 < vl, v2-v3 < THjP vl_v2 < TH). . . (2)[等式3]mono (vl, v2, v3) = 1. . . (3)在其中前述像素的值vl到v3不滿(mǎn)足等式⑴或(2)的情況下，通過(guò)等式⑷來(lái) 表達(dá)■數(shù)mono ο[等式4]mono (vl, v2, v3) = 0· · · (4)另外，等式⑴和⑵中的TH表示預(yù)定的閾值。換言之，在其中改變關(guān)注像素和與關(guān)注像素對(duì)應(yīng)的像素的值、以便從過(guò)去向?qū)?lái) 逐漸增加所述值并且所述值的改變大于閾值的情況下，像素的值vl到v3滿(mǎn)足等式(1)。另 夕卜，在其中改變關(guān)注像素和與關(guān)注像素對(duì)應(yīng)的像素的值、以便從過(guò)去向?qū)?lái)逐漸降低所述 值并且所述值的改變大于閾值的情況下，像素的值vl到v3滿(mǎn)足等式(2)。在這些情況下， 將關(guān)注的像素確定為單調(diào)改變的像素，并且所述函數(shù)mono的計(jì)算結(jié)果變?yōu)?。另一方面，不 將沒(méi)有滿(mǎn)足所述條件的關(guān)注像素確定為單調(diào)改變的像素，并且函數(shù)mono的計(jì)算結(jié)果變?yōu)?O0單調(diào)改變像素檢測(cè)單元122針對(duì)在幀201中包括的所有像素如上所述地確定每個(gè) 像素是否是單調(diào)改變的像素，并且計(jì)算在幀201中包括的單調(diào)改變像素與所有像素的占有比?？梢酝ㄟ^(guò)等式(5)來(lái)計(jì)算第η幀中單調(diào)改變像素的比率dissn。[等式5]
<formula>formula see original document page 10</formula>
…(5)另外，在等式(5)中，W表示幀中圖像的水平方向中的像素的數(shù)目，而H表示幀中圖 像的垂直方向中的像素的數(shù)目。另外，在等式(5)中，fn(x，y)表示第η幀中坐標(biāo)位置(X， y)處的像素的值。類(lèi)似地，f^ky)表示第(n-1)幀中坐標(biāo)位置(x，y)處的像素的值，而 fn+1(x, y)表示第(n+1)幀中坐標(biāo)位置(x, y)處的像素的值。返回到圖4，活度計(jì)算單元123計(jì)算活度，所述活度指示由特征量計(jì)算單元121所 指定的(所選擇的)幀中像素值的變化度。可以通過(guò)等式(6)和(7)來(lái)計(jì)算第η幀的活度
ac tn。
[等式6]<formula>formula see original document page 10</formula>…(6)[等式7]<formula>formula see original document page 10</formula>... (7)類(lèi)似地，活度計(jì)算單元123還如下地計(jì)算第(n-1)幀的活度acty、以及第η幀的 活度actn與第(n-1)幀的活度acty之間的比率。在其中活度actn和活度acty滿(mǎn)足等式(8)的關(guān)系的情況下，通過(guò)等式(9)來(lái)表 達(dá)第η幀的活度actn與第(n-1)幀的活度^ictlri之間的比率act_rn。[等式8]<formula>formula see original document page 10</formula> . . . (8)[等式9]<formula>formula see original document page 10</formula>. . . (9)另一方面，在其中活度actn和活度acty不滿(mǎn)足等式(8)的關(guān)系的情況下，通過(guò)等 式(10)來(lái)表達(dá)第η幀的活度actn與第(n-1)幀的活度^ictlri之間的比率act_rn。[等式10]<formula>formula see original document page 10</formula> . . . (10)以此方式，單調(diào)改變像素檢測(cè)單元122計(jì)算由特征量計(jì)算單元121所指定的幀中 單調(diào)改變像素與所有像素的比率。另外，活度計(jì)算單元123計(jì)算由特征量計(jì)算單元121所 指定的幀與所指定幀之前的幀之間的活度比率。交叉衰落確定單元124基于由單調(diào)改變像素檢測(cè)單元122所計(jì)算的單調(diào)改變像素 的比率和由活度計(jì)算單元123所計(jì)算的活度比率，確定相關(guān)聯(lián)的幀是否是交叉衰落的幀。 交叉衰落確定單元124通過(guò)使用等式(11)來(lái)計(jì)算用于確定相關(guān)聯(lián)的幀是否是交叉衰落幀 的變量FADE (衰落)的值。
[等式11]FADE = dissn+|act_rn-l | XACT_C. · · (11)另外，等式(11)，將ACT_C設(shè)置為整數(shù)。如果變量FADE的值大于預(yù)定的閾值，則交叉衰落確定單元124確定相關(guān)聯(lián)的幀是 候選的交叉衰落幀。另外，如果變量FADE的值等于或小于預(yù)定的閾值，則交叉衰落確定單 元124確定相關(guān)聯(lián)的幀不是候選的交叉衰落幀。通過(guò)以上處理，例如從一組內(nèi)容的所有幀中檢測(cè)要作為候選的交叉衰落幀的幀。 例如，如圖6所示，在由箭頭所指示的位置處從內(nèi)容的幀中檢測(cè)候選的交叉衰落幀。在圖 6的示例中，由箭頭221到228來(lái)指示內(nèi)容的運(yùn)動(dòng)圖像中的時(shí)間位置，并且在由箭頭221到 228所指示的位置處檢測(cè)要作為候選的交叉衰落幀的幀。返回到圖4，區(qū)域確定單元125檢測(cè)被交叉衰落確定單元124確定為候選幀的幀， 并且對(duì)連續(xù)的候選幀的數(shù)目進(jìn)行計(jì)數(shù)。接下來(lái)，如果連續(xù)候選幀的數(shù)目等于或大于預(yù)定的 閾值，則區(qū)域確定單元125計(jì)算所述連續(xù)幀中最初幀與最終幀的圖像之間特征量的差值。 區(qū)域確定單元125例如計(jì)算像素的亮度值的直方圖作為所述圖像的特征量，并且計(jì)算最初 幀直方圖與最終幀直方圖的元素之間差值的絕對(duì)值之和。接下來(lái)，如果最初幀直方圖與最 終幀直方圖的元素之間差值的絕對(duì)值之和等于或大于預(yù)定的閾值，則區(qū)域確定單元125將 用所述連續(xù)候選幀而構(gòu)成的區(qū)域確定為交叉衰落區(qū)域。例如，將前述閾值設(shè)置為5，并且參考圖6來(lái)描述區(qū)域確定單元125的確定處理。 盡管在由箭頭221所指示的位置處檢測(cè)到候選幀，但是由于存在連續(xù)的候選幀，所以區(qū)域 確定單元125確定所述區(qū)域不是交叉衰落區(qū)域。另外，盡管在由箭頭222和223所指示的 位置處檢測(cè)候選幀，但是由于存在兩個(gè)連續(xù)的候選幀，所以區(qū)域確定單元125確定所述區(qū) 域也不是交叉衰落區(qū)域。另外，區(qū)域確定單元125在由箭頭224到228所指示的位置處檢 測(cè)候選幀。例如，在其中由箭頭224所指示的位置處的幀是第ρ幀的情況下，由箭頭225所
指示的位置處的幀是第(P+1)幀；由箭頭226所指示的位置處的幀是第(p+2)幀；......；
由箭頭228所指示的位置處的幀是第(p+4)幀。換言之，由箭頭224到228所指示的位置 處的候選幀是五個(gè)連續(xù)幀。在此情況下，由于存在五個(gè)連續(xù)幀，所以計(jì)算由箭頭224所指示位置處的幀與由 箭頭228所指示位置處的幀之間的特征量的差值(例如，直方圖之間差值的絕對(duì)值之和)。 接下來(lái)，如果特征量的差值等于或大于閾值，則將利用由箭頭224所指示位置處的幀到由 箭頭228所指示位置處的幀而構(gòu)成的區(qū)域確定為交叉衰落區(qū)域。以此方式，指定了交叉衰落區(qū)域。接下來(lái)，參考圖7到9的流程圖來(lái)描述由特定場(chǎng)景檢測(cè)單元102所執(zhí)行的交叉衰 落區(qū)域檢測(cè)處理的示例。在步驟S21中，特定場(chǎng)景檢測(cè)單元102指定其中要檢測(cè)交叉衰落區(qū)域的要處理數(shù) 據(jù)。例如，將一組內(nèi)容的數(shù)據(jù)、或一組內(nèi)容的數(shù)據(jù)之中由用戶(hù)所指定區(qū)域中的數(shù)據(jù)指定為要 搜索的數(shù)據(jù)。在步驟S22中，特定場(chǎng)景檢測(cè)單元102對(duì)于在步驟S21中指定的要處理數(shù)據(jù)運(yùn)行 候選幀提取處理，稍后參考圖8來(lái)描述所述候選幀提取處理。在這里，參考圖8的流程圖來(lái) 描述圖7的步驟S22的候選幀提取處理的詳細(xì)示例。
在圖8所示的步驟S41中，圖4所示的特征量計(jì)算單元121將要處理的幀設(shè)置為 當(dāng)前幀，并且例如提取在所述要處理幀之前η個(gè)幀的過(guò)去幀。在步驟S42中，特征量計(jì)算單元121計(jì)算當(dāng)前幀和過(guò)去幀中像素的亮度值的直方 圖。接下來(lái)，特征量計(jì)算單元121例如計(jì)算當(dāng)前幀直方圖與過(guò)去幀直方圖的元素之間差值 的絕對(duì)值之和 作為當(dāng)前幀與過(guò)去幀之間的差值。在步驟S43中，特征量計(jì)算單元121確定在步驟S42的處理中獲得的差值是否等 于或大于預(yù)定的閾值。如果所述差值等于或大于預(yù)定的閾值，則該過(guò)程前進(jìn)到步驟S44。另 一方面，如果所述差值小于所述閾值，則跳過(guò)步驟S44的處理。在步驟S44中，單調(diào)改變像素檢測(cè)單元122、活度計(jì)算單元123和交叉衰落確定單 元124運(yùn)行稍后參考圖9來(lái)描述的幀確定處理。在這里，參考圖9的流程圖來(lái)描述圖8的 步驟S44的幀確定處理的詳細(xì)示例。在步驟S61中，單調(diào)改變像素檢測(cè)單元122計(jì)算要處理的幀中單調(diào)改變像素與所 有像素的占有比。此時(shí)，如上所述，通過(guò)使用等式(1)到(4)來(lái)確定幀中的每個(gè)像素是否是單調(diào)改變 的像素。接下來(lái)，通過(guò)使用等式(5)，計(jì)算幀中單調(diào)改變像素的比率。在步驟S62中，計(jì)算要處理幀與要處理幀之前的幀之間的活度比率。此時(shí)，如上所述，通過(guò)等式(6)和(7)來(lái)計(jì)算代表幀中像素值的變化度的活度。另 夕卜，通過(guò)等式(8)到(10)來(lái)計(jì)算要處理幀的活度與要處理幀之前的幀的活度之間的比率。在步驟S63中，交叉衰落確定單元124基于通過(guò)步驟S61的處理而計(jì)算的單調(diào)改 變像素的比率和通過(guò)步驟S62的處理而計(jì)算的活度比率，來(lái)計(jì)算變量FADE。如上所述，通過(guò) 等式(11)來(lái)計(jì)算設(shè)置為用于確定相關(guān)聯(lián)的幀是否是交叉衰落幀的變量的變量FADE。在步驟S64中，交叉衰落確定單元124確定在步驟S63中計(jì)算的變量FADE的值是 否大于預(yù)定的閾值。在步驟S64中，如果確定了變量FADE的值大于預(yù)定的閾值，則該過(guò)程前進(jìn)到步驟 S65，其中交叉衰落確定單元124將要處理的幀設(shè)置為候選幀。另一方面，如果在步驟S64中變量FADE的值等于或小于預(yù)定的閾值，則跳過(guò)步驟 S65的處理。以此方式，運(yùn)行了幀確定處理，使得確定了相關(guān)聯(lián)的幀是否是用于交叉衰落的候 選幀。返回到圖8，在步驟S44的處理之后，該過(guò)程前進(jìn)到步驟S45，其中確定是否針對(duì)所 有幀運(yùn)行了步驟S41到步驟S44的處理。如果確定了沒(méi)有運(yùn)行針對(duì)所有幀的處理，則該過(guò) 程前進(jìn)到S46，其中將下一幀設(shè)置為當(dāng)前幀，并且重復(fù)地運(yùn)行步驟S41到步驟S45的處理。在步驟S46中，如果確定對(duì)于所有幀執(zhí)行了該處理，則結(jié)束該候選幀提取處理。因 此，確定了在步驟S21中指定的要處理數(shù)據(jù)中包括的所有幀是否是候選幀。返回到圖7，在步驟S22的處理之后，該過(guò)程前進(jìn)到步驟S23。在步驟S23中，區(qū)域確定單元125檢測(cè)由步驟S22的處理確定為候選幀的幀，并且 對(duì)連續(xù)的候選幀的數(shù)目進(jìn)行計(jì)數(shù)。在步驟S24中，區(qū)域確定單元125確定連續(xù)候選幀的數(shù)目是否等于或大于預(yù)定的 閾值。如果在步驟S24中將連續(xù)候選幀的數(shù)目確定為等于或大于預(yù)定的閾值，則該過(guò)程前進(jìn)到步驟S25。在步驟S25中，區(qū)域確定單元125計(jì)算所述連續(xù)幀之中最初幀與最終幀的圖像之 間特征量的差值。在這里，區(qū)域確定單元125例如計(jì)算像素的亮度值的直方圖作為所述圖 像的特征量，并且計(jì)算最初幀直方圖與最終幀直方圖的元素之間差值的絕對(duì)值之和。 在步驟S26中，區(qū)域確定單元125確定在步驟S25中獲得的差值是否等于或大于 閾值。如果在步驟S26中確定所述差值為等于或大于所述閾值，則該過(guò)程前進(jìn)到步驟S27。在步驟S27中，區(qū)域確定單元125確定用所述連續(xù)候選幀構(gòu)成的區(qū)域?yàn)榻徊嫠ヂ?區(qū)域。此時(shí)，例如，如上面參考圖6描述的，確定區(qū)域是否是交叉衰落區(qū)域。另一方面，如果在步驟S26中由步驟S25的處理所獲得的差值小于所述閾值，則跳 過(guò)步驟S27的處理。另外，如果在步驟S24中確定連續(xù)候選幀的數(shù)目為不等于或大于預(yù)定 的閾值，則跳過(guò)步驟S25到步驟S27的處理。在步驟S27的處理之后，如果在步驟S26中確定所述差值為等于或大于所述閾值， 或如果確定連續(xù)幀的數(shù)目為不等于或大于所述閾值，則該過(guò)程前進(jìn)到步驟S28。在步驟S28中，確定下一幀是否存在。如果確定了下一幀存在，則該過(guò)程返回到步 驟S23，并且重復(fù)地運(yùn)行其接下來(lái)的處理。另一方面，如果在步驟S28中確定下一幀不存在， 則結(jié)束該過(guò)程。以此方式，運(yùn)行了交叉衰落區(qū)域檢測(cè)處理。因此，可以簡(jiǎn)單地檢測(cè)作為用于指定在 內(nèi)容中具有重要意義的場(chǎng)景的區(qū)域的交叉衰落區(qū)域。作為指定內(nèi)容中的交叉衰落區(qū)域的示例，可以指定體育節(jié)目?jī)?nèi)容中的重放場(chǎng)景、 戲劇系列節(jié)目?jī)?nèi)容中的回顧場(chǎng)景等。圖10是圖示了體育節(jié)目的內(nèi)容的重放場(chǎng)景的示例的視圖。在該圖中，水平軸表示 時(shí)間，并且在該圖中由“Cf”標(biāo)記的部分表示交叉衰落區(qū)域。如該圖所示，在許多情況下，重 放場(chǎng)景是在交叉衰落區(qū)域之間插入的場(chǎng)景。在其中圖10所示的內(nèi)容例如是職業(yè)棒球比賽直播節(jié)目的內(nèi)容的情況下，將重放 場(chǎng)景設(shè)置為其中重放非常優(yōu)秀動(dòng)作的場(chǎng)景，而將其他場(chǎng)景設(shè)置為常規(guī)場(chǎng)景。圖11是圖示了戲劇系列節(jié)目等的內(nèi)容的回顧場(chǎng)景的示例的視圖。在該圖中，水平 軸表示時(shí)間，并且在該圖中由“Cf”標(biāo)記的部分表示交叉衰落區(qū)域。如該圖所示，利用在交 叉衰落區(qū)域之間插入的區(qū)域A到D來(lái)構(gòu)建回顧場(chǎng)景。以此方式，回顧場(chǎng)景包括其中多個(gè)交 叉衰落區(qū)域在短時(shí)間中重復(fù)地出現(xiàn)的內(nèi)容中的許多部分。在其中圖11所示的內(nèi)容例如是戲劇系列節(jié)目的第二片段的內(nèi)容的情況下，將場(chǎng) 景A到D設(shè)置為在戲劇系列節(jié)目的先前片段(第一片段)中包括的場(chǎng)景，而將其他場(chǎng)景設(shè)
置為常規(guī)場(chǎng)景。在本發(fā)明中，當(dāng)生成摘要時(shí)，例如將圖11所示的回顧場(chǎng)景配置為被檢測(cè)。接下來(lái)， 通過(guò)從所記錄的內(nèi)容數(shù)據(jù)中搜索與在回顧場(chǎng)景中包括的場(chǎng)景(例如，圖11所示的場(chǎng)景A到 D)類(lèi)似的場(chǎng)景、并且組合所搜索到的場(chǎng)景，生成摘要。由圖3所示的摘要生成單元103來(lái)執(zhí) 行摘要的生成。摘要生成單元103例如如下地指定內(nèi)容中的回顧場(chǎng)景。由于通過(guò)運(yùn)行參考圖7描 述的特定場(chǎng)景檢測(cè)單元102的處理來(lái)指定內(nèi)容中的交叉衰落區(qū)域，所以摘要生成單元103基于特定場(chǎng)景檢測(cè)單元102的處理結(jié)果來(lái)檢測(cè)交叉衰落區(qū)域。接下來(lái)，如果交叉衰落區(qū)域等于或大于作為預(yù)定間隔的預(yù)定閾值，則摘要生成單元103將在交叉衰落區(qū)域中包括的部 分指定為回顧場(chǎng)景。例如，在圖11的情況下，摘要生成單元103計(jì)算交叉衰落區(qū)域241與交叉衰落區(qū) 域242之間的距離(例如，時(shí)間距離)。例如，通過(guò)對(duì)在交叉衰落區(qū)域241的最終幀與交叉 衰落區(qū)域242的最初幀之間存在的幀的數(shù)目進(jìn)行計(jì)數(shù)，獲得交叉衰落區(qū)域241與交叉衰落 區(qū)域242之間的距離。如果交叉衰落區(qū)域241與交叉衰落區(qū)域242之間的距離小于預(yù)定的 閾值，則對(duì)于交叉衰落區(qū)域242與交叉衰落區(qū)域243之間的距離類(lèi)似地獲得距離。另外，如 果交叉衰落區(qū)域242與交叉衰落區(qū)域243之間的距離小于預(yù)定的閾值，則對(duì)于交叉衰落區(qū) 域243與交叉衰落區(qū)域244之間的距離類(lèi)似地獲得距離。以此方式，摘要生成單元103對(duì)其距離小于所述閾值的連續(xù)交叉衰落區(qū)域的數(shù)目 進(jìn)行計(jì)數(shù)。在圖11的示例中，將相鄰交叉衰落區(qū)域上241到245之間的所有距離設(shè)置為小 于所述閾值。在此情況下，檢測(cè)到其距離小于所述閾值的五個(gè)連續(xù)交叉衰落區(qū)域。例如，在圖11的示例中，在其中將用于確定場(chǎng)景是否是回顧場(chǎng)景的閾值設(shè)置為3 的情況下，由于存在其距離小于所述閾值的五個(gè)連續(xù)交叉衰落區(qū)域，所以摘要生成單元103 將包括所述交叉衰落區(qū)域的部分指定為回顧場(chǎng)景。換言之，將從交叉衰落區(qū)域241的最初 幀到交叉衰落區(qū)域245的最終幀的部分指定為內(nèi)容的回顧場(chǎng)景。如果指定回顧場(chǎng)景，則摘要生成單元103例如指定在圖11所示的回顧場(chǎng)景中包括 的場(chǎng)景A到D。換言之，在指定為回顧場(chǎng)景的部分中，將用在所檢測(cè)交叉衰落區(qū)域之間插入 的幀構(gòu)成的部分指定為在回顧場(chǎng)景中包括的場(chǎng)景。摘要生成單元103在從數(shù)據(jù)獲取單元101供應(yīng)的數(shù)據(jù)之中搜索與場(chǎng)景A到D類(lèi) 似的場(chǎng)景。例如，通過(guò)使用在由 Yashugi Yukinobu, Babaguchi Noboru、和 Kitahashi Tadahiro IH 寫(xiě)白勺文章(〃 Detection of Identical Events from SportsVideo by Comparing Camera Works, " Proceedings of The Institute of Electronics, Information and Communication Engineers, Vol.2001, Information System 2pp. 359-360)中公開(kāi)的方法，執(zhí)行對(duì)于類(lèi)似場(chǎng)景的搜索?？商鎿Q地，可以通過(guò)計(jì)算在場(chǎng)景中 包括的幀的圖像之間的特征量的差值來(lái)獲得場(chǎng)景的相似度，并且可以基于相似度來(lái)搜索與 場(chǎng)景A到D類(lèi)似的場(chǎng)景。例如，在其中圖11所示的回顧場(chǎng)景是戲劇系列節(jié)目的第k廣播的內(nèi)容的情況下， 數(shù)據(jù)獲取單元101向摘要生成單元103供應(yīng)戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容數(shù)據(jù)。另 夕卜，用戶(hù)可以指定從數(shù)據(jù)獲取單元101向摘要生成單元103供應(yīng)的數(shù)據(jù)。接下來(lái)，摘要生成 單元103生成戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容的摘要。換言之，摘要生成單元103在戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容之中搜索與對(duì) 應(yīng)場(chǎng)景A到D類(lèi)似的場(chǎng)景W到Z。接下來(lái)，摘要生成單元103從戲劇系列節(jié)目的第(k-Ι)廣 播的內(nèi)容中提取場(chǎng)景W的幀，例如在場(chǎng)景W的最初幀之前的300個(gè)時(shí)間上連續(xù)的幀和跟隨 在場(chǎng)景W的最終幀以后的300個(gè)時(shí)間上連續(xù)的幀。另外，摘要生成單元103生成用如上所 述地提取的幀而構(gòu)成的摘要數(shù)據(jù)1。類(lèi)似地，摘要生成單元103從戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容中提取場(chǎng)景X 的幀，例如在場(chǎng)景X的最初幀之前的300個(gè)時(shí)間上連續(xù)的幀和跟隨在場(chǎng)景X的最終幀以后的300個(gè)時(shí)間上連續(xù)的幀。因此，生成摘要數(shù)據(jù)2。還對(duì)于場(chǎng)景Y和場(chǎng)景Z執(zhí)行相同的處理，使得生成摘要數(shù)據(jù)3和摘要數(shù)據(jù)4。將摘要生成單元103 配置為通過(guò)組合摘要數(shù)據(jù)1到4來(lái)生成摘要。換言之，通過(guò) 連續(xù)地重放摘要數(shù)據(jù)1到4，生成戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容的摘要。接下來(lái)，參考圖12的流程圖來(lái)描述由摘要生成單元103所執(zhí)行的摘要生成處理的 示例。在步驟S85中，摘要生成單元103基于參考圖7的流程圖描述的交叉衰落區(qū)域檢 測(cè)處理的結(jié)果，指定作為交叉衰落區(qū)域檢測(cè)處理對(duì)象的內(nèi)容的回顧場(chǎng)景。此時(shí)，摘要生成單 元103例如基于交叉衰落區(qū)域檢測(cè)處理的結(jié)果，檢測(cè)內(nèi)容中的交叉衰落區(qū)域。接下來(lái)，如果 交叉衰落區(qū)域等于或大于作為預(yù)定間隔的預(yù)定閾值，則摘要生成單元103將在交叉衰落區(qū) 域中包括的部分指定為回顧場(chǎng)景。在步驟S86中，摘要生成單元103在步驟S85中指定的回顧場(chǎng)景中提取在交叉衰 落區(qū)域之間插入的場(chǎng)景。此時(shí)，例如提取圖11所示的場(chǎng)景A到D。在步驟S87中，摘要生成單元103指定要處理的區(qū)域，用于搜索與由步驟S86的處 理所提取的場(chǎng)景類(lèi)似的場(chǎng)景。另外，在所述指定之前，從數(shù)據(jù)獲取單元101向摘要生成單元 103供應(yīng)要搜索的數(shù)據(jù)。例如，在其中在戲劇系列節(jié)目的第k廣播的內(nèi)容中包括圖11所示 的回顧場(chǎng)景的情況下，數(shù)據(jù)獲取單元101供應(yīng)戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容的數(shù)據(jù)。 盡管在該實(shí)施例中可以將戲劇系列節(jié)目的第k廣播的內(nèi)容數(shù)據(jù)設(shè)置為要搜索的數(shù)據(jù)，但是 描述了其中將戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容數(shù)據(jù)設(shè)置為要搜索的數(shù)據(jù)的示例。在步驟S87的處理中，在戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容數(shù)據(jù)之中指定實(shí)際 上要檢測(cè)的時(shí)間區(qū)域。另外，例如，在步驟S87中，在其中搜索與圖11所示的場(chǎng)景A類(lèi)似的 場(chǎng)景的情況下，將戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi)容數(shù)據(jù)中從最初幀到最終幀的區(qū)域指 定為要處理的區(qū)域。在步驟S88中，摘要生成單元103在戲劇系列節(jié)目的第(k_l)廣播的內(nèi)容之中搜 索與所述場(chǎng)景(例如，場(chǎng)景A)具有高相似性的場(chǎng)景。另外，在步驟S88中，從由步驟S87的 處理所指定的要處理區(qū)域中搜索具有高相似性的場(chǎng)景。在步驟S89中，摘要生成單元103提取由步驟S88的處理所搜索到的場(chǎng)景的幀和 在所述場(chǎng)景之前或跟隨在所述場(chǎng)景以后的預(yù)定數(shù)目的幀作為摘要數(shù)據(jù)。另外，生成摘要數(shù) 據(jù)，使得不包括在所述場(chǎng)景之前或跟隨在所述場(chǎng)景以后的預(yù)定數(shù)目的幀?？商鎿Q地，可以生 成摘要數(shù)據(jù)，使得包括由步驟S88的處理所搜索到的場(chǎng)景的幀和在所述場(chǎng)景之前的預(yù)定數(shù) 目的幀，或者使得包括由步驟S88的處理所搜索到的場(chǎng)景的幀和跟隨在所述場(chǎng)景以后的預(yù) 定數(shù)目的幀。在步驟S90中，摘要生成單元103確定是否搜索到所有場(chǎng)景。在此情況下，由于沒(méi) 有搜索到與場(chǎng)景B到D類(lèi)似的場(chǎng)景，所以確定了沒(méi)有搜索到所有場(chǎng)景，并且該過(guò)程返回到步 驟 S86。其后，在步驟S86的處理中，提取圖11所示的場(chǎng)景B。接下來(lái)，在步驟S87的處理 中，重新指定用于搜索與場(chǎng)景B類(lèi)似的場(chǎng)景的要處理區(qū)域。例如，如圖13所示，用從時(shí)間點(diǎn)t0到時(shí)間點(diǎn)tn存在的連續(xù)幀構(gòu)成戲劇系列節(jié)目 的第(k-Ι)廣播的內(nèi)容。在其中由步驟S86的第一運(yùn)行中的處理來(lái)提取場(chǎng)景A的情況下，將在步驟S87中指定的要處理區(qū)域設(shè)置為從時(shí)間點(diǎn)tO到時(shí)間點(diǎn)tn的區(qū)域。接下來(lái)，在步 驟S88中，搜索用從時(shí)間點(diǎn)t2到時(shí)間點(diǎn)t3的區(qū)域中的幀構(gòu)成的場(chǎng)景W，作為與場(chǎng)景A類(lèi)似 的場(chǎng)景。在步驟S89中，提取從時(shí)間點(diǎn)tl到時(shí)間點(diǎn)t2的區(qū)域中的幀，作為在所述場(chǎng)景W之 前的預(yù)定數(shù)目的幀，并且提取從時(shí)間點(diǎn)t3到時(shí)間點(diǎn)t4的區(qū)域中的幀，作為跟隨在所述場(chǎng)景 W以后的預(yù)定數(shù)目的幀。接下來(lái)，生成摘要數(shù)據(jù)1以用從時(shí)間點(diǎn)tl到時(shí)間點(diǎn)t4的區(qū)域中的 幀構(gòu)成。在其中由步驟S86的第二運(yùn)行中的處理來(lái)提取場(chǎng)景B的情況下，將在步驟S87中指定的要處理區(qū)域設(shè)置為從時(shí)間點(diǎn)t3到時(shí)間點(diǎn)tn的區(qū)域。換言之，認(rèn)為在戲劇系列節(jié)目 的第k廣播的內(nèi)容的回顧場(chǎng)景中包括的場(chǎng)景A到D是在戲劇系列節(jié)目的第(k-Ι)廣播的內(nèi) 容中順序出現(xiàn)的場(chǎng)景。因此，由于與場(chǎng)景B類(lèi)似的場(chǎng)景X時(shí)間上在與場(chǎng)景A類(lèi)似的場(chǎng)景W 之后出現(xiàn)，所以將通過(guò)步驟S87的第二運(yùn)行來(lái)指定的要處理區(qū)域設(shè)置為從時(shí)間點(diǎn)t3到時(shí)間 點(diǎn)tn的區(qū)域。在步驟S88的第二運(yùn)行的處理中，搜索用從時(shí)間點(diǎn)t6到時(shí)間點(diǎn)t7的幀構(gòu)成的場(chǎng) 景X為與場(chǎng)景B類(lèi)似的場(chǎng)景。接下來(lái)，在步驟S89的第二運(yùn)行的處理中，提取場(chǎng)景X之前的 預(yù)定數(shù)目的幀和場(chǎng)景X之后的預(yù)定數(shù)目的幀、連同在場(chǎng)景X中包括的幀，并且生成用從時(shí)間 點(diǎn)t5到時(shí)間點(diǎn)t8的區(qū)域中的幀構(gòu)成的摘要數(shù)據(jù)2。另外，在接下來(lái)的步驟S86的第三運(yùn)行的處理中，提取場(chǎng)景C。在步驟S87的處理 中，將從時(shí)間點(diǎn)t7到時(shí)間點(diǎn)tn的區(qū)域設(shè)置為要處理的區(qū)域。以此方式，搜索與對(duì)應(yīng)的場(chǎng)景A到D類(lèi)似的場(chǎng)景W到Z，并且生成了摘要數(shù)據(jù)1到4。另外，可以?xún)H提取場(chǎng)景W到Z，以便生成摘要數(shù)據(jù)1到4。例如，在生成摘要數(shù)據(jù)1 的情況下，提取從時(shí)間點(diǎn)t2到時(shí)間點(diǎn)t3的區(qū)域中的幀，使得不包括場(chǎng)景W之前的預(yù)定數(shù)目 的幀和場(chǎng)景W之后的預(yù)定數(shù)目的幀，并且可以通過(guò)僅使用所述幀來(lái)生成摘要數(shù)據(jù)1。然而， 在其中以此方式提取摘要數(shù)據(jù)的情況下，通過(guò)組合所述摘要數(shù)據(jù)而生成的摘要實(shí)質(zhì)上變得 與戲劇系列節(jié)目的第k廣播的內(nèi)容的回顧場(chǎng)景相同。返回到圖12，如果在步驟S90中確定搜索到所有的場(chǎng)景，則該過(guò)程前進(jìn)到步驟 S91。在步驟S91中，摘要生成單元103組合摘要數(shù)據(jù)1到4。換言之，生成摘要，使得順 序地重放摘要數(shù)據(jù)1到4。以此方式，運(yùn)行了摘要生成處理。在現(xiàn)有技術(shù)中，難以從在內(nèi)容中包括的圖像、聲音、字幕等中提取重要的場(chǎng)景，因 為所述提取取決于內(nèi)容的細(xì)節(jié)。例如，可能錯(cuò)誤地提取不重要的場(chǎng)景，或可能沒(méi)有在摘要生 成時(shí)提取特別重要的場(chǎng)景。然而，在本發(fā)明中，由于通過(guò)指定回顧場(chǎng)景并提取與在回顧場(chǎng)景中包括的場(chǎng)景類(lèi) 似的場(chǎng)景來(lái)生成摘要，所以可以可靠地生成用重要場(chǎng)景構(gòu)成的摘要。另外，如上所述，由于 在檢測(cè)到交叉衰落區(qū)域之后指定回顧場(chǎng)景，所以可以合適地指定回顧場(chǎng)景。另外，在現(xiàn)有技術(shù)中，花費(fèi)大量時(shí)間來(lái)執(zhí)行分析內(nèi)容數(shù)據(jù)并搜索相似場(chǎng)景的部分 的處理。然而，在本發(fā)明中，每當(dāng)搜索到與在回顧場(chǎng)景中包括的場(chǎng)景類(lèi)似的場(chǎng)景時(shí)，減少要搜索的區(qū)域，使得可能縮短用于搜索花費(fèi)的時(shí)間。因此，根據(jù)本發(fā)明，可能在短時(shí)間中生成包括特別重要場(chǎng)景的摘要。盡管以上主要針對(duì)摘要的生成而描述了本發(fā)明，但是本發(fā)明例如可以?xún)H僅用于檢測(cè)交叉衰落區(qū)域。在根據(jù)本發(fā)明的內(nèi)容處理設(shè)備1中，通過(guò)指定交叉衰落區(qū)域，例如可以指 定重放場(chǎng)景或回顧場(chǎng)景，并且可以在短時(shí)間中搜索所期望的場(chǎng)景。另外，可以以硬件方式或以軟件方式來(lái)運(yùn)行上述系列處理。在其中以軟件方式來(lái) 運(yùn)行上述處理系列的情況下，可以通過(guò)網(wǎng)絡(luò)、或從記錄介質(zhì)向其中組裝了專(zhuān)用硬件的計(jì)算 機(jī)或向其中安裝了各種程序以運(yùn)行各種功能的計(jì)算機(jī)(例如，如圖14所示的通用個(gè)人計(jì)算 機(jī)700)安裝配置所述軟件的程序。在圖14中，CPU(中央處理單元)701根據(jù)在R0M(只讀存儲(chǔ)器)702中存儲(chǔ)的程序 或從存儲(chǔ)單元708加載到RAM(隨機(jī)存取存儲(chǔ)器)703上的程序來(lái)運(yùn)行各種處理。另外，也 在RAM 703中存儲(chǔ)由CPU 701運(yùn)行的各種處理所必須的合適數(shù)據(jù)。CPU 70UROM 702和RAM 703通過(guò)總線(xiàn)704相互連接。另外，輸入輸出接口 705也 連接到總線(xiàn)704。輸入單元706、輸出單元707、存儲(chǔ)單元708和通信單元709連接到輸入輸出接口 705,所述輸入單元706包括鍵盤(pán)、鼠標(biāo)等，所述輸出單元707包括諸如IXD (液晶顯示器) 之類(lèi)的顯示器、揚(yáng)聲器等，所述存儲(chǔ)單元708包括硬盤(pán)等，而所述通信單元709包括諸如調(diào) 制解調(diào)器和LAN卡之類(lèi)的接口卡。通信單元709通過(guò)包括因特網(wǎng)的網(wǎng)絡(luò)來(lái)執(zhí)行通信處理。另外，如果必要的話(huà)，則將驅(qū)動(dòng)器710連接到輸入輸出接口 705，并且合適地安裝 諸如磁盤(pán)、光盤(pán)、光磁盤(pán)或半導(dǎo)體存儲(chǔ)器之類(lèi)的可移除介質(zhì)711。如果必要，則在存儲(chǔ)單元 708中安裝從其中讀取的計(jì)算機(jī)程序。在其中通過(guò)軟件來(lái)運(yùn)行上述處理系列的情況下，通過(guò)諸如因特網(wǎng)之類(lèi)的網(wǎng)絡(luò)、或 從諸如可移除介質(zhì)711之類(lèi)的記錄介質(zhì)中安裝用于配置所述軟件的程序。另外，如圖14所示，將記錄介質(zhì)配置為諸如磁盤(pán)(包括軟盤(pán)(注冊(cè)商標(biāo)))、光盤(pán) (包括⑶-ROM (致密盤(pán)-只讀存儲(chǔ)器)和DVD (數(shù)字多功能盤(pán)))、光磁盤(pán)(包括MD (迷你盤(pán)) (注冊(cè)商標(biāo)))、或半導(dǎo)體存儲(chǔ)器之類(lèi)的可移除介質(zhì)711，所述可移除介質(zhì)711在其中記錄了 程序并且對(duì)其進(jìn)行分發(fā)，以便向用戶(hù)提供所述程序。另外，可以將記錄介質(zhì)配置為ROM 702 或在存儲(chǔ)單元708中包括的硬盤(pán)驅(qū)動(dòng)器，其在其中記錄程序，并且在其中將所述ROM 702或 硬盤(pán)驅(qū)動(dòng)組裝為所述設(shè)備的主體的情況下，向用戶(hù)提供所述程序。另外，在說(shuō)明書(shū)中描述的上述處理系列包括根據(jù)所描述的次序而按照時(shí)間順序 的方式來(lái)執(zhí)行的處理、和按照并行的方式或按照單獨(dú)的方式而不是時(shí)間順序的方式來(lái)執(zhí)行 的處理。本申請(qǐng)包含與在2009年2月6日向日本專(zhuān)利局提交的日本優(yōu)先權(quán)專(zhuān)利申請(qǐng)JP 2009-025517中公開(kāi)的主題相關(guān)的主題，在此通過(guò)引用而合并其全部?jī)?nèi)容。另外，本發(fā)明的實(shí)施例不限于上述實(shí)施例，而是可以在本發(fā)明的范圍內(nèi)做出各種 修改，而不脫離本發(fā)明的精神。
權(quán)利要求
一種內(nèi)容處理設(shè)備，包括內(nèi)容數(shù)據(jù)獲取部件，其獲取內(nèi)容的數(shù)據(jù)；區(qū)域檢測(cè)部件，其從獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀的交叉衰落區(qū)域，所述多個(gè)幀構(gòu)成其中逐漸地改變預(yù)定場(chǎng)景的最終圖像并且利用下一場(chǎng)景的圖像來(lái)取代所述最終圖像的部分；場(chǎng)景指定部件，其基于檢測(cè)到的交叉衰落區(qū)域來(lái)指定回顧場(chǎng)景，其中以預(yù)定的間隔來(lái)改變多個(gè)場(chǎng)景；類(lèi)似場(chǎng)景搜索部件，其從由所述內(nèi)容數(shù)據(jù)獲取部件獲取的不同內(nèi)容的數(shù)據(jù)中搜索與在指定的回顧場(chǎng)景中包括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景；以及摘要生成部件，其通過(guò)組合搜索到的場(chǎng)景來(lái)生成所述不同內(nèi)容的摘要。
2.根據(jù)權(quán)利要求1的內(nèi)容處理設(shè)備，其中所述區(qū)域檢測(cè)部件包括比率計(jì)算部件，其計(jì)算內(nèi)容數(shù)據(jù)中單調(diào)改變的像素與要處理幀的占有比，所述單調(diào)改 變像素的值單調(diào)地改變；活度比率計(jì)算部件，其計(jì)算要處理幀與在要處理幀之前的幀之間的活度比率；候選幀確定部件，其基于所計(jì)算的單調(diào)改變像素的占有比和所計(jì)算的活度比率來(lái)確定 要處理的幀是否是所述交叉衰落區(qū)域中的候選幀；以及連續(xù)幀計(jì)數(shù)部件，其通過(guò)對(duì)連續(xù)地出現(xiàn)的候選幀進(jìn)行計(jì)數(shù)來(lái)從內(nèi)容數(shù)據(jù)中檢測(cè)所述交 叉衰落區(qū)域。
3.根據(jù)權(quán)利要求2的內(nèi)容處理設(shè)備，其中所述比率計(jì)算部件將要處理幀設(shè)置為當(dāng)前 幀，通過(guò)對(duì)當(dāng)前幀的關(guān)注像素的值和與所述關(guān)注像素對(duì)應(yīng)的過(guò)去幀和將來(lái)幀中的像素的值 進(jìn)行比較，來(lái)確定當(dāng)前幀的關(guān)注像素是否是單調(diào)改變的像素，并且計(jì)算確定為單調(diào)改變像 素的所述像素與構(gòu)成所述當(dāng)前幀的所有像素的比率。
4.根據(jù)權(quán)利要求3的內(nèi)容處理設(shè)備，其中，在其中改變所述關(guān)注像素和與所述關(guān)注像 素對(duì)應(yīng)的像素的值為隨著時(shí)間的經(jīng)過(guò)而增加的情況下，或者在其中改變所述關(guān)注像素和與 所述關(guān)注像素對(duì)應(yīng)的像素的值為隨著時(shí)間的經(jīng)過(guò)而減小的情況下，如果根據(jù)時(shí)間經(jīng)過(guò)的改 變量大于預(yù)定的閾值，則將所述關(guān)注像素確定為單調(diào)改變的像素。
5.根據(jù)權(quán)利要求2的內(nèi)容處理設(shè)備，其中，如果第一幀的特征量與時(shí)間上在所述第一 幀之前預(yù)定數(shù)目的幀的第二幀的特征量之間的差值等于或大于預(yù)定的閾值，則將所述第一 幀設(shè)置為要處理的幀。
6.根據(jù)權(quán)利要求2的內(nèi)容處理設(shè)備，其中，在其中連續(xù)出現(xiàn)的候選幀的數(shù)目等于或大 于預(yù)定的閾值的情況下，如果所述連續(xù)候選幀的最初候選幀的特征量與其最終候選幀的特 征量之間的差值等于或大于預(yù)定的閾值，則所述區(qū)域檢測(cè)部件將從所述最初候選幀到所述 最終候選幀的區(qū)域檢測(cè)為所述交叉衰落區(qū)域。
7.根據(jù)權(quán)利要求1的內(nèi)容處理設(shè)備，其中，在其中在小于閾值的時(shí)間距離中連續(xù)地檢 測(cè)到預(yù)定數(shù)目或更多的交叉衰落區(qū)域的情況下，所述場(chǎng)景指定部件將從連續(xù)交叉衰落區(qū)域 的最初交叉衰落區(qū)域到最終交叉衰落區(qū)域的部分指定為所述回顧場(chǎng)景。
8.根據(jù)權(quán)利要求7的內(nèi)容處理設(shè)備，其中所述類(lèi)似場(chǎng)景搜索部件從不同內(nèi)容的數(shù)據(jù)中搜索與和在所指定的回顧場(chǎng)景中的 交叉衰落區(qū)域之間插入的部分對(duì)應(yīng)的場(chǎng)景類(lèi)似的場(chǎng)景，以及其中所述摘要生成部件通過(guò)對(duì)添加有所搜索到的場(chǎng)景之前或之后的預(yù)定數(shù)目的連續(xù) 幀的數(shù)據(jù)進(jìn)行組合來(lái)生成所述摘要。
9.根據(jù)權(quán)利要求8的內(nèi)容處理設(shè)備，其中，所述搜索部件從不同內(nèi)容的數(shù)據(jù)中搜索與時(shí)間上位于和在所指定的回顧場(chǎng)景之 中的交叉衰落區(qū)域之間插入的部分對(duì)應(yīng)的場(chǎng)景中的最早點(diǎn)處的第一場(chǎng)景類(lèi)似的第二場(chǎng)景， 以及其中，所述搜索部件從在不同內(nèi)容數(shù)據(jù)之中時(shí)間上晚于所述第二場(chǎng)景的部分中，搜索 與時(shí)間上晚于和在所指定的回顧場(chǎng)景之中的交叉衰落區(qū)域之間插入的部分對(duì)應(yīng)的場(chǎng)景中 的第一場(chǎng)景的第三場(chǎng)景類(lèi)似的第四場(chǎng)景。
10.一種內(nèi)容處理方法，包括以下步驟獲取內(nèi)容的數(shù)據(jù)；從獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀的交叉衰落區(qū)域，所述多個(gè)幀構(gòu)成其中逐漸地改 變預(yù)定場(chǎng)景的最終圖像并且利用下一場(chǎng)景的圖像來(lái)取代所述最終圖像的部分；基于檢測(cè)到的交叉衰落區(qū)域來(lái)指定回顧場(chǎng)景，其中以預(yù)定的間隔來(lái)改變多個(gè)場(chǎng)景；從由內(nèi)容數(shù)據(jù)獲取部件所獲取的不同內(nèi)容的數(shù)據(jù)中搜索與在所指定的回顧場(chǎng)景中包 括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景；以及通過(guò)組合搜索到的場(chǎng)景來(lái)生成所述不同內(nèi)容的摘要。
11.一種內(nèi)容處理設(shè)備，包括內(nèi)容數(shù)據(jù)獲取單元，其獲取內(nèi)容的數(shù)據(jù)；區(qū)域檢測(cè)單元，其從獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀的交叉衰落區(qū)域，所述多個(gè)幀 構(gòu)成其中逐漸地改變預(yù)定場(chǎng)景的最終圖像并且利用下一場(chǎng)景的圖像來(lái)取代所述最終圖像 的部分；場(chǎng)景指定單元，其基于檢測(cè)到的交叉衰落區(qū)域來(lái)指定回顧場(chǎng)景，其中以預(yù)定的間隔來(lái) 改變多個(gè)場(chǎng)景；類(lèi)似場(chǎng)景搜索單元，其從由所述內(nèi)容數(shù)據(jù)獲取單元獲取的不同內(nèi)容的數(shù)據(jù)中搜索與在 指定的回顧場(chǎng)景中包括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景；以及摘要生成單元，其通過(guò)組合搜索到的場(chǎng)景來(lái)生成所述不同內(nèi)容的摘要。
全文摘要
提供了一種內(nèi)容處理設(shè)備，包括內(nèi)容數(shù)據(jù)獲取單元，其獲取內(nèi)容 數(shù)據(jù)；區(qū)域檢測(cè)單元，其從獲取的內(nèi)容數(shù)據(jù)中檢測(cè)包括多個(gè)幀的交叉衰落區(qū)域，所述多個(gè)幀構(gòu)成其中逐漸地改變預(yù)定場(chǎng)景的最終圖像并且利用下一場(chǎng)景的圖像來(lái)取代所述最終圖像的部分；場(chǎng)景指定單元，其基于檢測(cè)到的交叉衰落區(qū)域來(lái)指定回顧場(chǎng)景，其中以預(yù)定的間隔來(lái)改變多個(gè)場(chǎng)景；類(lèi)似場(chǎng)景搜索單元，其從由所述內(nèi)容數(shù)據(jù)獲取單元獲取的不同內(nèi)容的數(shù)據(jù)中搜索與在指定的回顧場(chǎng)景中包括的多個(gè)場(chǎng)景類(lèi)似的場(chǎng)景；以及摘要生成單元，其通過(guò)組合搜索到的場(chǎng)景來(lái)生成所述不同內(nèi)容的摘要。
文檔編號(hào)G11B27/10GK101799823SQ20101011367
公開(kāi)日2010年8月11日 申請(qǐng)日期2010年2月8日 優(yōu)先權(quán)日2009年2月6日
發(fā)明者江尻淳 申請(qǐng)人:索尼公司