專利名稱：影像編輯裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及編輯已記錄的影像的技術(shù)，特別涉及通過從已記錄影像的影像流中提取特定的一部分來制作概覽該影像的摘要影像的技術(shù)。
背景技術(shù)：
作為根據(jù)記錄的影像流制作摘要影像的技術(shù)，專利文獻(xiàn)1公開了在該影像流中包含的場(chǎng)景中，根據(jù)用戶所設(shè)定的重要度的基準(zhǔn)來確定包含在摘要影像中的場(chǎng)景，并從記錄的影像流中提取包含確定的場(chǎng)景的規(guī)定范圍的影像流來制作摘要影像的技術(shù)。
由此，用戶不必再現(xiàn)記錄的全部影像流，就可以在短時(shí)間內(nèi)僅觀看重要部分。
此外，在專利文獻(xiàn)2中，公開了通過在該影像流中包含的每個(gè)場(chǎng)景中，預(yù)先設(shè)定對(duì)從已記錄的影像流的提取部位進(jìn)行確定的模板，并通過用戶選擇希望的模板，并利用由該模板確定的影像流來制作摘要影像的技術(shù)。
由此，用戶通過選擇希望的模板，能夠在短時(shí)間內(nèi)觀看想看的場(chǎng)面。
專利文獻(xiàn)1特開2000-261754號(hào)公報(bào)專利文獻(xiàn)2特開2002-142188號(hào)公報(bào)但是，在上述以往技術(shù)中，由于固定了按每個(gè)場(chǎng)景再現(xiàn)的影像流的范圍及再現(xiàn)順序，所以在記錄的影像流中出現(xiàn)多次相同種類的場(chǎng)景的情況下，由于各場(chǎng)景的再現(xiàn)是以固定的步驟進(jìn)行的，所以產(chǎn)生了對(duì)觀看者造成再現(xiàn)的摘要影像較單調(diào)、缺乏變化、不夠豐富的印象的問題。
例如，在棒球比賽中的本壘打場(chǎng)面的摘要影像的情況下，一分本壘打的場(chǎng)景、逆轉(zhuǎn)本壘打的場(chǎng)景、滿壘本壘打的場(chǎng)景都相同地再現(xiàn)，存在不能制作吸引觀看者的興趣的、富有變化的摘要影像的問題。

發(fā)明內(nèi)容
本發(fā)明鑒于上述問題，其目的是提供一種根據(jù)場(chǎng)景出現(xiàn)的狀況來制作演出效果不同的摘要影像的影像編輯裝置及方法。
為了解決上述課題，本發(fā)明是一種從記錄在記錄媒體中的影像流表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)的影像編輯裝置，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息、和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯裝置具備取得單元，從上述記錄媒體取得第1影像確定信息；選擇單元，從上述選擇表中選擇同與取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取單元，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息表示的記錄時(shí)間相當(dāng)于第1影像確定信息所表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
也可以是一種從記錄在記錄媒體中的影像流表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)的影像編輯方法，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息、和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯方法包括取得步驟，從上述記錄媒體取得第1影像確定信息；選擇步驟，從上述選擇表中選擇同與所取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取步驟，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
也可以是一種使從記錄在記錄媒體中的影像流表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)的影像編輯裝置執(zhí)行影像編輯處理的程序，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息、和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯處理包括取得步驟，從上述記錄媒體取得第1影像確定信息；選擇步驟，從上述選擇表中選擇同與所取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取步驟，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
還可以是一種記錄有使從記錄在記錄媒體中的影像流表示的整體影像中提取特定的影像并再現(xiàn)的影像編輯裝置執(zhí)行影像編輯處理的程序的計(jì)算機(jī)可讀取的記錄媒體，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息、和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯處理包括取得步驟，從上述記錄媒體取得第1影像確定信息；選擇步驟，從上述選擇表中選擇同與所取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取步驟，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
通過具備上述結(jié)構(gòu)，由于根據(jù)第1影像確定信息的狀況信息，來選擇對(duì)與主要場(chǎng)面的影像一起再現(xiàn)的、關(guān)聯(lián)的演出效果場(chǎng)面的影像進(jìn)行確定的第2影像確定信息，所以用戶能夠根據(jù)第1影像確定信息和所選擇的第2影像確定信息提取主要場(chǎng)面的影像與演出效果場(chǎng)面的影像，觀賞對(duì)應(yīng)于與主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的摘要影像。
在此，也可以是，在上述記錄媒體中，將表示上述第1影像與多種上述第2影像的再現(xiàn)順序的模板信息，同上述第1影像確定信息對(duì)應(yīng)起來進(jìn)行記錄；上述影像編輯裝置還具備再現(xiàn)單元，上述再現(xiàn)單元根據(jù)第1影像確定信息和所提取的第2影像確定信息，從上述影像流中提取第1影像和第2影像，并進(jìn)行按照與上述第1影像確定信息對(duì)應(yīng)的模板信息所表示的再現(xiàn)順序，再現(xiàn)所提取的上述第1影像和上述第2影像的再現(xiàn)處理。
由此，由于能夠事先設(shè)定與主要場(chǎng)面的影像關(guān)聯(lián)的演出效果場(chǎng)面的再現(xiàn)順序，所以能夠以最大限度地提高演出效果的有效的再現(xiàn)順序再現(xiàn)主要場(chǎng)面的影像、和有效地烘托主要場(chǎng)面的演出效果場(chǎng)面的影像。
在此，也可以是，上述影像流包含多個(gè)第1影像；在上述記錄媒體中記錄有多個(gè)第1影像確定信息、和對(duì)應(yīng)于各第1確定信息的模板信息；上述取得單元從上述記錄媒體取得上述各第1影像確定信息；每當(dāng)取得上述第1影像確定信息時(shí)，上述選擇單元從上述選擇表中選擇同與取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；上述提取機(jī)構(gòu)從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息、即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于所取得的第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息；上述再現(xiàn)單元具有生成單元，生成包含所取得的第1影像確定信息的時(shí)間信息、所提取的第2影像確定信息的時(shí)間信息、和與所取得的第1影像確定信息對(duì)應(yīng)的模板信息的部分索引信息；存儲(chǔ)單元，存儲(chǔ)生成的各部分索引信息；流再現(xiàn)單元，根據(jù)用戶指示從上述存儲(chǔ)單元讀出各部分索引信息，根據(jù)所讀出的各部分索引信息，從上述影像流提取第1影像和第2影像，進(jìn)行上述再現(xiàn)處理。
由此，對(duì)每個(gè)第1影像確定信息進(jìn)行確定演出效果場(chǎng)面的影像的第2影像確定信息的選擇，所以用戶即使在指定了多個(gè)相同的種類的主要場(chǎng)面的影像的摘要影像的再現(xiàn)的情況下，也在每個(gè)主要場(chǎng)面中使與主要場(chǎng)面的影像一起再現(xiàn)的演出效果場(chǎng)面的影像的種類變化，所以能夠不感到單調(diào)感地觀看摘要影像。
這里，上述狀況信息所表示的狀況也可以是主要場(chǎng)面之前的場(chǎng)面的狀況。
由此，由于能夠根據(jù)主要場(chǎng)面之前的場(chǎng)面的狀況選擇與主要場(chǎng)面的影像一起再現(xiàn)的演出效果場(chǎng)面的影像的種類，所以例如在以棒球轉(zhuǎn)播中的安打的場(chǎng)面為主要場(chǎng)面再現(xiàn)摘要影像的情況下，在安打之前有跑壘者的情況下，使表示跑壘者的狀況的場(chǎng)面的影像與安打的場(chǎng)面的影像一起再現(xiàn)，在沒有的情況下，僅再現(xiàn)安打的場(chǎng)面的影像，這樣，能夠根據(jù)之前的場(chǎng)景的狀況有效地編制摘要影像而再現(xiàn)，以便能夠吸引觀看者的興趣。
在此，上述狀況信息所表示的狀況也可以是表示基于主要場(chǎng)面的結(jié)果的場(chǎng)面的狀況。
由此，能夠根據(jù)基于主要場(chǎng)面的結(jié)果的場(chǎng)面的狀況而提高演出效果。例如，在棒球轉(zhuǎn)播的主要場(chǎng)面是滿壘本壘打的情況、和是沒有跑壘者的一分本壘打的情況下，即使是關(guān)于相同的本壘打的場(chǎng)面的摘要影像，在滿壘本壘打的情況下也會(huì)再現(xiàn)比一分本壘打的情況多的演出效果場(chǎng)面的影像(例如表示候補(bǔ)席中的選手的祝賀的狀況的場(chǎng)面、表示觀眾的歡喜的狀況的場(chǎng)面及回放的場(chǎng)面的影像)，而能夠提高演出效果。
在此，也可以是，在上述記錄媒體中記錄有多種上述影像流，對(duì)上述各影像流賦予識(shí)別該上述影像流的流識(shí)別信息；上述第1影像確定信息包含記錄有第1影像的上述影像流的流識(shí)別信息；各種的上述第2影像確定信息包含記錄有第2影像的上述影像流的流識(shí)別信息；上述再現(xiàn)單元從具有被包含在上述第1影像確定信息中的流識(shí)別信息的上述影像流中提取第1影像，從具有被包含在所提取的上述第2影像確定信息中的流識(shí)別信息的上述影像流中提取第2影像。
由此，由于從多個(gè)影像流中選擇與主要場(chǎng)面的影像一起再現(xiàn)的演出效果的場(chǎng)面的影像，所以用戶能夠觀賞由多個(gè)攝影機(jī)多面地?cái)z影的主要場(chǎng)面的演出效果的場(chǎng)面的影像。
在此，是一種從記錄在記錄媒體中的影像流表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)的影像編輯裝置，上述影像流包含表示主要場(chǎng)面的第1影像、和用于提高加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示第1影像的重要度的重要度信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的重要度信息、和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯裝置具備取得單元，從上述記錄媒體取得第1影像確定信息；選擇單元，從上述選擇表中選擇同與所取得的第1影像確定信息的重要度信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取單元，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
由此，能夠根據(jù)第1影像確定信息所表示的主要場(chǎng)面的重要度而使演出效果具有變化。
例如，即使是棒球轉(zhuǎn)播的主要場(chǎng)面相同的適時(shí)安打的場(chǎng)面，也在逆轉(zhuǎn)的適時(shí)安打和不是逆轉(zhuǎn)的適時(shí)安打間設(shè)置重要度差，在逆轉(zhuǎn)的適時(shí)安打的情況下在主要場(chǎng)面的影像中將候補(bǔ)席的選手的祝賀的狀況的場(chǎng)面的影像、及表示觀眾的歡喜的狀況的場(chǎng)面的影像與主要場(chǎng)面的影像一起再現(xiàn)，在其他適時(shí)安打的情況下，通過設(shè)定為不進(jìn)行這樣的場(chǎng)面的影像的再現(xiàn)，能夠使演出效果具有變化。


圖1是表示本發(fā)明的第一實(shí)施方式的影像編輯系統(tǒng)10的結(jié)構(gòu)的功能框圖。
圖2表示存儲(chǔ)在影像存儲(chǔ)部105中的影像流與事件元數(shù)據(jù)的狀況信息的具體例。
圖3表示匹配表與模板的具體例。
圖4表示演出效果匹配表的具體例。
圖5表示屬性數(shù)據(jù)的具體例。
圖6是表示摘要生成部104的整體結(jié)構(gòu)的功能框圖。
圖7表示從屬性數(shù)據(jù)提取的部分摘要元數(shù)據(jù)的具體例。
圖8表示整體摘要元數(shù)據(jù)的具體例。
圖9表示整體摘要元數(shù)據(jù)的具體例。
圖10表示整體摘要元數(shù)據(jù)的具體例。
圖11是表示部分摘要生成部102的結(jié)構(gòu)的功能框圖。
圖12是表示第1演出效果選擇部202進(jìn)行的演出效果索引第1選擇處理的動(dòng)作的流程圖的一部分。
圖13是表示第1演出效果選擇部202進(jìn)行的演出效果索引第1選擇處理的動(dòng)作的流程圖的一部分。
圖14是表示第2演出效果選擇部203進(jìn)行的演出效果索引第2選擇處理的動(dòng)作的流程圖的一部分。
圖15是表示第2演出效果選擇部203進(jìn)行的演出效果索引第2選擇處理的動(dòng)作的流程圖的一部分。
圖16是表示部分摘要生成部102進(jìn)行的部分摘要元數(shù)據(jù)生成處理的動(dòng)作的流程圖。
圖17是表示整體摘要生成部104進(jìn)行的整個(gè)摘要元數(shù)據(jù)生成處理的動(dòng)作的流程圖。
圖18是以圖形表示摘要生成部303根據(jù)圖8所示的整體摘要元數(shù)據(jù)再現(xiàn)摘要影像的過程的一部分的圖。
圖19是表示變形例中的部分摘要生成部102的結(jié)構(gòu)的功能框圖。
圖20表示整體摘要元數(shù)據(jù)的具體例。
圖21表示存儲(chǔ)在模板存儲(chǔ)部106中的匹配表與安打用模板的具體例。
圖22表示對(duì)由圖2(b)的1710表示的“安打”的主數(shù)據(jù)生成的部分摘要元數(shù)據(jù)的具體例。
圖23表示對(duì)由圖2(b)的1711表示的“安打”的主數(shù)據(jù)生成的部分摘要元數(shù)據(jù)的具體例。
圖24表示對(duì)由圖2(b)的1712表示的“安打”的主數(shù)據(jù)生成的部分摘要元數(shù)據(jù)的具體例。
具體實(shí)施例方式
<結(jié)構(gòu)>
圖1是表示本發(fā)明的第一實(shí)施方式的影像編輯系統(tǒng)10的結(jié)構(gòu)的功能框圖。
影像編輯系統(tǒng)10包括影像編輯裝置100、影像存儲(chǔ)部105、模板存儲(chǔ)部106、和摘要生成條件輸入部107。
影像編輯裝置100與影像存儲(chǔ)部105、模板存儲(chǔ)部106、摘要生成條件輸入部107分別用電氣通信線路(例如因特網(wǎng)、內(nèi)部網(wǎng)、LAN等)連接。
此外，影像編輯裝置100也可以是在本裝置中包含影像存儲(chǔ)部105、模板存儲(chǔ)部106、摘要生成條件輸入部107的結(jié)構(gòu)。
(影像存儲(chǔ)部105)存儲(chǔ)有由電視臺(tái)為播放節(jié)目用而攝影的、作為幀圖像的時(shí)序順序的流的影像流，多個(gè)事件元數(shù)據(jù)，以及狀況信息。構(gòu)成影像流的各影像數(shù)據(jù)與其記錄時(shí)刻對(duì)應(yīng)起來存儲(chǔ)。
另外，被存儲(chǔ)的影像流也可以是由多個(gè)攝像機(jī)攝影的多種影像流，在此情況下，對(duì)于各影像流賦予了用來識(shí)別該影像流的攝像機(jī)號(hào)，作為識(shí)別符。
這里，所謂的“事件元數(shù)據(jù)”指的是，表示將攝影的影像流分割為多個(gè)以時(shí)序順序連續(xù)的由特定數(shù)量的幀圖像構(gòu)成的流時(shí)的、用于將已分割的各流所示的影像所表示的場(chǎng)景進(jìn)行分類的“索引”、表示該場(chǎng)景的記錄開始時(shí)刻的“IN點(diǎn)”、表示該場(chǎng)景的記錄結(jié)束時(shí)刻的“OUT點(diǎn)”、用于識(shí)別拍攝該場(chǎng)景的攝像機(jī)的“攝像機(jī)號(hào)”、表示各場(chǎng)景的集合體中的該場(chǎng)景的重要性程度的值即“重要度”、記述了該場(chǎng)景的詳細(xì)情況(例如登場(chǎng)人物、被攝體名等)的“關(guān)鍵字”、和表示是否存在與該場(chǎng)景對(duì)應(yīng)的模板(關(guān)于模板，在后面敘述)的“模板信息”之間的對(duì)應(yīng)關(guān)系的信息。
另外，在本實(shí)施方式中，由于以棒球比賽為攝影對(duì)象，所以將關(guān)鍵字分類為“行為者”、“被行為者”、“行為者隊(duì)”、“被行為者隊(duì)”。
這里，“行為者”表示在棒球比賽中攻擊側(cè)的擊球者，“被行為者”表示防守側(cè)的投手，“行為者隊(duì)”表示攻擊側(cè)的隊(duì)，“被行為者隊(duì)”表示防守側(cè)的隊(duì)。
事件元數(shù)據(jù)在每次索引所表示的場(chǎng)景的攝影結(jié)束時(shí)被存儲(chǔ)在影像存儲(chǔ)部105中。
此外，“狀況信息”是指對(duì)各事件元數(shù)據(jù)記述了該事件元數(shù)據(jù)所表示的場(chǎng)景之前的場(chǎng)景的狀況和基于該事件元數(shù)據(jù)所表示的場(chǎng)景的結(jié)果場(chǎng)景的狀況的信息(以下，將記述了前者的狀況的信息稱作“機(jī)會(huì)狀況信息”，將記述了后者的狀況的信息稱作“結(jié)果狀況信息”)。
狀況信息例如通過已攝影的影像的編輯者或攝影者自身或其助手等制作。狀況信息的制作既可以在攝像機(jī)攝影中隨時(shí)制作，也可以在攝影后的影像編輯時(shí)制作。
圖2表示存儲(chǔ)在影像存儲(chǔ)部105中的影像流、事件元數(shù)據(jù)和狀況信息的具體例。
圖2(a)表示影像流的具體例，圖2(b)表示事件元數(shù)據(jù)的具體例，圖2(c)表示狀況信息的具體例。
圖2(a)的600是用圖形表示影像流。
圖2(b)中，601表示事件元數(shù)據(jù)，6011表示索引的具體例，6012、6013表示IN點(diǎn)、OUT點(diǎn)的具體例，6014表示攝像機(jī)號(hào)的具體例，6015表示重要度的具體例，6016～6019表示被分類的各關(guān)鍵字(行為者、被行為者、行為者隊(duì)、被行為者隊(duì))的具體例，6020表示模板信息的具體例。
此外，圖2(c)的602表示狀況信息，6021表示事件元數(shù)據(jù)的識(shí)別符的具體例，6022表示機(jī)會(huì)狀況信息的具體例，6023表示結(jié)果狀況信息的具體例。
(模板存儲(chǔ)部106)存儲(chǔ)有匹配表、模板、和演出效果匹配表。
這里，“匹配表”是指表示屬于具有模板的事件元數(shù)據(jù)(以下稱作“主元數(shù)據(jù)”)的索引(以下稱作“主索引”)和該索引所屬的模板的保存場(chǎng)所的對(duì)應(yīng)關(guān)系的表。
此外，“模板”是指，包含有用于將在摘要影像中應(yīng)連續(xù)再現(xiàn)的多個(gè)場(chǎng)景分類的各索引的組(以下，將組內(nèi)的各索引中的主索引以外的索引稱作“演出效果索引”)、由各索引分類的場(chǎng)景的記錄時(shí)刻信息(IN點(diǎn)、OUT點(diǎn))的記錄欄、和該場(chǎng)景的再現(xiàn)順序的信息。
另外，在包含在模板中的記錄時(shí)刻信息的記錄欄中，在后述的部分摘要元數(shù)據(jù)的生成時(shí)記錄IN點(diǎn)、OUT點(diǎn)。
這里，“演出效果索引”是對(duì)攝影的各場(chǎng)景中的、附屬于由主索引分類的主要場(chǎng)景的場(chǎng)景進(jìn)行分類的索引，被劃分為與主要場(chǎng)景的剛剛之前有關(guān)的場(chǎng)景即背景場(chǎng)景、和與主要場(chǎng)景的剛剛之后有關(guān)的場(chǎng)景即結(jié)果場(chǎng)景。
例如，如果將棒球的“本壘打”及“安打”作為主要場(chǎng)景，則作為背景場(chǎng)景，包括表示主要場(chǎng)景之前的壘上的跑壘者的場(chǎng)景、表示觀眾的狀況的場(chǎng)景、及表示有關(guān)主要場(chǎng)景的人物的表情的場(chǎng)景等，作為結(jié)果場(chǎng)景，包括表示主要場(chǎng)景之后的觀眾的狀況的場(chǎng)景、表示有關(guān)主要場(chǎng)景的人物的表情的場(chǎng)景、表示候補(bǔ)席的狀況的場(chǎng)景、及表示教練的狀況的場(chǎng)景等。
另外，假設(shè)對(duì)于1個(gè)演出效果索引，存在包含該演出效果索引的多個(gè)事件元數(shù)據(jù)，并且與事件元數(shù)據(jù)一起存儲(chǔ)在影像存儲(chǔ)部105中。圖2(b)的1700表示包含演出效果索引的事件元數(shù)據(jù)的具體例。
另外，在模板中，定義了由通過后述的模板的索引的選擇處理有可能被選擇的所有演出效果索引和主索引分別分類的場(chǎng)景的再現(xiàn)順序，在通過上述選擇處理刪除了演出效果索引的情況下，跳過被刪除的演出效果索引，將由其下一個(gè)再現(xiàn)順序的演出效果索引或主索引分類的場(chǎng)景連接起來。
此外，在使用多個(gè)攝像機(jī)進(jìn)行屬于各分類的場(chǎng)景的攝影的情況下，除了模板的IN點(diǎn)、OUT點(diǎn)以外，在模板中還包含關(guān)于識(shí)別該攝像機(jī)的攝像機(jī)號(hào)的信息。由此，通過將存儲(chǔ)在影像存儲(chǔ)部105的多個(gè)影像流與拍攝了該影像流的攝像機(jī)的攝像機(jī)號(hào)對(duì)應(yīng)起來，能夠根據(jù)模板信息從影像存儲(chǔ)部105讀出與用多個(gè)攝影機(jī)攝影的場(chǎng)景有關(guān)的各影像流，進(jìn)行再現(xiàn)。
此外，“演出效果匹配表”是指表示場(chǎng)景屬性信息、分類信息、判斷基準(zhǔn)識(shí)別符、演出效果索引、狀況信息判斷識(shí)別符、和重要度判斷識(shí)別符的對(duì)應(yīng)關(guān)系的表。
這里，“場(chǎng)景屬性信息”是指，表示匹配表的各演出效果索引是與由主索引識(shí)別的場(chǎng)景的剛剛之前的場(chǎng)景即背景場(chǎng)景相關(guān)聯(lián)、還是與作為同主索引關(guān)聯(lián)的場(chǎng)景關(guān)聯(lián)的結(jié)果場(chǎng)景相關(guān)聯(lián)的場(chǎng)景屬性信息。
此外，“分類信息”是指，根據(jù)被拍攝的對(duì)象的屬性，將場(chǎng)景屬性信息進(jìn)行分類的信息。
此外，“判斷基準(zhǔn)識(shí)別符”是指，表示是否將各演出效果索引追加到模板中的判斷是按照狀況信息判斷識(shí)別符進(jìn)行、還是按照重要度判斷識(shí)別符進(jìn)行、還是按照兩者的判斷結(jié)果進(jìn)行的識(shí)別符。
此外，“狀況信息判斷識(shí)別符”是指，根據(jù)與主索引的狀況信息的關(guān)系對(duì)各演出效果索引進(jìn)行如下判斷的識(shí)別符，即、該判斷是該演出效果索引在該主索引的模板中是作為選擇的演出效果索引、還是作為成為選擇候補(bǔ)的演出效果索引，以及該演出效果索引在該模板中是作為刪除的演出效果索引、還是作為成為刪除候補(bǔ)的演出效果索引。
此外，“重要度判斷識(shí)別符”是指，根據(jù)與主元數(shù)據(jù)所表示的場(chǎng)景的重要度的關(guān)系對(duì)各演出效果索引進(jìn)行如下判斷的識(shí)別符，即該判斷是該演出效果索引在該主索引的模板中是作為選擇確定的演出效果索引、還是作為成為選擇候補(bǔ)的演出效果索引，以及該演出效果索引在該模板中是作為刪除的演出效果索引、還是作為成為刪除候補(bǔ)的演出效果索引。
圖3表示匹配表與模板的具體例。圖3的700表示匹配表的具體例，圖3的701表示模板的具體例。在700中，表示“主索引”(在圖3(a)中用索引表示)與表示該主索引所屬的模板的保存場(chǎng)所的“路徑”之間的對(duì)應(yīng)關(guān)系。
此外，在701中，按照再現(xiàn)順序排列了表示與本壘打關(guān)聯(lián)的場(chǎng)景的各索引，對(duì)各索引分別附加了表示該索引所表示的場(chǎng)景的記錄開始時(shí)刻與記錄結(jié)束時(shí)刻的“IN點(diǎn)”、“OUT點(diǎn)”的記載欄。
圖4表示演出效果匹配表的具體例。圖4的801表示場(chǎng)景屬性信息，802表示分類信息，803表示判斷基準(zhǔn)，804表示演出效果索引，805表示狀況信息判斷識(shí)別符，806表示重要度判斷識(shí)別符。
此外，在圖4中，在狀況信息判斷識(shí)別符或重要度判斷識(shí)別符是“-”的情況下，表示在該主索引所屬的模板中將演出效果索引作為刪除候補(bǔ)對(duì)象，在與主索引建立了對(duì)應(yīng)的狀況信息判斷識(shí)別符或重要度判斷識(shí)別符是“◎”的情況下，表示將建立了對(duì)應(yīng)的演出效果索引在該主索引所屬的模板中作為選擇確定對(duì)象，在與主索引建立了對(duì)應(yīng)的狀況信息或重要度是“×”的情況下，表示將建立了對(duì)應(yīng)的演出效果索引在該主索引所屬的模板中作為刪除對(duì)象，在狀況信息判斷識(shí)別符或重要度判斷識(shí)別符是“○”的情況下，表示將建立了對(duì)應(yīng)的演出效果索引在該主索引所屬的模板中作為選擇候補(bǔ)對(duì)象。
利用該演出效果匹配表，能夠根據(jù)主索引的狀況信息、重要度來變更預(yù)先設(shè)定的模板的演出效果索引的內(nèi)容。
(摘要生成條件輸入部107)將摘要影像生成的條件(以下稱作“生成條件”)輸入到整體摘要生成部104。
這里，“生成條件”是指，包括作為摘要影像的構(gòu)成要素的主元數(shù)據(jù)的檢索條件、與對(duì)根據(jù)該檢索條件檢索到的各部分摘要的再現(xiàn)順序進(jìn)行指定的重新排列條件的條件。
這里，“部分摘要元數(shù)據(jù)”是指，包括如下內(nèi)容的數(shù)據(jù)根據(jù)與主元數(shù)據(jù)對(duì)應(yīng)的模板中包含的演出效果索引，通過后述的演出效果索引第1及第2選擇處理所選擇的演出效果索引及其IN點(diǎn)、OUT點(diǎn)；該模板中包含的主索引及其IN點(diǎn)、OUT點(diǎn)；和根據(jù)主索引與所選擇的演出效果索引分別確定的場(chǎng)景的再現(xiàn)順序。
作為檢索條件的例子，例如可舉出屬于主元數(shù)據(jù)的主索引及關(guān)鍵字、重要度的閾值等的指定。
此外，作為重新排列條件的例子，例如可舉出由主元數(shù)據(jù)確定的部分摘要元數(shù)據(jù)的記錄時(shí)間帶早的順序、重要度的順序。
(影像編輯裝置100)包括事件提取部101、部分摘要生成部102、部分摘要存儲(chǔ)部103、和整體摘要生成部104。
(事件提取部101)參照存儲(chǔ)在影像存儲(chǔ)部105中的各事件元數(shù)據(jù)的模板信息來判斷有無模板，提取具有模板的主元數(shù)據(jù)，再參照存儲(chǔ)在影像存儲(chǔ)部105中的狀況信息，提取與所提取的各主元數(shù)據(jù)建立了對(duì)應(yīng)的狀況信息，輸出給部分摘要生成部102。
(部分摘要存儲(chǔ)部103)存儲(chǔ)有由部分摘要生成部102生成的各部分摘要元數(shù)據(jù)和屬性數(shù)據(jù)。
這里，“屬性數(shù)據(jù)”是指，表示根據(jù)從構(gòu)成各部分摘要元數(shù)據(jù)的索引所涉及的事件元數(shù)據(jù)中提取的信息，由部分摘要生成部102生成的部分摘要元數(shù)據(jù)名、表示該部分摘要元數(shù)據(jù)的保存場(chǎng)所的片段路徑、主索引、表示從有關(guān)該部分摘要元數(shù)據(jù)的各場(chǎng)景的IN點(diǎn)中的表示最早記錄時(shí)刻的IN點(diǎn)到各場(chǎng)景的OUT點(diǎn)中的表示最晚記錄時(shí)刻的OUT點(diǎn)的記錄時(shí)刻的范圍的記錄時(shí)間帶、由包含在該部分摘要元數(shù)據(jù)中的各索引進(jìn)行分類的場(chǎng)景的再現(xiàn)順序、該部分摘要元數(shù)據(jù)的重要度、和對(duì)于與該部分摘要元數(shù)據(jù)有關(guān)的各事件元數(shù)據(jù)的關(guān)鍵字之間的對(duì)應(yīng)關(guān)系的信息。
圖5表示屬性數(shù)據(jù)的具體例。圖5的1000表示屬性數(shù)據(jù)，1001表示部分摘要元數(shù)據(jù)名，1002表示片段路徑，1003表示主索引，1004表示記錄時(shí)間帶，1005表示再現(xiàn)順序，1006表示重要度，1007表示關(guān)鍵字。
(整體摘要生成部104)
圖6是表示整體摘要生成部104的結(jié)構(gòu)的功能框圖。
整體摘要生成部104包括部分摘要元數(shù)據(jù)提取部301、部分摘要重新排列部302、摘要生成部303。
(部分摘要元數(shù)據(jù)提取部301)根據(jù)由摘要生成條件輸入部107輸入的生成條件中包含的檢索條件，基于存儲(chǔ)在部分摘要存儲(chǔ)部103中的屬性數(shù)據(jù)，提取符合檢索條件的各部分摘要元數(shù)據(jù)，輸出給部分摘要重新排列部302。
圖7表示根據(jù)屬性數(shù)據(jù)提取的部分摘要元數(shù)據(jù)的具體例。在圖7的例子中，表示在作為檢索條件將主索引指定為“本壘打”的情況下，根據(jù)圖5所示的屬性數(shù)據(jù)由部分摘要元數(shù)據(jù)提取部301提取出的關(guān)于“本壘打”的部分摘要元數(shù)據(jù)的例子。
此外，在指定了關(guān)鍵字作為檢索條件的情況下，根據(jù)圖5所示的屬性數(shù)據(jù)提取包含所指定的關(guān)鍵字(例如包含有“今岡”)的部分摘要元數(shù)據(jù)(例如“本壘打”和“三擊未中出局”的部分摘要元數(shù)據(jù))，在指定了重要度的閾值(例如使重要度的閾值為5的情況)作為檢索條件的情況下，根據(jù)圖5所示的屬性數(shù)據(jù)提取重要度超過該閾值的部分摘要元數(shù)據(jù)(例如“本壘打”、“安打”、和“滿壘本壘打”的部分摘要元數(shù)據(jù))。
(部分摘要重新排列部302)將由部分摘要元數(shù)據(jù)提取部301輸入的各部分摘要元數(shù)據(jù)，按照由摘要生成條件輸入部107輸入的、包含在生成條件中的重新排列條件所指定的再現(xiàn)順序重新排列，輸出給摘要生成部303。
(摘要生成部303)根據(jù)由部分摘要重新排列部302輸入的重新排列后的各部分摘要數(shù)據(jù)，生成使各部分摘要元數(shù)據(jù)按照重新排列后的順序結(jié)合的部分摘要元數(shù)據(jù)(以下稱作“整體摘要元數(shù)據(jù)”)。
再者，按照重新排列后的順序，將由包含在整體摘要元數(shù)據(jù)中的各部分摘要元數(shù)據(jù)確定的主索引及演出效果索引所確定的各場(chǎng)景，按照該部分摘要元數(shù)據(jù)所表示的再現(xiàn)順序進(jìn)行連續(xù)再現(xiàn)，再現(xiàn)摘要影像。
具體而言，按照部分摘要元數(shù)據(jù)所表示的再現(xiàn)順序，根據(jù)與包含在該部分摘要元數(shù)據(jù)中的索引有關(guān)的IN點(diǎn)、OUT點(diǎn)(在包含有攝影機(jī)號(hào)的情況下，還有攝影機(jī)號(hào))，從影像存儲(chǔ)部105依次提取對(duì)應(yīng)的影像流，進(jìn)行所提取的影像流的再現(xiàn)，來再現(xiàn)摘要影像。
圖8～圖10及圖20表示整體摘要元數(shù)據(jù)的具體例。圖8表示從圖5所示的屬性數(shù)據(jù)中進(jìn)行以“本壘打”為主索引的檢索、把重新排列順序作為“重要度”的情況下，生成的整體摘要元數(shù)據(jù)的具體例。
此外，圖18是根據(jù)圖8所示的整體摘要元數(shù)據(jù)，以圖形表示摘要生成部303再現(xiàn)摘要影像的過程的一部分的圖。具體而言，圖18以圖形表現(xiàn)了根據(jù)與圖8的最后的“本壘打”對(duì)應(yīng)的部分摘要元數(shù)據(jù)，摘要生成部303再現(xiàn)摘要影像的過程。
圖18的1601表示存儲(chǔ)在影像存儲(chǔ)部105中的棒球的攝影影像的影像流，表示由多個(gè)攝影機(jī)拍攝并記錄了4種影像流。
1602表示根據(jù)包含在“本壘打”的部分摘要元數(shù)據(jù)中的各索引的IN點(diǎn)、OUT點(diǎn)、攝像機(jī)號(hào)，摘要生成部303從1601所示的影像流中提取出的各索引所對(duì)應(yīng)的影像流。
1603表示摘要生成部303將所提取的各影像流按照“本壘打”的部分摘要元數(shù)據(jù)表示的再現(xiàn)順序進(jìn)行重新排列而制作的影像流。
1604表示根據(jù)摘要生成部303制作的影像流進(jìn)行再現(xiàn)的摘要影像的圖像。
圖9表示從圖5所示的屬性數(shù)據(jù)中進(jìn)行以“ABC”為關(guān)鍵字的檢索，使重新排列順序?yàn)椤坝涗洉r(shí)間帶早的順序”的情況下生成的整體摘要元數(shù)據(jù)的具體例。
圖10表示從圖5所示的屬性數(shù)據(jù)中進(jìn)行以“今岡”為關(guān)鍵字的檢索，使重新排列順序?yàn)椤坝涗洉r(shí)間帶早的順序”的情況下生成的整體摘要元數(shù)據(jù)的具體例。
此外，圖20表示從圖5所示的屬性數(shù)據(jù)中進(jìn)行使重要度的閾值為5的檢索(表示重要度為“5以上”的部分摘要元數(shù)據(jù)的檢索)，使重新排列順序?yàn)椤坝涗洉r(shí)間帶早的順序”的情況下生成的整體摘要元數(shù)據(jù)的具體例。
(部分摘要生成部102)圖11是表示部分摘要生成部102的結(jié)構(gòu)的功能框圖。
部分摘要生成部102包括模板匹配部201、第1演出效果選擇部202、第2演出效果選擇部203、演出效果索引取得部204、事件元數(shù)據(jù)切出部205、事件元數(shù)據(jù)重新排列部206、屬性數(shù)據(jù)提取部207、屬性數(shù)據(jù)賦予部208、片段模板合成部209。
(模板匹配部201)如果從事件提取部101輸入了各主元數(shù)據(jù)和與該主元數(shù)據(jù)的主索引對(duì)應(yīng)起來的狀況信息，則參照存儲(chǔ)在模板存儲(chǔ)部106中的匹配表，確定與輸入的主元數(shù)據(jù)表示的主索引對(duì)應(yīng)的模板的保存場(chǎng)所，從該保存場(chǎng)所取得模板，再從模板存儲(chǔ)部106取得演出效果匹配表，將輸入的各主元數(shù)據(jù)、狀況信息、取得的模板、和演出效果匹配表輸出給第1演出效果選擇部202。
(第1演出效果選擇部202)進(jìn)行以下所示的演出效果索引第1選擇處理。
如果從模板匹配部201輸入了各主元數(shù)據(jù)、狀況信息、各模板、和演出效果匹配表，則按各狀況信息、和有關(guān)該狀況信息的主元數(shù)據(jù)與模板的組來參照演出效果匹配表的狀況信息判斷識(shí)別符，對(duì)于包含在演出效果匹配表中的各演出效果索引進(jìn)行判斷處理，即判斷將該演出效果索引是在該模板中作為選擇的演出效果索引(以下稱作“選擇確定索引”)，還是將該演出效果索引在該模板中作為選擇候補(bǔ)的演出效果索引(以下稱作“選擇候補(bǔ)索引”)，還是將該演出效果索引在該模板中作為刪除的演出效果索引(以下稱作“刪除索引”)，還是將該演出效果索引在該模板中作為成為刪除候補(bǔ)的演出效果索引(以下稱作“刪除候補(bǔ)索引”)的，并且，把各組的判斷結(jié)果通知給第2演出效果選擇部203，再將各組的主元數(shù)據(jù)、模板和演出效果匹配表輸出給第2演出效果選擇部203。
(第2演出效果選擇部203)進(jìn)行以下所示的演出效果索引第2選擇處理。
如果從第1演出效果選擇部202有各主元數(shù)據(jù)和模板的組、演出效果表的輸入，以及關(guān)于各組的演出效果索引的第2選擇處理的判斷結(jié)果的通知，則參照主元數(shù)據(jù)所表示的重要度、和演出效果匹配表的重要度判斷識(shí)別符，對(duì)于包含在演出效果匹配表中的各演出效果索引，進(jìn)行將該演出效果索引作為選擇確定索引、還是將該演出效果索引作為選擇候補(bǔ)索引、還是將該演出效果索引作為刪除候補(bǔ)索引、還是將該演出效果索引作為刪除索引的判斷處理，確定演出效果索引第2選擇處理中的選擇確定索引、選擇候補(bǔ)索引、刪除候補(bǔ)索引、刪除確定索引，對(duì)有關(guān)各主元數(shù)據(jù)的模板進(jìn)行以下的各處理(選擇決定處理、刪除處理)，將處理后的各模板(以下稱作“當(dāng)前模板”)和各主元數(shù)據(jù)輸出給演出效果索引取得部204及事件元數(shù)據(jù)重新排列部206，還將有關(guān)各當(dāng)前模板的主元數(shù)據(jù)輸出給事件元數(shù)據(jù)重新排列部206。
1、選擇決定處理將在演出效果索引第2選擇處理的判斷處理中判斷為選擇確定索引的各演出效果索引、和在演出效果索引第1選擇處理的判斷處理中判斷為選擇確定索引的各演出效果索引，決定為包含在模板中的演出效果索引。
此外，在演出效果索引第2選擇處理的判斷處理中判斷為選擇候補(bǔ)索引的各演出效果索引，在演出效果索引第1選擇處理的判斷處理中也被判斷為選擇候補(bǔ)索引的情況下，對(duì)于該演出效果索引也決定為包含在模板中的索引。
2、刪除處理從模板中刪除在演出效果索引第2選擇處理的判斷處理中判斷為刪除索引的各演出效果索引、和在演出效果索引第1選擇處理的判斷處理中判斷為刪除索引的各演出效果索引。
此外，在演出效果索引第2選擇處理的判斷處理中判斷為選擇候補(bǔ)索引的各演出效果索引，在演出效果索引第1選擇處理的判斷處理中沒有被判斷為選擇候補(bǔ)索引的情況下，也從模板中刪除該演出效果索引。
此外，對(duì)于在演出效果索引第1選擇處理的判斷處理中判斷為刪除候補(bǔ)索引的各演出效果索引，在演出效果索引第2選擇處理的判斷處理中沒有被判斷為選擇確定索引的情況下，從模板刪除；同樣，對(duì)于在演出效果索引第2選擇處理的判斷處理中判斷為刪除候補(bǔ)索引的各演出效果索引，在演出效果索引第1選擇處理的判斷處理中沒有被判斷為選擇確定索引的情況下，從模板刪除。
以下，以“安打”的模板為具體例進(jìn)一步說明上述演出效果索引及第1及第2選擇處理，。
圖21表示存儲(chǔ)在模板存儲(chǔ)部106中的匹配表與安打用模板的具體例。圖21的2001表示匹配表的具體例，2002表示安打用模板的具體例。
假設(shè)從事件提取部101將圖2(b)的1710所示的有關(guān)“安打”的主元數(shù)據(jù)和圖2(c)的1713所示的有關(guān)該主元數(shù)據(jù)的狀況信息輸入到模板匹配部201，通過模板匹配部201參照?qǐng)D21的2001所示的匹配模板，對(duì)各主元數(shù)據(jù)取得安打用模板，并且將各主元數(shù)據(jù)、有關(guān)該主元數(shù)據(jù)的狀況信息、和安打用模板輸入到第1演出效果選擇部202，來說明上述演出效果索引第1及第2選擇處理。
第1演出效果選擇部202對(duì)于包含在圖4所示的演出效果匹配表中的各演出效果索引，確定與有關(guān)1710所示的“安打”的模板的狀況信息、即1713所示的“有跑壘者”、“與得分相聯(lián)系”分別對(duì)應(yīng)的狀況信息判斷識(shí)別符，將該狀況信息判斷識(shí)別符表示“◎”的、801的場(chǎng)景屬性信息為“背景”的“壘上鏡頭”的演出效果索引、和801的屬性信息為“結(jié)果”的“本壘打”的演出效果索引判斷為選擇確定索引，將該狀況信息判斷識(shí)別符表示“○”的、801的場(chǎng)景屬性信息為“結(jié)果”的“教練鏡頭(被行為者隊(duì))”、“教練鏡頭(行為者隊(duì))”、“候補(bǔ)席(事件被行為者隊(duì))”、“候補(bǔ)席祝賀(事件行為者隊(duì))”、“看臺(tái)(事件行為者隊(duì))”、“其他角度回放”、“慢動(dòng)作回放”的各演出效果索引判斷為選擇候補(bǔ)索引，對(duì)于其他演出效果索引，由于其狀況信息判斷識(shí)別符表示“-”，所以判斷為刪除候補(bǔ)索引，將判斷結(jié)果通知給第2演出效果選擇部203。
接著，第2演出效果選擇部203根據(jù)被通知的特定結(jié)果進(jìn)行演出效果索引第2選擇處理。
第2演出效果選擇部203對(duì)于包含在圖4所示的演出效果匹配表中的各演出效果索引，確定與有關(guān)1710所示的“安打”的模板的主元數(shù)據(jù)所示的重要度“8”(參照?qǐng)D2(b))對(duì)應(yīng)的重要度判斷識(shí)別符，將該重要度判斷識(shí)別符表示“◎”的、801的場(chǎng)景屬性信息為“背景”的“選手鏡頭(事件被行為者)”、“選手鏡頭(事件行為者)”的各演出效果索引、801的場(chǎng)景屬性信息為“結(jié)果”的“選手鏡頭(事件被行為者)”、“選手鏡頭(事件行為者)”的各演出效果索引分別判斷為選擇確定索引。
進(jìn)而，第2演出效果選擇部203將該重要度判斷識(shí)別符表示“○”的、801的場(chǎng)景屬性信息為“結(jié)果”的“教練鏡頭(事件被行為者隊(duì))”、“教練鏡頭(事件行為者隊(duì))”、“候補(bǔ)席(事件被行為者隊(duì))”、“候補(bǔ)席祝賀(事件行為者隊(duì))”、“看臺(tái)(事件行為者隊(duì))”的各演出效果索引判斷為選擇候補(bǔ)索引。
進(jìn)而，第2演出效果選擇部203將該重要度判斷識(shí)別符表示“×”的、801的場(chǎng)景屬性信息為“背景”的“觀眾鏡頭”的演出效果索引、801的場(chǎng)景屬性信息為“結(jié)果”的“其他角度回放”、“慢動(dòng)作回放”的各演出效果索引分別判斷為刪除索引。
進(jìn)而，第2演出效果選擇部203將該重要度判斷識(shí)別符表示“-”的、801的場(chǎng)景屬性信息為“背景”的“壘上鏡頭”的演出效果、801的場(chǎng)景屬性信息為“結(jié)果”的“本壘打”的演出效果索引，分別判斷為刪除候補(bǔ)索引。
第2演出效果選擇部203將判斷為選擇確定索引的、801的場(chǎng)景屬性信息為“背景”的“選手鏡頭(事件被行為者)”、“選手鏡頭(事件行為者)”的各演出效果索引、和801的場(chǎng)景屬性信息為“結(jié)果”的“選手鏡頭(事件被行為者)”、“選手鏡頭(事件行為者)”的各演出效果索引，決定為包含在模板中的演出效果索引。
進(jìn)而，判斷為選擇候補(bǔ)索引的、801的場(chǎng)景屬性信息為“結(jié)果”的“教練鏡頭(事件被行為者隊(duì))”、“教練鏡頭(事件行為者隊(duì))”、“候補(bǔ)席(事件被行為者隊(duì))”、“候補(bǔ)席祝賀(事件行為者隊(duì))”、“看臺(tái)(事件行為者隊(duì))”的各演出效果索引，由于在演出效果索引第1選擇處理的判斷中被判斷為選擇候補(bǔ)索引，所以第2演出效果選擇部203將這些各演出效果索引也決定為包含在模板中的演出效果索引。
另一方面，對(duì)于在演出效果索引第1選擇處理的判斷處理中判斷為選擇候補(bǔ)索引的、801的場(chǎng)景屬性信息為“結(jié)果”的“其他角度回放”、“慢動(dòng)作回放”的各演出效果索引，由于在演出效果索引第2選擇處理的判斷處理中被判斷為刪除索引，所以第2演出效果選擇部203從模板中刪除這些演出效果索引。
另一方面，對(duì)于判斷為選擇候補(bǔ)索引的、801的場(chǎng)景屬性信息為“背景”的“壘上鏡頭”、和801的場(chǎng)景屬性信息為“結(jié)果”的“本壘打”的各演出效果索引，由于在演出效果索引第1選擇處理的判斷處理中被判斷為選擇確定索引，所以第2演出效果選擇部203把“壘上鏡頭”、“本壘打”的各演出效果索引決定為包含在模板中的演出效果索引。
此外，對(duì)于判斷為刪除索引的、801的場(chǎng)景屬性信息為“背景”的“觀眾鏡頭”的演出效果索引，由于在演出效果索引第1選擇處理的判斷處理中被判斷為刪除候補(bǔ)索引，所以第2演出效果選擇部203從模板中刪除。
上述選擇處理后的演出效果索引在事件元數(shù)據(jù)重新排列部206中按照當(dāng)前模板所示的再現(xiàn)順序重新排列，通過片段模板合成部205組合到部分摘要元數(shù)據(jù)中。
圖22表示對(duì)于1710表示的“安打”的主數(shù)據(jù)生成的部分摘要元數(shù)據(jù)的具體例。
圖23、圖24表示將由圖2(b)的1711、1712表示的有關(guān)各“安打”的主數(shù)據(jù)、和由圖2(c)的1714、1715表示的有關(guān)該主元數(shù)據(jù)的狀況信息輸入到模板匹配部201的情況下，與上述同樣地進(jìn)行演出效果索引第1選擇處理及第2選擇處理而生成的、關(guān)于由1711表示的“安打”及由1712表示的“安打”的各主元數(shù)據(jù)的部分摘要元數(shù)據(jù)的具體例。
(演出效果索引取得部204)從由第2演出效果選擇部203輸入的各當(dāng)前模板提取演出效果索引，將提取出的各演出效果索引和由第2演出效果選擇部203輸入的各主元數(shù)據(jù)輸出給事件元數(shù)據(jù)切出部205。
(事件元數(shù)據(jù)切出部205)根據(jù)關(guān)于由演出效果索引取得部204輸入的各當(dāng)前模板的演出效果索引和有關(guān)該模板的主元數(shù)據(jù)所表示的IN點(diǎn)、OUT點(diǎn)，從包含存儲(chǔ)在影像存儲(chǔ)部105中的該演出效果索引的事件元數(shù)據(jù)中，提取在由主元數(shù)據(jù)表示的IN點(diǎn)、OUT點(diǎn)確定的記錄時(shí)間帶的附近的時(shí)間帶中具有IN點(diǎn)、OUT點(diǎn)的事件元數(shù)據(jù)(以下稱作“演出事件元數(shù)據(jù)”)，輸出給事件元數(shù)據(jù)重新排列部206。
這里，所謂的“附近的記錄時(shí)間帶”，是指包含在由主元數(shù)據(jù)的IN點(diǎn)、OUT點(diǎn)確定的記錄時(shí)間帶中、或者距離該記錄時(shí)間帶規(guī)定時(shí)間(例如從幾秒到幾十秒)的范圍內(nèi)的記錄時(shí)間帶，是預(yù)先設(shè)定的。由此，可以從索引相同的多個(gè)事件元數(shù)據(jù)中提取有關(guān)主元數(shù)據(jù)的演出事件元數(shù)據(jù)。
(事件元數(shù)據(jù)重新排列部206)將由第2演出效果選擇部203輸入的關(guān)于各當(dāng)前模板的主元數(shù)據(jù)、和由事件元數(shù)據(jù)切出部205輸入的關(guān)于各當(dāng)前模板的演出事件元數(shù)據(jù)，按照該當(dāng)前模板表示的再現(xiàn)順序重新排列，輸出給屬性數(shù)據(jù)提取部207及片段模板合成部209。
(屬性數(shù)據(jù)提取部207)如果從事件元數(shù)據(jù)重新排列部206輸入了關(guān)于各當(dāng)前模板的重新排列后的主元數(shù)據(jù)及各演出事件元數(shù)據(jù)，則從主元數(shù)據(jù)取得主索引、根據(jù)主元數(shù)據(jù)的IN點(diǎn)、OUT點(diǎn)決定的記錄時(shí)間帶、和關(guān)鍵字，還從各演出事件元數(shù)據(jù)取得關(guān)鍵字。
此外，根據(jù)主元數(shù)據(jù)及各演出事件元數(shù)據(jù)表示的重要度，計(jì)算每個(gè)當(dāng)前模板的重要度。重要度的計(jì)算既可以單純地將各重要度合計(jì)，也可以是其平均值，也可以對(duì)主元數(shù)據(jù)的重要度賦予加權(quán)來計(jì)算(例如將各演出事件元數(shù)據(jù)的重要度的平均值與主元數(shù)據(jù)的重要度合計(jì)來計(jì)算重要度)。
此外，從各當(dāng)前模板取得再現(xiàn)順序，根據(jù)取得或計(jì)算的上述各種數(shù)據(jù)生成屬性數(shù)據(jù)，輸出給屬性數(shù)據(jù)賦予部208。
(片段模板合成部209)從由事件元數(shù)據(jù)重新排列部206輸入的、關(guān)于各當(dāng)前模板的重新排列后的主元數(shù)據(jù)及各演出事件元數(shù)據(jù)中，提取主索引、演出效果索引、以及IN點(diǎn)及OUT點(diǎn)，將提取出的各索引按照重新排列后的順序排列，附加對(duì)應(yīng)于各索引的IN點(diǎn)及OUT點(diǎn)而生成部分摘要元數(shù)據(jù)，輸出給屬性數(shù)據(jù)賦予部208。
(屬性數(shù)據(jù)賦予部208)將由片段模板合成部209輸入的各部分摘要元數(shù)據(jù)與由屬性數(shù)據(jù)提取部207輸入的屬性數(shù)據(jù)建立對(duì)應(yīng)，記錄到部分摘要存儲(chǔ)部103中。
具體而言，將表示各部分摘要元數(shù)據(jù)在部分摘要存儲(chǔ)部103中的保存場(chǎng)所的片段路徑附加到屬性數(shù)據(jù)中，將該屬性數(shù)據(jù)記錄到部分摘要存儲(chǔ)部103中。
<動(dòng)作>
(演出效果索引第1選擇處理)接著，對(duì)第1演出效果選擇部202進(jìn)行的演出效果索引第1選擇處理的動(dòng)作進(jìn)行說明。圖12及圖13是表示上述動(dòng)作的流程圖。
如果從模板匹配部201有各主元數(shù)據(jù)、各狀況信息、各模板、演出效果匹配表的輸入(步驟S3001)，則第1演出效果選擇部202取得各狀況信息、和有關(guān)該狀況信息的主元數(shù)據(jù)與模板的組(步驟S3002)，參照演出效果匹配表的狀況信息判斷識(shí)別符，對(duì)于包含在演出效果匹配表中的各演出效果索引，確定與狀況信息所表示的記述對(duì)應(yīng)的狀況信息判斷識(shí)別符(步驟S3003)，按照該狀況信息判斷識(shí)別符，判斷該演出效果索引是選擇確定索引(步驟S3004)、還是選擇候補(bǔ)索引(步驟S3005)、還是刪除索引(步驟S3006)。
在步驟S3004中，在判斷為選擇確定索引的情況下(步驟S3004的“是”)，將該演出效果索引的判斷結(jié)果作為選擇確定索引保持(步驟S3007)，判斷是否對(duì)包含在演出效果匹配表中的所有的演出效果索引結(jié)束了選擇處理(步驟S3011)，在已結(jié)束的情況下(步驟S3011的“是”)，將保持的各判斷結(jié)果通知給第2演出效果選擇部203(步驟S3012)，將該組的主元數(shù)據(jù)和模板輸出給第2演出效果選擇部203，再判斷是否對(duì)所有的組結(jié)束了選擇處理(步驟S3013)。
在步驟S3011的判斷為否定的情況下(步驟S3011的“否”)，轉(zhuǎn)移到步驟S3003的處理，在步驟S3013的判斷為否定的情況下(步驟S3013的“否”)，轉(zhuǎn)移到步驟S3002的處理。
在步驟S3005中判斷為選擇候補(bǔ)索引的情況下(步驟S3005的“是”)，將該演出效果索引的判斷結(jié)果作為選擇候補(bǔ)索引保持(步驟S3008)，轉(zhuǎn)移到步驟S3011的處理。
在步驟S3006中判斷為刪除索引的情況下(步驟S3006的“是”)，將該演出效果索引的判斷作為刪除索引保持(步驟S3009)，轉(zhuǎn)移到步驟S3011的處理。
在步驟S3006的判斷為否定的情況下(步驟S3006的“否”)，判斷該演出效果索引為刪除候補(bǔ)索引，將該演出效果索引的判斷結(jié)果作為刪除候補(bǔ)索引保持(步驟S3010)，轉(zhuǎn)移到步驟S3011的處理。
(演出效果索引第2選擇處理)接著，對(duì)第2演出效果選擇部203進(jìn)行的演出效果索引第2選擇處理的動(dòng)作進(jìn)行說明。圖14及圖15是表示上述動(dòng)作的流程圖。
如果從第1演出效果選擇部202獲取了主元數(shù)據(jù)與模板的組、和演出效果匹配表的輸入及判斷結(jié)果的通知(步驟S4001)，則對(duì)于包含在所輸入的演出效果匹配表中的各演出效果索引，確定與所輸入的主元數(shù)據(jù)表示的重要度建立了對(duì)應(yīng)的重要度判斷識(shí)別符(步驟S4002)，按照該重要度判斷識(shí)別符，判斷該演出效果索引是選擇確定索引(步驟S4003)、還是選擇候補(bǔ)索引(步驟S4004)。
在步驟S4003中判斷為選擇確定索引的情況下(步驟S4003的“是”)，第2演出效果選擇部203將該演出效果索引決定為包含在模板中的演出效果索引(S4006)，判斷是否對(duì)包含在演出效果匹配表中的所有的演出效果索引結(jié)束了選擇處理(步驟S4010)，在沒有結(jié)束的情況下(步驟S4010的“否”)，轉(zhuǎn)移到步驟S4002的處理。
在步驟S4004中判斷為選擇候補(bǔ)索引的情況下(步驟S4004的“是”)，第2演出效果選擇部203對(duì)于該演出效果索引判斷從第1演出效果選擇部202通知的判斷結(jié)果是否是選擇候補(bǔ)索引(步驟S4007)，在是選擇候補(bǔ)索引的情況下(步驟S4007的“是”)，轉(zhuǎn)移到步驟S4006的處理，在不是選擇候補(bǔ)索引的情況下(步驟S4007的“否”)，將該演出效果索引決定為從模板刪除的演出效果索引(步驟S4009)，轉(zhuǎn)移到步驟S4010的處理。
在步驟S4004的判斷結(jié)果為否定的情況下(步驟S4004的“否”)，判斷該演出效果索引是刪除索引或刪除候補(bǔ)索引，對(duì)于該演出效果索引，判斷從第1演出效果選擇部202通知的判斷結(jié)果是否是選擇確定索引(步驟S4008)，在是選擇確定索引的情況下(步驟S4008的“是”)，轉(zhuǎn)移到步驟S4006的處理，在不是選擇確定索引的情況下(步驟S4008的“否”)，轉(zhuǎn)移到步驟S4009的處理。
每當(dāng)從第1演出效果選擇部202獲取了主元數(shù)據(jù)與模板的組、和演出效果匹配表的輸入及判斷結(jié)果的通知時(shí)，第2演出效果選擇部203重復(fù)上述選擇處理，將演出效果索引第2選擇處理后的各當(dāng)前模板輸出給演出效果索引取得部204及事件元數(shù)據(jù)重新排列部206，還將有關(guān)各當(dāng)前模板的主元數(shù)據(jù)輸出給事件元數(shù)據(jù)重新排列部206。
(部分摘要元數(shù)據(jù)生成處理)接著，對(duì)部分摘要元數(shù)據(jù)生成部102進(jìn)行的部分摘要元數(shù)據(jù)生成處理的動(dòng)作進(jìn)行說明。圖16是表示上述動(dòng)作的流程圖。
如果輸入了演出效果索引第2選擇處理后的各當(dāng)前模板和有關(guān)該當(dāng)前模板的主元數(shù)據(jù)(步驟S5001)，則從各當(dāng)前模板提取演出效果索引(步驟S5002)，提取包含從影像存儲(chǔ)部105提取的演出效果索引的演出事件元數(shù)據(jù)(步驟S5003)，將對(duì)于各當(dāng)前模板提取的演出事件元數(shù)據(jù)和有關(guān)該當(dāng)前模板的主元數(shù)據(jù)按照該當(dāng)前模板所表示的再現(xiàn)順序重新排列(步驟S5004)，從重新排列后的主元數(shù)據(jù)及各演出事件元數(shù)據(jù)提取主索引、演出效果索引、以及IN點(diǎn)及OUT點(diǎn)(步驟S5005)，將所提取的各索引按照重新排列后的順序排列，附加對(duì)應(yīng)于各主索引的IN點(diǎn)及OUT點(diǎn)，生成部分摘要元數(shù)據(jù)(步驟S5006)，再從重新排列后的主元數(shù)據(jù)及各演出事件元數(shù)據(jù)中取得主索引、根據(jù)主元數(shù)據(jù)所表示的IN點(diǎn)、OUT點(diǎn)計(jì)算出的記錄事件、和關(guān)鍵字，計(jì)算關(guān)于該當(dāng)前模板的重要度，從該當(dāng)前模板取得再現(xiàn)順序，根據(jù)它們生成屬性數(shù)據(jù)(步驟S5007)，將生成的部分摘要元數(shù)據(jù)和屬性數(shù)據(jù)對(duì)應(yīng)起來記錄到部分摘要記錄部103(步驟S5008)。
(整體摘要生成處理)接著，對(duì)整體摘要生成部104進(jìn)行的整體摘要生成處理的動(dòng)作進(jìn)行說明。
圖17是表示上述動(dòng)作的流程圖。
如果從摘要生成條件輸入部107輸入了生成條件(步驟S6001)，則整體摘要生成部104從存儲(chǔ)在部分摘要存儲(chǔ)部103中的屬性數(shù)據(jù)中提取與包含在生成條件中的檢索條件相符合的各部分摘要元數(shù)據(jù)(步驟S6002)，將提取出的各部分摘要元數(shù)據(jù)按照包含在生成條件中的重新排列條件所指定的再現(xiàn)順序重新排列(步驟S6003)，根據(jù)重新排列后的各部分摘要元數(shù)據(jù)，將各部分摘要元數(shù)據(jù)按照重新排列后的結(jié)合而生成整體摘要元數(shù)據(jù)(步驟S6004)，再按照重新排列后的順序，按照包含在整體摘要元數(shù)據(jù)中的各部分摘要元數(shù)據(jù)所表示的再現(xiàn)順序，根據(jù)關(guān)于包含在該部分摘要元數(shù)據(jù)中的索引的IN點(diǎn)、OUT點(diǎn)(在包含有攝像機(jī)號(hào)的情況下還有攝像機(jī)號(hào))，從影像存儲(chǔ)部105中依次提取對(duì)應(yīng)的影像流(步驟S6005)，進(jìn)行所提取的影像流的再現(xiàn)，來再現(xiàn)摘要影像(步驟S6006)。
<補(bǔ)充>
以上，根據(jù)實(shí)施方式對(duì)于有關(guān)本發(fā)明的影像編輯系統(tǒng)10進(jìn)行了說明，但本發(fā)明當(dāng)然并不限于這些實(shí)施方式。
(1)在本實(shí)施方式中，根據(jù)與主元數(shù)據(jù)建立了對(duì)應(yīng)的狀況信息及重要度，變更了有關(guān)主元數(shù)據(jù)的模板的索引的內(nèi)容，但也可以將有關(guān)主元數(shù)據(jù)的模板的內(nèi)容固定。
具體而言，在圖11所示的部分摘要元數(shù)據(jù)生成部102的結(jié)構(gòu)中，也可以將部分摘要元數(shù)據(jù)生成部102的結(jié)構(gòu)做成將第1演出效果選擇部202、第2演出效果選擇部203刪除的結(jié)構(gòu)，將與由模板匹配部201取得的各主元數(shù)據(jù)建立了對(duì)應(yīng)的模板輸出給演出效果索引取得部204，然后，對(duì)于輸出的各模板，在演出效果索引取得部204、事件元數(shù)據(jù)切出部205、事件元數(shù)據(jù)重新排列部206、屬性數(shù)據(jù)提取部207、屬性數(shù)據(jù)賦予部208、片段模板合成部209中，進(jìn)行與本實(shí)施方式的情況同樣的處理，制作關(guān)于各主元數(shù)據(jù)的部分摘要元數(shù)據(jù)、屬性數(shù)據(jù)，記錄在部分摘要存儲(chǔ)部103中。
圖19是表示上述變形例中的部分摘要元數(shù)據(jù)生成部102的結(jié)構(gòu)的功能框圖。
(2)在本實(shí)施方式中，演出效果匹配表不論主索引屬于的模板的種類如何都為1個(gè)，但也可以設(shè)置因主索引屬于的模板的種類而不同的演出效果匹配表，也可以對(duì)主索引屬于的特定的多個(gè)種類的模板的每一種設(shè)置演出效果匹配表。
(3)在本實(shí)施方式中，根據(jù)狀況信息及主元數(shù)據(jù)表示的重要度而從演出效果匹配表選擇演出效果索引，但也可以在演出效果匹配表中設(shè)置基于用戶的個(gè)人嗜好的判斷識(shí)別符的欄而使用戶能夠輸入設(shè)定判斷識(shí)別符，也可以除了狀況信息、重要度以外，根據(jù)基于個(gè)人嗜好的判斷識(shí)別符來選擇演出效果索引。例如，如果在圖4的演出效果匹配表中將各“選手鏡頭”的判斷識(shí)別符設(shè)定為“◎”，則可以在選擇后的部分摘要元數(shù)據(jù)中包含“選手鏡頭”的演出效果索引，可以在再現(xiàn)的摘要影像中包含選手鏡頭的影像。
(4)在本實(shí)施方式中，分別將影像流、事件元數(shù)據(jù)和狀況信息存儲(chǔ)到影像存儲(chǔ)部105中，將匹配表、模板和演出效果匹配表存儲(chǔ)到模板存儲(chǔ)部106中，但也可以存儲(chǔ)到1個(gè)存儲(chǔ)部或存儲(chǔ)媒體中。
(5)在本實(shí)施方式的影像編輯系統(tǒng)10的結(jié)構(gòu)中，具有在影像編輯裝置100中包括部分摘要元數(shù)據(jù)生成部102、部分摘要存儲(chǔ)部103、整體摘要生成部104的結(jié)構(gòu)，但例如也可以做成如下結(jié)構(gòu)，作為播放局側(cè)的影像編輯裝置而做成包括影像存儲(chǔ)部105、事件提取部101、部分摘要元數(shù)據(jù)生成部102、部分摘要存儲(chǔ)部103，在接收播放的用戶側(cè)的播放接收機(jī)中包括整體摘要生成部104、摘要生成條件輸入部107、和僅存儲(chǔ)從播放局接收到的影像流的影像存儲(chǔ)部205，將播放局側(cè)的影像編輯裝置和用戶側(cè)的播放接收機(jī)通過電氣通信線路(例如因特網(wǎng))連接的結(jié)構(gòu)。
具體而言，也可以通過從摘要生成條件輸入部107輸入摘要影像的生成條件，整體摘要生成部104經(jīng)由電氣通信線路與播放局側(cè)的影像編輯裝置連接，從部分摘要存儲(chǔ)部103取得滿足生成條件的各部分摘要元數(shù)據(jù)，根據(jù)所取得的各部分摘要元數(shù)據(jù)，從包含在播放接收機(jī)中的影像存儲(chǔ)部205提取對(duì)應(yīng)的各部分影像流，來制作摘要影像。
由此，能夠在家庭中簡(jiǎn)單地將接收到的播放節(jié)目的摘要再現(xiàn)。
(6)在本實(shí)施方式中使用的影像流既可以是實(shí)時(shí)的直播的影像流，也可以是預(yù)先記錄的視頻再現(xiàn)用的影像流。
此外，影像流的內(nèi)容并不限于棒球，也可以是其他運(yùn)動(dòng)播放或卡拉OK大會(huì)的影像。
例如，在制作卡拉OK大會(huì)的參加者唱歌的場(chǎng)景的摘要影像的情況下，在卡拉OK大會(huì)中得到高分的人的情況下，除了唱歌期間的場(chǎng)景以外，還提取唱歌的人的資料等補(bǔ)充說明的影像作為摘要影像，得分較低的人唱歌的場(chǎng)景的影像僅提取唱歌期間的場(chǎng)景，在棒球影像以外的影像流中，也能夠利用本發(fā)明來制作吸引觀看者的興趣那樣的摘要影像。
(7)本實(shí)施方式的影像編輯系統(tǒng)10具體而言是由微處理器、ROM、RAM、硬盤單元、顯示器單元、鍵盤、鼠標(biāo)等構(gòu)成的計(jì)算機(jī)系統(tǒng)。在上述RAM或上述硬盤單元中存儲(chǔ)有計(jì)算機(jī)程序。通過上述微處理器按照上述計(jì)算機(jī)程序動(dòng)作，各節(jié)目選擇支援裝置實(shí)現(xiàn)其功能。這里，計(jì)算機(jī)程序是為了實(shí)現(xiàn)規(guī)定的功能而組合了多個(gè)表示對(duì)計(jì)算機(jī)的指示的命令代碼而構(gòu)成的。
(8)在本實(shí)施方式的影像編輯裝置100中生成的部分摘要元數(shù)據(jù)、整體摘要元數(shù)據(jù)的格式既可以是XML(Extensible MarkupLanguage，可擴(kuò)展標(biāo)識(shí)語言)，也可以是RDF(Resource DescriptionFramework，資源描述框架)，也可以是EDL(Edit Decision List，編輯決策表)。此外，也可以是上述以外的其他格式。
(9)此外，在本實(shí)施方式中，使?fàn)顩r信息為主元數(shù)據(jù)與其他數(shù)據(jù)，但也可以是在主元數(shù)據(jù)中包含有狀況信息。
工業(yè)實(shí)用性本發(fā)明通過從記錄的影像的影像流中提取特定的一部分，能夠作為用來制作概覽該影像的摘要影像的技術(shù)而使用。
權(quán)利要求
1.一種影像編輯裝置，從記錄在記錄媒體中的影像流所表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)，其特征在于，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯裝置具備取得單元，從上述記錄媒體取得第1影像確定信息；選擇單元，從上述選擇表中選擇同與取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取單元，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息表示的記錄時(shí)間相當(dāng)于第1影像確定信息所表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
2.一種影像編輯裝置，其特征在于，在上述記錄媒體中，將表示上述第1影像與多種上述第2影像的再現(xiàn)順序的模板信息，同上述第1影像確定信息對(duì)應(yīng)起來進(jìn)行記錄；上述影像編輯裝置還具備再現(xiàn)單元，上述再現(xiàn)單元根據(jù)第1影像確定信息和所提取的第2影像確定信息，從上述影像流中提取第1影像和第2影像，并進(jìn)行按照與上述第1影像確定信息對(duì)應(yīng)的模板信息所表示的再現(xiàn)順序，再現(xiàn)所提取的上述第1影像和上述第2影像的再現(xiàn)處理。
3.如權(quán)利要求2所述的影像編輯裝置，其特征在于，上述影像流包含多個(gè)第1影像；在上述記錄媒體中記錄有多個(gè)第1影像確定信息、和對(duì)應(yīng)于各第1影像確定信息的模板信息；上述取得單元從上述記錄媒體取得上述各第1影像確定信息；每當(dāng)取得上述第1影像確定信息時(shí)，上述選擇單元從上述選擇表中選擇同與取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；上述提取單元從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息、即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于所取得的第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息；上述再現(xiàn)單元具有生成單元，生成包含所取得的第1影像確定信息的時(shí)間信息、所提取的第2影像確定信息的時(shí)間信息、和與所取得的第1影像確定信息對(duì)應(yīng)的模板信息的部分索引信息；存儲(chǔ)單元，存儲(chǔ)生成的各部分索引信息；流再現(xiàn)單元，根據(jù)用戶指示從上述存儲(chǔ)單元讀出各部分索引信息，根據(jù)所讀出的各部分索引信息，從上述影像流提取第1影像和第2影像，進(jìn)行上述再現(xiàn)處理。
4.如權(quán)利要求1所述的影像編輯裝置，其特征在于，上述狀況信息表示的狀況是主要場(chǎng)面的剛剛之前的場(chǎng)面的狀況。
5.如權(quán)利要求1所述的影像編輯裝置，其特征在于，上述狀況信息表示的狀況是表示基于主要場(chǎng)面的結(jié)果的場(chǎng)面的狀況。
6.如權(quán)利要求2所述的影像編輯裝置，其特征在于，在上述記錄媒體中記錄有多種上述影像流，對(duì)上述各影像流賦予識(shí)別該上述影像流的流識(shí)別信息；上述第1影像確定信息包含記錄有第1影像的上述影像流的流識(shí)別信息；各種的上述第2影像確定信息包含記錄有第2影像的上述影像流的流識(shí)別信息；上述再現(xiàn)單元從具有被包含在上述第1影像確定信息中的流識(shí)別信息的上述影像流中提取第1影像，從具有被包含在所提取的上述第2影像確定信息中的流識(shí)別信息的上述影像流中提取第2影像。
7.一種影像編輯裝置，從記錄在記錄媒體中的影像流所表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)，其特征在于，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示第1影像的重要度的重要度信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的重要度信息和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯裝置具備取得單元，從上述記錄媒體取得第1影像確定信息；選擇單元，從上述選擇表中選擇同與所取得的第1影像確定信息的重要度信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取單元，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
8.一種影像編輯方法，從記錄在記錄媒體中的影像流所表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)，其特征在于，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯方法包括取得步驟，從上述記錄媒體取得第1影像確定信息；選擇步驟，從上述選擇表中選擇同與所取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取步驟，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
9.一種程序，使影像編輯裝置執(zhí)行影像編輯處理，上述影像編輯裝置從記錄在記錄媒體中的影像流所表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)，其特征在于，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯處理包括取得步驟，從上述記錄媒體取得第1影像確定信息；選擇步驟，從上述選擇表中選擇同與所取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取步驟，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
10.一種記錄媒體，是記錄有使影像編輯裝置執(zhí)行影像編輯處理的程序的計(jì)算機(jī)可讀取的記錄媒體，上述影像編輯裝置從記錄在記錄媒體中的影像流所表示的整體影像中提取特定的影像進(jìn)行再現(xiàn)，其特征在于，上述影像流包含表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息、和有關(guān)第2影像的種類的識(shí)別信息之間的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯處理包括取得步驟，從上述記錄媒體取得第1影像確定信息；選擇步驟，從上述選擇表中選擇同與所取得的第1影像確定信息的狀況信息對(duì)應(yīng)起來的第2影像的種類有關(guān)的識(shí)別信息；提取步驟，從上述記錄媒體提取符合所選擇的上述識(shí)別信息表示的種類的第2影像確定信息，即時(shí)間信息所表示的記錄時(shí)間相當(dāng)于第1影像確定信息表示的記錄時(shí)間的附近的記錄時(shí)間的第2影像確定信息。
全文摘要
從記錄在記錄媒體中的影像流表示的整體影像中提取特定的影像并再現(xiàn)的影像編輯裝置(100)，上述影像流包括表示主要場(chǎng)面的第1影像、和用于加強(qiáng)主要場(chǎng)面的演出效果的多種第2影像；在上述記錄媒體中，作為確定第1影像的第1影像確定信息，記錄有以記錄時(shí)間表示第1影像的記錄位置的時(shí)間信息、和表示與第1影像的主要場(chǎng)面關(guān)聯(lián)的場(chǎng)面的狀況的狀況信息；作為確定各種第2影像的第2影像確定信息，記錄有以記錄時(shí)間表示第2影像的記錄位置的時(shí)間信息、和識(shí)別第2影像的種類的識(shí)別信息；還記錄有表示有關(guān)第1影像的狀況信息和有關(guān)第2影像的種類的識(shí)別信息的對(duì)應(yīng)關(guān)系的選擇表；上述影像編輯裝置(100)具備部分摘要生成部(102)，從上述記錄媒體取得第1影像確定信息，從上述選擇表中選擇有關(guān)與所取得的第1影像確定信息的狀況信息建立了對(duì)應(yīng)的第2影像的種類的識(shí)別信息，從上述記錄媒體中提取對(duì)應(yīng)于所選擇的上述識(shí)別信息表示的種類的第2影像確定信息、即時(shí)間信息表示的記錄時(shí)間對(duì)應(yīng)于第1影像確定信息表示的記錄時(shí)間附近的記錄時(shí)間的第2影像確定信息；整體摘要生成部(104)，根據(jù)第1影像確定信息和所提取的第2影像確定信息，從上述影像流中提取第1影像與第2影像并再現(xiàn)。
文檔編號(hào)H04N5/85GK1977530SQ20058002197
公開日2007年6月6日 申請(qǐng)日期2005年6月28日 優(yōu)先權(quán)日2004年6月29日
發(fā)明者中井健太郎, 森田克之, 清水秀一 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社