專利名稱：音頻/視頻記錄裝置、記錄方法、再現(xiàn)裝置、再現(xiàn)方法、再現(xiàn)程序和記錄程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種音頻/視頻記錄裝置、記錄方法、再現(xiàn)裝置、再現(xiàn)方法和再現(xiàn)程序，尤其是涉及如下音頻/視頻記錄裝置、記錄方法、再現(xiàn)裝置、再現(xiàn)方法、再現(xiàn)程序和記錄程序，即將同步記錄于光盤等記錄媒體中的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象，記錄在記錄媒體中，連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的一部分或全部。
背景技術(shù)：
將音頻數(shù)據(jù)與視頻數(shù)據(jù)記錄在記錄媒體中的方法有多種多樣，有對(duì)錄像磁帶的模擬記錄或數(shù)字記錄、對(duì)盤媒體的模擬記錄或數(shù)字記錄，但近年來(lái)，因其高品位與存取性等，對(duì)盤媒體的數(shù)字記錄成為主流。代表例是DVD(Digital Versatile Disc)，使高品位的視頻數(shù)據(jù)和音頻數(shù)據(jù)無(wú)縫地對(duì)DVD-RW、DVD-RAM等記錄型媒體進(jìn)行記錄/再現(xiàn)(例如參照再公表特許WO97/13364號(hào)公報(bào)(圖47、圖61))。
這里，作為視頻數(shù)據(jù)的編碼方式，一般使用MPEG(Moving Picture ExpertsGroup)視頻。MPEG視頻(主要是MPEG2視頻)中，具有I圖片、P圖片、B圖片種類來(lái)編碼視頻數(shù)據(jù)的各幀(或字段)。所謂I圖片是可獨(dú)立解碼的圖片，I是Intra的縮寫。所謂P圖片是使用I圖片或其它P圖片的前方預(yù)測(cè)來(lái)編碼的圖片，P是Prediction的縮寫。所謂B圖片是使用I圖片或P圖片的前方/后方預(yù)測(cè)來(lái)編碼的圖片，B是Bi-directional-prediction的縮寫。另外，NTSC方式下的視頻幀周期約為1/30秒(正確地是1/29.97秒)，在PAL方式的情況下為1/25秒。
另一方面，作為音頻數(shù)據(jù)的編碼方式，大致存在線性PCM方式與壓縮編碼方式兩種。在壓縮編碼方式中，多使用杜比數(shù)字(AC-3)或DTS(DigitalTheater System)、MPEG音頻等。
在線性PCM方式中，傳輸采樣及量子化后的數(shù)字?jǐn)?shù)據(jù)。傳輸比特?cái)?shù)使用16、20、24等。在采樣頻率中使用48kHz等。音頻幀周期的設(shè)定是任意的。例如，使用1/600秒(在48kHz時(shí)，為80采樣大小)等。
在壓縮編碼方式中，使用正交變換或聽覺模塊來(lái)壓縮線性PCM數(shù)據(jù)。多數(shù)情況下，音頻幀周期適用2的冪的采樣數(shù)(或其整數(shù)倍)，例如若在48kHz時(shí)為1024采樣，則音頻幀周期約為21msec(＝1024/48000)。在壓縮編碼方式中，對(duì)音頻幀使用2的冪的采樣數(shù)的理由在于，將線性PCM采樣數(shù)據(jù)變換為頻譜的正交變換適于將2的冪的采樣設(shè)為輸入輸出。
但是，在編碼帶聲音的視頻信號(hào)并記錄在DVD等記錄媒體中的情況下，由上述編碼方式編碼視頻數(shù)據(jù)與音頻數(shù)據(jù)，并由MPEG系統(tǒng)多路復(fù)用，例如作為MPEG程序流，記錄在記錄媒體上。下面，將這種多路復(fù)用流數(shù)據(jù)稱為視頻對(duì)象(VOB)。
此時(shí)，雖然VOB內(nèi)的視頻數(shù)據(jù)與音頻數(shù)據(jù)同步，但視頻幀周期與音頻幀周期幾乎不一致，以各個(gè)周期來(lái)記錄。這是因?yàn)橐曨l幀周期依賴于TV系統(tǒng)來(lái)唯一確定，音頻幀周期另外設(shè)定例如考慮了壓縮編碼的效率化的最佳長(zhǎng)度。
圖1中示出該方式。
如圖1所示，視頻幀周期(TV)與音頻幀周期(TA)不同。是一連串的視頻數(shù)據(jù)與音頻數(shù)據(jù)被同步記錄的實(shí)例，是在數(shù)據(jù)開頭部分、視頻數(shù)據(jù)與音頻數(shù)據(jù)的幀開頭一致的典型實(shí)例。在數(shù)據(jù)的中途，視頻幀交界與音頻幀交界基本上不一致(除去視頻幀周期與音頻幀周期的最小公倍數(shù)的位置)。
這里，考慮連續(xù)編輯分別記錄的兩個(gè)VOB的全部或各個(gè)部分并連續(xù)再現(xiàn)的用途。圖2示出一例。圖中示出從VOB(i)的時(shí)刻X連續(xù)到VOB(j)的時(shí)刻Y的實(shí)例。添加于視頻幀的I、P、B文字表示已說(shuō)明的圖片類型。另外，請(qǐng)注意圖中視頻幀和音頻幀都按再現(xiàn)時(shí)的順序顯示。在實(shí)際的VOB中，需要按Ii1、Pi1、Bi1、Bi2的順序記錄，Bi1或Bi2的解碼可使用Ii1與Pi1來(lái)執(zhí)行。
這里，為了在再現(xiàn)時(shí)再現(xiàn)VOB(i)的從時(shí)刻A至?xí)r刻X的各圖片，并接著再現(xiàn)VOB(j)的從時(shí)刻Y至?xí)r刻B的各圖片，必需注意該再現(xiàn)路線中包含的時(shí)刻X和時(shí)刻Y附近的圖片類型。即，VOB(i)的Bi3與Bi4的解碼中必需Pi2，而Pi2不存在于該再現(xiàn)路線中。因此，必需將例如Bi4變換為P圖片類型Pi4’，將Bi3變換為Bi3’(Bi3’根據(jù)Pi1與Pi4’來(lái)編碼)。
同樣，VOB(j)的Pj1的解碼需要Ij1，但I(xiàn)j1不存在于該再現(xiàn)路線中。因此，必需例如將Pj1變換為I圖片類型Ij1’。由此，可以Pi1→Bi3’→Pi4’→Ii1’→Bj3→Bj4等路線再現(xiàn)數(shù)據(jù)。為了方便，將連接后的連接點(diǎn)設(shè)為Z。
另外，上述說(shuō)明是視頻編碼方式為使用MPEG等幀間預(yù)測(cè)的方式時(shí)的一例，例如如DV方式那樣，在編碼在各幀處完結(jié)的情況下，不必這種圖片的變換處理。另外，即便在MPEG等情況下，例如選擇連接源在I圖片之前的B圖片結(jié)束、連接對(duì)象在I圖片開始的連接點(diǎn)的情況等下，也不必圖片變換處理。
下面，考慮在連接點(diǎn)Z的視頻幀的再現(xiàn)。在上述實(shí)例中，要求基本上沒有在再現(xiàn)1視頻幀周期的Pi4’幀之后再現(xiàn)Ij1’幀、即沒有在Z點(diǎn)終止視頻幀圖像的無(wú)縫再現(xiàn)。為了執(zhí)行無(wú)縫再現(xiàn)，一般需要滿足以下條件。
(1)解碼A→Z→B的路線所需的視頻幀的數(shù)據(jù)包含于該路線中(上述說(shuō)明)。
(2)配置記錄數(shù)據(jù)，使系統(tǒng)中規(guī)定的緩沖器在A→Z→B的路線的數(shù)據(jù)讀入中不引起緩沖器下溢。出于該目的，有時(shí)將Z附近的數(shù)據(jù)或A→Z→B的路線的數(shù)據(jù)全部或部分再記錄在與連續(xù)編輯前的位置不同的位置上。
(3)在連接點(diǎn)Z的前后，執(zhí)行復(fù)位系統(tǒng)時(shí)鐘(STC)的處理。這是因?yàn)橐话鉜OB(i)中的時(shí)間軸與VOB(j)中的時(shí)間軸不同，因此，時(shí)刻X的STC值與時(shí)刻Y的STC值具有不同的值。
這里，用圖2來(lái)考慮連續(xù)編輯中的音頻幀的處理。如上所述，在構(gòu)成數(shù)據(jù)以使無(wú)縫連接視頻幀之間的情況下，基本上在連接點(diǎn)無(wú)法無(wú)縫連接音頻幀。這是因?yàn)橐纛l幀周期與視頻幀周期不同，不能期待在任意連接點(diǎn)，連接源的最終音頻幀的再現(xiàn)結(jié)束時(shí)刻與連接對(duì)象的開頭音頻幀的再現(xiàn)開始時(shí)刻一致。因此，如圖2中G所示，以前允許在音頻幀之間存在縫隙。
圖3表示考慮了圖2的連結(jié)編輯時(shí)的現(xiàn)有再現(xiàn)裝置的一例的框圖。
圖中，由未圖示的再現(xiàn)機(jī)構(gòu)從記錄媒體101中讀出的、圖2中A→Z→B所示的路線的數(shù)據(jù)經(jīng)由軌道緩沖器102(track buffer)輸入到多路分配器103(demultiplexer)。多路分配器103解除視頻幀與音頻幀(或其它幀，未圖示)的多路復(fù)用，視頻幀經(jīng)由視頻緩沖器104輸入視頻解碼器105，音頻幀經(jīng)由音頻緩沖器106輸入音頻解碼器107。
在視頻解碼器105與音頻解碼器107中，分別進(jìn)行視頻與音頻的解碼。在視頻編碼方式為MPEG等情況下，在視頻解碼器105的輸出側(cè)，裝配將圖片順序改換為再現(xiàn)順序的重排序緩沖器109。這里，STC電路108是根據(jù)從來(lái)自多路分配器103的VOB數(shù)據(jù)中抽取出的系統(tǒng)時(shí)鐘參考(SCR)等基準(zhǔn)時(shí)刻信號(hào)、計(jì)數(shù)STC的電路。在連接點(diǎn)Z也進(jìn)行STC的復(fù)位。另外，在圖2中G所示的音頻再現(xiàn)的縫隙發(fā)生的位置，還擔(dān)當(dāng)發(fā)生表示該情況的控制信號(hào)(這里稱為靜音(mute)信號(hào))，并在縫隙期間靜音音頻解碼器107。
之后，如圖4所示，考慮在連續(xù)編輯點(diǎn)連接源的最終音頻幀的再現(xiàn)結(jié)束時(shí)刻X與連接對(duì)象的開頭音頻幀的再現(xiàn)開始時(shí)刻Y一致的實(shí)例。此時(shí)，VOB(i)的Bi3與Bi4的解碼中必需Pi2，但Pi2不存在于該再現(xiàn)路線中。因此，例如需要將Bi4變換為P圖片類型Pi4’，將Bi3變換為Bi3’(Bi3’由Pi1與Pi4’編碼而成)。
同樣，VOB(j)的Pj1的解碼中必需Ij1，但I(xiàn)j1不存在于該再現(xiàn)路線中。因此，例如需要將Pj1變換為I圖片類型Ij1’。由此，可由Pi1→Bi3’→Pi4’→Ij1’→Bj3→Bj4路線來(lái)再現(xiàn)數(shù)據(jù)。
另一方面，就音頻數(shù)據(jù)而言，因?yàn)樵谶B續(xù)編輯點(diǎn)連接源的最終音頻幀的再現(xiàn)結(jié)束時(shí)刻X與連接對(duì)象的開頭音頻幀的再現(xiàn)開始時(shí)刻Y一致，所以如圖4所示，在連接源的音頻幀與連接對(duì)象的音頻幀之間不產(chǎn)生縫隙。

發(fā)明內(nèi)容
但是，上述說(shuō)明的現(xiàn)有音頻/視頻記錄再現(xiàn)方法和裝置中，在任意的VOB彼此的連續(xù)編輯中、在連接點(diǎn)的音頻再現(xiàn)中存在問(wèn)題。即，在以無(wú)縫連接視頻幀為基準(zhǔn)的情況下，如圖2所示，在以A→Z→B的路線無(wú)縫再現(xiàn)視頻幀的情況下，在連接源與連接對(duì)象的音頻幀之間產(chǎn)生縫隙G，音頻再現(xiàn)在Z點(diǎn)附近的縫隙點(diǎn)瞬間靜音，存在不能無(wú)縫再現(xiàn)的問(wèn)題。
另外，如圖4所示，即便在連續(xù)編輯點(diǎn)連接源的最終音頻幀的再現(xiàn)結(jié)束時(shí)刻X與連接對(duì)象的開頭音頻幀的再現(xiàn)開始時(shí)刻Y一致的情況下，連接源的最后音頻采樣值與連接對(duì)象的最初音頻采樣值一般不連續(xù)，所以如圖5所示，在解碼的連接源音頻波形a與解碼的連接對(duì)象音頻波形b的連接點(diǎn)Z產(chǎn)生噪聲。這種音頻采樣的不連續(xù)在線性PCM或MPEG音頻層I、II等基本上不正交變換音頻信號(hào)而作為時(shí)間波形編碼的全部方式下，連接原來(lái)不連續(xù)的音頻幀彼此時(shí)被發(fā)現(xiàn)。
本發(fā)明鑒于上述問(wèn)題而做出，其目的在于提供一種無(wú)噪聲地?zé)o縫連續(xù)再現(xiàn)記錄在光盤等記錄媒體中的兩個(gè)不同音頻數(shù)據(jù)與視頻數(shù)據(jù)組的音頻/視頻記錄裝置、記錄方法、再現(xiàn)裝置、再現(xiàn)方法、再現(xiàn)程序和記錄程序。
為了實(shí)現(xiàn)上述目的，第1發(fā)明是一種音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其中，具有音頻編碼單元，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕(curtaining)處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；視頻數(shù)據(jù)變換單元，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯點(diǎn)確定單元，確定音頻幀的編輯點(diǎn)，以使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻；和記錄單元，將編輯點(diǎn)作為登錄信息記錄在記錄媒體中。
在本發(fā)明中，在可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中時(shí)，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀，并且，確定音頻幀的編輯點(diǎn)，以使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻，并將該編輯點(diǎn)作為管理信息記錄在記錄媒體中，所以不用在記錄時(shí)計(jì)算交迭時(shí)間或偏移時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第2發(fā)明是一種音頻/視頻記錄方法，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其中，包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；第2步驟，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟，確定音頻幀的編輯點(diǎn)，以使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻；和第4步驟，將編輯點(diǎn)作為管理信息記錄在記錄媒體中。本發(fā)明與第1發(fā)明一樣，不用在記錄時(shí)計(jì)算交迭時(shí)間或偏移時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第3發(fā)明的音頻/視頻再現(xiàn)裝置根據(jù)再現(xiàn)管理信息，從由第1發(fā)明的記錄裝置記錄了視頻對(duì)象和管理信息的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其中，具有交迭時(shí)間計(jì)算單元，包含根據(jù)再現(xiàn)管理信息得到的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；偏移時(shí)間算出單元，在編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落(drop)標(biāo)志；復(fù)位單元，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元，根據(jù)算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；音頻幀再現(xiàn)單元，在根據(jù)偏移后的PTS再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀的同時(shí)，當(dāng)音頻下落標(biāo)志是規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和音頻解碼單元，對(duì)由音頻幀再現(xiàn)單元再現(xiàn)的音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，包含根據(jù)再現(xiàn)管理信息得到的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間，并且，計(jì)算用于偏移從記錄媒體中讀出的音頻幀的PTS的音頻PTS偏移時(shí)間，所以可根據(jù)偏移后的PTS來(lái)再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀。
另外，為了實(shí)現(xiàn)上述目的，第4發(fā)明的音頻/視頻再現(xiàn)方法根據(jù)再現(xiàn)管理信息，從由第2發(fā)明的記錄方法記錄了視頻對(duì)象和管理信息的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟，包含根據(jù)再現(xiàn)管理信息得到的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；第2步驟，在編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；第3步驟，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟，根據(jù)在第2步驟算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS；第5步驟，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；第6步驟，在根據(jù)在第4步驟偏移后的PTS再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀的同時(shí)，當(dāng)?shù)?步驟中輸出的音頻下落標(biāo)志是規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由第6步驟再現(xiàn)的音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，與第3發(fā)明一樣，包含根據(jù)再現(xiàn)管理信息得到的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間，并且，計(jì)算用于偏移從記錄媒體中讀出的音頻幀的PTS的音頻PTS偏移時(shí)間，所以可根據(jù)偏移后的PTS來(lái)再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀。
另外，為了實(shí)現(xiàn)上述目的，第6發(fā)明的音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其特征在于具有音頻編碼單元，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；多路復(fù)用單元，多路復(fù)用音頻數(shù)據(jù)與視頻數(shù)據(jù)，生成視頻對(duì)象；控制單元，在多路復(fù)用單元進(jìn)行多路復(fù)用時(shí)，控制多路復(fù)用單元，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下，并且，生成表示該音頻多路復(fù)用狀態(tài)的標(biāo)志；和記錄單元，將從由控制單元控制的多路復(fù)用單元輸出的視頻對(duì)象、與由控制單元生成的表示音頻多路復(fù)用狀態(tài)的標(biāo)志一起記錄在記錄媒體中。
在本發(fā)明中，因?yàn)閷⒁纛l數(shù)據(jù)多路復(fù)用于視頻數(shù)據(jù)中來(lái)記錄，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下，所以，即便在再現(xiàn)時(shí)最大延遲1音頻幀周期后再現(xiàn)的情況下，也不會(huì)產(chǎn)生音頻緩沖器的上溢。
另外，為了實(shí)現(xiàn)上述目的，第7發(fā)明的音頻/視頻記錄裝置除第6發(fā)明外，其特征在于還包括視頻數(shù)據(jù)變換單元，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯單元，確定音頻幀的編輯點(diǎn)，并編輯音頻幀，以便在連接點(diǎn)前后，使連接源的視頻對(duì)象的音頻幀的再現(xiàn)期間與連接對(duì)象的視頻對(duì)象的音頻幀的再現(xiàn)期間產(chǎn)生部分交迭；和第2記錄單元，將編輯點(diǎn)作為登錄信息記錄在記錄媒體中。
另外，為了實(shí)現(xiàn)上述目的，第8發(fā)明的音頻/視頻記錄方法在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；第2步驟，在將音頻數(shù)據(jù)與視頻數(shù)據(jù)多路復(fù)用時(shí)，進(jìn)行控制，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下；和第3步驟，將表示在第2步驟控制下的音頻多路復(fù)用狀態(tài)的標(biāo)志、與在第2步驟的控制下多路復(fù)用所得到的視頻對(duì)象一起記錄在記錄媒體中。
在本發(fā)明中，因?yàn)閷⒁纛l數(shù)據(jù)多路復(fù)用于視頻數(shù)據(jù)中來(lái)記錄，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下，所以，即便在再現(xiàn)時(shí)最大延遲1音頻幀周期后再現(xiàn)的情況下，也不會(huì)產(chǎn)生音頻緩沖器的上溢。
另外，為了實(shí)現(xiàn)上述目的，第9發(fā)明的音頻/視頻記錄方法除上述第8發(fā)明之外，其特征在于還包含第4步驟，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第5步驟，確定音頻幀的編輯點(diǎn)，并編輯音頻幀，以便在連接點(diǎn)前后，使連接源的視頻對(duì)象的音頻幀的再現(xiàn)期間與連接對(duì)象的視頻對(duì)象的音頻幀的再現(xiàn)期間產(chǎn)生部分交迭；和第6步驟，將編輯點(diǎn)作為管理信息記錄在記錄媒體中。
另外，為了實(shí)現(xiàn)上述目的，第10發(fā)明的音頻/視頻再現(xiàn)裝置根據(jù)再現(xiàn)管理信息，從由第7發(fā)明的記錄裝置記錄了視頻對(duì)象和管理信息的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其中，具有交迭時(shí)間計(jì)算單元，對(duì)再現(xiàn)管理信息內(nèi)的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；偏移時(shí)間算出單元，在編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；復(fù)位單元，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元，根據(jù)算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；音頻幀再現(xiàn)單元，在根據(jù)偏移后的PTS再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀的同時(shí)，當(dāng)音頻下落標(biāo)志是規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和音頻解碼單元，對(duì)由音頻幀再現(xiàn)單元再現(xiàn)的音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，在從如下記錄媒體再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)時(shí)，其中該記錄媒體將音頻數(shù)據(jù)多路復(fù)用于視頻數(shù)據(jù)中來(lái)記錄，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下，即便在再現(xiàn)時(shí)最大延遲1音頻幀周期后再現(xiàn)的情況下，也不會(huì)產(chǎn)生音頻緩沖器的上溢。
另外，為了實(shí)現(xiàn)上述目的，第11發(fā)明的音頻/視頻再現(xiàn)裝置的特征在于，第3發(fā)明或第10發(fā)明的偏移時(shí)間算出單元是如下單元，即在算出的連接點(diǎn)處的音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
在本發(fā)明中，連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為1音頻幀期間以內(nèi)或±0.5音頻幀期間以內(nèi)的、基本上不能被檢測(cè)為對(duì)口形(lip sync)錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第12發(fā)明的音頻/視頻再現(xiàn)方法根據(jù)再現(xiàn)管理信息，從由第9發(fā)明的記錄方法記錄了視頻對(duì)象和管理信息的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其中，利用與第4發(fā)明一樣的第1-第7步驟來(lái)進(jìn)行再現(xiàn)。由此，包含根據(jù)再現(xiàn)管理信息得到的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間，并且，計(jì)算用于偏移從記錄媒體中讀出的音頻幀的PTS的音頻PTS偏移時(shí)間，所以可根據(jù)偏移后的PTS來(lái)再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀。
另外，為了實(shí)現(xiàn)上述目的，第13發(fā)明的音頻/視頻再現(xiàn)方法的特征在于第4發(fā)明或第12發(fā)明的第2步驟在算出的連接點(diǎn)處的音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
在本發(fā)明中，連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為1音頻幀期間以內(nèi)或±0.5音頻幀期間以內(nèi)的、基本上不能被檢測(cè)為對(duì)口形錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第5發(fā)明或第14發(fā)明的音頻/視頻再現(xiàn)程序的特征在于，讓計(jì)算機(jī)執(zhí)行如下再現(xiàn)方法，即根據(jù)再現(xiàn)序列，從利用第2發(fā)明或第9發(fā)明的記錄方法記錄了包含視頻對(duì)象和再現(xiàn)序列的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)。
另外，為了實(shí)現(xiàn)上述目的，第15發(fā)明的音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其中，具有音頻編碼單元，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；視頻數(shù)據(jù)變更單元，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯點(diǎn)確定單元，確定音頻幀的編輯點(diǎn)，使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻；交迭時(shí)間計(jì)算單元，包含連接點(diǎn)，計(jì)算應(yīng)在最后再現(xiàn)的音頻幀、與應(yīng)在最初再現(xiàn)的音頻幀的交迭時(shí)間；和記錄單元，至少將交迭時(shí)間作為管理信息記錄在記錄媒體中。
在本發(fā)明中，在可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中時(shí)，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀，并且，確定音頻幀的編輯點(diǎn)，以使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻，并包含連接點(diǎn)，算出應(yīng)最后再現(xiàn)的音頻幀與應(yīng)最初再現(xiàn)的音頻幀的交迭時(shí)間，作為管理信息記錄在記錄媒體中，所以不用在再現(xiàn)時(shí)計(jì)算交迭時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第16發(fā)明的音頻/視頻記錄方法在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；第2步驟，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟，確定音頻幀的編輯點(diǎn)，使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻；第4步驟，包含連接點(diǎn)，計(jì)算應(yīng)在最后再現(xiàn)的音頻幀、與應(yīng)在最初再現(xiàn)的音頻幀的交迭時(shí)間；和第5步驟，至少將交迭時(shí)間作為管理信息記錄在記錄媒體中。
在本發(fā)明中，與第15發(fā)明一樣，因?yàn)榘B接點(diǎn)，算出應(yīng)最后再現(xiàn)的音頻幀與應(yīng)最初再現(xiàn)的音頻幀的交迭時(shí)間，作為管理信息記錄在記錄媒體中，所以不用在再現(xiàn)時(shí)計(jì)算交迭時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第17發(fā)明是一種音頻/視頻再現(xiàn)裝置，根據(jù)再現(xiàn)序列，從由第15發(fā)明的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于具有交迭時(shí)間再現(xiàn)單元，從記錄媒體中再現(xiàn)交迭時(shí)間；偏移時(shí)間算出單元，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將從記錄媒體再現(xiàn)的交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把從記錄媒體再現(xiàn)的交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；復(fù)位單元，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元，根據(jù)算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；音頻幀再現(xiàn)單元，在根據(jù)偏移后的PTS再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀的同時(shí)，當(dāng)音頻下落標(biāo)志是規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和音頻解碼單元，對(duì)由音頻幀再現(xiàn)單元再現(xiàn)的音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，根據(jù)再現(xiàn)時(shí)從記錄媒體讀出的交迭時(shí)間，根據(jù)從記錄媒體讀出的連接點(diǎn)是再現(xiàn)序列內(nèi)的最初連接點(diǎn)還是第2個(gè)之后的連接點(diǎn)，在作為當(dāng)前連接點(diǎn)下的音頻PTS偏移時(shí)間算出的同時(shí)，在規(guī)定的條件下輸出規(guī)定值的音頻下落標(biāo)志，并根據(jù)算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS，所以可不必算出再現(xiàn)側(cè)的音頻數(shù)據(jù)無(wú)縫再現(xiàn)用的音頻PTS偏移時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第18發(fā)明的音頻/視頻再現(xiàn)裝置的特征在于第17發(fā)明中的偏移時(shí)間算出單元是如下單元，即在算出的連接點(diǎn)處的音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
在本發(fā)明中，連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為1音頻幀期間以內(nèi)或±0.5音頻幀期間以內(nèi)的、基本上不能被檢測(cè)為對(duì)口形錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第19發(fā)明的音頻/視頻再現(xiàn)方法根據(jù)再現(xiàn)序列，從由權(quán)利要求16的記錄方法記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟，從記錄媒體中再現(xiàn)交迭時(shí)間；第2步驟，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將從記錄媒體再現(xiàn)的交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把從記錄媒體再現(xiàn)的交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；第3步驟，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟，根據(jù)第2步驟中算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS；第5步驟，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；第6步驟，在根據(jù)第4步驟中偏移后的PTS再現(xiàn)從記錄媒體中再現(xiàn)的音頻幀的同時(shí)，當(dāng)?shù)?步驟中輸出的音頻下落標(biāo)志是規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由第6步驟再現(xiàn)的音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，與第17發(fā)明一樣，根據(jù)從記錄媒體讀出的交迭時(shí)間，作為當(dāng)前連接點(diǎn)下的音頻PTS偏移時(shí)間算出，并根據(jù)算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS，所以可不必算出再現(xiàn)側(cè)的音頻數(shù)據(jù)無(wú)縫再現(xiàn)用的音頻PTS偏移時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第20發(fā)明的音頻/視頻再現(xiàn)方法的特征在于第19發(fā)明的第2步驟在算出的連接點(diǎn)處的音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
并且，為了實(shí)現(xiàn)上述目的，將第21發(fā)明的音頻/視頻再現(xiàn)程序設(shè)為如下音頻/視頻再現(xiàn)程序，讓計(jì)算機(jī)執(zhí)行如下再現(xiàn)方法，該再現(xiàn)方法根據(jù)再現(xiàn)序列，從由第1 6發(fā)明的音頻/視頻記錄方法記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)。
另外，為了實(shí)現(xiàn)上述目的，第22發(fā)明的音頻/視頻記錄裝置在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其中，具有音頻編碼單元，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；視頻數(shù)據(jù)變更單元，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯點(diǎn)確定單元，確定音頻幀的編輯點(diǎn)，使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻；交迭時(shí)間計(jì)算單元，包含連接點(diǎn)，計(jì)算應(yīng)在最后再現(xiàn)的音頻幀、與應(yīng)在最初再現(xiàn)的音頻幀的交迭時(shí)間；偏移時(shí)間算出單元，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間；和記錄單元，至少將音頻PTS偏移時(shí)間作為管理信息記錄在記錄媒體中。
在本發(fā)明中，在可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中時(shí)，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀，并且，確定音頻幀的編輯點(diǎn)，以使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間，作為管理信息記錄在記錄媒體中，所以連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為基本上不能被檢測(cè)為對(duì)口形錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第23發(fā)明的音頻/視頻記錄裝置的特征在于第22發(fā)明的偏移時(shí)間算出單元是如下單元，即在算出的連接點(diǎn)處的音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志，記錄單元將音頻PTS偏移時(shí)間與音頻下落標(biāo)志作為管理信息記錄在記錄媒體中。在本發(fā)明中，連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為1音頻幀期間以內(nèi)或±0.5音頻幀期間以內(nèi)的、基本上不能被檢測(cè)為對(duì)口形錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第24發(fā)明的音頻/視頻記錄方法在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在記錄媒體中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出音頻數(shù)據(jù)；第2步驟，根據(jù)需要變更視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟，確定音頻幀的編輯點(diǎn)，使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻；第4步驟，包含連接點(diǎn)，計(jì)算應(yīng)在最后再現(xiàn)的音頻幀、與應(yīng)在最初再現(xiàn)的音頻幀的交迭時(shí)間；第5步驟，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將交迭時(shí)間設(shè)為再現(xiàn)連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在編輯點(diǎn)是再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把交迭時(shí)間與一個(gè)之前的連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間；和第6步驟，至少將音頻PTS偏移時(shí)間作為管理信息記錄在記錄媒體中。在本發(fā)明中，與第22發(fā)明的音頻/視頻記錄裝置一樣，連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為基本上不能被檢測(cè)為對(duì)口形錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第25發(fā)明的音頻/視頻記錄方法的特征在于第24發(fā)明的第5步驟是如下步驟，即在算出的連接點(diǎn)處的音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志，第6步驟將音頻PTS偏移時(shí)間與音頻下落標(biāo)志作為管理信息記錄在記錄媒體中。本發(fā)明與第23發(fā)明的音頻/視頻記錄裝置一樣，連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為1音頻幀期間以內(nèi)或±0.5音頻幀期間以內(nèi)的、基本上不能被檢測(cè)為對(duì)口形錯(cuò)位的量。
另外，為了實(shí)現(xiàn)上述目的，第26發(fā)明的音頻/視頻再現(xiàn)裝置根據(jù)再現(xiàn)序列，從由第22或第23發(fā)明的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其中，具有復(fù)位單元，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元，根據(jù)從記錄媒體讀出的音頻PTS偏移時(shí)間，偏移從該記錄媒體中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；音頻數(shù)據(jù)再現(xiàn)單元，根據(jù)偏移后的PTS，再現(xiàn)從記錄媒體中再現(xiàn)的音頻數(shù)據(jù)；下落處理單元，進(jìn)行控制，當(dāng)從記錄媒體再現(xiàn)的音頻下落標(biāo)志是規(guī)定值時(shí)，不再現(xiàn)應(yīng)在該視頻對(duì)象的最后再現(xiàn)的音頻幀；和音頻解碼單元，對(duì)由音頻幀再現(xiàn)單元再現(xiàn)的音頻數(shù)據(jù)，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，因?yàn)楦鶕?jù)再現(xiàn)時(shí)從記錄媒體中讀出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS，所以不必算出再現(xiàn)側(cè)的音頻數(shù)據(jù)無(wú)縫再現(xiàn)用的音頻PTS偏移時(shí)間。
另外，為了實(shí)現(xiàn)上述目的，第27發(fā)明的音頻/視頻再現(xiàn)方法根據(jù)再現(xiàn)序列，從由第22或第23發(fā)明的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以在再現(xiàn)序列中包含的視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第2步驟，根據(jù)從記錄媒體讀出的音頻PTS偏移時(shí)間，偏移從該記錄媒體中讀出的音頻幀的PTS；第3步驟，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從記錄媒體中再現(xiàn)的視頻數(shù)據(jù)；第4步驟，根據(jù)偏移后的PTS，再現(xiàn)從記錄媒體中再現(xiàn)的音頻數(shù)據(jù)；第5步驟)，進(jìn)行控制，當(dāng)從記錄媒體再現(xiàn)的音頻下落標(biāo)志是規(guī)定值時(shí)，不再現(xiàn)應(yīng)在該視頻對(duì)象的最后再現(xiàn)的音頻幀；和第6步驟，對(duì)由第4步驟再現(xiàn)的音頻數(shù)據(jù)，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
在本發(fā)明中，與第26發(fā)明的音頻/視頻再現(xiàn)裝置一樣，因?yàn)楦鶕?jù)再現(xiàn)時(shí)從記錄媒體中讀出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS，所以不必算出再現(xiàn)側(cè)的音頻數(shù)據(jù)無(wú)縫再現(xiàn)用的音頻PTS偏移時(shí)間。
另外，本發(fā)明的第28發(fā)明的音頻/視頻記錄程序的特征在于，由計(jì)算機(jī)執(zhí)行第24發(fā)明的音頻/視頻記錄方法，本發(fā)明的第29發(fā)明的音頻/視頻再現(xiàn)程序的特征在于，由計(jì)算機(jī)執(zhí)行第27發(fā)明的音頻/視頻再現(xiàn)方法。


圖1是表示視頻幀與音頻幀的關(guān)系一例的圖。
圖2是現(xiàn)有的連接編輯與視頻/音頻再現(xiàn)的原理圖。
圖3是現(xiàn)有的再現(xiàn)裝置一例的框圖。
圖4是現(xiàn)有的連接編輯與視頻/音頻再現(xiàn)的另一原理圖。
圖5是現(xiàn)有的連接點(diǎn)處的音頻波形的一例。
圖6是本發(fā)明的連接編輯與視頻/音頻再現(xiàn)的原理圖。
圖7是本發(fā)明主要部分的音頻編碼塊和音頻解碼塊的一實(shí)施方式的框圖及表示窗口函數(shù)一例的圖。
圖8是本發(fā)明的第1實(shí)施方式的連接編輯與視頻/音頻再現(xiàn)的原理圖。
圖9是本發(fā)明的視頻/音頻記錄裝置的實(shí)施方式I的框圖。
圖10是本發(fā)明的視頻/音頻記錄方法的實(shí)施方式I的流程圖。
圖11是本發(fā)明的視頻/音頻再現(xiàn)裝置的實(shí)施方式I的框圖。
圖12是本發(fā)明的視頻/音頻再現(xiàn)方法的實(shí)施方式I的流程圖。
圖13是考慮了音頻緩沖器占有量的情況下的、本發(fā)明記錄方法一實(shí)施方式的流程圖。
圖14是考慮了音頻緩沖器占有量的情況下的、本發(fā)明編輯方法一實(shí)施方式的流程圖。
圖15是本發(fā)明的第2實(shí)施方式的連接編輯與視頻/音頻再現(xiàn)的原理圖。
圖16是本發(fā)明的視頻/音頻記錄裝置的實(shí)施方式II的框圖。
圖17是本發(fā)明的視頻/音頻記錄方法的實(shí)施方式II的流程圖。
圖18是本發(fā)明的視頻/音頻再現(xiàn)裝置的實(shí)施方式II的框圖。
圖19是本發(fā)明的視頻/音頻再現(xiàn)方法的實(shí)施方式II的流程圖。
圖20是本發(fā)明的視頻/音頻記錄裝置的實(shí)施方式III的框圖。
圖21是本發(fā)明的視頻/音頻記錄方法的實(shí)施方式III的流程圖。
圖22是本發(fā)明的視頻/音頻再現(xiàn)裝置的實(shí)施方式III的框圖。
圖23是本發(fā)明的視頻/音頻再現(xiàn)方法的實(shí)施方式III的流程圖。
具體實(shí)施例方式
下面，參照附圖來(lái)說(shuō)明本發(fā)明的實(shí)施方式。
圖6表示本發(fā)明的音頻/視頻記錄裝置、記錄方法、再現(xiàn)裝置、再現(xiàn)方法和再現(xiàn)程序的一實(shí)施方式中的連接編輯與音頻/視頻再現(xiàn)的實(shí)例。圖中，向與圖2相同的部分附加相同符號(hào)，省略其說(shuō)明。圖6的實(shí)施方式與圖2的現(xiàn)有例一樣，是從VOB(i)時(shí)刻X連接到VOB(j)時(shí)刻Y的實(shí)例，但在本實(shí)施方式中，以下兩點(diǎn)與現(xiàn)有例不同。
(1)在連接編輯后VOB(i)中有效的最后音頻幀是包含時(shí)刻X的音頻幀(在音頻幀的再現(xiàn)結(jié)束時(shí)刻與時(shí)刻X相等的情況下，包含(*1)。)。同樣，在連接編輯后VOB(j)中有效的最初音頻幀是包含時(shí)刻Y的音頻幀(在音頻幀的再現(xiàn)開始時(shí)刻與時(shí)刻Y相等的情況下，包含(*2)。)。即，在連接后的Z點(diǎn)，VOB(i)最后的音頻幀與VOB(j)的最初音頻幀交迭。圖6中由OL表示的交迭部分在本說(shuō)明書中被稱為音頻交迭(A_overlap)。另外，同時(shí)滿足上述*1與*2的情況下，A_overlap為0。
(2)在VOB(j)的音頻再現(xiàn)中，以取消上述A_overlap的大小來(lái)偏移音頻幀的再現(xiàn)時(shí)刻(PTSPresentation Time Stamp)后再現(xiàn)。該偏移量在本說(shuō)明書中被稱為音頻PTS偏移(A_PTS_offset_。
這樣，在本實(shí)施方式中，可偏移后續(xù)的VOB的音頻幀，并在連接后附近，消除音頻幀的縫隙地連接，解決上述問(wèn)題之一。
另外，因?yàn)椴划a(chǎn)生連接點(diǎn)處的不連續(xù)噪聲，所以在本實(shí)施方式中，致力于音頻編碼方式的選擇。
圖7(A)表示本發(fā)明的音頻/視頻記錄裝置和再現(xiàn)裝置的音頻編碼塊和音頻解碼塊的一實(shí)施方式的框圖。
如圖7(A)所示，在音頻編碼塊中，輸入音頻信號(hào)由加幕部11進(jìn)行基于與窗口函數(shù)的乘法的加幕處理之后，提供給正交變換部12，進(jìn)行正交變換，再提供給量化/編碼部13，根據(jù)規(guī)定采樣頻率，進(jìn)行量化后，執(zhí)行規(guī)定方式的壓縮編碼。由此得到的壓縮編碼音頻數(shù)據(jù)與由未圖示的音頻數(shù)據(jù)記錄系統(tǒng)壓縮編碼的視頻數(shù)據(jù)一起，由未圖示的多路復(fù)用部通過(guò)MPEG系統(tǒng)的多路復(fù)用，例如作為MPEG程序流，由公知的記錄單元記錄在記錄媒體14上。
另一方面，由公知的再現(xiàn)單元從記錄媒體14中再現(xiàn)的多路復(fù)用流在由未圖示的分離部分離成音頻數(shù)據(jù)與視頻數(shù)據(jù)之后，將視頻數(shù)據(jù)輸出到未圖示的視頻數(shù)據(jù)再現(xiàn)系統(tǒng)，將音頻數(shù)據(jù)提供給音頻解碼塊內(nèi)的解碼/逆量化部15，進(jìn)行解碼。進(jìn)行了解碼和逆量化的音頻數(shù)據(jù)由正交逆變換部16進(jìn)行正交逆變換之后，提供給加幕部17，進(jìn)行基于與規(guī)定窗口函數(shù)的乘法的加幕處理，之后，恢復(fù)成音頻信號(hào)。
下面，參照?qǐng)D7(B)-(D)來(lái)說(shuō)明加幕部11和17使用的窗口函數(shù)。各音頻幀的窗口函數(shù)如圖7(C)所示，形成將左肩設(shè)為f(x)、將右肩設(shè)為g(x)的左右對(duì)稱形。這里，中央的平坦部分可有可無(wú)。在圖7(B)中模式表示的相鄰音頻幀(i)與(i+1)之間，音頻幀(i)的窗口函數(shù)g(x)部分與音頻幀(i+1)的窗口函數(shù)f(x)部分交迭。
這里，請(qǐng)注意實(shí)際上由音頻幀(i)編碼的音頻采樣為圖7(B)所示的(i)范圍所示的部分。若考慮在編碼側(cè)的加幕部11與解碼側(cè)的加幕部17各執(zhí)行兩次加幕，則上述音頻幀(i)與(i+1)的交迭部分需要滿足f(x)2+g(x)2＝1.0…[式1]作為這種窗口函數(shù)的一例，有f(x)＝sin(x)…[式2]g(x)＝cos(x)…[式3]但只要滿足[式1]，則無(wú)論是何函數(shù)均無(wú)妨。
在采用使用這種窗口函數(shù)的音頻編碼方式的情況下，即便連續(xù)原本不連續(xù)的音頻幀彼此的情況下，也如圖7(D)所示，由于利用基于2次加幕的f(x)2與g(x)2的窗口函數(shù)，音頻采樣彼此平滑地結(jié)合，所以在連接點(diǎn)不會(huì)產(chǎn)生不連續(xù)噪聲。因此，解決第二個(gè)問(wèn)題。即，由上述解決共計(jì)兩個(gè)問(wèn)題，實(shí)現(xiàn)音頻幀彼此的無(wú)縫連接。
<第1實(shí)施方式的連續(xù)編輯與音頻/音頻再現(xiàn)>
下面，使用與圖關(guān)聯(lián)的算式，詳細(xì)說(shuō)明第1實(shí)施方式。圖8表示按順序連續(xù)編輯VOB1、VOB2、VOB3各自一部分時(shí)的音頻/視頻記錄方法和再現(xiàn)方法的第1實(shí)施方式(另外，這里省略連接前的VOB1、VOB2、VOB3的圖。為了方便，圖8的各VOB中包含的視頻/音頻幀數(shù)少，但請(qǐng)注意，現(xiàn)實(shí)中，各VOB中包含相當(dāng)于從數(shù)十秒至數(shù)小時(shí)程度的幀群。)。另外，在圖8和后述的圖15中，Tv是已說(shuō)明的視頻幀周期。
圖8中，由虛線矩形表示的音頻幀群是連接前的狀態(tài)，由實(shí)線矩形表示的音頻幀群是連接后的狀態(tài)。另一方面，視頻幀群全部以連接后的狀態(tài)顯示。下面，參照?qǐng)D8和之后的圖來(lái)統(tǒng)一說(shuō)明本實(shí)施方式中使用的變量種類。另外，以下的k為正整數(shù)，在圖8的實(shí)例中，代入1、2、3之一。
圖8中，STCk是表示VOBk再現(xiàn)中使用的STC值的相加的模式表現(xiàn)。STC_deltak是STC(k-1)與STCk的差，由下式表示。
STC_deltak＝STC(k-1)-STCk…[式4]另外，TA如上所述，是音頻幀周期。A_overlapk如上所述，是VOBk與VOB(k-1)之間的音頻幀彼此的交迭時(shí)間。另外，在本例中，由于VOB1是開頭，所以A_overlap1＝0。
另外，A_PTS_offsetk如上所述，是對(duì)VOBk再現(xiàn)時(shí)的音頻PTS的必需的偏移時(shí)間。另外，在本例中，因?yàn)閂OB1是開頭，所以A_PTS_offset1＝0。PTSkaudio_end是VOBk的最后音頻幀的再現(xiàn)開始時(shí)刻(PTS值)。另外，這是連續(xù)編輯前的值。
PTSkaudio_start是VOBk的最初音頻幀的再現(xiàn)開始時(shí)刻(PTS值)。另外，這是連續(xù)編輯前的值。此時(shí)，可如下計(jì)算A_overlapk。
A_overlapk＝(PTSk-1audio_end+TA)-(PTSkaudio_start+STC_deltak)…[式5]另外，[式5]的右邊第二項(xiàng)為了將STCk上的時(shí)刻映射到STC(k-1)上，追加STC_deltak。
之后，由于A_PTS_offsetk是偏移后續(xù)的VOB的音頻幀群以使A_overlapk基本上為零的量，所以就圖8的k＝2而言，成立A_PTS_offset2＝A_overlap2…[式6]并且，就圖8的k＝3而言，由于k＝2時(shí)已按A_PTS_offset2的量來(lái)偏移VOB2的音頻幀群，所以除了原來(lái)的A_overlap3外，還將A_PTS_offset2大小的交迭量相加。因?yàn)檫@為零，所以就k＝3而言，基本上要求A_PTS_offset3＝A_overlap3+A_PTS_offset2…[式7]。因此，作為一般式，成立A_PTS_offsetk＝A_overlapk+A_PTS_offsetk-1。
但是，這里在A_PTS_offsetk比音頻幀周期TA大的情況下，通過(guò)從再現(xiàn)開始去除VOB(k-1)的最后的音頻幀，可減少A_PTS_offsetk的量。圖8中，使由X標(biāo)記表示的幀脫落。下面示出該條件式。這里，AF_dropk-1是在使VOB(k-1)的最后音頻幀脫落的情況下保持值1(不脫落的情況保持值0)的音頻下落標(biāo)志。圖8的情況下，有AF_drop2＝1。
If(A_PTS_offsetk＞＝TA){
A_PTS_offsetk＝A_PTS_offsetk-TA；AF_dropk-1＝1；}else AF_dropk-1＝0；…[式9]若執(zhí)行這種脫落處理，則可防止在VOB的連接次數(shù)增加的情況下，A_PTS_offset的值累積而變得過(guò)大。
在本發(fā)明中，在連接后的VOBk處，根據(jù)與原來(lái)的視頻幀的同步關(guān)系，將音頻幀錯(cuò)位A_PTS_offset大小后再現(xiàn)。一般，該錯(cuò)位對(duì)對(duì)口形造成影響，若錯(cuò)位比1-2視頻幀周期大，則可檢測(cè)對(duì)口形的惡化。因此，最好A_PTS_offset值不會(huì)變得過(guò)大。例如，若音頻幀周期TA為視頻幀周期Tv以下，則將的A_PTS_offset抑制在音頻幀周期TA以內(nèi)是有效的。
<音頻/視頻記錄裝置的實(shí)施方式I>
下面，說(shuō)明本發(fā)明的音頻/視頻記錄裝置的實(shí)施方式I。圖9表示本發(fā)明的音頻/視頻記錄裝置的實(shí)施方式I的框圖。這里，設(shè)多個(gè)VOB的記錄結(jié)束，說(shuō)明它們的連接編輯動(dòng)作。
圖9中，用戶接口部25、管理信息控制部26和對(duì)象控制部27構(gòu)成MPU塊22，由MPU(Micro Processing Unit)的軟件處理實(shí)現(xiàn)。
首先，通過(guò)用戶接口部25從用戶提供編輯指示。管理信息控制部26使用對(duì)應(yīng)的管理信息來(lái)確認(rèn)連接編輯點(diǎn)。此時(shí)，首先如上所述，確定音頻幀的編輯點(diǎn)，以在連接點(diǎn)處存在音頻幀的交迭。之后，根據(jù)需要對(duì)視頻幀進(jìn)行圖片類型的變換處理。這通過(guò)對(duì)象控制部27、視頻/音頻編碼塊24、媒體記錄控制部23來(lái)進(jìn)行，寫入記錄媒體21中。
<音頻/視頻記錄方法的實(shí)施方式I>
下面，進(jìn)行音頻無(wú)縫連接用的計(jì)算與記錄。參照?qǐng)D10的流程圖來(lái)說(shuō)明本發(fā)明的音頻/視頻記錄方法的實(shí)施方式I的音頻無(wú)縫連接用的計(jì)算與記錄。
首先，管理信息控制部26確定連接對(duì)象VOB，并且，確定視頻連接點(diǎn)(應(yīng)在連接源的VOB最后再現(xiàn)的視頻幀、與應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的視頻幀的連接點(diǎn))(步驟S1)。之后，根據(jù)視頻連接點(diǎn)，判斷是否需要視頻圖片類型的變更處理，在需要的情況下，進(jìn)行變更的具體準(zhǔn)備(步驟S2)。
之后，應(yīng)對(duì)于視頻連接點(diǎn)，確定音頻幀編輯點(diǎn)(步驟S3)。即，確定音頻幀編輯點(diǎn)，以使應(yīng)在連接源的VOB最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻連接點(diǎn)的時(shí)刻。最后，將編輯后的VOB(連接點(diǎn)附近的數(shù)據(jù))通過(guò)對(duì)象控制部27和媒體記錄控制部23寫入記錄媒體21中(步驟S4)。此時(shí)，上述編輯點(diǎn)的信息也作為管理信息寫入記錄媒體21中。另外，視頻/音頻編碼塊24中的音頻編碼塊具有圖7(A)的編碼側(cè)的構(gòu)成。
另外，圖10中說(shuō)明的記錄方法可由圖9說(shuō)明的專用裝置來(lái)實(shí)施，另一方面，請(qǐng)注意，也可作為具有該記錄媒體的記錄功能的計(jì)算機(jī)上的程序來(lái)實(shí)施。
<音頻/視頻再現(xiàn)裝置的實(shí)施方式I>
下面，說(shuō)明本發(fā)明的音頻/視頻再現(xiàn)裝置的實(shí)施方式I。圖11表示本發(fā)明的音頻/視頻再現(xiàn)裝置的實(shí)施方式I的框圖。
圖11中，在記錄媒體31中記錄由圖9所示的記錄裝置編輯記錄的編輯后的VOB。另外，用戶接口部36、管理信息控制部37、A_overlap計(jì)算部38、A_PTS_offset計(jì)算部39和對(duì)象控制部40構(gòu)成MPU塊41。
在該再現(xiàn)裝置中，首先，經(jīng)用戶接口部36將再現(xiàn)指示取到管理信息控制部37。由再現(xiàn)指示來(lái)指定一般應(yīng)再現(xiàn)哪個(gè)再現(xiàn)序列。設(shè)在再現(xiàn)序列中登錄連續(xù)再現(xiàn)多個(gè)VOB的信息。下面，表示VOB數(shù)據(jù)再現(xiàn)的基本步驟。
登錄在再現(xiàn)序列中的VOB的再現(xiàn)關(guān)聯(lián)信息由管理信息控制部37判斷，經(jīng)對(duì)象控制部40和媒體再現(xiàn)控制部32從記錄媒體31讀出VOB數(shù)據(jù)。另外，編輯點(diǎn)等管理信息已經(jīng)媒體再現(xiàn)控制部32從記錄媒體31讀出，始終保存在MPU塊40內(nèi)的存儲(chǔ)器(未圖示)中。
由媒體再現(xiàn)控制部32將讀出的VOB數(shù)據(jù)提供給多路分配器33，這里，分離成視頻數(shù)據(jù)與音頻數(shù)據(jù)，將視頻數(shù)據(jù)提供給視頻解碼塊34，將音頻數(shù)據(jù)提供給具有示為圖7(A)的解碼側(cè)的構(gòu)成的音頻解碼塊35，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS來(lái)解碼視頻數(shù)據(jù)，構(gòu)成視頻幀，另外，根據(jù)偏移后的PTS來(lái)解碼音頻數(shù)據(jù)。另外，在AF_drop＝1的情況下，不再現(xiàn)該VOB的最后的音頻幀。
此時(shí)，SCR等時(shí)鐘信息由多路分配器33解讀，根據(jù)需要傳遞給MPU塊40。另外，將STC等時(shí)鐘信息從MPU塊40傳遞給多路分配器33、視頻解碼塊34和音頻解碼塊35，依據(jù)STC來(lái)控制再現(xiàn)定時(shí)。
下面，詳細(xì)說(shuō)明音頻的再現(xiàn)。在本實(shí)施方式中，因?yàn)橛涗浢襟w31中應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間A_overlap、與表示用于偏移后續(xù)的VOB的音頻幀群以使A_overlap為零后進(jìn)行再現(xiàn)的偏移量的A_PTS_offset未記錄在記錄媒體31中，所以在再現(xiàn)側(cè)計(jì)算使用。
即，A_overlap計(jì)算部38將根據(jù)輸入到管理信息控制部37中的再現(xiàn)序列信息得到的編輯點(diǎn)處的信息代入上述[式5]中，計(jì)算交迭時(shí)間A_overlap。另外，A_PTS_offset計(jì)算部39經(jīng)管理信息控制部37輸入由A_overlap計(jì)算部38計(jì)算的連接點(diǎn)處的A_overlap后，計(jì)算A_PTS_offset。
A_PTS_offset計(jì)算部39根據(jù)輸入的A_overlap，利用[式8]的運(yùn)算式，算出A_PTS_offset，再根據(jù)[式9]的條件式，算出AF_drop，并將它們提供給管理信息控制部37。管理信息控制部37將輸入的A_PTS_offset及AF_drop提供給音頻解碼塊35，并將音頻幀的再現(xiàn)定時(shí)偏移A_PTS_offset大小后再現(xiàn)。另外，在AF_drop＝1的情況下，進(jìn)行控制，以不再現(xiàn)該VOB的最后的音頻幀。
<音頻/視頻再現(xiàn)方法的實(shí)施方式I>
下面，用圖12的流程圖來(lái)說(shuō)明本發(fā)明的音頻/視頻再現(xiàn)方法的實(shí)施方式I。
首先，確定應(yīng)再現(xiàn)的序列，確認(rèn)該序列中包含的VOB的信息(步驟S11)。之后，在每個(gè)VOB連接點(diǎn)，由A_overlap計(jì)算部38計(jì)算連接點(diǎn)處的A_overlap，再根據(jù)該A_overlap，由A_PTS_offset計(jì)算部39計(jì)算A_PTS_offset(和AF_drop)(步驟S12)。
接著，與VOB的再現(xiàn)開始同時(shí)或在這之前，復(fù)位STC，以便能無(wú)縫連接，并且，將由A_PTS_offset計(jì)算部39計(jì)算的A_PTS_offset(和AF_drop)設(shè)置到音頻解碼塊35(步驟S13)。
之后，從記錄媒體31中實(shí)際讀出VOB數(shù)據(jù)，經(jīng)媒體再現(xiàn)控制部32和多路分配器33，將視頻數(shù)據(jù)提供給視頻解碼塊34，將音頻數(shù)據(jù)提供給音頻解碼塊35，分別進(jìn)行解碼，再現(xiàn)視頻幀和音頻幀(步驟S14)。在AF_drop＝1的情況下，進(jìn)行處理，以不再現(xiàn)VOB的最后的音頻幀(步驟S15)。
如此再現(xiàn)的音頻幀在由音頻解碼塊35內(nèi)的圖7(A)所示的解碼器進(jìn)行包含加幕處理與正交逆變換處理的編碼后，作為音頻信號(hào)輸出。之后，對(duì)再現(xiàn)序列中的全部VOB判斷是否實(shí)施了上述處理(步驟S16)，若是最終的VOB，則結(jié)束再現(xiàn)(步驟S17)。
另外，圖12中說(shuō)明的再現(xiàn)方法可由圖11中說(shuō)明的再現(xiàn)裝置來(lái)實(shí)施，但另一方面，應(yīng)注意也可作為具有該記錄媒體的再現(xiàn)功能的計(jì)算機(jī)上的程序來(lái)實(shí)施。
這樣，根據(jù)本實(shí)施方式，除視頻幀的無(wú)縫連接外，音頻幀也可不產(chǎn)生連接點(diǎn)處的不連續(xù)噪聲地?zé)o縫連接。
下面，就圖11的再現(xiàn)裝置，說(shuō)明包含于音頻解碼塊35中的音頻緩沖器(未圖示)。一般，所需的音頻緩沖器的量由音頻編碼方式的種類與運(yùn)用時(shí)的比特速率來(lái)確定。在本發(fā)明的第1實(shí)施方式中，從音頻緩沖器至音頻解碼器的數(shù)據(jù)傳輸最大延遲1音頻幀周期大小。因此，本發(fā)明中所需的音頻緩沖器的量為在未適用本發(fā)明的‘A_PTS_offset＝0’時(shí)的音頻緩沖器量中加上1音頻幀大小的數(shù)據(jù)量后的量。
因此，在對(duì)音頻緩沖器尺寸設(shè)置上限的情況下，在記錄包含音頻流的VOB時(shí)，若將從音頻緩沖器尺寸上限中減去1音頻幀大小的數(shù)據(jù)量的緩沖器占有量設(shè)為上限，多路復(fù)用音頻數(shù)據(jù)，則即便在再現(xiàn)時(shí)最大延遲1音頻幀周期后再現(xiàn)的情況下，也不會(huì)產(chǎn)生音頻緩沖器的下溢。此時(shí)，若在盤上記錄表示在音頻緩沖器占有量不超過(guò)(音頻緩沖器尺寸上限-1音頻幀大小的數(shù)據(jù)量)下被多路復(fù)用的標(biāo)志(這里設(shè)為audio_mux_status標(biāo)志)，則得到構(gòu)成本發(fā)明的音頻無(wú)縫連接時(shí)的指標(biāo)。
圖13表示考慮audio_mux_status標(biāo)志后記錄VOB時(shí)的本發(fā)明的音頻/視頻記錄方法的一實(shí)施方式的流程圖。這里，在多路復(fù)用以使得音頻緩沖器尺寸占有量為(音頻緩沖器尺寸上限-1音頻幀大小的數(shù)據(jù)量)以下的情況下，設(shè)audio_mux_status＝1，否則，定義為0。
下面，參照?qǐng)D13和圖9來(lái)說(shuō)明上述記錄方法。首先，MPU塊22內(nèi)的管理信息控制部26確定是否多路復(fù)用，以滿足該音頻緩沖器條件(規(guī)定的音頻多路復(fù)用狀態(tài))(圖13的步驟S21)。此時(shí)，根據(jù)需要，經(jīng)用戶接口部25接收用尸的指示。
在滿足上述條件的情況下，利用來(lái)自從管理信息控制部26接收條件滿足通知的對(duì)象控制部27的指示，視頻/音頻編碼塊24將音頻數(shù)據(jù)與視頻數(shù)據(jù)多路復(fù)用，使音頻緩沖器占有量為從規(guī)定的音頻緩沖器上限中減去1音頻幀大小的數(shù)據(jù)量后的值以下，并經(jīng)媒體記錄控制部23將該多路復(fù)用后得到的VOB記錄在記錄媒體21中(圖13的步驟S22)。另外，管理信息控制部26將表示音頻多路復(fù)用狀態(tài)的audio_mux_status標(biāo)志設(shè)為1，與其它管理信息一起，經(jīng)媒體記錄控制部23記錄在記錄媒體21中(圖13的步驟S23)。
另一方面，在步驟S21中，管理信息控制部26判斷為不滿足音頻緩沖器條件(或不保障滿足條件)的情況下，利用來(lái)自從管理信息控制部26接收條件滿足否定通知的對(duì)象控制部27的指示，視頻/音頻編碼塊24經(jīng)媒體記錄控制部23，將由通常的音頻緩沖器條件得到的VOB記錄在記錄媒體21中(圖13的步驟S24)。另外，由管理信息控制部26與其它管理信息一起生成的、將值設(shè)定成0的上述audio_mux_status經(jīng)媒體記錄控制部23記錄在記錄媒體21中(圖13的步驟S25)。
圖14表示在考慮audio_mux_status標(biāo)志來(lái)編輯VOB的情況下的、本發(fā)明的音頻/視頻編輯方法的一實(shí)施方式的流程圖。與圖10一樣，圖9的管理信息控制部26確定連接對(duì)象VOB，并且，確定視頻連接點(diǎn)(應(yīng)在連接源的VOB最后再現(xiàn)的視頻幀與應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的視頻幀的連接點(diǎn))(圖14的步驟S31)。之后，根據(jù)視頻連接點(diǎn)，判斷是否需要視頻圖片類型的變更處理，在需要的情況下，進(jìn)行變更的具體準(zhǔn)備(圖14的步驟S32)。
之后，在確定視頻連接點(diǎn)之后，管理信息控制部26確認(rèn)關(guān)聯(lián)于經(jīng)圖9的媒體記錄控制部23從記錄媒體21讀出的管理信息內(nèi)的連接對(duì)象的VOB的audio_mux_status標(biāo)志值是否為1(圖14的步驟S33)。在audio_mux_status標(biāo)志值為1的情況下，根據(jù)本明，確定音頻幀編輯點(diǎn)，以構(gòu)成音頻交迭(圖14的步驟S34)。在audio_mux_status標(biāo)志值為0的情況下，根據(jù)現(xiàn)有技術(shù)，確定音頻幀編輯點(diǎn)，以構(gòu)成音頻縫隙(圖14的步驟S35)。
在步驟S34或S35的處理之后，編輯后的VOB(連接點(diǎn)附近的數(shù)據(jù))通過(guò)對(duì)象控制部27和媒體記錄控制部23寫入記錄媒體21中，并且，編輯點(diǎn)的信息也作為管理信息寫入記錄媒體21中(圖14的步驟S36)。
另外，在上述第1實(shí)施方式中，就編輯后的數(shù)據(jù)(視頻數(shù)據(jù)、音頻數(shù)據(jù))的記錄部位而言，只要在考慮了使用的記錄媒體或依賴于構(gòu)成前提的再現(xiàn)裝置的尋軌條件等的情況下，能保障無(wú)縫再現(xiàn)即可，不特別限定為本發(fā)明。即，無(wú)論數(shù)據(jù)的記錄部位如何，在實(shí)質(zhì)上具有音頻交迭后構(gòu)成編輯數(shù)據(jù)，具有音頻PTS偏移后能再現(xiàn)的情況下，滿足本發(fā)明的精神。
<第2實(shí)施方式的連接編輯與視頻/音頻再現(xiàn)>
下面，就本發(fā)明的第2實(shí)施方式而言，主要說(shuō)明與第1實(shí)施方式的差異。在圖8中示出連接編輯與視頻/音頻再現(xiàn)原理的第1實(shí)施方式中，A_PTS_offset的值通常為零以上(時(shí)間延遲)。相反，在圖15所示的第2實(shí)施方式中，也允許A_PTS_offset的值為負(fù)(時(shí)間前進(jìn))。換言之，在第1實(shí)施方式中，基本上為0≤A_PTS_offset＜TA，而在第2實(shí)施方式中，基本上為-0.5×TA＜A_PTS_offset≤0.5×TA(或-0.5×TA≤A_PTS_offset＜0.5×TA)時(shí)的實(shí)例。
第2實(shí)施方式雖可原樣適用[式4]-[式8]，但[式9]如上所述，由于規(guī)定A_PTS_offset的值域，所以被置換為下式。
If(A_PTS_offsetk＞0.5×TA){A_PTS_offsetk＝A_PTS_offsetk-TA；AF_dropk-1＝1；}else AF_dropk-1＝0；…[式10]這里，進(jìn)一步說(shuō)明圖15中的計(jì)算。在圖15的第一連接點(diǎn)中，首先，由[式6]，A_PTS_offset2＝A_overlap2，但在本實(shí)例中，因?yàn)锳_PTS_offset2比0.5×TA大，所以[式10]的If語(yǔ)句為真，A_PTS_offset2為負(fù)值(偏移變?yōu)闀r(shí)間前進(jìn))。同時(shí)，AF_drop1＝1。即，VOB1的最后音頻幀從再現(xiàn)中脫落。圖15中示出脫落后的狀態(tài)。
之后，在圖15的第二連接點(diǎn)，由[式7]，A_PTS_offset3被計(jì)算為A_overlap3與A_PTS_offset2之和。在本實(shí)例中，因?yàn)锳_PTS_offset2為負(fù)值，所以A_PTS_offset3為比A_overlap3小的值。另外，因?yàn)锳_PTS_offset3比0.5×TA小，所以[式10]的If語(yǔ)句為假，A_PTS_offset3為正值(偏移變?yōu)闀r(shí)間延遲)。同時(shí)，AF_drop2＝0。
第2實(shí)施方式的上述以外的構(gòu)成與第1實(shí)施方式一樣。即，如圖9、圖10、圖11、圖12所示的記錄/編輯裝置和方法、再現(xiàn)裝置和再現(xiàn)方法那樣，在再現(xiàn)時(shí)，在每個(gè)VOB連接點(diǎn)，計(jì)算A_overlap，再根據(jù)該A_overlap，計(jì)算A_PTS_offset(和AF_drop)，將計(jì)算出的A_PTS_offset(和AF_drop)提供給音頻解碼塊35，進(jìn)行控制，使得音頻幀的再現(xiàn)定時(shí)偏移A_PTS_offset大小后再現(xiàn)，另外，在AF_drop＝1的情況下，進(jìn)行控制，以不再現(xiàn)該VOB的最后的音頻幀。
這樣，本實(shí)施方式也與第1實(shí)施方式一樣，除視頻幀的無(wú)縫連接外，音頻幀也可不產(chǎn)生連接點(diǎn)處的不連續(xù)噪聲地?zé)o縫連接。另外，本實(shí)施方式也與第1實(shí)施方式一樣，編輯方法或再現(xiàn)方法也可作為計(jì)算機(jī)上的程序來(lái)實(shí)施。
下面，就圖11的再現(xiàn)裝置，說(shuō)明包含于音頻解碼塊35中的音頻緩沖器(未圖示)。一般，所需的音頻緩沖器的量由音頻編碼方式的種類與運(yùn)用時(shí)的比特速率來(lái)確定。在本發(fā)明的第1實(shí)施方式中，從音頻緩沖器至音頻解碼器的數(shù)據(jù)傳輸最大延遲1音頻幀周期大小。因此，本發(fā)明中所需的音頻緩沖器的量為在未適用本發(fā)明的‘A_PTS_offset＝0’時(shí)的音頻緩沖器量中加上1音頻幀大小的數(shù)據(jù)量后的量。
另一方面，在第2實(shí)施方式中，若考慮最大0.5音頻幀周期延遲，則所需的音頻緩沖器的量為在未適用本發(fā)明的‘A_PTS_offset＝0’時(shí)的音頻緩沖器量中加上1音頻幀大小的數(shù)據(jù)量后的量。并且，在第2實(shí)施方式中，若考慮提前最大0.5音頻幀周期從音頻緩沖器向音頻解碼器傳輸數(shù)據(jù)，則在生成VOB時(shí)，必需進(jìn)行使再現(xiàn)時(shí)的音頻緩沖器占有量始終為1音頻幀數(shù)據(jù)量以上的多路復(fù)用。
因此，在對(duì)音頻緩沖器尺寸設(shè)置上限的情況下，在記錄包含音頻流的VOB時(shí)，若將從音頻緩沖器尺寸上限中減去1音頻幀大小的數(shù)據(jù)量的緩沖器占有量設(shè)為上限，多路復(fù)用音頻數(shù)據(jù)，則即便在再現(xiàn)時(shí)最大延遲0.5音頻幀周期后再現(xiàn)的情況下，也不會(huì)產(chǎn)生音頻緩沖器的下溢。此時(shí)，若在盤上記錄表示在音頻緩沖器占有量不超過(guò)(音頻緩沖器尺寸上限-1音頻幀大小的數(shù)據(jù)量)下被多路復(fù)用的標(biāo)志(這里設(shè)為audio_mux_status標(biāo)志)，則得到構(gòu)成本發(fā)明的音頻無(wú)縫連接時(shí)的指標(biāo)。
另外，在第2實(shí)施方式的情況下，若準(zhǔn)備表示多路復(fù)用以使得音頻緩沖器占有量始終為1音頻幀數(shù)據(jù)量以上的標(biāo)志，則根據(jù)該實(shí)施方式，得到構(gòu)成音頻無(wú)縫連接時(shí)的指標(biāo)。該標(biāo)志與在先的audio_mux_status標(biāo)志可以是不同標(biāo)志，也可以是相同標(biāo)志。在第2實(shí)施方式中，除在音頻緩沖器條件中加入音頻緩沖器占有量始終為1音頻幀數(shù)據(jù)量以上的條件外，可由與圖13和圖14相同的處理步驟來(lái)進(jìn)行記錄與編輯。
另外，就編輯后的數(shù)據(jù)(視頻數(shù)據(jù)、音頻數(shù)據(jù))的記錄部位而言，只要在考慮了使用的記錄媒體或依賴于構(gòu)成前提的再現(xiàn)裝置的尋軌條件等的情況下，能保障無(wú)縫再現(xiàn)即可，不特別限定為本發(fā)明。即，無(wú)論數(shù)據(jù)的記錄部位如何，在實(shí)質(zhì)上具有音頻交迭后構(gòu)成編輯數(shù)據(jù)，具有音頻PTS偏移后能再現(xiàn)的情況下，滿足本發(fā)明的精神。
<音頻/視頻記錄/再現(xiàn)的其它實(shí)施方式>
下面，說(shuō)明在先說(shuō)明的本發(fā)明的音頻/視頻記錄裝置/方法和再現(xiàn)裝置/方法的其它實(shí)施方式。
<音頻/視頻記錄裝置的實(shí)施方式II>
圖16表示本發(fā)明的音頻/視頻記錄裝置的實(shí)施方式II的框圖。這里，設(shè)多個(gè)VOB的記錄結(jié)束，說(shuō)明它們的連接編輯動(dòng)作。
圖16中，用戶接口部45、管理信息控制部46、A_overlap計(jì)算部47、和對(duì)象控制部48構(gòu)成MPU塊42，由MPU(Micro Processing Unit)的軟件處理實(shí)現(xiàn)。
首先，通過(guò)用戶接口部45從用戶提供編輯指示。管理信息控制部46使用對(duì)應(yīng)的管理信息來(lái)確認(rèn)連接編輯點(diǎn)。此時(shí)，首先如上所述，確定音頻幀的編輯點(diǎn)，以在連接點(diǎn)處存在音頻幀的交迭。之后，根據(jù)需要對(duì)視頻幀進(jìn)行圖片類型的變換處理。這通過(guò)對(duì)象控制部48、視頻/音頻編碼塊44、媒體記錄控制部43來(lái)進(jìn)行，寫入記錄媒體41中。
<音頻/視頻記錄方法的實(shí)施方式II>
下面，進(jìn)行音頻無(wú)縫連接用的計(jì)算與記錄。參照?qǐng)D17的流程圖來(lái)說(shuō)明本發(fā)明的音頻/視頻記錄方法的實(shí)施方式II的音頻無(wú)縫連接用的計(jì)算與記錄。
首先，管理信息控制部46確定連接對(duì)象VOB，并且，確定視頻連接點(diǎn)(應(yīng)在連接源的VOB最后再現(xiàn)的視頻幀、與應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的視頻幀的連接點(diǎn))(步驟S41)。之后，根據(jù)視頻連接點(diǎn)，判斷是否需要視頻圖片類型的變更處理，在需要的情況下，進(jìn)行變更的具體準(zhǔn)備(步驟S42)。
之后，應(yīng)對(duì)于視頻連接點(diǎn)，確定音頻幀編輯點(diǎn)(步驟S43)。即，確定音頻幀編輯點(diǎn)，以使應(yīng)在連接源的VOB最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻連接點(diǎn)的時(shí)刻。
之后，A_overlap計(jì)算部47進(jìn)行所述的A_overlap計(jì)算(步驟S44)。最后，將編輯后的VOB(連接點(diǎn)附近的數(shù)據(jù))、計(jì)算出的A_overlap與再現(xiàn)序列等管理信息通過(guò)對(duì)象控制部48和媒體記錄控制部43寫入記錄媒體41中(步驟S45)。再現(xiàn)序列中包含應(yīng)再現(xiàn)的VOB的信息、連接點(diǎn)的信息等。另外，視頻/音頻編碼塊44中的音頻編碼塊具有圖7(A)的編碼側(cè)的構(gòu)成。
另外，圖17中說(shuō)明的記錄方法可由圖16說(shuō)明的專用裝置來(lái)實(shí)施，另一方面，請(qǐng)注意，也可作為具有該記錄媒體的記錄功能的計(jì)算機(jī)上的程序來(lái)實(shí)施。
<音頻/視頻再現(xiàn)裝置的實(shí)施方式II>
下面，說(shuō)明本發(fā)明的音頻/視頻再現(xiàn)裝置的實(shí)施方式II。圖18表示本發(fā)明的音頻/視頻再現(xiàn)裝置的實(shí)施方式II的框圖。
圖18中，在記錄媒體51中記錄由圖16所示的記錄裝置編輯記錄的編輯后的VOB或管理信息。另外，用戶接口部56、管理信息控制部57、A_PTS_offset計(jì)算部58和對(duì)象控制部59構(gòu)成MPU塊60。
在該再現(xiàn)裝置中，首先，經(jīng)用戶接口部56將再現(xiàn)指示取到管理信息控制部57。由再現(xiàn)指示來(lái)指定一般應(yīng)再現(xiàn)哪個(gè)再現(xiàn)序列。設(shè)在再現(xiàn)序列中登錄連續(xù)再現(xiàn)多個(gè)VOB的信息。下面，表示VOB數(shù)據(jù)再現(xiàn)的基本步驟。
登錄在再現(xiàn)序列中的VOB的再現(xiàn)關(guān)聯(lián)信息由管理信息控制部57判斷，經(jīng)對(duì)象控制部59和媒體再現(xiàn)控制部52從記錄媒體51讀出VOB數(shù)據(jù)。另外，再現(xiàn)序列等管理信息已經(jīng)媒體再現(xiàn)控制部52從記錄媒體51讀出，始終保存在MPU塊60內(nèi)的存儲(chǔ)器(未圖示)中。
由媒體再現(xiàn)控制部52將讀出的VOB數(shù)據(jù)提供給多路分配器53，這里，分離成視頻數(shù)據(jù)與音頻數(shù)據(jù)，將視頻數(shù)據(jù)提供給視頻解碼塊54，將音頻數(shù)據(jù)提供給具有示為圖7(A)的解碼側(cè)的構(gòu)成的音頻解碼塊55，分別解碼，輸出解碼后的視頻幀、音頻幀。此時(shí)，由多路分配器53來(lái)解讀SCR等時(shí)鐘信息，根據(jù)需要傳遞給MPU塊60。另外，將STC等時(shí)鐘信息從MPU塊60傳遞給多路分配器53、視頻解碼塊54和音頻解碼塊55，依據(jù)STC來(lái)控制再現(xiàn)定時(shí)。
下面，詳細(xì)說(shuō)明音頻的再現(xiàn)。在本實(shí)施方式中，因?yàn)橛涗浢襟w51中記錄包含連接點(diǎn)處的A_overlap的管理信息，所以由媒體再現(xiàn)控制部52從記錄媒體51讀出的管理信息經(jīng)對(duì)象控制部59提供給管理信息控制部57，這里，從管理信息中取出連接點(diǎn)處的A_overlap，提供給A_PTS_offset計(jì)算部58。
A_PTS_offset計(jì)算部58根據(jù)輸入的A_overlap，利用[式8]的運(yùn)算式，算出A_PTS_offset，再根據(jù)[式9]的條件式，算出AF_drop，并將它們提供給管理信息控制部57。管理信息控制部57將輸入的A_PTS_offset及AF_drop提供給音頻解碼塊55，并將音頻幀的再現(xiàn)定時(shí)偏移A_PTS_offset大小后再現(xiàn)。另外，在AF_drop＝1的情況下，進(jìn)行控制，以不再現(xiàn)該VOB的最后的音頻幀。
<音頻/視頻再現(xiàn)方法的實(shí)施方式II>
下面，用圖19的流程圖來(lái)說(shuō)明本發(fā)明的音頻/視頻再現(xiàn)方法的實(shí)施方式I。
首先，確定應(yīng)再現(xiàn)的序列，確認(rèn)該序列中包含的VOB的信息(步驟S51)。之后，在每個(gè)VOB連接點(diǎn)，根據(jù)再現(xiàn)的A_overlap，由A_PTS_offset計(jì)算部58計(jì)算A_PTS_offset(和AF_drop)(步驟S52)。
接著，與VOB的再現(xiàn)開始同時(shí)或在這之前，復(fù)位STC，以便能無(wú)縫連接，并且，將由A_PTS_offset計(jì)算部58計(jì)算的A_PTS_offset(和AF_drop)設(shè)置到音頻解碼塊55(步驟S53)。
之后，從記錄媒體51中實(shí)際讀出VOB數(shù)據(jù)，經(jīng)媒體再現(xiàn)控制部52和多路分配器53，將視頻數(shù)據(jù)提供給視頻解碼塊54，將音頻數(shù)據(jù)提供給音頻解碼塊55，分別進(jìn)行解碼，再現(xiàn)視頻幀和音頻幀(步驟S54)。在AF_drop＝1的情況下，進(jìn)行處理，以不再現(xiàn)VOB的最后的音頻幀(步驟S55)。
如此再現(xiàn)的音頻幀在由圖7(A)所示的解碼器進(jìn)行包含加幕處理與正交逆變換處理的編碼后，作為音頻信號(hào)輸出。之后，對(duì)再現(xiàn)序列中的全部VOB判斷是否實(shí)施了上述處理(步驟S56)，若是最終的VOB，則結(jié)束再現(xiàn)(步驟S57)。
另外，圖19中說(shuō)明的再現(xiàn)方法可由圖18中說(shuō)明的再現(xiàn)裝置來(lái)實(shí)施，但另一方面，應(yīng)注意也可作為具有該記錄媒體的再現(xiàn)功能的計(jì)算機(jī)上的程序來(lái)實(shí)施。
這樣，根據(jù)本實(shí)施方式，除視頻幀的無(wú)縫連接外，音頻幀也可不產(chǎn)生連接點(diǎn)處的不連續(xù)噪聲地?zé)o縫連接。
<音頻/視頻記錄裝置的實(shí)施方式III>
下面，說(shuō)明本發(fā)明的音頻/視頻記錄裝置的實(shí)施方式III。圖20表示本發(fā)明的音頻/視頻記錄裝置的實(shí)施方式III的框圖。這里，設(shè)多個(gè)VOB的記錄結(jié)束，說(shuō)明它們的連接編輯動(dòng)作。
圖20中，用戶接口部65、管理信息控制部66、A_overlap計(jì)算部67、A_PTS_offset計(jì)算部68和對(duì)象控制部69構(gòu)成MPU塊62，由MPU(MicroProcessing Unit)的軟件處理實(shí)現(xiàn)。
首先，通過(guò)用戶接口部65從用戶提供編輯指示。管理信息控制部66使用對(duì)應(yīng)的管理信息來(lái)確認(rèn)連接編輯點(diǎn)。此時(shí)，首先如上所述，確定音頻幀的編輯點(diǎn)，以在連接點(diǎn)處存在音頻幀的交迭。之后，根據(jù)需要對(duì)視頻幀進(jìn)行圖片類型的變換處理。這通過(guò)對(duì)象控制部69、視頻/音頻編碼塊64、媒體記錄控制部63來(lái)進(jìn)行，寫入記錄媒體61中。
<音頻/視頻記錄方法的實(shí)施方式III>
下面，進(jìn)行音頻無(wú)縫連接用的計(jì)算與記錄。參照?qǐng)D21的流程圖來(lái)說(shuō)明本發(fā)明的音頻/視頻記錄方法的實(shí)施方式III的音頻無(wú)縫連接用的計(jì)算與記錄。
首先，管理信息控制部66確定連接對(duì)象VOB，并且，確定視頻連接點(diǎn)(應(yīng)在連接源的VOB最后再現(xiàn)的視頻幀、與應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的視頻幀的連接點(diǎn))(步驟S61)。之后，根據(jù)視頻連接點(diǎn)，判斷是否需要視頻圖片類型的變更處理，在需要的情況下，進(jìn)行變更的具體準(zhǔn)備(步驟S62)。
之后，根據(jù)視頻連接點(diǎn)，確定音頻幀編輯點(diǎn)(步驟S63)。即，確定音頻幀編輯點(diǎn)，以使應(yīng)在連接源的VOB最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的VOB最初再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻連接點(diǎn)的時(shí)刻。
之后，A_overlap計(jì)算部67進(jìn)行所述的A_overlap計(jì)算(步驟S64)，A_PTS_offset計(jì)算，68進(jìn)行所述的A_PTS_offset(和AF_drop)的計(jì)算(步驟S65)。
最后，將編輯后的VOB(連接點(diǎn)附近的數(shù)據(jù))、至少A_PTS_offset(和AF_drop)與再現(xiàn)序列等管理信息通過(guò)對(duì)象控制部69和媒體記錄控制部63寫入記錄媒體61中(步驟S66)。此時(shí)，A_overlap是否也寫入記錄媒體中是任意的。再現(xiàn)序列中包含應(yīng)再現(xiàn)的VOB的信息、連接點(diǎn)的信息等。另外，視頻/音頻編碼塊64中的音頻編碼塊具有圖7(A)的編碼側(cè)的構(gòu)成。
另外，圖21中說(shuō)明的記錄方法可由圖20說(shuō)明的專用裝置來(lái)實(shí)施，另一方面，請(qǐng)注意，也可作為具有該記錄媒體的記錄功能的計(jì)算機(jī)上的程序來(lái)實(shí)施。
<音頻/視頻再現(xiàn)裝置的實(shí)施方式III>
下面，說(shuō)明本發(fā)明的音頻/視頻再現(xiàn)裝置的實(shí)施方式III。圖22表示本發(fā)明的音頻/視頻再現(xiàn)裝置的實(shí)施方式III的框圖。
圖22中，在記錄媒體71中記錄由圖20所示的記錄裝置編輯記錄的編輯后的VOB或管理信息。另外，用戶接口部76、管理信息控制部77和對(duì)象控制部78構(gòu)成MPU塊79。
在該再現(xiàn)裝置中，首先，經(jīng)用戶接口部76將再現(xiàn)指示取到管理信息控制部77。由再現(xiàn)指示來(lái)指定一般應(yīng)再現(xiàn)哪個(gè)再現(xiàn)序列。設(shè)在再現(xiàn)序列中登錄連續(xù)再現(xiàn)多個(gè)VOB的信息。下面，表示VOB數(shù)據(jù)再現(xiàn)的基本步驟。
登錄在再現(xiàn)序列中的VOB的再現(xiàn)關(guān)聯(lián)信息由管理信息控制部77判斷，經(jīng)對(duì)象控制部78和媒體再現(xiàn)控制部72從記錄媒體71讀出VOB數(shù)據(jù)。另外，再現(xiàn)序列等管理信息已經(jīng)媒體再現(xiàn)控制部72從記錄媒體71讀出，始終保存在MPU塊79內(nèi)的存儲(chǔ)器(未圖示)中。
由媒體再現(xiàn)控制部72將讀出的VOB數(shù)據(jù)提供給多路分配器73，這里，分離成視頻數(shù)據(jù)與音頻數(shù)據(jù)，將視頻數(shù)據(jù)提供給視頻解碼塊74，將音頻數(shù)據(jù)提供給具有示為圖7(A)的解碼側(cè)的構(gòu)成的音頻解碼塊75，分別解碼，輸出解碼后的視頻幀、音頻幀。此時(shí)，由多路分配器73來(lái)解讀SCR等時(shí)鐘信息，根據(jù)需要傳遞給MPU塊79。另外，將STC等時(shí)鐘信息從MPU塊79傳遞給多路分配器73、視頻解碼塊74和音頻解碼塊75，依據(jù)STC來(lái)控制再現(xiàn)定時(shí)。
下面，詳細(xì)說(shuō)明音頻的再現(xiàn)。在本實(shí)施方式中，因?yàn)橛涗浢襟w71中記錄連接點(diǎn)處的A_PTS_offset，所以從管理信息中讀出連接點(diǎn)處的A_PTS_offset(和AF_drop)。將得到的A_PTS_offset(和AF_drop)提供給音頻解碼塊75，將音頻幀的再現(xiàn)定時(shí)偏移A_PTS_offset大小后再現(xiàn)。另外，在AF_drop＝1的情況下，進(jìn)行控制，以不再現(xiàn)該VOB的最后的音頻幀。
<音頻/視頻再現(xiàn)方法的實(shí)施方式III>
下面，用圖23的流程圖來(lái)說(shuō)明本發(fā)明的音頻/視頻再現(xiàn)方法的實(shí)施方式I。
首先，確定應(yīng)再現(xiàn)的序列，確認(rèn)該序列中包含的VOB的信息(步驟S71)。之后，與VOB的再現(xiàn)開始同時(shí)或在這之前，復(fù)位STC，以便能無(wú)縫連接，并且，將從記錄媒體71中再現(xiàn)的A_PTS_offset設(shè)置到音頻解碼塊75(步驟S72)。
之后，從記錄媒體71中實(shí)際讀出VOB數(shù)據(jù)，經(jīng)媒體再現(xiàn)控制部72和多路分配器73，將視頻數(shù)據(jù)提供給視頻解碼塊74，將音頻數(shù)據(jù)提供給音頻解碼塊75，分別進(jìn)行解碼，再現(xiàn)視頻幀和音頻幀(步驟S73)。在AF_drop＝1的情況下，進(jìn)行處理，以不再現(xiàn)VOB的最后的音頻幀(步驟S74)。之后，對(duì)再現(xiàn)序列中的全部VOB判斷是否實(shí)施了上述處理(步驟S75)，若是最終的VOB，則結(jié)束再現(xiàn)(步驟S76)。
另外，圖23中說(shuō)明的再現(xiàn)方法可由圖22中說(shuō)明的再現(xiàn)裝置來(lái)實(shí)施，但另一方面，應(yīng)注意也可作為具有該記錄媒體的再現(xiàn)功能的計(jì)算機(jī)上的程序來(lái)實(shí)施。
這樣，根據(jù)本實(shí)施方式，除視頻幀的無(wú)縫連接外，音頻幀也可不產(chǎn)生連接點(diǎn)處的不連續(xù)噪聲地?zé)o縫連接。
另外，就在先說(shuō)明的本發(fā)明的第2實(shí)施方式而言，也可代替與第1實(shí)施方式相同部分中、圖4、圖5、圖6、圖7所示的記錄/編輯裝置和方法、再現(xiàn)裝置和再現(xiàn)方法(即實(shí)施方式I的部分)，而采用圖16、圖17、圖18、圖19所示的記錄/編輯裝置和方法、再現(xiàn)裝置和再現(xiàn)方法(即實(shí)施方式II所示，在記錄時(shí)算出連接點(diǎn)處的A_overlap，并將該A_overlap記錄在記錄媒體中，再現(xiàn)時(shí)根據(jù)從記錄媒體中讀出的A_overlap，算出A_PTS_offset(和AF_drop)，將該A_PTS_offset(和AF_drop)提供給音頻解碼塊55，并進(jìn)行控制，使音頻幀的再現(xiàn)定時(shí)偏移A_PTS_offset大小后再現(xiàn)，另外，在AF_drop＝1的情況下，進(jìn)行控制，以不再現(xiàn)該VOB的最后的音頻)，或采用圖20、圖21、圖22、圖23所示的記錄/編輯裝置和方法、再現(xiàn)裝置和再現(xiàn)方法(即實(shí)施方式III所示，在記錄時(shí)算出連接點(diǎn)處的A_overlap與A_PTS_offset(和AF_drop)，至少將A_PTS_offset(和AF_drop)記錄在記錄媒體中，再現(xiàn)時(shí)將從記錄媒體中讀出的A_PTS_offset(和AF_drop)提供給音頻解碼塊75，并進(jìn)行控制，使音頻幀的再現(xiàn)定時(shí)偏移A_PTS_offset大小后再現(xiàn)，另外，在AF_drop＝1的情況下，進(jìn)行控制，以不再現(xiàn)該VOB的最后的音頻)。
產(chǎn)業(yè)上的可利用性根據(jù)本發(fā)明，除視頻幀的無(wú)縫連接用視頻數(shù)據(jù)的變更處理外，確定音頻幀的編輯點(diǎn)，以使應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的連接點(diǎn)的時(shí)刻，并且，應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含連接點(diǎn)的時(shí)刻，之后，進(jìn)行偏移處理，使連接點(diǎn)之后的音頻幀與視頻幀的同步錯(cuò)位可設(shè)為基本上不能被檢測(cè)為對(duì)口形(lip sync)錯(cuò)位的量，所以音頻幀也可不產(chǎn)生連接點(diǎn)處的不連續(xù)噪聲地?zé)o縫連接。
另外，根據(jù)本發(fā)明，確定音頻幀的編輯點(diǎn)，并將該編輯點(diǎn)作為管理信息記錄在記錄媒體中，在再現(xiàn)側(cè)，根據(jù)再現(xiàn)管理信息，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間、和用于偏移從記錄媒體中讀出的音頻幀的PTS的音頻PTS偏移時(shí)間，由此在記錄側(cè)不計(jì)算上述交迭時(shí)間與音頻PTS偏移時(shí)間，所以可將記錄側(cè)的負(fù)擔(dān)變?yōu)樽钚　?br> 另外，根據(jù)本發(fā)明，當(dāng)從如下記錄媒體再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)時(shí)，即便在再現(xiàn)時(shí)最大延遲1音頻幀周期后再現(xiàn)的情況下，也不會(huì)產(chǎn)生音頻緩沖器的上溢，該記錄媒體將音頻數(shù)據(jù)多路復(fù)用于視頻數(shù)據(jù)中來(lái)記錄，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下。
另外，根據(jù)本發(fā)明，通過(guò)對(duì)應(yīng)于根據(jù)再現(xiàn)時(shí)從記錄媒體中讀出的交迭時(shí)間算出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS，從而不必計(jì)算用于算出再現(xiàn)側(cè)的音頻數(shù)據(jù)無(wú)縫再現(xiàn)用的音頻PTS偏移時(shí)間的交迭時(shí)間，所以可減輕再現(xiàn)側(cè)的無(wú)縫再現(xiàn)時(shí)的負(fù)擔(dān)。
另外，根據(jù)本發(fā)明，通過(guò)對(duì)應(yīng)于再現(xiàn)時(shí)從記錄媒體中讀出的音頻PTS偏移時(shí)間，偏移從記錄媒體中讀出的音頻幀的PTS，從而不必算出再現(xiàn)側(cè)的音頻數(shù)據(jù)無(wú)縫再現(xiàn)用的音頻PTS偏移時(shí)間，可將再現(xiàn)側(cè)的無(wú)縫再現(xiàn)時(shí)的負(fù)擔(dān)減為最小。
權(quán)利要求
1.一種音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(21)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(21)中，其特征在于具有音頻編碼單元(24(11、12、13))，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；視頻數(shù)據(jù)變換單元(27、24、23)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯點(diǎn)確定單元(26)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；和記錄單元(23)，將所述編輯點(diǎn)作為登錄信息記錄在記錄媒體(21)中。
2.一種音頻/視頻記錄方法，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(21)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(21)中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；第2步驟(S2)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟(S3)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的視頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；和第4步驟(S4)，將所述編輯點(diǎn)作為管理信息記錄在所述記錄媒體(21)中。
3.一種音頻/視頻再現(xiàn)裝置，根據(jù)再現(xiàn)管理信息，從由權(quán)利要求1所述的記錄裝置記錄了視頻對(duì)象和管理信息的記錄媒體(31)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于具有交迭時(shí)間計(jì)算單元(38)，包含根據(jù)所述再現(xiàn)管理信息得到的所述編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；偏移時(shí)間算出單元(39)，在所述編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落(drop)標(biāo)志；復(fù)位單元(37)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元(37、35)，根據(jù)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元(34)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的視頻數(shù)據(jù)；音頻幀再現(xiàn)單元(35)，在根據(jù)所述偏移后的PTS再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和音頻解碼單元(35(15、16、17))，對(duì)由所述音頻幀再現(xiàn)單元(35)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
4.一種音頻/視頻再現(xiàn)方法，根據(jù)再現(xiàn)管理信息，從由權(quán)利要求2所述的記錄方法記錄了視頻對(duì)象和管理信息的記錄媒體(31)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟(S12)，包含根據(jù)所述再現(xiàn)管理信息得到的所述編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；第2步驟(S12)，在所述編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落(drop)標(biāo)志；第3步驟(S13)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟(S13)，根據(jù)在所述第2步驟(S12)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；第5步驟(S14)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的視頻數(shù)據(jù)；第6步驟(S14、S15)，在根據(jù)在所述第4步驟(S13)偏移后的PTS再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述第3步驟(S13)中輸出的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由所述第6步驟(S14、S15)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
5.一種音頻/視頻再現(xiàn)程序，讓計(jì)算機(jī)執(zhí)行再現(xiàn)方法，該再現(xiàn)方法中，根據(jù)再現(xiàn)管理信息，從利用權(quán)利要求2所述的記錄方法記錄了包含視頻對(duì)象和音頻幀的編輯點(diǎn)的管理信息的記錄媒體(31)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于讓所述計(jì)算機(jī)執(zhí)行第1步驟(S12)，包含根據(jù)所述再現(xiàn)管理信息得到的所述編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；第2步驟(S12)，在所述編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落(drop)標(biāo)志；第3步驟(S13)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟(S13)，根據(jù)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；第5步驟(S14)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的視頻數(shù)據(jù)；第6步驟(S14、S15)，在根據(jù)在所述第4步驟偏移后的PTS再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述第3步驟中輸出的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由所述第6步驟再現(xiàn)的所述音頻數(shù)據(jù)，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
6.一種音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(21)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體中，其特征在于具有音頻編碼單元(24(11、12、13))，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；多路復(fù)用單元(24)，多路復(fù)用所述音頻數(shù)據(jù)與所述視頻數(shù)據(jù)，生成所述視頻對(duì)象；控制單元(24、26)，在所述多路復(fù)用單元(24)進(jìn)行多路復(fù)用時(shí)，控制所述多路復(fù)用單元(24)，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下，并且，生成表示該音頻多路復(fù)用狀態(tài)的標(biāo)志；和記錄單元(23)，將從由所述控制單元(24、26)控制的所述多路復(fù)用單元(24)輸出的所述視頻對(duì)象、與由所述控制單元(24、26)生成的表示所述音頻多路復(fù)用狀態(tài)的標(biāo)志一起記錄在記錄媒體(21)中。
7.一種音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(21)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(21)中，其特征在于具有音頻編碼單元(24(11、12、13))，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；多路復(fù)用單元(24)，多路復(fù)用所述音頻數(shù)據(jù)與所述視頻數(shù)據(jù)，生成所述視頻對(duì)象；控制單元(24、26)，在所述多路復(fù)用單元(24)進(jìn)行多路復(fù)用時(shí)，控制所述多路復(fù)用單元(24)，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下，并且，生成表示該音頻多路復(fù)用狀態(tài)的標(biāo)志；第1記錄單元(23)，將從由所述控制單元(24、26)控制的所述多路復(fù)用單元(24)輸出的所述視頻對(duì)象、與由所述控制單元(24、26)生成的表示所述音頻多路復(fù)用狀態(tài)的標(biāo)志一起記錄在記錄媒體(21)中；視頻數(shù)據(jù)變換單元(27、24、23)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；確定音頻幀的編輯點(diǎn)并編輯音頻幀的單元(26)，以便在所述連接點(diǎn)前后，使連接源的視頻對(duì)象的音頻幀的再現(xiàn)期間與連接對(duì)象的視頻對(duì)象的音頻幀的再現(xiàn)期間產(chǎn)生部分交迭；和第2記錄單元(23)，將所述編輯點(diǎn)作為登錄信息記錄在記錄媒體(21)中。
8.一種音頻/視頻記錄方法，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(21)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(21)中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；第2步驟(S22)，在將所述音頻數(shù)據(jù)與視頻數(shù)據(jù)多路復(fù)用時(shí)，進(jìn)行控制，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下；和第3步驟(S23)，將表示在所述第2步驟(S22)控制下的音頻多路復(fù)用狀態(tài)的標(biāo)志、與在所述第2步驟(S22)的控制下多路復(fù)用所得到的所述視頻對(duì)象一起記錄在記錄媒體(21)中。
9.一種音頻/視頻記錄方法，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(21)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(21)中，其特征在于具有第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；第2步驟(S22)，在將所述音頻數(shù)據(jù)與視頻數(shù)據(jù)多路復(fù)用時(shí)，進(jìn)行控制，以使音頻緩沖器占有量為從規(guī)定的音頻緩沖器尺寸上限中減去1音頻幀的數(shù)據(jù)量后的值以下；第3步驟(S23)，將表示在所述第2步驟(S22)控制下的音頻多路復(fù)用狀態(tài)的標(biāo)志、與在所述第2步驟(S22)的控制下多路復(fù)用所得到的所述視頻對(duì)象一起記錄在記錄媒體(21)中；第4步驟(S2)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第5步驟(S3)，確定音頻幀的編輯點(diǎn)，并編輯音頻幀，以便在所述連接點(diǎn)前后，使連接源的視頻對(duì)象的音頻幀的再現(xiàn)期間與連接對(duì)象的視頻對(duì)象的音頻幀的再現(xiàn)期間產(chǎn)生部分交迭；和第6步驟(S4)，將所述編輯點(diǎn)作為管理信息記錄在所述記錄媒體(21)中。
10.一種音頻/視頻再現(xiàn)裝置，根據(jù)再現(xiàn)管理信息，從由權(quán)利要求7所述的記錄裝置記錄了視頻對(duì)象和管理信息的記錄媒體(31)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于具有交迭時(shí)間計(jì)算單元(38)，對(duì)所述再現(xiàn)管理信息內(nèi)的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；偏移時(shí)間算出單元(39)，在所述編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；復(fù)位單元(37)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元(37、35)，根據(jù)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元(34)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的視頻數(shù)據(jù)；音頻幀再現(xiàn)單元(35)，在根據(jù)所述偏移后的PTS再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和音頻解碼單元(35(15、16、17))，對(duì)由所述音頻幀再現(xiàn)單元(35)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
11.根據(jù)權(quán)利要求3或10所述的音頻/視頻再現(xiàn)裝置，其特征在于所述偏移時(shí)間算出單元(39)是如下單元，即在算出的所述連接點(diǎn)處的所述音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去所述音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
12.一種音頻/視頻再現(xiàn)方法，根據(jù)再現(xiàn)管理信息，從由權(quán)利要求9所述的記錄方法記錄了視頻對(duì)象和管理信息的記錄媒體(31)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟(S12)，對(duì)于所述再現(xiàn)管理信息內(nèi)的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；第2步驟(S12)，在所述編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落(drop)標(biāo)志；第3步驟(S13)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟(S13)，根據(jù)在所述第2步驟(S12)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；第5步驟(S14)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的視頻數(shù)據(jù)；第6步驟(S14、S15)，在根據(jù)在所述第4步驟(S13)偏移后的PTS再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述第3步驟(S13)中輸出的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由所述第6步驟(S14、S15)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
13.根據(jù)權(quán)利要求4或12所述的音頻/視頻再現(xiàn)方法，其特征在于所述第2步驟(S12)在算出的所述連接點(diǎn)處的所述音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去所述音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
14.一種音頻/視頻再現(xiàn)程序，讓計(jì)算機(jī)執(zhí)行再現(xiàn)方法，該再現(xiàn)方法中，根據(jù)再現(xiàn)管理信息，從利用權(quán)利要求9所述的記錄方法記錄了包含視頻對(duì)象和音頻幀的編輯點(diǎn)和表示音頻多路復(fù)用狀態(tài)的標(biāo)志的管理信息的記錄媒體(31)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于讓所述計(jì)算機(jī)執(zhí)行第1步驟(S12)，對(duì)于所述再現(xiàn)管理信息內(nèi)的編輯點(diǎn)，計(jì)算應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的音頻幀、與應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的交迭時(shí)間；第2步驟(S12)，在所述編輯點(diǎn)是指定的再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將計(jì)算出的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把計(jì)算出的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前編輯點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；第3步驟(S13)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟(S13)，根據(jù)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；第5步驟(S14)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的視頻數(shù)據(jù)；第6步驟(S14、S15)，在根據(jù)在所述第4步驟(S13)偏移后的PTS再現(xiàn)從所述記錄媒體(31)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述第3步驟(S13)中輸出的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由所述第6步驟(S14、S15)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
15.一種音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(41)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(41)中，其特征在于具有音頻編碼單元(44(11、12、13))，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；視頻數(shù)據(jù)變更單元(48、44、43)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯點(diǎn)確定單元(46)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；交迭時(shí)間計(jì)算單元(47)，包含所述連接點(diǎn)，計(jì)算應(yīng)在所述最后再現(xiàn)的音頻幀、與應(yīng)在所述最初再現(xiàn)的音頻幀的交迭時(shí)間；和記錄單元(43)，至少將所述交迭時(shí)間作為管理信息記錄在所述記錄媒體(21)中。
16.一種音頻/視頻記錄方法，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(41)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(41)中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；第2步驟(S42)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟(S43)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；第4步驟(S44)，包含所述連接點(diǎn)，計(jì)算應(yīng)在所述最后再現(xiàn)的音頻幀、與應(yīng)在所述最初再現(xiàn)的音頻幀的交迭時(shí)間；和第5步驟(S45)，至少將所述交迭時(shí)間作為管理信息記錄在所述記錄媒體(41)中。
17.一種音頻/視頻再現(xiàn)裝置，根據(jù)再現(xiàn)序列，從由權(quán)利要求15所述的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體(51)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于具有交迭時(shí)間再現(xiàn)單元(52)，從所述記錄媒體(51)中再現(xiàn)所述交迭時(shí)間；偏移時(shí)間算出單元(58)，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將從所述記錄媒體再現(xiàn)的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把從所述記錄媒體再現(xiàn)的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；復(fù)位單元(57)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元(57、55)，根據(jù)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元(54)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(51)中再現(xiàn)的視頻數(shù)據(jù)；音頻幀再現(xiàn)單元(55)，在根據(jù)所述偏移后的PTS再現(xiàn)從所述記錄媒體(51)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和音頻解碼單元(55(15、16、17))，對(duì)由所述音頻幀再現(xiàn)單元(55)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
18.根據(jù)權(quán)利要求17所述的音頻/視頻再現(xiàn)裝置，其特征在于所述偏移時(shí)間算出單元(58)是如下單元，即在算出的所述連接點(diǎn)處的所述音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去所述音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
19.一種音頻/視頻再現(xiàn)方法，根據(jù)再現(xiàn)序列，從由權(quán)利要求16所述的記錄方法記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體(51)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟，從所述記錄媒體中再現(xiàn)所述交迭時(shí)間；第2步驟(S52)，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將從所述記錄媒體再現(xiàn)的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把從所述記錄媒體再現(xiàn)的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；第3步驟(S53)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟(S53)，根據(jù)所述第2步驟(S52)中算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(31)中讀出的音頻幀的PTS；第5步驟(S54)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(51)中再現(xiàn)的視頻數(shù)據(jù)；第6步驟(S54、S55)，在根據(jù)所述第4步驟(S53)中偏移后的PTS再現(xiàn)從所述記錄媒體(51)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述第3步驟(S53)中輸出的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由所述第6步驟(S54、S55)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
20.根據(jù)權(quán)利要求19所述的音頻/視頻再現(xiàn)方法，其特征在于所述第2步驟(S52)在算出的所述連接點(diǎn)處的所述音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去所述音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志。
21.一種音頻/視頻再現(xiàn)程序，讓計(jì)算機(jī)執(zhí)行如下再現(xiàn)方法，該再現(xiàn)方法根據(jù)再現(xiàn)序列，從由權(quán)利要求16所述的記錄方法記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體(51)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于讓計(jì)算機(jī)執(zhí)行第1步驟，從所述記錄媒體中再現(xiàn)所述交迭時(shí)間；第2步驟(S52)，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將從所述記錄媒體再現(xiàn)的所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把從所述記錄媒體再現(xiàn)的所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間，并且，輸出表示在規(guī)定條件下應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀不必在連接時(shí)再現(xiàn)的規(guī)定值的音頻下落標(biāo)志；第3步驟(S53)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第4步驟(S53)，根據(jù)算出的所述音頻PTS偏移時(shí)間，偏移從所述記錄媒體(51)中讀出的音頻幀的PTS；第5步驟(S54)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(51)中再現(xiàn)的視頻數(shù)據(jù)；第6步驟(S54、S55)，在根據(jù)所述第4步驟(S53)中偏移后的PTS再現(xiàn)從所述記錄媒體(51)中再現(xiàn)的音頻幀的同時(shí)，當(dāng)所述第3步驟(S53)中輸出的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，進(jìn)行控制，以使不再現(xiàn)應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀；和第7步驟，對(duì)由所述第6步驟(S54、S55)再現(xiàn)的所述音頻幀，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
22.一種音頻/視頻記錄裝置，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(61)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(61)中，其特征在于具有音頻編碼單元(64(11、12、13))，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；視頻數(shù)據(jù)變更單元(69、64、63)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；編輯點(diǎn)確定單元(66)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；交迭時(shí)間計(jì)算單元(67)，包含所述連接點(diǎn)，計(jì)算應(yīng)在所述最后再現(xiàn)的音頻幀、與應(yīng)在所述最初再現(xiàn)的音頻幀的交迭時(shí)間；偏移時(shí)間算出單元(68)，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間；和記錄單元(63)，至少將所述音頻PTS偏移時(shí)間作為管理信息記錄在所述記錄媒體(61)中。
23.根據(jù)權(quán)利要求22所述的音頻/視頻記錄裝置，其特征在于所述偏移時(shí)間算出單元(68)是如下單元，即在算出的所述連接點(diǎn)處的所述音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去所述音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志，所述記錄單元(63)將所述音頻PTS偏移時(shí)間與所述音頻下落標(biāo)志作為所述管理信息記錄在所述記錄媒體(61)中。
24.一種音頻/視頻記錄方法，在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(61)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(61)中，其特征在于包含第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；第2步驟(S62)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟(S63)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；第4步驟(S64)，包含所述連接點(diǎn)，計(jì)算應(yīng)在所述最后再現(xiàn)的音頻幀、與應(yīng)在所述最初再現(xiàn)的音頻幀的交迭時(shí)間；第5步驟(S65)，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間；和第6步驟(S66)，至少將所述音頻PTS偏移時(shí)間作為管理信息記錄在所述記錄媒體(61)中。
25.根據(jù)權(quán)利要求24所述的音頻/視頻記錄方法，其特征在于所述第5步驟(S65)是如下步驟，即在算出的所述連接點(diǎn)處的所述音頻PTS偏移時(shí)間比音頻幀時(shí)間的n倍(其中，n為1或1/2)的期間大的情況下，算出從該音頻PTS偏移時(shí)間中減去所述音頻幀期間后的值，作為最終的音頻PTS偏移時(shí)間，并且，輸出表示應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀在連接時(shí)不必再現(xiàn)的規(guī)定值的音頻下落標(biāo)志，所述第6步驟(S66)將所述音頻PTS偏移時(shí)間與所述音頻下落標(biāo)志作為所述管理信息記錄在所述記錄媒體(61)中。
26.一種音頻/視頻再現(xiàn)裝置，根據(jù)再現(xiàn)序列，從由權(quán)利要求22或23所述的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體(71)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于具有復(fù)位單元(77)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；偏移單元(77、75)，根據(jù)從所述記錄媒體(71)讀出的所述音頻PTS偏移時(shí)間，偏移從該記錄媒體(71)中讀出的音頻幀的PTS；視頻數(shù)據(jù)再現(xiàn)單元(74)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(71)中再現(xiàn)的視頻數(shù)據(jù)；音頻數(shù)據(jù)再現(xiàn)單元(75)，根據(jù)所述偏移后的PTS，再現(xiàn)從所述記錄媒體(71)中再現(xiàn)的音頻數(shù)據(jù)；下落處理單元(77)，進(jìn)行控制，以使當(dāng)從所述記錄媒體(71)再現(xiàn)的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，不再現(xiàn)應(yīng)在該視頻對(duì)象的最后再現(xiàn)的音頻幀；和音頻解碼單元(75(15、16、17))，對(duì)由所述音頻幀再現(xiàn)單元(75)再現(xiàn)的所述音頻數(shù)據(jù)，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
27.一種音頻/視頻再現(xiàn)方法，根據(jù)再現(xiàn)序列，從由權(quán)利要求22或23所述的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體(71)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于包含第1步驟(S72)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第2步驟(S72)，根據(jù)從所述記錄媒體(71)讀出的所述音頻PTS偏移時(shí)間，偏移從該記錄媒體(71)中讀出的音頻幀的PTS；第3步驟(S73)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(71)中再現(xiàn)的視頻數(shù)據(jù)；第4步驟(S73)，根據(jù)所述偏移后的PTS，再現(xiàn)從所述記錄媒體(71)中再現(xiàn)的音頻數(shù)據(jù)；第5步驟(S74)，進(jìn)行控制，以使當(dāng)從所述記錄媒體(71)再現(xiàn)的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，不再現(xiàn)應(yīng)在該視頻對(duì)象的最后再現(xiàn)的音頻幀；和第6步驟，對(duì)由所述第4步驟(S73)再現(xiàn)的所述音頻數(shù)據(jù)，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
28.一種音頻/視頻記錄程序，讓計(jì)算機(jī)執(zhí)行一種記錄方法，該記錄方法在將同步的視頻數(shù)據(jù)與音頻數(shù)據(jù)的組作為視頻對(duì)象記錄在記錄媒體(61)中時(shí)，可指定連續(xù)再現(xiàn)多個(gè)所述視頻對(duì)象各自的部分或全部的再現(xiàn)序列地記錄在所述記錄媒體(61)中，其特征在于讓計(jì)算機(jī)執(zhí)行第1步驟，對(duì)于應(yīng)記錄的音頻信號(hào)，執(zhí)行包含加幕處理與正交變換處理的編碼，輸出所述音頻數(shù)據(jù)；第2步驟(S62)，根據(jù)需要變更所述視頻數(shù)據(jù)，以使在連接點(diǎn)無(wú)縫再現(xiàn)應(yīng)在連接源的視頻對(duì)象最后再現(xiàn)的視頻幀、和應(yīng)在連接對(duì)象的視頻對(duì)象最初再現(xiàn)的視頻幀；第3步驟(S63)，確定所述音頻幀的編輯點(diǎn)，以使應(yīng)在所述連接源的視頻對(duì)象最后再現(xiàn)的音頻幀的再現(xiàn)期間包含視頻幀的所述連接點(diǎn)的時(shí)刻，并且，應(yīng)在所述連接對(duì)象的視頻對(duì)象最初再現(xiàn)的音頻幀的再現(xiàn)期間包含所述連接點(diǎn)的時(shí)刻；第4步驟(S64)，包含所述連接點(diǎn)，計(jì)算應(yīng)在所述最后再現(xiàn)的音頻幀、與應(yīng)在所述最初再現(xiàn)的音頻幀的交迭時(shí)間；第5步驟(S65)，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的最初連接點(diǎn)的情況下，將所述交迭時(shí)間設(shè)為再現(xiàn)所述連接對(duì)象的視頻對(duì)象的音頻幀時(shí)的音頻PTS偏移時(shí)間，在所述編輯點(diǎn)是所述再現(xiàn)序列內(nèi)的第2個(gè)之后的連接點(diǎn)的情況下，將把所述交迭時(shí)間與一個(gè)之前的所述連接點(diǎn)處的音頻PTS偏移時(shí)間相加后的值算出作為在當(dāng)前連接點(diǎn)的音頻PTS偏移時(shí)間；和第6步驟(S66)，為了記錄在所述記錄媒體(61)中，至少輸出所述音頻PTS偏移時(shí)間作為管理信息。
29.一種音頻/視頻再現(xiàn)程序，讓計(jì)算機(jī)執(zhí)行一種再現(xiàn)方法，該再現(xiàn)方法根據(jù)再現(xiàn)序列，從由權(quán)利要求22或23所述的記錄裝置記錄了視頻對(duì)象和該再現(xiàn)序列的記錄媒體(71)中，再現(xiàn)視頻數(shù)據(jù)和音頻數(shù)據(jù)，其特征在于讓計(jì)算機(jī)執(zhí)行第1步驟(S72)，復(fù)位裝置的系統(tǒng)時(shí)鐘(STC)，以使在所述再現(xiàn)序列中包含的所述視頻對(duì)象的各連接點(diǎn)處，無(wú)縫連接連接對(duì)象的視頻幀彼此；第2步驟(S72)，根據(jù)從所述記錄媒體(71)讀出的所述音頻PTS偏移時(shí)間，偏移從該記錄媒體(71)中讀出的音頻幀的PTS；第3步驟(S73)，根據(jù)附帶于該視頻數(shù)據(jù)的視頻PTS，再現(xiàn)從所述記錄媒體(71)中再現(xiàn)的視頻數(shù)據(jù)；第4步驟(S73)，根據(jù)所述偏移后的PTS，再現(xiàn)從所述記錄媒體(71)中再現(xiàn)的音頻數(shù)據(jù)；第5步驟(S74)，進(jìn)行控制，以使當(dāng)從所述記錄媒體(71)再現(xiàn)的所述音頻下落標(biāo)志是所述規(guī)定值時(shí)，不再現(xiàn)應(yīng)在該視頻對(duì)象的最后再現(xiàn)的音頻幀；和第6步驟，對(duì)由所述第4步驟(S74)再現(xiàn)的所述音頻數(shù)據(jù)，執(zhí)行包含加幕處理與正交逆變換處理的解碼，輸出音頻信號(hào)。
全文摘要
在記錄時(shí)僅記錄編輯點(diǎn)(步驟S4)。再現(xiàn)時(shí)，包含視頻連接點(diǎn)，計(jì)算應(yīng)最后再現(xiàn)的音頻幀與應(yīng)最初再現(xiàn)的音頻幀的交迭時(shí)間(A_overlap)，再根據(jù)該交迭時(shí)間來(lái)算出偏移時(shí)間(步驟S12)。通過(guò)使用算出的偏移時(shí)間來(lái)再現(xiàn)音頻數(shù)據(jù)(步驟S14)，可在連接點(diǎn)附近，消除音頻幀的縫隙后再現(xiàn)。在連接點(diǎn)附近，通過(guò)在編碼器側(cè)和解碼器側(cè)進(jìn)行音頻數(shù)據(jù)的加幕(curtaining)處理，使連接源與連接目的的音頻采樣彼此平滑地結(jié)合。
文檔編號(hào)H04N5/91GK1768529SQ200480009080
公開日2006年5月3日 申請(qǐng)日期2004年4月2日 優(yōu)先權(quán)日2003年4月4日
發(fā)明者渕上德彥, 日暮誠(chéng)司 申請(qǐng)人:日本勝利株式會(huì)社