用于使用mvc產(chǎn)生360度視頻記錄的系統(tǒng)及方法
【專利摘要】本發(fā)明涉及一種用于使用MVC產(chǎn)生360度視頻記錄的系統(tǒng)及方法。視頻裝置(100)包含第一攝像機(jī)(102)、第二攝像機(jī)(104)、視圖合成器(108)、控制器(112)及編碼器(110)。所述第一攝像機(jī)(102)可記錄第一視場(chǎng)的第一視頻圖像且可基于所述第一視頻圖像輸出第一視頻數(shù)據(jù)流。所述第二攝像機(jī)(104)可記錄第二視場(chǎng)的第二視頻圖像且可基于所述第二視頻圖像輸出第二視頻數(shù)據(jù)流。所述視圖合成器(108)可拼接所述視頻流。所述控制器(112)可發(fā)指令給所述視圖合成器(108)。所述編碼器(110)可對(duì)所述經(jīng)拼接視頻流進(jìn)行編碼。
【專利說明】用于使用MVC產(chǎn)生360度視頻記錄的系統(tǒng)及方法
[0001]相關(guān)申請(qǐng)案交叉參考
[0002]本申請(qǐng)案主張來自2012年12月31日提出申請(qǐng)的第61 / 747，769號(hào)美國臨時(shí)申請(qǐng)案的優(yōu)先權(quán)，所述臨時(shí)申請(qǐng)案的全部揭示內(nèi)容以引用方式并入本文中。
【技術(shù)領(lǐng)域】
[0003]本發(fā)明涉及一種用以提供背景的360度視圖的系統(tǒng)及方法。
【背景技術(shù)】
[0004]在用于顯示空間的360度視圖的一些常規(guī)系統(tǒng)中，使用多個(gè)視頻或圖像俘獲裝置來記錄空間的圖片或視頻。接著，使用常規(guī)拼接方式將那些圖片或視頻拼接在一起以便形成空間的360度視圖。
[0005]在這些常規(guī)系統(tǒng)中，所俘獲的圖像或視頻通常具有相同質(zhì)量(分辨率、亮度、圖像/視頻大小等)使得拼接過程相對(duì)直截了當(dāng)。拼接程序?qū)⑹箞D像或視頻匹配在一起，從而考慮觀看高度、角度等的任何細(xì)微改變且形成無縫拼接的圖像或視頻。
[0006]常規(guī)系統(tǒng)不解決可在嘗試將不具有相同質(zhì)量(分辨率、亮度、圖像/視頻大小等)的裝置所俘獲的圖像或視頻拼接在一起時(shí)出現(xiàn)的問題。
[0007]市場(chǎng)上需要拼接具有不同質(zhì)量的裝置所俘獲的圖像或視頻以形成無縫拼接的視頻或圖像。

【發(fā)明內(nèi)容】

[0008]本發(fā)明的若干方面提供一種用于拼接具有不同質(zhì)量的裝置所俘獲的圖像或視頻以形成無縫拼接的視頻或圖像的系統(tǒng)及方法。
[0009]本發(fā)明的一實(shí)施例繪制為一種包含第一攝像機(jī)、第二攝像機(jī)、視圖合成器、控制器及編碼器的視頻裝置。所述第一攝像機(jī)經(jīng)布置以記錄第一視場(chǎng)的第一視頻圖像且可操作以基于所述第一視頻圖像輸出第一視頻數(shù)據(jù)流。所述第二攝像機(jī)經(jīng)布置以記錄第二視場(chǎng)的第二視頻圖像且可操作以基于所述第二視頻圖像輸出第二視頻數(shù)據(jù)流。所述視圖合成器可操作以執(zhí)行產(chǎn)生經(jīng)拼接視頻圖像流、產(chǎn)生第一畫中畫視頻圖像流及產(chǎn)生第二畫中畫視頻圖像流中的一者。所述產(chǎn)生經(jīng)拼接視頻圖像流包括拼接經(jīng)調(diào)整第一視頻圖像流與經(jīng)調(diào)整第二視頻圖像流。所述經(jīng)調(diào)整第一視頻圖像流基于所述第一視頻圖像流。所述經(jīng)調(diào)整第二視頻圖像流基于所述第二視頻圖像流。所述經(jīng)拼接視頻圖像流具有第三視場(chǎng)。所述產(chǎn)生第一畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第二視頻圖像的第二部分的第二部分替換所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第一視頻圖像的第一部分的第一部分。所述產(chǎn)生第二畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第一視頻圖像的第四部分的第四部分替換所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第二視頻圖像的第三部分的第三部分。所述控制器可操作以發(fā)指令給所述視圖合成器以輸出原始視頻信號(hào)作為所述經(jīng)調(diào)整第一視頻圖像流、所述經(jīng)調(diào)整第二視頻圖像流、所述經(jīng)拼接視頻圖像流、所述第一畫中畫視頻圖像流及所述第二畫中畫視頻圖像流中的一者。所述編碼器可操作以將所述原始視頻信號(hào)編碼成經(jīng)編碼信號(hào)。
【專利附圖】

【附圖說明】
[0010]并入于本說明書中并形成本說明書的一部分的所附圖式圖解說明實(shí)例性實(shí)施例，且與本說明一起用以解釋本發(fā)明的原理。在圖式中:
[0011]圖1圖解說明根據(jù)本發(fā)明的實(shí)施例的視頻裝置；
[0012]圖2a到2d圖解說明根據(jù)本發(fā)明的實(shí)施例的俘獲被攝體的視頻的視頻記錄裝置；
[0013]圖3圖解說明圖1的視頻裝置的控制器的分解圖；
[0014]圖4a到4b圖解說明根據(jù)本發(fā)明的實(shí)施例的視頻顯示裝置；
[0015]圖5圖解說明圖4的視頻顯示裝置的控制器的分解圖；
[0016]圖6a到6b圖解說明根據(jù)本發(fā)明的實(shí)施例的觀看經(jīng)解碼視頻流的各種選項(xiàng)的實(shí)施例；及
[0017]圖6c到6d圖解說明根據(jù)本發(fā)明的實(shí)施例的觀看經(jīng)解碼視頻流的各種選項(xiàng)的額外實(shí)施例。
【具體實(shí)施方式】
[0018]本發(fā)明揭示一種用以提供背景的360度視圖的系統(tǒng)及方法。通過使用兩個(gè)攝像機(jī)來俘獲同一背景的視頻形成360度視圖，其中所述攝像機(jī)的鏡頭指向彼此的180度。接著，可將所述攝像機(jī)所形成的兩個(gè)視圖拼接在一起以形成其中可由用戶選擇將觀看的背景的角度的單個(gè)視頻。
[0019]將來自兩個(gè)攝像機(jī)的視頻拼接在一起在所述攝像機(jī)相同或具有類似記錄特性時(shí)為簡單任務(wù)。舉例來說，當(dāng)使用用相同分辨率、角度、周圍照明等記錄視頻的兩個(gè)攝像機(jī)時(shí)，將兩個(gè)視頻拼接在一起為容易的，這是因?yàn)椴恍枰薷娜我灰曨l以匹配另一者的質(zhì)量。在播放經(jīng)拼接視頻時(shí)，用戶將能夠選擇如何觀看背景。用戶可選擇經(jīng)由第一攝像機(jī)觀看背景、經(jīng)由第二攝像機(jī)觀看背景或甚至同時(shí)觀看兩個(gè)攝像機(jī)的畫中畫版本。另外，如果用戶正在智能電話上觀看背景，那么可能通過傾斜智能電話以跨越背景搖攝來看到背景的不同視圖。
[0020]但當(dāng)使用具有不同記錄特性的兩個(gè)攝像機(jī)時(shí)，拼接過程變得更復(fù)雜。必須修改視頻中的至少一者以匹配另一者的質(zhì)量；否則，經(jīng)拼接視頻將在用戶觀看其時(shí)看起來失真。
[0021]為克服此問題，本發(fā)明包含兩個(gè)方面。第一，可在過程的記錄及編碼部分期間調(diào)整視頻的質(zhì)量使得視頻的質(zhì)量為等效的且提供更容易拼接。第二，可在過程的播放及解碼部分期間調(diào)整視頻的質(zhì)量使得視頻的質(zhì)量為等效的且提供更容易拼接。在許多情形中，質(zhì)量調(diào)整將僅需要在過程的記錄/編碼或播放/解碼部分中的一者期間發(fā)生，但還可存在其中質(zhì)量調(diào)整將需要在兩個(gè)過程期間發(fā)生的例子。圖1到3繪制為視頻的記錄/編碼且圖4到6d繪制為視頻的播放/解碼。
[0022]現(xiàn)在將參考圖1到6d描述本發(fā)明的實(shí)例性實(shí)施例。
[0023]圖1圖解說明根據(jù)本發(fā)明的實(shí)施例的視頻裝置。
[0024]如所述圖中所展示，視頻裝置100包含攝像機(jī)102、攝像機(jī)104、質(zhì)量調(diào)整器106、視圖合成器108、編碼器110及控制器112。
[0025]質(zhì)量調(diào)整器106經(jīng)布置以從攝像機(jī)102接收視頻流114且從攝像機(jī)104接收視頻流116。視圖合成器108經(jīng)布置以從質(zhì)量調(diào)整器106接收經(jīng)調(diào)整視頻流118且發(fā)送/接收去往/來自控制器112的指令122。編碼器110經(jīng)布置以從視圖合成器108接收經(jīng)拼接視頻流120且輸出經(jīng)編碼視頻流124。
[0026]在此實(shí)例中，攝像機(jī)102、攝像機(jī)104、質(zhì)量調(diào)整器106、視圖合成器108、編碼器110及控制器112為相異元件。然而，在一些實(shí)施例中，攝像機(jī)102、攝像機(jī)104、質(zhì)量調(diào)整器106、視圖合成器108、編碼器110及控制器112中的至少兩者可組合為單一裝置。在其它實(shí)施例中，至少一個(gè)攝像機(jī)102、攝像機(jī)104、質(zhì)量調(diào)整器106、視圖合成器108、編碼器110及控制器112可實(shí)施為其中存儲(chǔ)有用于攜載或其上存儲(chǔ)有計(jì)算機(jī)可執(zhí)行指令或數(shù)據(jù)結(jié)構(gòu)的有形非暫時(shí)性計(jì)算機(jī)可讀媒體的計(jì)算機(jī)。此些有形非暫時(shí)性計(jì)算機(jī)可讀媒體可為可由通用或?qū)Ｓ糜?jì)算機(jī)存取的任何可用媒體。有形非暫時(shí)性計(jì)算機(jī)可讀媒體的非限制性實(shí)例包含物理存儲(chǔ)器件及/或存儲(chǔ)器媒體(例如RAM、ROM、EEPROM、CD-ROM或其它光盤存儲(chǔ)器件、磁盤存儲(chǔ)器件或其它磁性存儲(chǔ)裝置)或者可用于以計(jì)算機(jī)可執(zhí)行指令或數(shù)據(jù)結(jié)構(gòu)的形式攜載或存儲(chǔ)所要程序代碼手段且可由通用或?qū)Ｓ糜?jì)算機(jī)存取的任何其它媒體。當(dāng)經(jīng)由網(wǎng)絡(luò)或另一通信連接(硬連線、無線或者硬連線或無線的組合)將信息傳送或提供到計(jì)算機(jī)時(shí)，所述計(jì)算機(jī)將所述連接適當(dāng)?shù)匾暈橛?jì)算機(jī)可讀媒體。因此，任何此類連接適當(dāng)?shù)胤Q為有形非暫時(shí)性計(jì)算機(jī)可讀媒體。以上內(nèi)容的組合也應(yīng)包含于有形非暫時(shí)性計(jì)算機(jī)可讀媒體的范圍內(nèi)。
[0027]攝像機(jī)102及104記錄在攝像機(jī)鏡頭前面發(fā)生的現(xiàn)場(chǎng)動(dòng)作。攝像機(jī)102及104可為獨(dú)立的(即，攝錄像機(jī)或口袋大小的攝像機(jī))，或者其可集成到具有多種功能的裝置(即，蜂窩式電話或MP3播放器)中。攝像機(jī)102及104可為等效裝置在于記錄能力為等效的，或其可并非等效裝置在于記錄能力并非等效的(即，存在圖像分辨率、亮度、大小等的差異)。在實(shí)例性實(shí)施例中，攝像機(jī)102及104中所使用的鏡頭可為允許每一攝像機(jī)在180度空間中俘獲視頻的f-θ類型的鏡頭。
[0028]攝像機(jī)102及104分別產(chǎn)生視頻流114及116且將其發(fā)送到質(zhì)量調(diào)整器106。視頻流114及116并未從其記錄于攝像機(jī)102及104上的本機(jī)格式更改。視頻流114及116可呈以下形式中的任一者:3GP、ASF、AV1、DVR-MS、FLV、F4V、IFF、MKV、JPEG2000、QuickTime、MPEG、MPEG-2、MP4、RM、OGG, NUT、MXF, GXF, ratDVD、SV1、VOB、DivX 或可記錄于攝像機(jī)上的任何其它常規(guī)視頻格式。
[0029]質(zhì)量調(diào)整器106可操作以調(diào)整一個(gè)或一個(gè)以上傳入視頻流的質(zhì)量，使得在質(zhì)量調(diào)整完成之后，所有視頻流具有相同質(zhì)量?？赏ㄟ^質(zhì)量調(diào)整器106調(diào)整的參數(shù)包含視頻分辨率、亮度、對(duì)比度、顏色、失真、大小及調(diào)整視頻流的質(zhì)量的領(lǐng)域的技術(shù)人員已知的任何其它參數(shù)。
[0030]質(zhì)量調(diào)整器106基于視頻流114及116產(chǎn)生經(jīng)調(diào)整視頻流118。質(zhì)量調(diào)整器106可操作以通過調(diào)整視頻流114及視頻流116中的至少一者的參數(shù)而形成視頻流114與視頻流116之間的相等。因此，經(jīng)調(diào)整視頻流118中所包含的所有視頻流將具有類似分辨率、亮度、對(duì)比度、顏色、失真、大小及所屬領(lǐng)域的技術(shù)人員已知的其它參數(shù)。
[0031]視圖合成器108經(jīng)布置以接收視頻流118、基于用戶的輸入產(chǎn)生單個(gè)經(jīng)拼接視頻流120且與控制器112雙向通信。視圖合成器108可包含用于將兩個(gè)或兩個(gè)以上視頻流拼接成單個(gè)視頻流的任何市售軟件?？捎糜谝晥D合成器108中的軟件的一些非限制性實(shí)例包含MindTreeTM、SceneTrackerTM及視頻拼接領(lǐng)域的技術(shù)人員已知的任何其它軟件。
[0032]經(jīng)拼接視頻流120包含由視圖合成器108形成的所有版本的經(jīng)拼接視頻流。經(jīng)拼接視頻流120可呈上文參考視頻流114及116所述的形式中的任一者。
[0033]編碼器110可操作以對(duì)經(jīng)拼接視頻流進(jìn)行編碼，使得對(duì)于用戶來說觀看經(jīng)拼接視頻流為方便的。編碼器110可對(duì)經(jīng)拼接視頻流進(jìn)行編碼以便使文件格式、傳輸速度、安全性、文件大小或視頻編碼領(lǐng)域的技術(shù)人員已知的任何其它參數(shù)標(biāo)準(zhǔn)化。在實(shí)例性實(shí)施例中，編碼器110以多視圖視頻編碼(MVC)進(jìn)行編碼，所述MVC為借助MPEG / VCEG的聯(lián)合努力開發(fā)的使得能夠使用單個(gè)視頻流對(duì)從多個(gè)攝像機(jī)同時(shí)俘獲的序列進(jìn)行高效編碼的H.264 /MPEG-4AVC視頻壓縮標(biāo)準(zhǔn)的修正。
[0034]控制器112可操作以與視圖合成器108雙向通信以發(fā)送/接收指令122?？刂破?12提供到視圖合成器108的用戶接入以便控制由視圖合成器108形成的視圖。將參考圖3進(jìn)一步描述控制器112。
[0035]在操作中，用戶接通視頻裝置100，且攝像機(jī)102及104開始記錄不同被攝體的視頻。
[0036]圖2a到2b圖解說明根據(jù)本發(fā)明的實(shí)施例的視頻記錄裝置俘獲被攝體的視頻的實(shí)例性情境。
[0037]如所述圖中所展示，攝像機(jī)102正在俘獲被攝體202的視頻，且攝像機(jī)104正在俘獲被攝體204的視頻。攝像機(jī)102可在俘獲窗203內(nèi)俘獲視頻，且攝像機(jī)104可在俘獲窗205內(nèi)俘獲視頻。
[0038]參考圖1，所記錄、針對(duì)質(zhì)量調(diào)整、合成并編碼的視頻可為被攝體202及204的視頻。如上文所論述，攝像機(jī)102及104可裝納于同一裝置內(nèi)(其中被攝體202及204在同一房間中)或其可為單獨(dú)裝置。在其中攝像機(jī)102及104為單獨(dú)裝置的情形中，被攝體202及204不必要在同一房間中。事實(shí)上，其可相距甚遠(yuǎn)，但從攝像機(jī)102及104產(chǎn)生的視頻流可發(fā)送(經(jīng)由有線或無線方式)到質(zhì)量調(diào)整器106以供進(jìn)一步處理及隨后合成。在工作面試期間此類型的情況可具有重要性，其中面試者及被面試者可能不能面對(duì)面相見而是替代地經(jīng)由網(wǎng)絡(luò)攝像頭、SkypeTM、FaceTimeTM或其中被攝體可彼此看到且聽到的其它通信機(jī)構(gòu)進(jìn)行面試。在回顧面試時(shí)，記錄來自兩個(gè)被攝體的視頻流且從每一被攝體的角度觀看面試可為有益的。
[0039]圖2c到2d圖解說明根據(jù)本發(fā)明的額外實(shí)施例的視頻記錄裝置俘獲被攝體的視頻的另一實(shí)例性情境。
[0040]如圖2c中所展示，被攝體210及212正在彼此講話，且視頻裝置100正記錄對(duì)話。被攝體210的由視頻裝置100記錄的部分由俘獲窗206展示。被攝體212的由視頻裝置100記錄的部分由俘獲窗208展示。
[0041]圖2d描繪圖2c中所展示的情況的俯視圖。如所述圖中所展示，俘獲窗206涵蓋面對(duì)被攝體210的視頻裝置100前面的整個(gè)空間180度。另外，俘獲窗208涵蓋面對(duì)朝向被攝體212的相反方向的視頻裝置100前面的整個(gè)空間180度。為了使俘獲窗206及208俘獲180度空間的視頻，可能有必要使視頻裝置100內(nèi)的每一攝像機(jī)采用也稱為魚眼鏡頭的Θ鏡頭。[0042]出于解釋的目的，圖2c到2d中所描繪的情況為其中被攝體210正針對(duì)一工作機(jī)會(huì)面試被攝體212的面試。被攝體210可能想要記錄面試會(huì)議使得其可由可幫助確定被攝體212是否適合于職位的其它個(gè)人在另一時(shí)間回顧。被攝體210接著將視頻裝置100放置于被攝體210與212中間的桌子上且開始記錄。視頻裝置100將記錄俘獲窗210及212內(nèi)的所有事物使得其可在稍后時(shí)間觀看。
[0043]無論所述被攝體是在不同位置中(如在參考圖2a到2b所描繪的情境中)還是在相同位置中(如在參考圖2c到2d所描繪的情境中)，將以相同方式處理視頻流。
[0044]返回圖1，在攝像機(jī)102記錄時(shí)，視頻流114從攝像機(jī)102流動(dòng)到質(zhì)量調(diào)整器106。在攝像機(jī)104記錄時(shí)，視頻流116從攝像機(jī)104流動(dòng)到質(zhì)量調(diào)整器106。出于解釋的目的，攝像機(jī)102的分辨率高于攝像機(jī)104的分辨率。
[0045]質(zhì)量調(diào)整器106接收視頻流106及108且對(duì)所述流進(jìn)行比較以確定是否需要在將所述流發(fā)送到視圖合成器108之前調(diào)整所述流的質(zhì)量。如果需要調(diào)整質(zhì)量，那么質(zhì)量調(diào)整器106將調(diào)整視頻流106及108的質(zhì)量。
[0046]質(zhì)量調(diào)整器106對(duì)視頻流106與108進(jìn)行比較以確定所述兩個(gè)流之間的任何差異。在此情形中，質(zhì)量調(diào)整器106將確定視頻流114為比視頻流116高的分辨率，且因此需要進(jìn)一步處理以形成場(chǎng)景的無縫視圖。接下來，質(zhì)量調(diào)整器106調(diào)整視頻流114、視頻流116或兩者的分辨率以便形成經(jīng)調(diào)整視頻流118，所述經(jīng)調(diào)整視頻流含有視頻流106及108的經(jīng)調(diào)整版本使得所述視頻流的分辨率看起來相同且在用戶觀看所述兩個(gè)流時(shí)在其之間將不存在顯著差異。
[0047]來自質(zhì)量調(diào)整器106的輸出為從質(zhì)量調(diào)整器106流動(dòng)到視圖合成器108的經(jīng)調(diào)整視頻流118。視圖合成器108從控制器112接收發(fā)指令給視圖合成器108以從經(jīng)調(diào)整視頻流118產(chǎn)生特定視圖的指令122。將參考圖3進(jìn)一步詳細(xì)地論述產(chǎn)生用于視圖合成器108的命令的過程。
[0048]在從控制器112接收指令122之后，視圖合成器108通過將經(jīng)調(diào)整視頻流118內(nèi)所含有的視頻流混合在一起而從經(jīng)調(diào)整視頻流118形成所要經(jīng)拼接視頻流120以形成被記錄場(chǎng)景的無縫視圖。經(jīng)拼接視頻流120接著發(fā)送到編碼器110以供進(jìn)一步處理。
[0049]編碼器110接收經(jīng)拼接視頻流120且對(duì)經(jīng)拼接視頻流120進(jìn)行編碼以將其轉(zhuǎn)換為經(jīng)編碼視頻流124。編碼過程由編解碼器(對(duì)數(shù)據(jù)流或信號(hào)進(jìn)行編碼以供傳輸?shù)难b置或計(jì)算機(jī)程序)驅(qū)動(dòng)，且編碼過程可修改經(jīng)拼接視頻流120以將視頻數(shù)據(jù)壓縮成較小大小、改變視頻格式、增加視頻傳輸?shù)陌踩缘龋沟脗鬏斀?jīng)編碼視頻流124為高效的。同樣，在實(shí)例性實(shí)施例中，編碼器110在MVC編解碼器中進(jìn)行編碼。
[0050]圖3圖解說明圖1的視頻裝置的控制器的分解圖。
[0051]如所述圖中所展示，控制器112包含圖形用戶接口 302及加速度計(jì)304。
[0052]圖形用戶接口 302為用戶與來自圖1的視圖合成器108通信且通知視圖合成器108形成何種視圖的方式。圖形用戶接口 302可包含其中用戶可物理觸摸屏幕以提供輸入的觸摸屏，或其可包含其中可使用另一系統(tǒng)及方法(例如，鼠標(biāo)、跟蹤板等)突出顯示選項(xiàng)以提供輸入的屏幕。
[0053]加速度計(jì)304為與來自圖1的視圖合成器108通信以通知視圖合成器108將在正顯示的當(dāng)前視圖內(nèi)做出的更新的裝置。加速度計(jì)304可操作以在移動(dòng)及旋轉(zhuǎn)視頻裝置100時(shí)確定其定向。
[0054]在操作中，用戶可使用圖形用戶接口 302來輸入如何記錄特定視頻的偏好。所述偏好被往回中繼到圖1的視圖合成器108，且視圖合成器108如上文參考圖1所描述形成所要視圖。另外，加速度計(jì)304可用以輸入將往回中繼到視圖合成器108的額外偏好。這些偏好包含記錄角度、旋轉(zhuǎn)、搖攝或可通過使用加速度計(jì)及其相關(guān)聯(lián)遠(yuǎn)動(dòng)中繼的任何其它偏好。所述偏好將通過改變視頻裝置100的物理位置或定向確定。
[0055]圖4a圖解說明根據(jù)本發(fā)明的實(shí)施例的視頻顯示裝置。
[0056]如所述圖中所展示，視頻顯示裝置400包含接收器402、視圖合成器406、顯示器408及控制器410。接收器402包含解碼部分412及414。
[0057]接收器402可操作以接收經(jīng)編碼視頻流124。經(jīng)編碼視頻流124可包含多個(gè)個(gè)別經(jīng)編碼視頻流，且接收器402可操作以將單個(gè)經(jīng)編碼視頻流124分離成多個(gè)經(jīng)編碼視頻流。所產(chǎn)生的經(jīng)編碼視頻流的數(shù)目將等于所記錄視頻流的原始數(shù)目。在此情形中，經(jīng)編碼視頻流124被分離成經(jīng)編碼視頻流416及418。接收器402可稱為數(shù)字媒體接收器(DMR)、媒體擴(kuò)展器、流媒體轉(zhuǎn)換器(media streamer)、數(shù)字媒體集線器、數(shù)字媒體適配器或所屬領(lǐng)域的技術(shù)人員已知的接收器的任何其它常見名稱。
[0058]經(jīng)編碼視頻流416及418為已從其本機(jī)文件格式編碼以便將視頻數(shù)據(jù)壓縮成較小大小、改變視頻格式、增加視頻傳輸?shù)陌踩缘?，使得?duì)于用戶來說觀看經(jīng)編碼視頻流416及418為簡單的視頻數(shù)據(jù)。
[0059]解碼部分412及414經(jīng)布置以接收經(jīng)編碼視頻流416及418且對(duì)其進(jìn)行解碼以形成經(jīng)解碼視頻流420及422以使其準(zhǔn)備好進(jìn)行顯示或觀看。解碼部分412及414可包含將對(duì)經(jīng)編碼視頻流執(zhí)行解碼操作的編解碼器。在實(shí)例性實(shí)施例中，解碼部分412及414能夠?qū)σ延肕VC編解碼器編碼的流進(jìn)行解碼。
[0060]經(jīng)解碼視頻流420及422從解碼部分412及414發(fā)送到視圖合成器406。經(jīng)解碼視頻流420及422可為上文參考視頻流106及108所論述的視頻格式中的任一者。
[0061 ] 視圖合成器406經(jīng)布置以接收經(jīng)解碼視頻流420及422并基于用戶的輸入產(chǎn)生單個(gè)經(jīng)拼接視頻流426，且與控制器410發(fā)送/接收指令428。視圖合成器406可包含用于將兩個(gè)或兩個(gè)以上視頻流拼接成單個(gè)視頻流的任何市售軟件?？捎糜谝晥D合成器420中的軟件的一些非限制性實(shí)例包含MindTreeTM、SceneTrackerlltl及視頻拼接領(lǐng)域的技術(shù)人員已知的任何其它軟件。
[0062]顯示器408可包含能夠接收經(jīng)拼接視頻流426且展示視頻的任何裝置，包含電視、計(jì)算機(jī)屏幕、智能電話、組合MP3播放器或可能夠接收視頻流且展示視頻的所屬領(lǐng)域的技術(shù)人員已知的任何其它顯示器。
[0063]控制器410可操作以與視圖合成器406雙向通信以發(fā)送/接收指令428?？刂破?10提供到視圖合成器406的用戶接入以便控制向用戶顯示的視頻輸出。將參考圖5進(jìn)一步描述控制器410。
[0064]在此實(shí)例中，接收器402、視圖合成器406、顯示器408、控制器410、解碼部分412及解碼部分414為相異元件。然而，在一些實(shí)施例中，接收器402、視圖合成器406、顯示器408、控制器410、解碼部分412及解碼部分414中的至少兩者可實(shí)施為其中存儲(chǔ)有用于攜載或其上存儲(chǔ)有計(jì)算機(jī)可執(zhí)行指令或數(shù)據(jù)結(jié)構(gòu)的有形非暫時(shí)性計(jì)算機(jī)可讀媒體的計(jì)算機(jī)。[0065]在實(shí)例性情境中，不在參考圖2c到2d所論述的面試處的個(gè)人想要觀看面試的視頻。為了如此做，個(gè)人將接通視頻顯示裝置400，且接收器402將接收經(jīng)編碼視頻流124。接收器402將使經(jīng)編碼視頻流124分裂成單獨(dú)經(jīng)編碼視頻流416及418，如上文所論述。在此實(shí)例中，經(jīng)編碼視頻流124被分裂成兩個(gè)單獨(dú)視頻流，這是因?yàn)樵家曨l流來源于兩個(gè)單獨(dú)視頻俘獲裝置。如果原始視頻流來源于三個(gè)單獨(dú)視頻俘獲裝置，那么經(jīng)編碼視頻流將被分裂成三個(gè)單獨(dú)視頻流等。
[0066]經(jīng)編碼視頻流416及418分別發(fā)送到解碼部分412及414，其中對(duì)視頻流416及418進(jìn)行解碼以使其準(zhǔn)備好進(jìn)行觀看。如上文所論述，可通過采用所屬領(lǐng)域的技術(shù)人員已知的編解碼器實(shí)現(xiàn)解碼操作。
[0067]在解碼之后，經(jīng)解碼視頻流420及422發(fā)送到視圖合成器406，其中將其拼接在一起且將根據(jù)從控制器410接收的指令428準(zhǔn)備視圖。
[0068]在從控制器410接收到指令428之后，視圖合成器406通過將經(jīng)解碼視頻流420與422混合在一起而從所述視頻流形成所要經(jīng)拼接視頻流426以形成被觀看場(chǎng)景的無縫視圖。經(jīng)拼接視頻流426接著發(fā)送到顯示器408。
[0069]顯示器408接收經(jīng)拼接視頻流且展示經(jīng)拼接視頻流426，使得用戶可觀看經(jīng)拼接視頻流426。
[0070]參考圖6a到6d，其展示根據(jù)本發(fā)明的若干方面的一些實(shí)例性觀看情境。
[0071]如圖6a中所展示，視頻顯示裝置400包含被攝體206在顯示器408上的圖像以及切換按鈕602及604。
[0072]如圖6b中所展示，視頻顯示裝置400包含被攝體208在顯示器424上的圖像以及切換按鈕602及604。
[0073]在一個(gè)例子中且參考圖6a到6b，用戶想要在顯示器424的全屏上看到被攝體206或208，且此偏好將經(jīng)由控制器410輸入到視頻顯示裝置400中。
[0074]現(xiàn)在參考圖5，控制器410包含圖形用戶接口 502及加速度計(jì)504。
[0075]圖形用戶接口 502為用戶與來自圖4a的視圖合成器406通信且通知視圖合成器406形成何種視圖以進(jìn)行觀看的方式。圖形用戶接口 502可包含其中用戶可物理觸摸屏幕以提供輸入的觸摸屏，或其可包含其中可使用另一方法(例如，鼠標(biāo)、跟蹤板等)突出顯示選項(xiàng)以提供輸入的屏幕。
[0076]加速度計(jì)504為與來自圖4a的視圖合成器406通信以通知視圖合成器406將在正顯示的當(dāng)前視圖內(nèi)做出的更新的裝置。加速度計(jì)504可操作以在移動(dòng)及旋轉(zhuǎn)視頻裝置400時(shí)確定其定向。
[0077]往回參考圖4a及5，用戶經(jīng)由圖形用戶接口 502輸入觀看被攝體206或208中的一者的視頻的偏好。控制器410將指令428中繼到視圖合成器406，所述視圖合成器產(chǎn)生所要視圖且將經(jīng)拼接視頻流426發(fā)送到顯示器408。
[0078]往回參考圖6a到6b，給用戶提供經(jīng)由使用切換按鈕602及604觀看被攝體206或208的視頻的選項(xiàng)。切換按鈕602及604允許用戶在被攝體206與被攝體208之間切換視圖。例如，按壓切換按鈕604可促使顯示器408展示被攝體208的視頻，且按壓切換按鈕602可促使顯示器408展示被攝體206的視頻。在來自圖2c到2d的面試的實(shí)例中，用戶可能想要觀看被攝體206詢問問題且接著隨后觀看被攝體208回答問題。在此情形中，用戶可按壓切換按鈕602以在顯示器408上展示被攝體206詢問問題的視頻，且接著在問出問題之后按壓切換按鈕604使得在顯示器408上展示被攝體208回答問題的視頻。
[0079]再次參考圖4a及5，當(dāng)用戶在顯示器408上觀看被攝體206或208時(shí)，觀看房間的其它部分可為合意的。舉例來說，觀看者可能想要看到被攝體208是否在回答問題時(shí)玩弄他的手，此可指示他緊張或可能捏造他的響應(yīng)。在此情形中，用戶將簡單地向下傾斜視頻顯示裝置400，此將觸發(fā)加速度計(jì)504告知視圖合成器406所要視圖已改變且因此需要修改。視圖合成器將接著視需要產(chǎn)生經(jīng)更新視圖且將新的經(jīng)拼接視頻流426發(fā)送到顯示器408。用戶將接著看被攝體208的手以確定他是否在回答問題時(shí)玩弄。
[0080]在另一例子中且參考圖6c到6d，用戶想要經(jīng)由畫中畫同時(shí)在顯示器408上看到被攝體206及208。
[0081]如圖6c中所展示，視頻顯示裝置400包含被攝體206及208在顯示器408上的圖像以及切換按鈕606及608。
[0082]如圖6d中所展示，視頻顯示裝置400包含被攝體206及208在顯示器424上的圖像以及切換按鈕606及608。
[0083]往回參考圖4a及5，用戶經(jīng)由圖形用戶接口 502輸入觀看被攝體206及208的畫中畫視頻的偏好?？刂破?10將指令428中繼到視圖合成器406，所述視圖合成器產(chǎn)生所要視圖且將經(jīng)拼接視頻流426發(fā)送到顯示器408。
[0084]往回參考圖6c到6d，給用戶提供經(jīng)由使用切換按鈕606及608觀看被攝體206或208作為較大圖片的畫中畫視頻的選項(xiàng)。切換按鈕606及608允許用戶切換視圖以將被攝體206或被攝體208展示為較大視頻。例如，按壓切換按鈕606可促使顯示器408展示被攝體208的大視頻且在所述大視頻內(nèi)展示被攝體206的較小視頻，且按壓切換按鈕608可促使顯示器408展示被攝體206的大視頻且在所述大視頻內(nèi)展示被攝體208的較小視頻。在來自圖2c到2d的面試的實(shí)例中，用戶可能想要在面試期間觀看被攝體206及208兩者，但可能想要在不同時(shí)間期間集中于不同被攝體上。例如，用戶可能想要集中于詢問問題的被攝體206上且接著隨后集中于回答問題的被攝體208上。在此情形中，用戶可按壓切換按鈕608以在顯示器408上展示詢問問題的被攝體206的較大視頻，其中被攝體208的較小視頻在所述大視頻內(nèi)，且接著在問出問題之后按壓切換按鈕606使得回答問題的被攝體208的視頻變成在顯示器408上展示的大視頻，其中被攝體206的視頻變成在所述大視頻內(nèi)的較小視頻。
[0085]再次參考圖4a及5，當(dāng)用戶正在顯示器408上觀看來自圖6c到6d的視圖中的任一者時(shí)，觀看房間的其它部分可為合意的。舉例來說，觀看者可能想要看到被攝體208是否在回答問題時(shí)玩弄他的手，此可指示他緊張或可能捏造他的響應(yīng)。在此情形中，用戶將簡單地向下傾斜視頻顯示裝置400，此將觸發(fā)加速度計(jì)504告知視圖合成器406所要視圖已改變且因此需要修改。視圖合成器將接著視需要產(chǎn)生經(jīng)更新視圖且將新的經(jīng)拼接視頻流426發(fā)送到顯示器408。用戶將接著看被攝體208的手以確定他是否在回答問題時(shí)玩弄。
[0086]借助圖6c到6d中所論述的畫中畫視圖且在傾斜視頻顯示裝置400以更改顯示器424上的視圖的一個(gè)實(shí)施例中，視頻顯示裝置400可響應(yīng)于視頻顯示裝置400被傾斜而僅更改較大視頻的視圖。在傾斜視頻顯示裝置400以更改顯示器424上的視圖的另一實(shí)施例中，視頻顯示裝置400可響應(yīng)于視頻顯示裝置400被傾斜而僅更改較小視頻的視圖。在傾斜視頻顯示裝置400以更改顯示器424上的視圖的又一實(shí)施例中，視頻顯示裝置400可響應(yīng)于視頻顯示裝置400被傾斜而更改較大及較小視頻兩者。
[0087]圖4b圖解說明根據(jù)本發(fā)明的若干方面的視頻顯示裝置的替代實(shí)施例。
[0088]如所述圖中所展示，視頻顯示裝置450包含視頻顯示裝置400內(nèi)所包含的所有元件，其中添加質(zhì)量調(diào)整器404。
[0089]質(zhì)量調(diào)整器404可操作以調(diào)整一個(gè)或一個(gè)以上經(jīng)解碼傳入視頻流的質(zhì)量，使得在質(zhì)量調(diào)整完成之后，所有經(jīng)解碼視頻流具有相同質(zhì)量?？赏ㄟ^質(zhì)量調(diào)整器404調(diào)整的參數(shù)包含視頻分辨率、亮度、對(duì)比度、顏色、失真、大小及調(diào)整視頻流的質(zhì)量的領(lǐng)域的技術(shù)人員已知的任何其它參數(shù)。
[0090]質(zhì)量調(diào)整器404經(jīng)布置以接收經(jīng)解碼視頻流420及422并調(diào)整所述流的質(zhì)量且輸出發(fā)送到視圖合成器406的經(jīng)調(diào)整視頻流424。
[0091]在操作中，將以等效于參考圖4所描述的方式的方式接收并對(duì)經(jīng)編碼視頻流124進(jìn)行解碼。然而，在此情形中，呈現(xiàn)質(zhì)量調(diào)整器以檢驗(yàn)視頻流的質(zhì)量未因編碼/解碼過程而降級(jí)。
[0092]質(zhì)量調(diào)整器404接收經(jīng)解碼視頻流420及422且對(duì)所述流進(jìn)行比較以確定是否需要在將所述流發(fā)送到視圖合成器406之前調(diào)整所述流的質(zhì)量。所述流的質(zhì)量可能已受編碼/解碼過程影響，且質(zhì)量調(diào)整器404檢查以察看是否已發(fā)生任何此類損耗。如果需要調(diào)整質(zhì)量，那么質(zhì)量調(diào)整器404將調(diào)整視頻流420及422的質(zhì)量。
[0093]質(zhì)量調(diào)整器404對(duì)經(jīng)解碼視頻流420與422進(jìn)行比較以確定所述兩個(gè)流之間的任何差異。在此情形中且作為非限制性實(shí)例，質(zhì)量調(diào)整器404可確定經(jīng)解碼視頻流420為比經(jīng)解碼視頻流422高的分辨率，且因此需要進(jìn)一步處理以形成場(chǎng)景的無縫視圖。接下來，質(zhì)量調(diào)整器404調(diào)整經(jīng)解碼視頻流420、經(jīng)解碼視頻流422或兩者的分辨率以便形成經(jīng)調(diào)整視頻流424，所述經(jīng)調(diào)整視頻流含有經(jīng)解碼視頻流420及422的經(jīng)調(diào)整版本使得所述視頻流的分辨率看起來相同且在用戶觀看所述兩個(gè)流時(shí)在其之間將不存在顯著差異。
[0094]來自質(zhì)量調(diào)整器404的輸出為從質(zhì)量調(diào)整器404流動(dòng)到視圖合成器406的經(jīng)調(diào)整視頻流424。視圖合成器406從控制器410接收發(fā)指令給視圖合成器406以從經(jīng)調(diào)整視頻流424產(chǎn)生特定視圖的指令428。先前已參考圖6a到6d描述了產(chǎn)生用于視圖合成器406的命令的過程。
[0095]僅如果在一個(gè)或一個(gè)以上視頻裝置記錄視頻時(shí)不存在質(zhì)量調(diào)整，那么質(zhì)量調(diào)整器404可能在視頻顯示裝置450內(nèi)為必要的，然而，具有額外質(zhì)量調(diào)整器以確保視頻流在編碼/解碼過程期間不被破壞可為合意的。包含質(zhì)量調(diào)整器的選項(xiàng)包含:在視頻記錄及顯示裝置兩者上包含質(zhì)量調(diào)整器、僅在視頻記錄裝置上包含質(zhì)量調(diào)整器(如圖1中所展示)或僅在視頻顯示裝置上包含質(zhì)量調(diào)整器。
[0096]出于圖解及說明的目的已呈現(xiàn)對(duì)各種優(yōu)選實(shí)施例的前述說明。其并不打算為窮盡性的或?qū)⒈景l(fā)明限于所揭示的精確形式，且顯然可鑒于以上教示做出許多修改及變化形式。選擇且描述如上文所描述的實(shí)例性實(shí)施例以便最好地解釋本發(fā)明的原理及其實(shí)際應(yīng)用，以借此使得所屬領(lǐng)域的技術(shù)人員能夠在各種實(shí)施例中并借助適合于所預(yù)期的特定使用的各種修改最好地利用本發(fā)明。打算由所附權(quán)利要求書定義本發(fā)明的范圍。
【權(quán)利要求】
1.一種視頻裝置，其包括: 第一攝像機(jī)，其經(jīng)布置以記錄第一視場(chǎng)的第一視頻圖像且可操作以基于所述第一視頻圖像輸出第一視頻數(shù)據(jù)流； 第二攝像機(jī)，其經(jīng)布置以記錄第二視場(chǎng)的第二視頻圖像且可操作以基于所述第二視頻圖像輸出第二視頻數(shù)據(jù)流； 視圖合成器，其可操作以執(zhí)行產(chǎn)生經(jīng)拼接視頻圖像流、產(chǎn)生第一畫中畫視頻圖像流及產(chǎn)生第二畫中畫視頻圖像流中的一者，所述產(chǎn)生經(jīng)拼接視頻圖像流包括拼接經(jīng)調(diào)整第一視頻圖像流與經(jīng)調(diào)整第二視頻圖像流，所述經(jīng)調(diào)整第一視頻圖像流是基于所述第一視頻圖像流，所述經(jīng)調(diào)整第二視頻圖像流是基于所述第二視頻圖像流，所述經(jīng)拼接視頻圖像流具有第三視場(chǎng)，所述產(chǎn)生第一畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第二視頻圖像的第二部分的第二部分替換所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第一視頻圖像的第一部分的第一部分，所述產(chǎn)生第二畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第一視頻圖像的第四部分的第四部分替換所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第二視頻圖像的第三部分的第三部分； 控制器，其可操作以發(fā)指令給所述視圖合成器以輸出原始視頻信號(hào)作為所述經(jīng)調(diào)整第一視頻圖像流、所述經(jīng)調(diào)整第二視頻圖像流、所述經(jīng)拼接視頻圖像流、所述第一畫中畫視頻圖像流及所述第二畫中畫視頻圖像流中的一者；以及 編碼器，其可操作以將所述原始視頻信號(hào)編碼成經(jīng)編碼信號(hào)。
2.根據(jù)權(quán)利要求1所述的視頻裝置，其進(jìn)一步包括可操作以產(chǎn)生所述經(jīng)調(diào)整第一視頻圖像流及所述經(jīng)調(diào)整第二視頻圖像流的質(zhì)量調(diào)整器。
3.根據(jù)權(quán)利要求2所述的視頻裝置， 其中所述第一攝像機(jī)可操作以在第一放大率下記錄所述第一視頻圖像， 其中所述第二攝像機(jī)可操作以在第二放大率下記錄所述第二視頻圖像， 其中所述質(zhì)量調(diào)整器可進(jìn)一步操作以產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有所述第二放大率，且 其中所述第一放大率不同于所述第二放大率。
4.根據(jù)權(quán)利要求2所述的視頻裝置， 其中所述第一攝像機(jī)可操作以在第一平均照度下記錄所述第一視頻圖像， 其中所述第二攝像機(jī)可操作以在第二平均照度下記錄所述第二視頻圖像， 其中所述質(zhì)量調(diào)整器可進(jìn)一步操作以產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有所述第二平均照度，且 其中所述第一平均照度不同于所述第二平均照度。
5.根據(jù)權(quán)利要求2所述的視頻裝置， 其中所述第一攝像機(jī)可操作以在第一分辨率下記錄所述第一視頻圖像， 其中所述第二攝像機(jī)可操作以在第二分辨率下記錄所述第二視頻圖像， 其中所述質(zhì)量調(diào)整器可進(jìn)一步操作以產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有所述第二分辨率，且 其中所述第一分辨率不同于所述第二分辨率。
6.根據(jù)權(quán)利要求1所述的視頻裝置，其中所述編碼器可操作以使用編碼方案將所述原始視頻信號(hào)編碼成經(jīng)編碼信號(hào)，所述編碼方案對(duì)從所述第一攝像機(jī)及從所述第二攝像機(jī)同時(shí)俘獲的序列圖像進(jìn)行編碼。
7.根據(jù)權(quán)利要求1所述的視頻裝置，其中所述控制器包括圖形用戶接口。
8.根據(jù)權(quán)利要求1所述的視頻裝置，其中所述控制器包括加速度計(jì)。
9.一種供與第一經(jīng)編碼視頻流及第二經(jīng)編碼視頻流一起使用的視頻裝置，所述第一經(jīng)編碼視頻流對(duì)應(yīng)于第一視場(chǎng)的第一視頻圖像，所述第二經(jīng)編碼視頻流對(duì)應(yīng)于第二視場(chǎng)的第二視頻圖像，所述視頻裝置包括: 第一解碼部分，其可操作以產(chǎn)生對(duì)應(yīng)于所述第一經(jīng)編碼視頻流的第一視頻圖像流；第二解碼部分，其可操作以產(chǎn)生對(duì)應(yīng)于所述第二經(jīng)編碼視頻流的第二視頻圖像流；視圖合成器，其可操作以執(zhí)行產(chǎn)生經(jīng)拼接視頻圖像流、產(chǎn)生第一畫中畫視頻圖像流及產(chǎn)生第二畫中畫視頻圖像流中的一者，所述產(chǎn)生經(jīng)拼接視頻圖像流包括拼接經(jīng)調(diào)整第一視頻圖像流與經(jīng)調(diào)整第二視頻圖像流，所述經(jīng)調(diào)整第一視頻圖像流是基于所述第一視頻圖像流，所述經(jīng)調(diào)整第二視頻圖像流是基于所述第二視頻圖像流，所述經(jīng)拼接視頻圖像流具有第三視場(chǎng)，所述產(chǎn)生第一畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第二視頻圖像的第二部分的第二部分替換所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第一視頻圖像的第一部分的第一部分，所述產(chǎn)生第二畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第一視頻圖像的第四部分的第四部分替換所述經(jīng)調(diào)整第二視頻圖像流的 對(duì)應(yīng)于所述經(jīng)調(diào)整第二視頻圖像的第三部分的第三部分；以及控制器，其可操作以發(fā)指令給所述視圖合成器以輸出原始視頻信號(hào)作為所述經(jīng)調(diào)整第一視頻圖像流、所述經(jīng)調(diào)整第二視頻圖像流、所述經(jīng)拼接視頻圖像流、所述第一畫中畫視頻圖像流及所述第二畫中畫視頻圖像流中的一者。
10.根據(jù)權(quán)利要求9所述的視頻裝置，其進(jìn)一步包括可操作以產(chǎn)生所述經(jīng)調(diào)整第一視頻圖像流及所述經(jīng)調(diào)整第二視頻圖像流的質(zhì)量調(diào)整器。
11.根據(jù)權(quán)利要求10所述的視頻裝置， 其中所述第一攝像機(jī)可操作以在第一放大率下記錄所述第一視頻圖像， 其中所述第二攝像機(jī)可操作以在第二放大率下記錄所述第二視頻圖像， 其中所述質(zhì)量調(diào)整器可進(jìn)一步操作以產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有所述第二放大率，且 其中所述第一放大率不同于所述第二放大率。
12.根據(jù)權(quán)利要求10所述的視頻裝置， 其中所述第一攝像機(jī)可操作以在第一平均照度下記錄所述第一視頻圖像， 其中所述第二攝像機(jī)可操作以在第二平均照度下記錄所述第二視頻圖像， 其中所述質(zhì)量調(diào)整器可進(jìn)一步操作以產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有所述第二平均照度，且 其中所述第一平均照度不同于所述第二平均照度。
13.根據(jù)權(quán)利要求10所述的視頻裝置， 其中所述第一攝像機(jī)可操作以在第一分辨率下記錄所述第一視頻圖像， 其中所述第二攝像機(jī)可操作以在第二分辨率下記錄所述第二視頻圖像， 其中所述質(zhì)量調(diào)整器可進(jìn)一步操作以產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有所述第二分辨率，且 其中所述第一分辨率不同于所述第二分辨率。
14.根據(jù)權(quán)利要求9所述的視頻裝置，其中所述第一解碼部分可操作以使用解碼方案將所述第一經(jīng)編碼視頻流解碼成所述第一視頻圖像流，所述解碼方案對(duì)從第一攝像機(jī)及從第二攝像機(jī)同時(shí)俘獲的序列圖像進(jìn)行解碼。
15.根據(jù)權(quán)利要求9所述的視頻裝置，其中所述控制器包括圖形用戶接口。
16.根據(jù)權(quán)利要求9所述的視頻裝置，其中所述控制器包括加速度計(jì)。
17.—種方法,其包括: 經(jīng)由第一攝像機(jī)記錄第一視場(chǎng)的第一視頻圖像； 經(jīng)由所述第一攝像機(jī)輸出基于所述第一視頻圖像的第一視頻數(shù)據(jù)流； 經(jīng)由第二攝像機(jī)記錄第二視場(chǎng)的第二視頻圖像； 經(jīng)由所述第二攝像機(jī)輸出基于所述第二視頻圖像的第二視頻數(shù)據(jù)流； 經(jīng)由視圖合成器執(zhí)行產(chǎn)生經(jīng)拼接視頻圖像流、產(chǎn)生第一畫中畫視頻圖像流及產(chǎn)生第二畫中畫視頻圖像流中的一者，所述產(chǎn)生經(jīng)拼接視頻圖像流包括拼接經(jīng)調(diào)整第一視頻圖像流與經(jīng)調(diào)整第二視頻圖像流，所述經(jīng)調(diào)整第一視頻圖像流是基于所述第一視頻圖像流，所述經(jīng)調(diào)整第二視頻圖像流是基于所述第二視頻圖像流，所述經(jīng)拼接視頻圖像流具有第三視場(chǎng)，所述產(chǎn)生第一畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第二視頻圖像的第二部分的第二部分替換所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第一視頻圖像的第一部分的第一部分，所述產(chǎn)生第二畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第一視頻圖像的第四部分的第四部分替換所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第二視頻圖像的第三部分的第三部分； 經(jīng)由控制器發(fā)指令給所述視圖合成器以輸出原始視頻信號(hào)作為所述經(jīng)調(diào)整第一視頻圖像流、所述經(jīng)調(diào)整第二視頻圖像流、所述經(jīng)拼接視頻圖像流、所述第一畫中畫視頻圖像流及所述第二畫中畫視頻圖像流中的一者；以及 經(jīng)由編碼器將所述原始視頻信號(hào)編碼成經(jīng)編碼信號(hào)。
18.根據(jù)權(quán)利要求17所述的方法，其進(jìn)一步包括經(jīng)由質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)調(diào)整第一視頻圖像流及所述經(jīng)調(diào)整第二視頻圖像流。
19.根據(jù)權(quán)利要求18所述的方法，其進(jìn)一步包括: 經(jīng)由所述質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有第二放大率， 其中所述經(jīng)由第一攝像機(jī)記錄第一視場(chǎng)的第一視頻圖像包括在第一放大率下記錄所述第一視頻圖像， 其中所述經(jīng)由第二攝像機(jī)記錄第二視場(chǎng)的第二視頻圖像包括在所述第二放大率下記錄所述第二視頻圖像，且 其中所述第一放大率不同于所述第二放大率。
20.根據(jù)權(quán)利要求18所述的方法， 經(jīng)由所述質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有第二平均照度， 其中所述經(jīng)由第一攝像機(jī)記錄第一視場(chǎng)的第一視頻圖像包括在第一平均照度下記錄所述第一視頻圖像， 其中所述經(jīng)由第二攝像機(jī)記錄第二視場(chǎng)的第二視頻圖像包括在所述第二平均照度下記錄所述第二視頻圖像，且 其中所述第一平均照度不同于所述第二平均照度。
21.根據(jù)權(quán)利要求18所述的方法， 經(jīng)由所述質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有第二分辨率， 其中所述經(jīng)由第一攝像機(jī)記錄第一視場(chǎng)的第一視頻圖像包括在第一分辨率下記錄所述第一視頻圖像， 其中所述經(jīng)由第二攝像機(jī)記錄第二視場(chǎng)的第二視頻圖像包括在所述第二分辨率下記錄所述第二視頻圖像，且 其中所述第一分辨率不同于所述第二分辨率。
22.根據(jù)權(quán)利要求17所述的方法，其進(jìn)一步包括經(jīng)由所述編碼器使用編碼方案將所述原始視頻信號(hào)編碼成經(jīng)編碼信號(hào)，所述編碼方案對(duì)從所述第一攝像機(jī)及從所述第二攝像機(jī)同時(shí)俘獲的序列圖像進(jìn)行編碼。
23.一種使用第一經(jīng)編碼視頻流及第二經(jīng)編碼視頻流的方法，所述第一經(jīng)編碼視頻流對(duì)應(yīng)于第一視場(chǎng)的第一視頻圖像，所述第二經(jīng)編碼視頻流對(duì)應(yīng)于第二視場(chǎng)的第二視頻圖像，所述方法包括: 經(jīng)由第一解碼部分產(chǎn)生對(duì)應(yīng)于所述第一經(jīng)編碼視頻流的第一視頻圖像流； 經(jīng)由第二解碼部分產(chǎn)生對(duì)應(yīng)于所述第二經(jīng)編碼視頻流的第二視頻圖像流； 經(jīng)由視圖合成器執(zhí)行產(chǎn)生經(jīng)拼接視頻圖像流、產(chǎn)生第一畫中畫視頻圖像流及產(chǎn)生第二畫中畫視頻圖像流中的一者，所述產(chǎn)生經(jīng)拼接視頻圖像流包括拼接經(jīng)調(diào)整第一視頻圖像流與經(jīng)調(diào)整第二視頻圖像流，所述經(jīng)調(diào)整第一視頻圖像流是基于所述第一視頻圖像流，所述經(jīng)調(diào)整第二視頻圖像流是基于所述第二視頻圖像流，所述經(jīng)拼接視頻圖像流具有第三視場(chǎng)，所述產(chǎn)生第一畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第二視頻圖像的第二部分的第二部分替換所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于經(jīng)調(diào)整第一視頻圖像的第一部分的第一部分，所述產(chǎn)生第二畫中畫視頻圖像流包括用所述經(jīng)調(diào)整第一視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第一視頻圖像的第四部分的第四部分替換所述經(jīng)調(diào)整第二視頻圖像流的對(duì)應(yīng)于所述經(jīng)調(diào)整第二視頻圖像的第三部分的第三部分；以及 經(jīng)由控制器發(fā)指令給所述視圖合成器以輸出原始視頻信號(hào)作為所述經(jīng)調(diào)整第一視頻圖像流、所述經(jīng)調(diào)整第二視頻圖像流、所述經(jīng)拼接視頻圖像流、所述第一畫中畫視頻圖像流及所述第二畫中畫視頻圖像流中的一者。
24.根據(jù)權(quán)利要求23所述的方法，其進(jìn)一步包括經(jīng)由質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)調(diào)整第一視頻圖像流及所述經(jīng)調(diào)整第二視頻圖像流。
25.根據(jù)權(quán)利要求24所述的方法，其進(jìn)一步包括: 經(jīng)由所述質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有第二放大率， 其中所述第一視頻圖像處于第一放大率下， 其中所述第二視頻圖像處于第二放大率下，且其中所述第一放大率不同于所述第二放大率。
26.根據(jù)權(quán)利要求24所述的方法， 經(jīng)由所述質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有第二平均照度， 其中所述第一視頻圖像處于第一平均照度下， 其中所述第二視頻圖像處于第二平均照度下，且 其中所述第一平均照度不同于所述第二平均照度。
27.根據(jù)權(quán)利要求24所述的方法， 經(jīng)由所述質(zhì)量調(diào)整器產(chǎn)生所述經(jīng)拼接視頻圖像流，使得所述經(jīng)調(diào)整第一視頻圖像具有第二分辨率， 其中所述第一視頻圖像處于第一分辨率下， 其中所述第二視頻圖像處于第二分辨率下，且 其中所述第一分辨率不同于所述第二分辨率。
28.根據(jù)權(quán)利要求23所述的方法，其進(jìn)一步包括經(jīng)由解碼部分使用解碼方案將所述第一經(jīng)編碼視頻流解碼成所述第一視頻圖像流，所述解碼方案對(duì)從第一攝像機(jī)及從第二攝像機(jī)同時(shí)俘獲的序列圖像進(jìn)行解碼。
【文檔編號(hào)】H04N21/4402GK103916699SQ201310737189
【公開日】2014年7月9日 申請(qǐng)日期:2013年12月26日 優(yōu)先權(quán)日:2012年12月31日
【發(fā)明者】維拉馬尼坎達(dá)恩·拉朱, 納拉辛漢·文卡特拉曼, 阿爾貝托·阿圭雷 申請(qǐng)人:德州儀器公司