專(zhuān)利名稱(chēng)：圖像合成設(shè)備、圖像合成方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像合成設(shè)備、圖像合成方法和程序，更具體地涉及適于例如在合成三維圖像的情況中使用的圖像合成設(shè)備、圖像合成方法和程序。
背景技術(shù)：
在相關(guān)技術(shù)中，例如在日本專(zhuān)利公開(kāi)No. Hei 8-321992中，已知并公開(kāi)了合成技術(shù)，例如對(duì)用戶(hù)利用切換器選擇的三維圖像進(jìn)行合成的疊加。三維圖像由對(duì)于左眼的二維圖像和對(duì)于右眼的二維圖像構(gòu)成，并且在用于左眼和右眼的二維圖像之間具有視差，使得觀賞者視覺(jué)確認(rèn)的圖像中的物理實(shí)體看起來(lái)是三維的。此外，當(dāng)三維圖像要被呈現(xiàn)給觀賞者時(shí)，例如用于左眼的二維圖像被呈現(xiàn)以?xún)H用左眼視覺(jué)確認(rèn)并且用于右眼的二維圖像被呈現(xiàn)以?xún)H用右眼視覺(jué)確認(rèn)?；诟鶕?jù)用于左眼的二維圖像和用于右眼的二維圖像之間的視差的量(即，視差量)被感知的深度z，或換言之基于與在三維圖像垂直的方向上限定的三維圖像中存在的物理實(shí)體的相對(duì)位置z，觀賞者將視覺(jué)確認(rèn)的圖像識(shí)別為立體三維圖像。應(yīng)注意，例如還在日本專(zhuān)利公開(kāi)No. Hei 11-1643 中已知并公開(kāi)了調(diào)節(jié)三維圖像的視差量的調(diào)節(jié)技術(shù)。

發(fā)明內(nèi)容
根據(jù)上述的合成技術(shù)，例如當(dāng)合成用戶(hù)選擇的三維圖像時(shí)，根據(jù)用戶(hù)指定的合成順序來(lái)合成被選擇的三維圖像。這樣，如果合成順序不符合要被合成的三維圖像中存在的物理實(shí)體的立體位置z， 即不符合物理實(shí)體間的深度位置關(guān)系，那么作為三維圖像的合成結(jié)果，有時(shí)產(chǎn)生不自然或不舒適的三維圖像，其中三維圖像中的物理實(shí)體的三維位置ζ和合成順序彼此不對(duì)應(yīng)。具體地，例如，在兩個(gè)三維圖像被選擇并被合成的情況下，如果一個(gè)三維圖像中存在的第一物理實(shí)體被認(rèn)為比另一個(gè)三維圖像中存在的第二物理實(shí)體更近，則需要合成兩個(gè)三維圖像使得第一物理實(shí)體比第二物理實(shí)體顯示在更近側(cè)，使它們之間的位置關(guān)系與觀賞者所識(shí)別的第一物理實(shí)體比第二物理實(shí)體的位置關(guān)系一致。然而，在用戶(hù)指定的合成順序是第二物理實(shí)體比第一物理實(shí)體顯示在更近側(cè)的情況下，根據(jù)上述合成技術(shù)，兩個(gè)三維圖像使得第二物理實(shí)體比第一物理實(shí)體顯示在更近側(cè)， 與觀賞者所識(shí)別的第一物理實(shí)體比第二物理實(shí)體的位置關(guān)系相反。這樣的合成帶來(lái)了合成的三維圖像對(duì)觀賞者產(chǎn)生很不舒適的感覺(jué)。因此，期望提供圖像合成設(shè)備、圖像合成方法和程序，可以產(chǎn)生這樣的合成三維圖像，其中，要被合成的三維圖像中存在的物理實(shí)體的立體圖像與合成順序彼此符合。根據(jù)本發(fā)明的實(shí)施例，提供了一種圖像合成設(shè)備，包括圖像選擇裝置，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或多個(gè)三維圖像；順序確定裝置，用于基于所選擇的三維圖像的視差量來(lái)確定合成順序，所述合成順序表示被選擇的三維圖像被合成的順序； 圖像合成裝置，用于根據(jù)所述合成順序來(lái)合成被選擇的三維圖像；以及控制裝置，用于響應(yīng)于用戶(hù)的操作來(lái)控制所述圖像選擇裝置、所述順序確定裝置和所述圖像合成裝置。在用戶(hù)的選擇操作用于選擇三維圖像中預(yù)定的三維圖像使得所述預(yù)定的三維圖像能以預(yù)定的合成順序被合成時(shí)，所述控制裝置可以控制所述順序確定裝置以確定所述預(yù)定的三維圖像的合成順序；并且在所述順序確定裝置確定的所述預(yù)定的三維圖像的所述合成順序未成為所述預(yù)定的合成順序時(shí)，所述控制裝置將用戶(hù)的所述選擇操作處理為未被執(zhí)行?；蛘撸?dāng)用戶(hù)的用于改變所述合成順序的改變操作被執(zhí)行時(shí)，所述控制裝置可以將用戶(hù)的所述改變操作處理為未被執(zhí)行?；蛘撸?dāng)用戶(hù)的用于取消對(duì)所選擇的三維圖像中的任意三維圖像的選擇的取消操作被執(zhí)行時(shí)，所述控制裝置可以控制所述順序確定裝置以確定新的合成順序，所述新的合成順序?qū)⒈贿x擇為取消的所述三維圖像從所述合成順序中排除。圖像合成設(shè)備還包括用于測(cè)量被選擇的三維圖像的視差量的視差量測(cè)量裝置，所述順序確定裝置基于被測(cè)量的視差量確定所述合成順序。根據(jù)本發(fā)明的另一個(gè)方面，提供了一種用于圖像合成設(shè)備的圖像合成方法，所述圖像合成設(shè)備用于合成三維圖像，并包括圖像選擇裝置、順序確定裝置、圖像合成裝置和控制裝置，所述圖像合成方法包括由所述圖像選擇裝置執(zhí)行的步驟從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；由所述順序確定裝置執(zhí)行的步驟基于所選擇的所述三維圖像的視差量來(lái)確定合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；由所述圖像合成裝置執(zhí)行的步驟根據(jù)所述合成順序來(lái)合成所選擇的所述三維圖像；以及由所述控制裝置執(zhí)行的步驟響應(yīng)于用戶(hù)的操作來(lái)控制所述圖像選擇裝置、所述順序確定裝置和所述圖像合成裝置。根據(jù)本發(fā)明的另一個(gè)實(shí)施例，提供了一種圖像合成設(shè)備，包括圖像選擇裝置，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；順序獲取裝置，用于獲取合成順序，所述合成順序表示所選擇的三維圖像被合成的順序；視差量調(diào)節(jié)裝置，用于基于所述合成順序來(lái)調(diào)節(jié)所選擇的三維圖像的視差量；以及圖像合成裝置，用于根據(jù)所述合成順序?qū)⒄{(diào)節(jié)后的、所選擇的三維圖像合成。圖像合成設(shè)備還包括用于獲取完成度信息的完成度獲取裝置，所述完成度信息表示當(dāng)所選擇的三維圖像的視差量從原始視差量被調(diào)節(jié)到與所述合成順序?qū)?yīng)的視差量時(shí)的進(jìn)展情況；所述視差量調(diào)節(jié)裝置基于所述完成度信息來(lái)調(diào)節(jié)所選擇的三維圖像的視差量；所述圖像合成裝置將基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的三維圖像合成。在該情況下，所述圖像合成設(shè)備還可以包括比較產(chǎn)生裝置，用于將基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的三維圖像的視差量彼此比較并基于比較結(jié)果產(chǎn)生區(qū)域信息，所述區(qū)域信息表示基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的三維區(qū)域的整體區(qū)域內(nèi)用于顯示合成后的三維圖像的區(qū)域；所述圖像合成裝置基于所述區(qū)域信息將基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的三維圖像合成。響應(yīng)于用于指定所述合成順序的用戶(hù)的指定操作，所述順序獲取裝置可以獲取用戶(hù)的所述指定操作所指定的所述合成順序。
在該情況下，圖像合成設(shè)備還可以包括測(cè)量裝置，用于測(cè)量所選擇的三維圖像的視差量；以及調(diào)節(jié)量計(jì)算裝置，用于基于所述合成順序來(lái)計(jì)算用于將測(cè)量得到的視差量調(diào)節(jié)到與所述合成順序?qū)?yīng)的視差量的調(diào)節(jié)量；所述視差量調(diào)節(jié)裝置利用基于所述合成順序計(jì)算得到的所述調(diào)節(jié)量來(lái)調(diào)節(jié)視差量。在該情況下，圖像合成設(shè)備還包括用于臨時(shí)保存所述調(diào)節(jié)量的調(diào)節(jié)量保存裝置； 所述視差量調(diào)節(jié)裝置響應(yīng)于命令操作，利用保存在所述調(diào)節(jié)量保存裝置中的所述調(diào)節(jié)量來(lái)調(diào)節(jié)視差量，所述命令操作被執(zhí)行來(lái)命令以用戶(hù)的所述指定操作所指定的所述合成順序來(lái)執(zhí)行合成；所述圖像合成裝置根據(jù)由用戶(hù)的所述指定操作所指定的所述合成順序?qū)⒄{(diào)節(jié)后的三維圖像合成。可以?xún)H當(dāng)調(diào)節(jié)后的三維圖像的視差量低于預(yù)定的閾值時(shí)，所述視差量調(diào)節(jié)裝置對(duì)所選擇的三維圖像的視差量進(jìn)行調(diào)節(jié)。圖像合成設(shè)備還可以包括第一輸出裝置，用于將通過(guò)所述圖像合成裝置的合成獲得的合成三維圖像輸出以作為用于用戶(hù)的確認(rèn)的預(yù)覽確定圖像進(jìn)行顯示；以及第二輸出裝置，用于將合成的三維圖像輸出作為最終合成三維圖像。可以當(dāng)所選擇的三維圖像被合成時(shí)，所述順序獲取裝置獲取所選擇的三維圖像被顯示在近身側(cè)所依據(jù)的順序作為所述合成順序。根據(jù)本發(fā)明的另一個(gè)實(shí)施例，提供了一種用于圖像合成設(shè)備的圖像合成方法，所述圖像合成設(shè)備用于合成多個(gè)三維圖像，并包括圖像選擇裝置、順序獲取裝置、視差量調(diào)節(jié)裝置和圖像合成裝置，所述圖像合成方法包括由所述圖像選擇裝置執(zhí)行的步驟從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；由所述順序獲取裝置執(zhí)行的步驟 獲取合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；由所述視差量調(diào)節(jié)裝置執(zhí)行的步驟基于所述合成順序來(lái)調(diào)節(jié)所選擇的所述三維圖像的視差量；以及由所述圖像合成裝置執(zhí)行的步驟根據(jù)所述合成順序?qū)⒄{(diào)節(jié)后的所選擇的所述三維圖像合成。在圖像處理設(shè)備和方法中，從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或多個(gè)三維圖像，獲取表示所選擇的三維圖像被合成的順序的合成順序。然后，基于所述合成順序來(lái)調(diào)節(jié)所選擇的三維圖像的視差量，并且根據(jù)所述合成順序?qū)⒄{(diào)節(jié)后的、所選擇的三維圖像合成。根據(jù)圖像處理設(shè)備和方法，可以產(chǎn)生這樣的合成三維圖像，其中在要被合成的三維圖像中存在的物理實(shí)體的立體位置與三維圖像的合成順序彼此符合，并且不會(huì)對(duì)觀賞者帶來(lái)不舒適的感覺(jué)。參考附圖，本發(fā)明的上述和其他特征和優(yōu)點(diǎn)將從以下的說(shuō)明書(shū)中變得更清楚，附圖中相似的部件和元件由相似的附圖標(biāo)記表示。


圖1是示出根據(jù)本發(fā)明的第一實(shí)施例的圖像合成設(shè)備的結(jié)構(gòu)的示例的框圖；圖2A至2C是示出圖1的圖像合成設(shè)備執(zhí)行的處理的概要的示意圖；圖3是示出基于深度的平均值確定優(yōu)先順序的確定方法的示例的示意圖；圖4是示出基于深度的中值確定優(yōu)先順序的確定方法的示例的示意圖；圖5是示出圖1的圖像合成設(shè)備的具體結(jié)構(gòu)的示例的框7
圖6是示出圖5所示的用于左眼的切換器的結(jié)構(gòu)的示例的框圖；圖7是示出圖5的所示的優(yōu)先順序確定部分的結(jié)構(gòu)的示例的框圖；圖8是示出圖7的優(yōu)先順序確定部分執(zhí)行的優(yōu)先順序確定處理的流程圖；圖9是示出圖1的圖像合成設(shè)備的結(jié)構(gòu)的另一個(gè)示例的框圖；圖10是示出圖1所示的控制臺(tái)的示例的示意圖；圖11是示出設(shè)置在圖10的控制臺(tái)21上的按鈕的狀態(tài)轉(zhuǎn)變的示例的示意圖；圖12是示出根據(jù)本發(fā)明的第二實(shí)施例的圖像合成設(shè)備的結(jié)構(gòu)的示例的框圖；圖13A至13C是示出圖12的圖像合成設(shè)備執(zhí)行的處理的概要的示意圖；圖14是示出圖12的圖像合成設(shè)備的具體結(jié)構(gòu)的示例的框圖；圖15是示出圖14的調(diào)節(jié)部分的結(jié)構(gòu)的示例的框圖；圖16是示出圖15的調(diào)節(jié)部分執(zhí)行的第一視差量調(diào)節(jié)處理的流程圖；圖17是示出圖15的調(diào)節(jié)部分執(zhí)行的第二視差量調(diào)節(jié)處理的流程圖；圖18是示出圖15的調(diào)節(jié)部分執(zhí)行的第三視差量調(diào)節(jié)處理的流程圖；圖19A、19B和20A至20C是示出根據(jù)本發(fā)明的第三實(shí)施例執(zhí)行的處理的概要的示意圖；圖21是示出根據(jù)本發(fā)明的第三實(shí)施例的圖像合成設(shè)備的結(jié)構(gòu)的示例的框圖；圖22是示出圖21所示的完成度調(diào)節(jié)部分的結(jié)構(gòu)的示例的框圖；圖23是示出圖21所示的用于左眼的切換器的結(jié)構(gòu)的示例的框圖；圖24A和24B是示出由圖23所示的深度比較部分和合成處理部分執(zhí)行的處理的示例的示意圖；圖25是示出圖22的完成度調(diào)節(jié)部分執(zhí)行的完成度調(diào)節(jié)處理的流程圖。圖沈是示出圖23的用于左眼的切換器的圖像合成部分的結(jié)構(gòu)的另一示例的框圖；圖27A至27D和圖觀是示出四個(gè)三維圖像被合成的情況的示例的示意圖。圖四是示出在響應(yīng)于完成度值將四個(gè)用于左眼的二維圖像合成的情況下、其中設(shè)置圖像合成部分的用于左眼的切換器的結(jié)構(gòu)的示例的框圖；圖30是示出其中設(shè)置調(diào)節(jié)部分的用于左眼的切換器的結(jié)構(gòu)的示例的框圖；圖31是示出其中設(shè)置預(yù)覽功能的用于左眼的切換器的結(jié)構(gòu)的示例的框圖；并且圖32是示出計(jì)算機(jī)的結(jié)構(gòu)的示例的框圖。
具體實(shí)施例方式以下將描述本發(fā)明的優(yōu)選實(shí)施例。注意，以如下順序進(jìn)行描述。1.第一實(shí)施例(其中以與三維圖像的視差量對(duì)應(yīng)的優(yōu)先順序來(lái)合成三維圖像的示例)2.第二實(shí)施例(其中具有與用戶(hù)指定的優(yōu)先順序?qū)?yīng)的視差量的三維圖像以該優(yōu)先順序來(lái)合成的示例)3.第三實(shí)施例(其中響應(yīng)于由用戶(hù)調(diào)節(jié)的完成度值來(lái)調(diào)節(jié)三維圖像的視差量以合成三維圖像的示例)4.修改方案
1.第一實(shí)施例控制臺(tái)21和圖像合成設(shè)備22的結(jié)構(gòu)圖1示出了根據(jù)本發(fā)明的第一實(shí)施例響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)來(lái)合成三維圖像的圖像合成設(shè)備22的結(jié)構(gòu)的示例。參照?qǐng)D1，圖像合成設(shè)備22例如通過(guò)線纜連接到控制臺(tái)21?？刂婆_(tái)21包括選擇按鈕，用于從被提供到圖像合成設(shè)備22的多個(gè)三維圖像中選擇要被合成的三維圖像?？刂婆_(tái)21響應(yīng)于用戶(hù)對(duì)它的操作產(chǎn)生與用戶(hù)的操作對(duì)應(yīng)的操作信號(hào)，并將產(chǎn)生的操作信號(hào)提供到圖像合成設(shè)備22。應(yīng)注意控制臺(tái)21的細(xì)節(jié)在下文中參照?qǐng)D10和圖11描述。圖像合成設(shè)備22響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)執(zhí)行處理。具體地，例如響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)，圖像合成設(shè)備22對(duì)通過(guò)用戶(hù)的選擇操作從被供應(yīng)的多個(gè)三維圖像中所選擇的三維圖像執(zhí)行合成。然后，圖像合成設(shè)備22輸出通過(guò)合成獲得的合成三維圖像。三維圖像由用于左眼的二維圖像和用于右眼的二維圖像構(gòu)成，并且在用于左眼和右眼的二維圖像之間提供視差，使得觀賞者視覺(jué)確認(rèn)的圖像中的物理實(shí)體看起來(lái)是三維的。應(yīng)注意，當(dāng)三維圖像被呈現(xiàn)給觀賞者時(shí)，例如用于左眼的二維圖像被呈現(xiàn)使得僅被左眼視覺(jué)確認(rèn)并且用于右眼的二維圖像被呈現(xiàn)使得僅被右眼視覺(jué)確認(rèn)。因此，基于根據(jù)用于左眼的二維圖像和用于右眼的二維圖像之間所設(shè)置的視差的量(即，視差量)被感知的深度z，或換言之基于在與三維圖像垂直的方向上限定的三維圖像中存在的物理實(shí)體的三維位置z，觀賞者將視覺(jué)確認(rèn)的圖像識(shí)別為立體三維圖像。為了簡(jiǎn)化描述，在以下進(jìn)行的描述中假定用戶(hù)操作控制臺(tái)21以?xún)H選擇兩個(gè)三維圖像作為要被合成的三維圖像。然而，要被合成的三維圖像的數(shù)目不限于兩個(gè)，可以選擇三個(gè)或更多的三維圖像。圖像合成設(shè)備22執(zhí)行的處理的概要圖2A至2C示出了圖像合成設(shè)備22執(zhí)行的處理的概要。在圖2A的下側(cè)，示出了來(lái)自用戶(hù)選擇的兩個(gè)三維圖像當(dāng)中的三維圖像41。三維圖像41顯示狗41a和樹(shù)41b。在圖2A的上側(cè)，橫坐標(biāo)表示三維圖像41上沿橫向的位置，縱坐標(biāo)表示與三維圖像 41的用于左眼的二維圖像和用于右眼的二維圖像之間設(shè)有的視差對(duì)應(yīng)的深度ζ。這也類(lèi)似地適用于圖2B的上側(cè)和圖2C的上側(cè)。在圖2A的上側(cè)，多個(gè)坐標(biāo)61a表示與構(gòu)成三維圖像41當(dāng)中的狗41a所在的區(qū)域的像素對(duì)應(yīng)的深度ζ。同時(shí)，多個(gè)坐標(biāo)61b表示與構(gòu)成三維圖像41當(dāng)中的樹(shù)41b所在的區(qū)域的像素對(duì)應(yīng)的深度ζ。在圖2B的下側(cè)，示出來(lái)自用戶(hù)選擇的兩個(gè)三維圖像當(dāng)中的另一個(gè)三維圖像42。三維圖像42顯示車(chē)輛42a。在圖2B的上側(cè)，多個(gè)坐標(biāo)6 表示與構(gòu)成三維圖像42當(dāng)中的車(chē)輛4 所在的區(qū)域的像素對(duì)應(yīng)的深度ζ。在圖2C的下側(cè)，示出當(dāng)三維圖像41和42合成時(shí)、合成后的三維圖像43的示例。
在圖2C的上側(cè)，多個(gè)坐標(biāo)61b'表示與構(gòu)成樹(shù)41b的區(qū)域當(dāng)中構(gòu)成其中樹(shù)41b與車(chē)輛4 被重疊或合成的重疊部分的像素對(duì)應(yīng)的深度ζ。此外，在圖2C的上側(cè)，多個(gè)坐標(biāo)62a'表示與構(gòu)成車(chē)輛42a的區(qū)域當(dāng)中構(gòu)成車(chē)輛 42a與樹(shù)41b的重疊部分的像素對(duì)應(yīng)的深度ζ?；谟脩?hù)選擇的三維圖像41和42，圖像合成設(shè)備22檢測(cè)如下所訴的重疊部分 在所述重疊部分中，三維圖像41中構(gòu)成狗41a和樹(shù)41b的區(qū)域和三維圖像42中構(gòu)成車(chē)輛 42a的區(qū)域在三維圖像41和42合成時(shí)彼此重疊。然后，圖像合成設(shè)備22計(jì)算與三維圖像41中構(gòu)成重疊部分的各個(gè)像素對(duì)應(yīng)、并與圖2C的上側(cè)的多個(gè)坐標(biāo)61b'對(duì)應(yīng)的深度ζ。此外，圖像合成設(shè)備22計(jì)算與三維圖像42中構(gòu)成重疊部分的各個(gè)像素對(duì)應(yīng)、并與圖2C的上側(cè)的多個(gè)坐標(biāo)62a'對(duì)應(yīng)的深度ζ。此外，圖像合成設(shè)備22計(jì)算針對(duì)三維圖像41算出的深度ζ和針對(duì)三維圖像42算出的深度ζ的平均值，并且基于算出的平均值確定合成三維圖像41和42時(shí)的優(yōu)先順序。然后，圖像合成設(shè)備22以確定的優(yōu)先順序?qū)⑷S圖像41和42合成，并輸出。優(yōu)先順序在這里表示，三維圖像中的物理實(shí)體(例如三維圖像42中的車(chē)輛42a) 被認(rèn)為比另一個(gè)三維圖像中的物理實(shí)體(例如三維圖像41中的狗41a和樹(shù)41b)居前地位于近身側(cè)(靠近觀賞者的那側(cè))。應(yīng)注意，優(yōu)先順序表示三維圖像被合成的合成順序，在以下對(duì)本發(fā)明的第一至第三實(shí)施例的描述中，合成順序被確定為優(yōu)先順序。具體地，應(yīng)注意，在第一至第三實(shí)施例中，合成順序表示要被合成的三維圖像中的物體實(shí)體優(yōu)先從近身側(cè)被重疊的順序，合成順序被描述為優(yōu)先順序。圖3示出基于深度ζ的平均值確定優(yōu)先順序的確定方法。圖像合成設(shè)備22計(jì)算如圖3的(A)中上側(cè)所示的針對(duì)三維圖像41算出的深度 z(即，在分別對(duì)應(yīng)于多個(gè)坐標(biāo)61b'的深度ζ當(dāng)中)的平均值avel。此外，圖像合成設(shè)備 22計(jì)算如圖3的(B)上側(cè)所示針對(duì)三維圖像42算出的深度z(即，在分別對(duì)應(yīng)于多個(gè)坐標(biāo) 62a‘的深度ζ當(dāng)中)的平均值ave2。然后，圖像合成設(shè)備22將計(jì)算得到的平均值avel與平均值ave2相比，并基于比較結(jié)果將優(yōu)先順序確定為深度ζ的平均值的升序。在本情況下，三維圖像42中車(chē)輛42a的深度ζ的平均值ave2低于三維圖像41中的樹(shù)41b的深度ζ的平均值avel。因此，圖像合成設(shè)備22將三維圖像42的優(yōu)先順序的順序確定為第一并將三維圖像41的優(yōu)先順序的順序確定為第二，從而三維圖像42中的車(chē)輛 4 可以比三維圖像41中的樹(shù)41b顯示在更近身側(cè)。應(yīng)注意，盡管上述圖像合成設(shè)備22基于深度ζ的平均值確定優(yōu)先順序，然而可以例如基于深度ζ的中值確定優(yōu)先順序。基于深度ζ的中值確定優(yōu)先順序的確定方法圖4示出基于深度ζ的中值確定優(yōu)先順序的確定方法。如圖4的(A)中的上側(cè)所示，圖像合成設(shè)備22計(jì)算針對(duì)三維圖像41算出的深度 z(即，在分別對(duì)應(yīng)于多個(gè)坐標(biāo)61b'的深度ζ當(dāng)中)的中值medl。此外，圖像合成設(shè)備22 計(jì)算針對(duì)三維圖像42算出的深度z( S卩，在分別對(duì)應(yīng)于多個(gè)坐標(biāo)62a'的深度ζ當(dāng)中)的中值 med2。然后，圖像合成設(shè)備22將計(jì)算得到的中值medl與中值med2相比，并基于比較結(jié)果將優(yōu)先順序確定為深度ζ的中值的升序。在本情況下，三維圖像42中車(chē)輛42a的深度ζ的中值med2低于三維圖像41中的樹(shù)41b的深度ζ的中值medl。因此，圖像合成設(shè)備22將三維圖像42的優(yōu)先順序的順序確定為第一并將三維圖像41的優(yōu)先順序的順序確定為第二，從而三維圖像42中的車(chē)輛4 可以比三維圖像41中的樹(shù)41b顯示在更近身側(cè)。圖像合成設(shè)備22的細(xì)節(jié)圖5中示出圖像合成設(shè)備22的結(jié)構(gòu)的示例。參照?qǐng)D5，圖像合成設(shè)備22包括控制部分81、用于左眼的切換器82、SDI (數(shù)字串行接口)端子83至86、優(yōu)先順序確定部分87、SDI端子88至91、以及用于右眼的切換器 92。應(yīng)注意，構(gòu)成三維圖像的用于左眼的二維圖像和用于右眼的二維圖像被提供給圖像合成設(shè)備22。具體地，在圖像合成設(shè)備22中，與三維圖像對(duì)應(yīng)的用于左眼的二維圖像被提供給用于左眼的切換器82，與三維圖像對(duì)應(yīng)的用于右眼的二維圖像被提供給用于右眼的切換器92。來(lái)自控制臺(tái)21的操作信號(hào)被提供到控制部分81?？刂撇糠?1響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)來(lái)控制用于左眼的切換器82、優(yōu)先順序確定部分87、和用于右眼的切換器 92。在控制部分81的控制下，用于左眼的切換器82從被供應(yīng)的多個(gè)用于左眼的二維圖像中選擇通過(guò)用戶(hù)的選擇操作所選擇的與三維圖像41和42(圖2A和2B)對(duì)應(yīng)的用于左眼的二維圖像。然后，用于左眼的切換器82將與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像提供到 SDI端子83并將與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子84。此外，用于左眼的切換器82以從SDI端子85提供的優(yōu)先順序?qū)?lái)自SDI端子85 的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像與來(lái)自SDI端子86的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像進(jìn)行合成，并將合成后的用于左眼的二維圖像輸出。應(yīng)注意，用于左眼的切換器82可以使用從外側(cè)輸入的用于左眼的二維圖像而不使用來(lái)自SDI端子85和SDI 端子86的圖像，作為要被合成的圖像。SDI端子83至86通過(guò)相應(yīng)的線纜將用于左眼的切換器82和優(yōu)先順序確定部分 87彼此連接。具體地，在圖5中，SDI端子83至86通過(guò)相應(yīng)的線纜將用于左眼的切換器82 和優(yōu)先順序確定部分87彼此連接。SDI端子83和84將用于左眼的二維圖像從用于左眼的切換器82供應(yīng)給優(yōu)先順序確定部分87。SDI端子85和86將用于左眼的二維圖像從優(yōu)先順序確定部分87提供到用于左眼的切換器。此外，當(dāng)從優(yōu)先順序確定部分87提供優(yōu)先順序時(shí)，SDI端子85將優(yōu)先順序提供到用于左眼的切換器82。應(yīng)注意，在優(yōu)先順序確定部分87被構(gòu)造為將優(yōu)先順序提供到SDI 端子86的情況下，SDI端子86將來(lái)自?xún)?yōu)先順序確定部分87的優(yōu)先順序提供到用于左眼的切換器82。應(yīng)注意，SDI端子可以傳遞除已知的圖像以外的其它信息。
11
優(yōu)先順序確定部分87獲取來(lái)自SDI端子83的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像與來(lái)自SDI端子88的與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像的組合，作為三維圖像41。然后，優(yōu)先順序確定部分87基于獲得的三維圖像41測(cè)量三維圖像41的視差量，即三維圖像41中用于左眼的二維圖像和用于右眼的二維圖像的重疊部分處設(shè)置的視
Hfio此外，優(yōu)先順序確定部分87獲取來(lái)自SDI端子84的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像與來(lái)自SDI端子89的與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像的組合，作為三維圖像42。然后，優(yōu)先順序確定部分87基于獲得的三維圖像42測(cè)量三維圖像42的視差量，即三維圖像42中用于左眼的二維圖像和用于右眼的二維圖像的重疊部分處設(shè)置的
視差量。此外，優(yōu)先順序確定部分87基于測(cè)量的三維圖像41和42之間的視差量確定優(yōu)先順序，并將確定的優(yōu)先順序提供到SDI端子85和90。應(yīng)注意，盡管優(yōu)先順序確定部分87將確定的優(yōu)先順序提供到SDI端子85和90，以用于將優(yōu)先順序通知給用于左眼的切換器82 和用于右眼的切換器92，但是也可以將確定的優(yōu)先順序提供到例如SDI端子86和91。此外，優(yōu)先順序確定部分87將獲得的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子85并類(lèi)似地將獲得的與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像提供到 SDI端子90。此外，優(yōu)先順序確定部分87將獲得的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86并類(lèi)似地將獲得的與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像提供到 SDI端子91。SDI端子88至91各自通過(guò)線纜分別將用于右眼的切換器92和優(yōu)先順序確定部分 87彼此連接。具體地，在圖5中，SDI端子88至91分別通過(guò)線纜將用于右眼的切換器92 和優(yōu)先順序確定部分87彼此連接。SDI端子88和89將用于右眼的二維圖像從用于右眼的切換器92提供到優(yōu)先順序確定部分87。SDI端子90和91將用于右眼的二維圖像從優(yōu)先順序確定部分87分別提供到用于右眼的切換器92。此外，如果從優(yōu)先順序確定部分87提供優(yōu)先順序，則SDI端子90將優(yōu)先順序提供給用于右眼的切換器92。應(yīng)注意，在優(yōu)先順序確定部分87被構(gòu)造為其將優(yōu)先順序提供到SDI端子91的情況下，SDI端子91將來(lái)自?xún)?yōu)先順序確定部分87的優(yōu)先順序提供到用于右眼的切換器92。用于右眼的切換器92執(zhí)行類(lèi)似于用于左眼的切換器82的處理。具體地，用于右眼的切換器92從被供應(yīng)的多個(gè)用于右眼的二維圖像中選擇與由用戶(hù)的選擇操作所選擇的三維圖像41和42(圖2A和2B)對(duì)應(yīng)的用于右眼的二維圖像。然后，用于右眼的切換器92將與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像提供到 SDI端子88，并將與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子89。此外，用于右眼的切換器92以從SDI端子90提供的優(yōu)先順序?qū)?lái)自SDI端子90 的與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像與來(lái)自SDI端子91的與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像進(jìn)行合成。然后，用于右眼的切換器92將合成后的用于右眼的二維圖像輸出。
12
用于左眼的切換器82的結(jié)構(gòu)的示例圖6示出了用于左眼的切換器82的結(jié)構(gòu)的示例。應(yīng)注意，由于用于右眼的切換器92被配置為與用于左眼的切換器82類(lèi)似，僅對(duì)用于左眼的切換器82進(jìn)行描述，本文省去對(duì)用于右眼的切換器92的描述以避免冗余。用于左眼的切換器82由圖像選擇部分111和圖像合成部分112構(gòu)成。用于左眼的切換器82包括輸入線Ll至L9。從圖像合成設(shè)備22提供的分別與多個(gè)三維圖像(本情況下，七個(gè)三維圖像)對(duì)應(yīng)的用于左眼的二維圖像被輸入或提供到輸入線Ll至L9當(dāng)中的輸入線Ll至L7。同時(shí)，與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像和優(yōu)先順序從SDI端子85輸入到輸入線Ll至L9中的輸入線L8，與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像從SDI端子 86輸入到輸入線L9。應(yīng)注意，盡管以上描述用于左眼的切換器82具有九個(gè)輸入線Ll至L9，輸入線的數(shù)量不限于九個(gè)，而可以是任意數(shù)量。在控制部分81的控制下，圖像選擇部分111從輸入線Ll至L7提供的七個(gè)用于左眼的二維圖像當(dāng)中選擇分別與由用戶(hù)的選擇操作所選擇的兩個(gè)三維圖像41和42對(duì)應(yīng)的用于左眼的二維圖像。然后，圖像選擇部分111將所選擇的用于左眼的二維圖像中的一個(gè)提供到SDI端子83并將所選擇的用于左眼的二維圖像中的另一個(gè)提供到SDI端子84。具體地，例如，圖像選擇部分111由交叉點(diǎn)開(kāi)關(guān)(cross point switch) 131a和 131b、總線13 和132b、以及視頻信號(hào)處理部分(視頻處理部)133a和13 構(gòu)成。交叉點(diǎn)開(kāi)關(guān)131a在控制部分81的控制下控制在總線13 和輸入線Ll至L9彼此交叉所在的aX標(biāo)記所表示的點(diǎn)處的連接。交叉點(diǎn)開(kāi)關(guān)131a控制這些點(diǎn)處的連接，并將從輸入線Ll至L7所提供的用于左眼的二維圖像當(dāng)中與三維圖像41對(duì)應(yīng)的一個(gè)用于左眼的二維圖像通過(guò)總線13 提供到視頻信號(hào)處理部分133a。交叉點(diǎn)開(kāi)關(guān)131b在控制部分81的控制下控制在總線132b和輸入線Ll至L9彼此交叉所在的點(diǎn)處的連接。交叉點(diǎn)開(kāi)關(guān)131b控制這些點(diǎn)處的連接，使得從輸入線Ll至L7 所提供的用于左眼的二維圖像當(dāng)中將例如與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像通過(guò)總線132b提供到視頻信號(hào)處理部分13北。視頻信號(hào)處理部分133a對(duì)總線13 提供的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像執(zhí)行預(yù)定處理，并將得到的用于左眼的二維圖像提供到SDI端子83。視頻信號(hào)處理部分13 對(duì)總線132b提供的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像執(zhí)行預(yù)定處理，并將得到的用于左眼的二維圖像提供到SDI端子84。圖像合成部分112由交叉點(diǎn)開(kāi)關(guān)151a至151k、總線15 至152k、關(guān)鍵(KEY)信號(hào)處理部分(關(guān)鍵處理部)153a至153d、視頻信號(hào)處理部分(視頻處理部)154a至15 以及合成處理部分155構(gòu)成。交叉點(diǎn)開(kāi)關(guān)151a在控制部分81的控制下控制在總線15 和輸入線Ll至L9彼此交叉所在的點(diǎn)處的連接，并將例如從輸入線L8提供的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像和優(yōu)先順序兩者通過(guò)總線15 提供到關(guān)鍵信號(hào)處理部分153a。交叉點(diǎn)開(kāi)關(guān)151b在控制部分81的控制下控制在總線152b和輸入線Ll至L9彼此交叉所在的點(diǎn)處的連接，并將例如從輸入線L8提供的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像通過(guò)總線152b提供到關(guān)鍵信號(hào)處理部分153a。關(guān)鍵信號(hào)處理部分153a基于來(lái)自總線15 的用于左眼的二維圖像產(chǎn)生用于重疊的圖像，并且將所產(chǎn)生的圖像提供到合成處理部分155。此外，關(guān)鍵信號(hào)處理部分153a響應(yīng)于來(lái)自總線15 的用于左眼的二維圖像而產(chǎn)生用于左眼的二維圖像的關(guān)鍵信號(hào)，并且將關(guān)鍵信號(hào)提供到合成處理部分155。應(yīng)注意，關(guān)鍵信號(hào)表示在圖像的整體區(qū)域內(nèi)存在除背景外的物理實(shí)體的區(qū)域。在第一實(shí)施例中，該關(guān)鍵信號(hào)例如從相應(yīng)的用于左眼的二維圖像產(chǎn)生，并且關(guān)鍵信號(hào)處理部分153a從用于左眼的二維圖像提取關(guān)鍵信號(hào)以產(chǎn)生用于左眼的二維圖像的關(guān)鍵信號(hào)。此外，關(guān)鍵信號(hào)處理部分153a將優(yōu)先順序從總線15 提供到合成處理部分155。應(yīng)注意，交叉點(diǎn)開(kāi)關(guān)151c和151d、151e和151f以及151g和151h以與交叉點(diǎn)開(kāi)關(guān)151a和151b相似的方式得到配置。此外，關(guān)鍵信號(hào)處理部分15 至153d以與關(guān)鍵信號(hào)處理部分153a相似的方式得到配置。例如，交叉點(diǎn)開(kāi)關(guān)151c和151d將與三維圖像42 對(duì)應(yīng)并且從輸入線L9提供的用于左眼的二維圖像通過(guò)總線152c和152d提供到關(guān)鍵信號(hào)處理部分153b。這里，由于這里描述第一實(shí)施例中三維圖像41和42的合成，例如，使用交叉點(diǎn)開(kāi)關(guān)151a至151h當(dāng)中的交叉點(diǎn)開(kāi)關(guān)151a至151d，并且使用關(guān)鍵信號(hào)處理部分153a至153d 當(dāng)中的關(guān)鍵信號(hào)處理部分153a和15 。在三個(gè)或更多個(gè)三維圖像(即三個(gè)或更多個(gè)用于左眼的二維圖像)要被合成的情況下，進(jìn)一步使用交叉點(diǎn)開(kāi)關(guān)151e至151h和關(guān)鍵信號(hào)處理部分153c和153d。應(yīng)注意，以下描述的背景圖像和要在關(guān)鍵信號(hào)處理部分中被處理的圖像之間的關(guān)系也可以將沿ζ方向上的前后關(guān)系考慮在內(nèi)，如上述示例中三維圖像41和42的關(guān)系。例如，即使在使用關(guān)鍵信號(hào)處理部分153a至153d當(dāng)中的關(guān)鍵信號(hào)處理部分153a的情況下，關(guān)鍵信號(hào)處理部分 153a對(duì)于背景圖像的前后關(guān)系可以被考慮在內(nèi)。這里，為了簡(jiǎn)化描述，對(duì)將關(guān)于兩個(gè)三維圖像的前后關(guān)系考慮在內(nèi)的合成進(jìn)行描述。交叉點(diǎn)開(kāi)關(guān)151i至151k、總線152i至152k和視頻信號(hào)處理部分15 至15 例如將構(gòu)成背景三維圖像(表示要與三維圖像41和42進(jìn)行合成的背景)的用于左眼的二維圖像和用于右眼的二維圖像當(dāng)中的用于左眼的二維圖像提供到合成處理部分155。在該情況下，從輸入線Ll至L9當(dāng)中的輸入線Ll至L7提供作為構(gòu)成背景三維圖像的各個(gè)用于左眼的二維圖像和用于右眼的二維圖像當(dāng)中的用于左眼的二維圖像的背景圖像。交叉點(diǎn)開(kāi)關(guān)151i在控制部分81的控制下控制在總線152i和輸入線Ll至L9彼此交叉所在的點(diǎn)處的連接以選擇從輸入線Ll至L7提供的背景圖像之一，并將所選擇的背景圖像通過(guò)總線152i提供到視頻信號(hào)處理部分15如。視頻信號(hào)處理部分15 對(duì)來(lái)自總線152i的背景圖像執(zhí)行預(yù)定處理，并將得到的背景圖像提供到合成處理部分155。應(yīng)注意，交叉點(diǎn)開(kāi)關(guān)151 j和151k與交叉點(diǎn)開(kāi)關(guān)151i相似地配置，視頻信號(hào)處理部分154b和15 與視頻信號(hào)處理部分15 相似地配置。在多個(gè)背景圖像要與三維圖像41和42合成的情況下，例如使用交叉點(diǎn)開(kāi)關(guān)151j 和151k以及視頻信號(hào)處理部分154b和15如。例如，可以在合成處理部分155內(nèi)設(shè)置擦除(wipe)波形發(fā)生器使得屏幕被擦除波形發(fā)生器產(chǎn)生的擦除波形限定以將多個(gè)背景三維圖像布置在屏幕上。合成處理部分155執(zhí)行合成處理，以利用來(lái)自關(guān)鍵信號(hào)處理部分153a和15 的關(guān)鍵信號(hào)按照來(lái)自關(guān)鍵信號(hào)處理部分153a的優(yōu)先順序?qū)年P(guān)鍵信號(hào)處理部分153a和15 提供的兩個(gè)用于左眼的二維圖像合成，并且將合成結(jié)果與背景圖像合成。然后，合成處理部分155從輸出線輸出通過(guò)合成獲得的用于左眼的二維圖像。優(yōu)先順序確定部分87的細(xì)節(jié)圖7示出優(yōu)先順序確定部分87的結(jié)構(gòu)的示例。優(yōu)先順序確定部分87由視差量測(cè)量部分171和順序確定部分172構(gòu)成。視差量測(cè)量部分171獲取來(lái)自SDI端子83的用于左眼的二維圖像和來(lái)自SDI端子88的用于右眼的二維圖像的組合，作為三維圖像41。視差量測(cè)量部分171獲取來(lái)自SDI端子84的用于左眼的二維圖像和來(lái)自SDI端子89的用于右眼的二維圖像的組合，作為三維圖像42。然后，在基于獲得的三維圖像41和42合成三維圖像41和42的情況下，視差量測(cè)量部分171檢測(cè)三維圖像41中構(gòu)成狗41a和樹(shù)41b的區(qū)域和三維圖像42中構(gòu)成車(chē)輛4 的區(qū)域之間的重疊部分。具體地，例如基于根據(jù)來(lái)自SDI端子83的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自SDI端子84的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像進(jìn)行的計(jì)算所產(chǎn)生的關(guān)鍵信號(hào)，視差量測(cè)量部分171檢測(cè)用于左眼的二維圖像的重疊部分。此外，基于來(lái)自SDI端子88的與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自 SDI端子89的與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像的計(jì)算所產(chǎn)生的關(guān)鍵信號(hào)，視差量測(cè)量部分171檢測(cè)用于右眼的二維圖像的重疊部分。應(yīng)注意，為了產(chǎn)生關(guān)鍵信號(hào)，使用根據(jù)亮度等產(chǎn)生關(guān)鍵信號(hào)的亮度關(guān)鍵技術(shù)?；谂c三維圖像41對(duì)應(yīng)的用于左眼的二維圖像和用于右眼的二維圖像的重疊部分，視差量測(cè)量部分171測(cè)量三維圖像41中用于左眼的二維圖像和用于右眼的二維圖像的重疊部分之間的視差量。該視差量以下被稱(chēng)為三維圖像41的視差量。然后，視差量測(cè)量部分171將測(cè)量得到的三維圖像41的視差量與三維圖像41 一起提供到順序確定部分172。基于與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像和用于右眼的二維圖像的重疊部分，視差量測(cè)量部分171測(cè)量三維圖像42中用于左眼的二維圖像和用于右眼的二維圖像的重疊部分之間的視差量。該視差量以下被稱(chēng)為三維圖像42的視差量。然后，視差量測(cè)量部分171將測(cè)量得到的三維圖像42的視差量與三維圖像42 —起提供到順序確定部分172。順序確定部分172基于來(lái)自視差量測(cè)量部分171的三維圖像41的視差量計(jì)算三維圖像41的深度ζ的平均值avel。此外，順序確定部分172基于來(lái)自視差量測(cè)量部分171的三維圖像42的視差量計(jì)算三維圖像42的深度ζ的平均值ave2。然后，順序確定部分172將三維圖像41和41的深度ζ的平均值avel和ave2相比，基于比較結(jié)果確定優(yōu)先順序，并將確定的優(yōu)先順序提供到SDI端子85和90。順序確定部分172將與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像從視差量測(cè)量部分171提供到SDI端子85，并且將與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像從視差量測(cè)量部分171提供到SDI端子86。此外，順序確定部分172將與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像從視差量測(cè)量部分171提供到SDI端子90，并且將與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像從視差量測(cè)量部分171提供到SDI端子91。圖像合成設(shè)備22的操作現(xiàn)在參照?qǐng)D8的流程圖描述圖像合成設(shè)備22執(zhí)行的優(yōu)先順序確定處理。例如在用戶(hù)使用控制臺(tái)21執(zhí)行從圖像合成設(shè)備22提供的多個(gè)三維圖像中選擇要被合成的三維圖像41和42時(shí)，開(kāi)始優(yōu)先順序確定處理。此時(shí)，與用戶(hù)的選擇操作對(duì)應(yīng)的操作信號(hào)從控制臺(tái)21提供到控制部分81。然后， 控制部分81響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)控制用于左眼的切換器82和用于右眼的切換器92。具體地，在步驟Si，在控制部分81的控制下，用于左眼的切換器82的圖像選擇部分111獲取分別對(duì)應(yīng)于三維圖像41和42的用于左眼的二維圖像，所述三維圖像41和42 是從輸入線Ll至L7輸入的七個(gè)用于左眼的二維圖像當(dāng)中通過(guò)用戶(hù)的選擇操作被選擇的。然后，圖像選擇部分111將所獲得的用于左眼的二維圖像中的一個(gè)提供到SDI端子83，并將另一個(gè)所獲得的用于左眼的二維圖像提供到SDI端子84。SDI端子83和84將用于左眼的二維圖像從圖像選擇部分111提供到優(yōu)先順序確定部分87。此外，在控制部分81的控制下，類(lèi)似于用于左眼的切換器82的圖像選擇部分111， 用于右眼的切換器92將所獲得的用于右眼的二維圖像中的一個(gè)提供到SDI端子88，并將另一個(gè)所獲得的用于右眼的二維圖像提供到SDI端子89。SDI端子88和89分別將用于右眼的二維圖像從用于右眼的切換器92提供到優(yōu)先順序確定部分87。在步驟S2，基于來(lái)自SDI端子83的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自SDI端子84的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像，優(yōu)先順序確定部分87的視差量測(cè)量部分171檢測(cè)用于左眼的二維圖像的重疊部分。此外，基于來(lái)自SDI端子88的與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自 SDI端子89的與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像，視差量測(cè)量部分171檢測(cè)用于右眼的二維圖像的重疊部分?；谂c三維圖像41對(duì)應(yīng)(S卩，與來(lái)自SDI端子83的用于左眼的二維圖像和來(lái)自 SDI端子88的用于右眼的二維圖像的組合對(duì)應(yīng))的用于左眼的二維圖像和用于右眼的二維圖像之間的重疊部分，視差量測(cè)量部分171測(cè)量三維圖像41的視差量。然后，視差量測(cè)量部分171將測(cè)量的視差量與三維圖像41 一起提供到順序確定部分172。此外，基于與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像和用于右眼的二維圖像之間的重疊部分(即，與來(lái)自SDI端子84的用于左眼的二維圖像和來(lái)自SDI端子89的用于右眼的二維圖像的組合對(duì)應(yīng))，視差量測(cè)量部分171測(cè)量三維圖像42的視差量。然后，視差量測(cè)量部分171將測(cè)量的視差量與三維圖像42 —起提供到順序確定部分172。在步驟S3，順序確定部分172基于來(lái)自視差量測(cè)量部分171的三維圖像41的視差量計(jì)算三維圖像41的深度ζ的平均值avel。此外，順序確定部分172基于來(lái)自視差量測(cè)量部分171的三維圖像42的視差量計(jì)算三維圖像42的深度ζ的平均值ave2。然后，順序確定部分172將三維圖像41和41的深度ζ的平均值avel和ave2相
16比，基于比較結(jié)果確定優(yōu)先順序，并將確定的優(yōu)先順序提供到SDI端子85和90。順序確定部分172將與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像從視差量測(cè)量部分171提供到SDI端子85，并且將與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像從視差量測(cè)量部分171提供到SDI端子86。順序確定部分172將與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像從視差量測(cè)量部分171提供到SDI端子90，并且將與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像從視差量測(cè)量部分171提供到SDI端子91。SDI端子85將用于左眼的二維圖像和優(yōu)先順序從順序確定部分172提供到用于左眼的切換器82，并且SDI端子86將用于左眼的二維圖像從順序確定部分172提供到用于左眼的切換器82。SDI端子90將用于右眼的二維圖像和優(yōu)先順序從順序確定部分172提供到用于右眼的切換器92，并且SDI端子91將用于右眼的二維圖像從順序確定部分172提供到用于右眼的切換器92。在步驟S4，用于左眼的切換器82的圖像合成部分112以通過(guò)輸入線L8從SDI端子85提供的優(yōu)先順序，將通過(guò)輸入線L8從SDI端子85提供的用于左眼的二維圖像和通過(guò)輸入線L9從SDI端子86提供的用于左眼的二維圖像進(jìn)行合成。然后，圖像合成部分112 將通過(guò)合成獲得的用于左眼的二維圖像輸出到輸出線。此外，類(lèi)似于用于左眼的切換器82，用于右眼的切換器92以來(lái)自SDI端子90的優(yōu)先順序，將來(lái)自SDI端子90的用于右眼的二維圖像和來(lái)自SDI端子91的用于右眼的二維圖像進(jìn)行合成，并將通過(guò)合成獲得的用于右眼的二維圖像輸出到輸出線。如上所述，根據(jù)優(yōu)先順序確定處理，例如，基于通過(guò)用戶(hù)的選擇操作選擇的三維圖像41和42的視差量，圖像合成設(shè)備22確定與三維圖像41和42的視差量對(duì)應(yīng)的優(yōu)先順序， 并基于確定的優(yōu)先順序合成三維圖像41和42。因此，可以防止以下情況以未與要被合成的三維圖像41和42的視差量對(duì)應(yīng)的優(yōu)先順序合成三維圖像41和42。因此，在優(yōu)先順序確定處理中，可以防止產(chǎn)生以未與三維圖像41和42的視差量對(duì)應(yīng)的優(yōu)先順序合成的不自然的三維圖像。因此，觀賞者可以觀賞與視差量對(duì)應(yīng)的三維圖像， 并且不會(huì)有不適感。此外，在該優(yōu)先順序確定處理中，僅需要用戶(hù)使用控制臺(tái)21選擇要被合成的三維圖像41和42，三維圖像41和42就以與三維圖像41和42的視差量對(duì)應(yīng)的優(yōu)先順序被合成。因此，例如，與需要用戶(hù)使用控制臺(tái)21調(diào)節(jié)用于合成的順序或三維圖像的視差量使得三維圖像能以與視量差對(duì)應(yīng)的優(yōu)先順序被合成的替代情況相比，可以減少用戶(hù)的操作并且可以減少用戶(hù)使用控制臺(tái)21進(jìn)行的操作的復(fù)雜性。在第一實(shí)施例中，優(yōu)先順序確定部分87測(cè)量三維圖像41和42的視差量并且基于測(cè)量結(jié)果確定優(yōu)先順序。然而，可以采用不同的結(jié)構(gòu)，例如，功能與優(yōu)先順序確定部分87類(lèi)似的優(yōu)先順序確定部分87a至87d被設(shè)置在用于左眼的切換器182中，如圖9所示的圖像合成設(shè)備22。圖像合成設(shè)備22的結(jié)構(gòu)的另一個(gè)示例現(xiàn)在，圖9示出圖像合成設(shè)備22的結(jié)構(gòu)的另一個(gè)示例。
參照?qǐng)D9，圖像合成設(shè)備22包括控制部分181、用于左眼的切換器182和用于右眼的切換器183?？刂撇糠?81響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)控制用于左眼的切換器182和用于右眼的切換器183。用于左眼的切換器182由圖像合成部分112構(gòu)成，其中新設(shè)置了被配置為與優(yōu)先順序確定部分87類(lèi)似的優(yōu)先順序確定部分87a至87d。應(yīng)注意，優(yōu)先順序確定部分87a至 87d通過(guò)控制通信線彼此連接，并且通過(guò)另一個(gè)控制通信線連接到控制部分181。此外，用于左眼的切換器182也通過(guò)控制通信線連接到用于右眼的切換器183的相同組件，使得所有組件彼此相關(guān)地操作。用于左眼的二維圖像作為分別與多個(gè)三維圖像對(duì)應(yīng)的用于左眼的二維圖像從輸入線Ll至L9提供到用于左眼的切換器182。應(yīng)注意，用于左眼的切換器182的圖像合成部分112的那些與圖6所示的圖像合成部分112類(lèi)似地配置的元件以相同的附圖標(biāo)記表示，并且這里適當(dāng)省略對(duì)其重復(fù)描述以避免冗余。例如通過(guò)用戶(hù)的選擇操作，交叉點(diǎn)開(kāi)關(guān)151a從分別自輸入線Ll至L9提供的用于左眼的二維圖像當(dāng)中選擇與所選的三維圖像41對(duì)應(yīng)的用于左眼的二維圖像，并且將所選擇的用于左眼的二維圖像通過(guò)總線15 提供到優(yōu)先順序確定部分87a。同時(shí)，例如通過(guò)用戶(hù)的選擇操作，交叉點(diǎn)開(kāi)關(guān)151c從分別自輸入線Ll至L9提供的用于左眼的二維圖像當(dāng)中選擇與所選的三維圖像42對(duì)應(yīng)的用于左眼的二維圖像，并且將選擇的用于左眼的二維圖像通過(guò)總線152c提供到優(yōu)先順序確定部分87b。優(yōu)先順序確定部分87a與用于右眼的切換器183中相同的部分通信并執(zhí)行相關(guān)的處理，然后利用來(lái)自總線15 的與三維圖像41對(duì)應(yīng)的用于左眼的二維圖像和通過(guò)控制部分181從用于右眼的切換器183提供的與三維圖像41對(duì)應(yīng)的用于右眼的二維圖像的組合作為用于處理的三維圖像41。同時(shí)，優(yōu)先順序確定部分87b與用于右眼的切換器183中相同的部分通信并執(zhí)行相關(guān)的處理，然后利用來(lái)自總線152c的與三維圖像42對(duì)應(yīng)的用于左眼的二維圖像和通過(guò)控制部分181從用于右眼的切換器183提供的與三維圖像42對(duì)應(yīng)的用于右眼的二維圖像的組合作為用于處理的三維圖像42。然后，類(lèi)似于優(yōu)先順序確定部分87，優(yōu)先順序確定部分87a和87b基于獲得的三維圖像41和三維圖像42確定優(yōu)先順序。優(yōu)先順序確定部分87a將確定的優(yōu)先順序與分別對(duì)應(yīng)于三維圖像41和42的用于左眼的二維圖像一起提供到關(guān)鍵信號(hào)處理部分153a和153b。因此，關(guān)鍵信號(hào)處理部分153a和15 以及合成處理部分155執(zhí)行上述對(duì)三維圖像41和42的合成處理，并且通過(guò)合成獲得的用于左眼的二維圖像從用于左眼的切換器182 輸出。同時(shí)，優(yōu)先順序確定部分87a和87b通過(guò)控制部分181保存與對(duì)于用于右眼的切換器183而言共用的確定優(yōu)先順序。應(yīng)注意，優(yōu)先順序確定部分87c和87d與優(yōu)先順序確定部分87a相似地配置，并且例如當(dāng)三個(gè)或更多個(gè)三維圖像要被合成時(shí)，優(yōu)先順序確定部分87c和87d將三個(gè)或更多個(gè)三維圖像的視差量向彼此傳輸以確定優(yōu)先順序。
用于右眼的切換器183以通過(guò)控制部分181與優(yōu)先順序確定部分87a共用地保存的優(yōu)先順序，合成分別與三維圖像41和42對(duì)應(yīng)的用于右眼的二維圖像，并且將通過(guò)合成獲得的用于右眼的二維圖像輸出。在圖9的圖像合成設(shè)備22中，相比圖5的圖像合成設(shè)備22，例如SDI端子83至 86、優(yōu)先順序確定部分87和SDI端子88至91可以被省略。此外，在第一實(shí)施例中，以用戶(hù)選擇要被合成的三維圖像41和42的情況相應(yīng)的關(guān)系，圖像合成設(shè)備22確定要被合成的三維圖像41和42的優(yōu)先順序，即次序。然而，可以采用不同結(jié)構(gòu)，其中應(yīng)用由用戶(hù)根據(jù)使用處理中的情形通過(guò)控制臺(tái)21指定的優(yōu)先順序。控制臺(tái)21的平面10中示出用戶(hù)指定優(yōu)先順序的情況下使用的控制臺(tái)21的示例。參照?qǐng)D10，控制臺(tái) 21 包括 “PRIOR SET” 按鈕 191、“KEY PRIOR” 按鈕 192、“BKGD” 按鈕193、“KEY1”按鈕194、“ΚΕΥ2”按鈕195、“KETO”按鈕196、“KEW”按鈕197、優(yōu)先順序顯示部分198、完成度改變桿199和多個(gè)被操作以控制圖像合成設(shè)備22的其它按鈕。在以下的描述中，僅對(duì)當(dāng)用戶(hù)指定優(yōu)先順序時(shí)操作的從“PRIOR SET”按鈕191至 “KEW”按鈕197的按鈕和優(yōu)先順序顯示部分198進(jìn)行描述，而省略對(duì)其它按鈕的描述。應(yīng)注意，當(dāng)本發(fā)明的第三實(shí)施例中要改變完成度值時(shí)操作完成度改變桿199。完成度改變桿199和完成度值在第三實(shí)施例的說(shuō)明中被描述。"PRIOR SET”按鈕191被操作以指定優(yōu)先順序。具體地，例如在“PRIOR SET”按鈕 191被按壓的同時(shí)，“KEY raiOR”按鈕192至“KEW”按鈕197的按鈕用作為用于指定優(yōu)先順序的按鈕。在控制臺(tái)21被設(shè)定為其中“KEY raiOR”按鈕192可以被操作的模式下，“KEY raiOR”按鈕192被保持在開(kāi)狀態(tài)或關(guān)狀態(tài)。此外，“KEY raiOR”按鈕192在開(kāi)狀態(tài)下發(fā)光， 而在關(guān)狀態(tài)下不發(fā)光。應(yīng)注意，“KEY raiOR”按鈕192具有內(nèi)置LED(發(fā)光二極管)等并響應(yīng)于開(kāi)或關(guān)狀態(tài)而發(fā)光或不發(fā)光。此外，例如“KEY raiOR”按鈕192指定響應(yīng)于其開(kāi)或關(guān)狀態(tài)設(shè)定優(yōu)先順序的對(duì)象。具體地，例如當(dāng)“KEY raiOR”按鈕192在關(guān)狀態(tài)而不發(fā)光時(shí)，指定當(dāng)前模式的優(yōu)先順序作為設(shè)定的對(duì)象，當(dāng)“KEY raiOR”按鈕192在開(kāi)狀態(tài)并發(fā)射光線時(shí)，指定下個(gè)模式的優(yōu)先順序作為設(shè)定的對(duì)象。應(yīng)注意，當(dāng)前模式表示當(dāng)前對(duì)控制臺(tái)21設(shè)定的模式，下個(gè)模式表示響應(yīng)于用戶(hù)的操作模式從當(dāng)前模式改變到的模式。圖像合成設(shè)備22以控制臺(tái)21設(shè)定的模式下的優(yōu)先順序合成三維圖像。在下個(gè)模式的優(yōu)先順序被確定為設(shè)定對(duì)象的情況下，“BKGD”按鈕193響應(yīng)于用戶(hù)的操作將下個(gè)模式中的優(yōu)先順序設(shè)定為與當(dāng)前模式中相同的優(yōu)先順序。用戶(hù)將操作從“KEY1”按鈕194至“KEW”按鈕197的按鈕，以響應(yīng)于“KEY PRIOR" 按鈕192來(lái)設(shè)定被指定為設(shè)定對(duì)象的模式中的優(yōu)先順序。利用從“KEY1”按鈕194至“KEW”按鈕197的按鈕，要被合成的三維圖像分別地關(guān)聯(lián)。從“KEY1”按鈕194至“KEW”按鈕197的按鈕中的每個(gè)被操作用于設(shè)定相應(yīng)的三維圖像的優(yōu)先順序的次序。具體地，例如，如果“KEY1”按鈕194被按壓，那么相應(yīng)的三維圖像的優(yōu)先順序的次
19序成為第一，從“KEY2”按鈕195至“KEW”按鈕197的按鈕的優(yōu)先順序的次序被改變，以維持“KEY1”按鈕194被按壓前的順序。優(yōu)先順序顯示部分198包括用于表示“KEY1”按鈕194的狀態(tài)的KEYl顯示區(qū)域 198a、用于表示“KEY2”按鈕195的狀態(tài)的KEY2顯示區(qū)域198b、用于表示“KETO”按鈕196 的狀態(tài)的KETO顯示區(qū)域198c、和用于表示“KEW”按鈕197的狀態(tài)的KEW顯示區(qū)域198d。KEYl顯示區(qū)域198a顯示“KEY1 ”按鈕194是開(kāi)狀態(tài)還是關(guān)狀態(tài)并且顯示與“KEY1 ” 按鈕194相關(guān)的三維圖像的優(yōu)先順序的次序。此外，KEY2顯示區(qū)域198b、KEY3顯示區(qū)域 198c和KEW顯示區(qū)域198d與KEYl顯示區(qū)域198a相似地配置，從而省略重復(fù)描述以避免冗余。應(yīng)注意，當(dāng)“PRIOR SET”按鈕191被按壓時(shí)，“KEY PRIOR”按鈕192被操作以顯示當(dāng)前模式中的優(yōu)先順序和下個(gè)模式中的優(yōu)先順序中的一個(gè)。具體地，例如，當(dāng)“KEY raiOR”按鈕192在關(guān)狀態(tài)而不發(fā)光時(shí)，優(yōu)先順序顯示部分 198的KEYl顯示區(qū)域198a至KEW顯示區(qū)域198d顯示數(shù)字“1”、“2”、“3”和“4”中的相應(yīng)一些作為當(dāng)前模式中的優(yōu)先順序的次序編號(hào)。另一方面，例如，當(dāng)“KEY raiOR”按鈕192在開(kāi)狀態(tài)并發(fā)光時(shí)，優(yōu)先順序顯示部分 198的KEYl顯示區(qū)域198a至KEW顯示區(qū)域198d分別顯示下個(gè)模式中的優(yōu)先順序的次序編號(hào)。具體地，例如，優(yōu)先順序顯示部分198的KEYl顯示區(qū)域198a至KEW顯示區(qū)域198d 中的、當(dāng)前模式中的優(yōu)先順序和下個(gè)模式中的優(yōu)先順序之間的優(yōu)先順序的次序編號(hào)相同的那些(數(shù)字“1” “2” “3”和“4”)發(fā)光，而次序編號(hào)不同的那些閃爍。以該方式，用戶(hù)可以利用控制臺(tái)21指定要被合成的三維圖像的優(yōu)先順序。通過(guò)控制臺(tái)21進(jìn)行的改變的示例圖11示出了例如在用戶(hù)使用控制臺(tái)21指定要被合成的三維圖像的優(yōu)先順序的情況下“KEY1”按鈕194和“KEY2”按鈕195的狀態(tài)。應(yīng)注意，為了簡(jiǎn)化描述，假定圖11中用戶(hù)在“KEY1”按鈕194至“KEW”按鈕197 當(dāng)中僅操作“KEY1”按鈕194和“KEY2”按鈕195成為開(kāi)狀態(tài)或關(guān)狀態(tài)。此外，假定圖11中“KEY1”按鈕194和“KEY2”按鈕195的優(yōu)先順序(換言之，當(dāng)三維圖像被合成時(shí)與“KEY1”按鈕194對(duì)應(yīng)的三維圖像和與“KEY2”按鈕195對(duì)應(yīng)的三維圖像的哪個(gè)被顯示在近身側(cè))要被改變?！癒EY1”按鈕194和“KEY2”按鈕195被置于開(kāi)狀態(tài)或關(guān)狀態(tài)，并且響應(yīng)于“KEY1 ” 按鈕194和“KEY2”按鈕195的狀態(tài)建立狀態(tài)1至狀態(tài)4中的一個(gè)。與此對(duì)應(yīng)，控制部分81基于從控制臺(tái)21提供的操作信號(hào)響應(yīng)于“KEY1”按鈕194 和“KEY2”按鈕195的狀態(tài)來(lái)控制用于左眼的切換器82、優(yōu)先順序確定部分87和用于右眼的切換器92。具體地，例如當(dāng)“KEY1”按鈕194和“KEY2”按鈕195兩者都在開(kāi)狀態(tài)時(shí)，建立狀態(tài) 1，其中與“KEY1”按鈕194和“KEY2”按鈕195對(duì)應(yīng)的三維圖像被合成使得與“KEY1”按鈕 194對(duì)應(yīng)的三維圖像被顯示在近身側(cè)。在狀態(tài)1，忽視或放棄與用于改變優(yōu)先順序使得與“KEY2”按鈕195對(duì)應(yīng)的三維圖像被顯示在近身側(cè)的用戶(hù)操作對(duì)應(yīng)的操作信號(hào)。換言之，控制部分81忽視用于改變來(lái)自控制臺(tái)21的優(yōu)先順序的用戶(hù)操作所對(duì)應(yīng)的操作信號(hào)，并且將操作信號(hào)處理為使得用戶(hù)操作不被執(zhí)行。此外，如果在狀態(tài)1中，執(zhí)行用于將“KEY1”按鈕194置于關(guān)狀態(tài)的KEYl關(guān)操作以將與“KEY1，，按鈕194對(duì)應(yīng)的三維圖像從合成的對(duì)象排除，那么狀態(tài)改變到狀態(tài)2，在狀態(tài) 2，與“KEY2”按鈕195對(duì)應(yīng)的三維圖像被顯示在近身側(cè)。當(dāng)狀態(tài)從狀態(tài)1改變到狀態(tài)2時(shí)，控制部分81控制優(yōu)先順序確定部分87的順序確定部分172以確定在其中與“KEY1”按鈕194對(duì)應(yīng)的三維圖像從合成的對(duì)象排除的狀態(tài)下的優(yōu)先順序。在該情況下，順序確定部分172確定為與“KEY2”按鈕195對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序是第一。然后，在與“KEY1”按鈕194對(duì)應(yīng)的三維圖像從合成的對(duì)象排除的狀態(tài)下，用于左眼的切換器82和用于右眼的切換器92根據(jù)順序確定部分172所確定的優(yōu)先順序進(jìn)行合成。然而，應(yīng)注意，例如如果“KETO”按鈕196和“KEW”按鈕197處于開(kāi)狀態(tài)，那么順序確定部分172在控制部分81的控制下重新確定與“KETO”按鈕196對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序以及與“KEW”按鈕197對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序，使得KEYl關(guān)操作實(shí)施之前的優(yōu)先順序可以得到維持。這類(lèi)似地適用于如下情況響應(yīng)于“KEY1”按鈕194和“KEY2”按鈕195的開(kāi)或關(guān)狀態(tài)通過(guò)順序確定部分172重新確定優(yōu)先順序的情況。在狀態(tài)2下、與“KEY1”按鈕194對(duì)應(yīng)的三維圖像被新增加為合成的對(duì)象、并且執(zhí)行用于將“KEY1 ”按鈕194轉(zhuǎn)到開(kāi)狀態(tài)的KEYl操作以將與“KEY1 ”按鈕194對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序設(shè)為第一的情況下，如果即使與“KEY1”按鈕194對(duì)應(yīng)的三維圖像被顯示在近身側(cè)(即，即使根據(jù)視差量確定優(yōu)先順序)也不會(huì)存在問(wèn)題，則響應(yīng)于KEYl開(kāi)操作 “KEY1”按鈕194被置于開(kāi)狀態(tài)以將狀態(tài)從狀態(tài)2改變到狀態(tài)1。在該情況下，控制部分81控制優(yōu)先順序確定部分87的順序確定部分172以確定在與“KEY1”按鈕194對(duì)應(yīng)的三維圖像被新增加為合成對(duì)象的狀態(tài)下的優(yōu)先順序。應(yīng)注意，在狀態(tài)2下、由順序確定部分172確定的與“KEY1”按鈕194對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序不是第一的情況下(即，如果與“KEY1”按鈕194對(duì)應(yīng)的三維圖像被顯示在近身側(cè)，則會(huì)存在問(wèn)題，即，根據(jù)視差量的優(yōu)先順序沒(méi)有被獲得)，KEYl開(kāi)操作被處理為不執(zhí)行并且狀態(tài)不改變到狀態(tài)1而維持狀態(tài)2。換言之，控制部分81忽略來(lái)自控制臺(tái) 21的KEYl開(kāi)操作所對(duì)應(yīng)的信號(hào)并且不執(zhí)行與KEYl開(kāi)操作對(duì)應(yīng)的控制。另一方面，如果在狀態(tài)2下、執(zhí)行用于將“KEY2”按鈕195置于關(guān)狀態(tài)的KEY2關(guān)操作并且執(zhí)行KEYl開(kāi)操作以將與“KEY2”按鈕195對(duì)應(yīng)的三維圖像從合成對(duì)象排除、來(lái)作為用于改變優(yōu)先順序的順序改變操作，那么分別響應(yīng)于KEY2關(guān)操作和KEYl開(kāi)操作來(lái)將“KEY2” 按鈕195置于關(guān)狀態(tài)并將“KEY1”按鈕194被置于開(kāi)狀態(tài)。由此，狀態(tài)改變到狀態(tài)3，在狀態(tài) 3下，與“KEY1”按鈕194對(duì)應(yīng)的三維圖像顯示在近身側(cè)。當(dāng)狀態(tài)從狀態(tài)2改變到狀態(tài)3時(shí)，控制部分81控制順序確定部分172以確定優(yōu)先順序，使得與“KEY2”按鈕195對(duì)應(yīng)的三維圖像從合成對(duì)象排除，并且與“KEY1”按鈕194對(duì)應(yīng)的三維圖像被新增加作為合成對(duì)象。在當(dāng)前情況下，順序確定部分172確定優(yōu)先順序使得與“KEY1”按鈕194對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序是第一。然后，在與“KEY2”按鈕 195對(duì)應(yīng)的三維圖像從合成的對(duì)象排除的狀態(tài)下，用于左眼的切換器82和用于右眼的切換
21器92根據(jù)順序確定部分172所確定的優(yōu)先順序進(jìn)行合成。如果在狀態(tài)3下、例如執(zhí)行KEYl關(guān)操作然后用于將“KEY2”按鈕195置于開(kāi)狀態(tài)的 KEY2開(kāi)操作以將與“KEY2”按鈕195對(duì)應(yīng)的三維圖像新增加為合成的對(duì)象并且將三維圖像的優(yōu)先順序的次序例如設(shè)為第一、作為順序改變操作，那么分別響應(yīng)于KEYl關(guān)操作和KEY2 開(kāi)操作將“KEY1”按鈕194置于關(guān)狀態(tài)并且將“KEY2”按鈕195置于開(kāi)狀態(tài)，使 得狀態(tài)改變?yōu)闋顟B(tài)2。當(dāng)狀態(tài)從狀態(tài)3改變到狀態(tài)2時(shí)，控制部分81控制順序確定部分172以確定優(yōu)先順序，使得與“KEY1”按鈕194對(duì)應(yīng)的三維圖像從合成的對(duì)象排除，并且與“KEY2”按鈕195 對(duì)應(yīng)的三維圖像被新增加作為合成的對(duì)象。在當(dāng)前情況下，順序確定部分172確定優(yōu)先順序使得與“KEY2”按鈕195對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序是第一。然后，在與“KEY1” 按鈕194對(duì)應(yīng)的三維圖像從合成對(duì)象排除的狀態(tài)下，用于左眼的切換器82和用于右眼的切換器92根據(jù)順序確定部分172所確定的優(yōu)先順序進(jìn)行合成。此外，在狀態(tài)3下執(zhí)行KEY2開(kāi)操作的情況下，即使與“KEY2”按鈕195對(duì)應(yīng)的三維圖像被顯示在近身側(cè)也沒(méi)有問(wèn)題(即，如果獲得符合視差量的優(yōu)先順序)，那么響應(yīng)于KEY2 開(kāi)操作將“KEY2”按鈕195置于開(kāi)狀態(tài)。由此，狀態(tài)改變到狀態(tài)4，在狀態(tài)4下，與“KEY1”按鈕194和“KEY2”按鈕195對(duì)應(yīng)的三維圖像被合成，使得與“KEY2”按鈕195對(duì)應(yīng)的三維圖像被顯示在近身側(cè)。在該情況下，控制部分81控制順序確定部分172以確定與“KEY2”按鈕195對(duì)應(yīng)的三維圖像被新增加為合成對(duì)象的狀態(tài)下的優(yōu)先順序。應(yīng)注意，如果在狀態(tài)3下、由順序確定部分172確定的與“KEY2”按鈕195對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序不成為第一，換言之，如果與“KEY2”按鈕195對(duì)應(yīng)的三維圖像的顯示在近身側(cè)是有問(wèn)題的，即，導(dǎo)致獲得根據(jù)視差量的優(yōu)先順序方面的失敗，那么KEY2開(kāi)操作被處理為不執(zhí)行并且維持狀態(tài)3維持而不改變到狀態(tài)4。換言之，控制部分81忽略來(lái)自控制臺(tái)21的KEY2開(kāi)操作所對(duì)應(yīng)的信號(hào)并且不執(zhí)行與KEY2開(kāi)操作對(duì)應(yīng)的控制。如果在狀態(tài)4下執(zhí)行KEY2關(guān)操作，那么狀態(tài)改變到狀態(tài)3。當(dāng)狀態(tài)從狀態(tài)4改變到狀態(tài)3時(shí)，控制部分81控制順序確定部分172以確定與“KEY2”按鈕195對(duì)應(yīng)的三維圖像從合成對(duì)象排除的狀態(tài)下的優(yōu)先順序。在當(dāng)前情況下，順序確定部分172確定優(yōu)先順序使得與“KEY1”按鈕194對(duì)應(yīng)的三維圖像的優(yōu)先順序的次序是第一。然后，在與“KEY2”按鈕195對(duì)應(yīng)的三維圖像從合成的對(duì)象排除的狀態(tài)下，用于左眼的切換器82和用于右眼的切換器92根據(jù)順序確定部分172所確定的優(yōu)先順序進(jìn)行合成。此外，在狀態(tài)4中，與用戶(hù)的用于改變優(yōu)先順序使得與“KEY1 ”按鈕194對(duì)應(yīng)的三維圖像被顯示在近身側(cè)的用戶(hù)操作對(duì)應(yīng)的操作信號(hào)被忽略。具體地，控制部分81忽略來(lái)自控制臺(tái)21的與用于改變優(yōu)先順序的用戶(hù)操作所對(duì)應(yīng)的信號(hào)并且將用戶(hù)操作處理為不執(zhí)行。在第一實(shí)施例中，根據(jù)上述關(guān)于圖11的描述，當(dāng)執(zhí)行用于改變優(yōu)先順序的用戶(hù)操作時(shí)，如果與用戶(hù)操作對(duì)應(yīng)的優(yōu)先順序不同于與視差量對(duì)應(yīng)的優(yōu)先順序，那么用戶(hù)的操作被處理為不執(zhí)行。此時(shí)，顯示例如與用戶(hù)操作對(duì)應(yīng)的優(yōu)先順序不同于與視差量對(duì)應(yīng)的優(yōu)先順序的警告，或者輸出用于警告的報(bào)警。2.第二實(shí)施例現(xiàn)在描述根據(jù)本發(fā)明的第二實(shí)施例的圖像合成設(shè)備211。在圖像合成設(shè)備211中，要被合成的三維圖像的視差量被調(diào)節(jié)為使得視差量成為與用戶(hù)指定的優(yōu)先順序?qū)?yīng)，然后將調(diào)節(jié)后的三維圖像合成。控制臺(tái)21和圖像合成設(shè)備211的結(jié)構(gòu)圖12示出了根據(jù)本發(fā)明的第二實(shí)施例響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)來(lái)合成三維圖像的圖像合成設(shè)備211的結(jié)構(gòu)的示例。應(yīng)注意，控制臺(tái)21與第一實(shí)施例的控制臺(tái)21相似地配置，因此省略重復(fù)描述以避免幾余ο圖像合成設(shè)備211響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)對(duì)根據(jù)用戶(hù)指定的優(yōu)先順序從被提供的多個(gè)三維圖像中將用戶(hù)選擇的三維圖像合成。圖13A至13C示出了圖像合成設(shè)備211執(zhí)行的處理的概要。在圖13A的下側(cè)，示出來(lái)自由用戶(hù)選擇的兩個(gè)三維圖像之中的三維圖像231。三維圖像231顯示物理實(shí)體231a。在圖13A的上側(cè)，示出了從上方觀察的物理實(shí)體231a的視圖。在圖13B的下側(cè)，示出來(lái)自用戶(hù)選擇的兩個(gè)三維圖像之中的另一個(gè)三維圖像232。 三維圖像232顯示物理實(shí)體232a。在圖13B的上側(cè)，示出了從上方觀察的物理實(shí)體232a的視圖。在圖13C的下側(cè)，示出當(dāng)三維圖像231和232合成時(shí)獲得的三維圖像233的示例。 在圖13C的上側(cè)，示出三維圖像233中物理實(shí)體231a和232a的深度ζ。響應(yīng)于用戶(hù)利用控制臺(tái)21執(zhí)行的選擇操作(用于選擇作為要被合成的三維圖像的三維圖像231和232)，控制臺(tái)21產(chǎn)生與用戶(hù)的操作對(duì)應(yīng)的操作信號(hào)，并將產(chǎn)生的操作信號(hào)提供到圖像合成設(shè)備211。在該情況下，圖像合成設(shè)備211響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)從被提供的多個(gè)三維圖像中選擇由用戶(hù)的選擇操作所選擇的三維圖像231和232。此外，響應(yīng)于用戶(hù)利用控制臺(tái)21執(zhí)行的用于指定優(yōu)先順序的指定操作，控制臺(tái)21 產(chǎn)生與用戶(hù)的指定對(duì)應(yīng)的操作信號(hào)，并將操作信號(hào)提供到圖像合成設(shè)備211。響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)，圖像合成設(shè)備211將三維圖像231的視差量和三維圖像232的視差量調(diào)節(jié)為與用戶(hù)指定的優(yōu)先順序?qū)?yīng)的視差量，使得可以用戶(hù)指定的優(yōu)先順序合成三維圖像231和232。在當(dāng)前情況下，例如，如果用戶(hù)將三維圖像231的優(yōu)先順序的次序指定為第二并且將三維圖像232的優(yōu)先順序的次序指定為第一，那么圖像合成設(shè)備211調(diào)節(jié)三維圖像231 和232的視差量使得三維圖像232中的物理實(shí)體232a的深度ζ可以小于三維圖像231中的物理實(shí)體231a的深度z，如在圖13C的上側(cè)所示。然后，圖像合成設(shè)備211以用戶(hù)指定的優(yōu)先順序?qū)⒕哂幸陨鲜龇绞秸{(diào)節(jié)的視差量的三維圖像231和232合成，以產(chǎn)生如圖13C下側(cè)所示的三維圖像233，并且將產(chǎn)生的三維圖像233輸出。圖像合成設(shè)備211的細(xì)節(jié)圖14中示出圖像合成設(shè)備211的結(jié)構(gòu)的示例。應(yīng)注意，圖像合成設(shè)備211包括與上述第一實(shí)施例中圖5所示的圖像合成設(shè)備22 的組件相同的幾個(gè)組件，并且該相同組件的重復(fù)描述被省略以避免冗余。
具體地，參照?qǐng)D14，圖像合成設(shè)備211除了包括控制部分251和調(diào)節(jié)部分252來(lái)代替控制部分81和優(yōu)先順序確定部分87之外，與圖5所示的圖像合成設(shè)備22相似地配置。控制部分251響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)控制用于左眼的切換器82、調(diào)節(jié)部分252和用于右眼的切換器92。此外，控制部分251響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)將表示用戶(hù)指定的優(yōu)先信號(hào)的控制信號(hào)提供到調(diào)節(jié)部分252。調(diào)節(jié)部分252獲取來(lái)自SDI端子83的與三維圖像231對(duì)應(yīng)的用于左眼的二維圖像與來(lái)自SDI端子88的與三維圖像231對(duì)應(yīng)的用于右眼的二維圖像的組合作為三維圖像 231。此外，調(diào)節(jié)部分252獲取來(lái)自SDI端子84的與三維圖像232對(duì)應(yīng)的用于左眼的二維圖像與來(lái)自SDI端子89的與三維圖像232對(duì)應(yīng)的用于右眼的二維圖像的組合作為三維圖像232。 然后，類(lèi)似于優(yōu)先順序確定部分87，調(diào)節(jié)部分252基于獲得的三維圖像231測(cè)量三維圖像231的視差量，并基于獲得的三維圖像232測(cè)量三維圖像232的視差量。調(diào)節(jié)部分252調(diào)節(jié)三維圖像231和232的視差量，使得三維圖像231和232的測(cè)得的視差量可以成為與用戶(hù)的指定操作所指定的優(yōu)先順序?qū)?yīng)。調(diào)節(jié)部分252將調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于左眼的二維圖像和用戶(hù)的指定操作所指定的優(yōu)先順序提供到SDI端子85。此外，調(diào)節(jié)部分252將調(diào)節(jié)后的與三維圖像 232對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86。此外，調(diào)節(jié)部分252將調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于右眼的二維圖像和用戶(hù)的指定操作所指定的優(yōu)先順序提供到SDI端子90。此外，調(diào)節(jié)部分252將調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子91。調(diào)節(jié)部分252的結(jié)構(gòu)的示例圖15示出調(diào)節(jié)部分252的結(jié)構(gòu)的示例。參照?qǐng)D15，所示的調(diào)節(jié)部分252包括順序獲取部分271、視差量測(cè)量部分272、調(diào)節(jié)量計(jì)算部分273和視差量調(diào)節(jié)部分274。表示由用戶(hù)的指定操作所指定的優(yōu)先順序的控制信號(hào)作為來(lái)自控制部分251的控制信號(hào)被提供到順序獲取部分271。順序獲取部分271基于來(lái)自控制部分251的控制信號(hào)獲取由用戶(hù)指定的優(yōu)先順序并將優(yōu)先順序提供到調(diào)節(jié)量計(jì)算部分273和視差量調(diào)節(jié)部分 274。視差量測(cè)量部分272獲取來(lái)自SDI端子83的用于左眼的二維圖像與來(lái)自SDI端子88的用于右眼的二維圖像的組合作為三維圖像231。此外，視差量測(cè)量部分272獲取來(lái)自SDI端子84的用于左眼的二維圖像與來(lái)自SDI端子89的用于右眼的二維圖像的組合作為三維圖像232。然后，類(lèi)似于視差量測(cè)量部分171，視差量測(cè)量部分272基于獲取的三維圖像231 和232測(cè)量三維圖像231和232的視差量，并將測(cè)量的視差量提供到調(diào)節(jié)量計(jì)算部分273。此外，視差量測(cè)量部分視差量測(cè)量部分272將獲取的三維圖像231和232提供到視差量調(diào)節(jié)部分274?；趤?lái)自視差量測(cè)量部分272的三維圖像231和232的視差量，調(diào)節(jié)量計(jì)算部分273計(jì)算與視差量對(duì)應(yīng)的優(yōu)先順序。然后，調(diào) 節(jié)量計(jì)算部分273判定計(jì)算得到的優(yōu)先順序是否與來(lái)自順序獲取部分 271的優(yōu)先順序一致。如果調(diào)節(jié)量計(jì)算部分273判定為與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分 271的優(yōu)先順序不一致，那么調(diào)節(jié)量計(jì)算部分273計(jì)算將三維圖像231和232的視差量調(diào)節(jié)到與來(lái)自順序獲取部分271的優(yōu)先順序一致所需的調(diào)節(jié)量。具體地，例如基于來(lái)自順序獲取部分271的優(yōu)先順序和來(lái)自視差量測(cè)量部分272 的三維圖像231和232的視差量，調(diào)節(jié)量計(jì)算部分273計(jì)算對(duì)于三維圖像231和232的相應(yīng)的各個(gè)調(diào)節(jié)量。然后，調(diào)節(jié)量計(jì)算部分273將計(jì)算得到的調(diào)節(jié)量提供到視差量調(diào)節(jié)部分 274。另一方面，如果調(diào)節(jié)量計(jì)算部分273判定為與視差量對(duì)應(yīng)的優(yōu)先順序和來(lái)自順序獲取部分271的優(yōu)先順序一致，那么調(diào)節(jié)量計(jì)算部分273將該判定通知給視差量調(diào)節(jié)部分 274。如果從調(diào)節(jié)量計(jì)算部分273提供調(diào)節(jié)量，則視差量調(diào)節(jié)部分274基于被提供的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像231和232的視差量。具體地，例如視差量調(diào)節(jié)部分274基于來(lái)自調(diào)節(jié)量計(jì)算部分273的用于三維圖像 231的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像231的視差量。此外，例如視差量調(diào)節(jié)部分274基于來(lái)自調(diào)節(jié)量計(jì)算部分273的用于三維圖像232的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像232的視差量。視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子85。此外，視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86。此外，視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子90。此外，視差量調(diào)節(jié)部分 274將視差量調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子91。應(yīng)注意，如果從調(diào)節(jié)量計(jì)算部分273向視差量調(diào)節(jié)部分274提供與相應(yīng)的視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271的優(yōu)先順序一致的通知，那么視差量調(diào)節(jié)部分 274不對(duì)來(lái)自視差量測(cè)量部分272的三維圖像231和232的視差量執(zhí)行調(diào)節(jié)。因此，視差量調(diào)節(jié)部分274將用于左眼的二維圖像按它們?cè)瓨犹峁┑絊DI端子85和86，將用于右眼的二維圖像按它們?cè)瓨犹峁┑絊DI端子90和91。此外，視差量調(diào)節(jié)部分274將優(yōu)先順序從順序獲取部分271提供到SDI端子85和90。圖像合成設(shè)備211的操作現(xiàn)在參照?qǐng)D16的流程圖描述圖像合成設(shè)備211執(zhí)行的第一視差量調(diào)節(jié)處理。例如在用戶(hù)使用控制臺(tái)21執(zhí)行從提供到圖像合成設(shè)備211的多個(gè)三維圖像中選擇要被合成的三維圖像231和232時(shí)，開(kāi)始第一視差量調(diào)節(jié)處理。這也類(lèi)似地適用于下述
的第二和第三視差量調(diào)節(jié)處理。此時(shí)，與用戶(hù)的選擇操作對(duì)應(yīng)的操作信號(hào)從控制臺(tái)21提供到控制部分251。然后， 控制部分251響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)控制用于左眼的切換器82和用于右眼的切換器92。然后，在步驟S31處執(zhí)行類(lèi)似于圖8的步驟Sl的處理。
此外，當(dāng)用戶(hù)使用控制臺(tái)21執(zhí)行用于指定三維圖像231和232的優(yōu)先順序的次序的指定操作時(shí)，控制臺(tái)21產(chǎn)生與用戶(hù)的指定操作對(duì)應(yīng)的操作信號(hào)并將操作信號(hào)提供到控制部分251。以下，處理前進(jìn)到步驟S32。在步驟S32，控制部分251響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)將表示用戶(hù)的指定操作所指定的優(yōu)先順序的控制信號(hào)提供到順序獲取部分271。順序獲取部分271基于來(lái)自控制部分251的控制信號(hào)獲取由用戶(hù)指定的優(yōu)先順序并將優(yōu)先順序提供到調(diào)節(jié)量計(jì)算部分273和視差量調(diào)節(jié)部分274。在步驟S33，視差量測(cè)量部分272獲取來(lái)自SDI端子83的用于左眼的二維圖像與來(lái)自SDI端子88的用于右眼的二維圖像的組合作為三維圖像231。此外，視差量測(cè)量部分 272獲取來(lái)自SDI端子84的用于左眼的二維圖像與來(lái)自SDI端子89的用于右眼的二維圖像的組合作為三維圖像232。然后，類(lèi)似于視差量測(cè)量部分171，視差量測(cè)量部分272基于獲取的三維圖像231 和232測(cè)量三維圖像231和232的視差量，并將測(cè)量得到的視差量提供到調(diào)節(jié)量計(jì)算部分
273。此外，視差量測(cè)量部分272將獲取的三維圖像231和232提供到視差量調(diào)節(jié)部分
274。在步驟S34，基于來(lái)自視差量測(cè)量部分272的三維圖像231和232的視差量，調(diào)節(jié)量計(jì)算部分273計(jì)算與視差量對(duì)應(yīng)的優(yōu)先順序的次序。具體地，例如，調(diào)節(jié)量計(jì)算部分273將與三維圖像231的視差量對(duì)應(yīng)的深度ζ的平均值和與三維圖像232的視差量對(duì)應(yīng)的深度ζ的平均值相比，并將深度ζ的平均值的升序計(jì)算作為與視差量對(duì)應(yīng)的優(yōu)先順序。應(yīng)注意，調(diào)節(jié)量計(jì)算部分273可以不基于深度ζ的平均值而基于深度ζ的中值來(lái)計(jì)算與視差量對(duì)應(yīng)的優(yōu)先順序。在步驟S35，調(diào)節(jié)量計(jì)算部分273判定計(jì)算得到的與視差量對(duì)應(yīng)的優(yōu)先順序是否與來(lái)自順序獲取部分271的優(yōu)先順序一致。如果判定為與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271的優(yōu)先順序不一致，那么處理前進(jìn)到步驟S36。在步驟S36，基于來(lái)自視差量測(cè)量部分272的三維圖像231和232的視差量和來(lái)自順序獲取部分271的優(yōu)先順序，調(diào)節(jié)量計(jì)算部分273計(jì)算對(duì)于三維圖像231和232的調(diào)節(jié)量，并將計(jì)算得到的調(diào)節(jié)量提供到視差量調(diào)節(jié)部分274。在步驟S37，視差量調(diào)節(jié)部分274基于來(lái)自調(diào)節(jié)量計(jì)算部分273的用于三維圖像 231的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像231的視差量。此外，視差量調(diào)節(jié)部分274基于來(lái)自調(diào)節(jié)量計(jì)算部分273的用于三維圖像232的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像232的視差量。然后，視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子85。此外，視差量調(diào)節(jié)部分 274將視差量調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86。此外，視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子90。此外，視差量調(diào)節(jié)部分 274將視差量調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子91。以下，處理前進(jìn)到步驟S38。
應(yīng)注意，如果步驟S35判定為與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271 的優(yōu)先順序一致，那么該通知被提供到視差量調(diào)節(jié)部分274。視差量調(diào)節(jié)部分274從而從調(diào)節(jié)量計(jì)算部分273接收與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271的優(yōu)先順序一致的通知。然后響應(yīng)于該通知，視差量調(diào)節(jié)部分274 分別將來(lái)自視差量測(cè)量部分272的三維圖像231和232的用于左眼的二維圖像提供到SDI 端子85和86，并將三維圖像231和232的用于右眼的二維圖像提供到SDI端子90和91。此外，視差量調(diào)節(jié)部分274將優(yōu)先順序從順序獲取部分271提供到SDI端子85和 90，然后處理前進(jìn)到步驟S38。在步驟S38，SDI端子85 將來(lái)自視差量調(diào)節(jié)部分274的優(yōu)先順序和用于左眼的二維圖像提供到用于左眼的切換器82，并且SDI端子86將來(lái)自視差量調(diào)節(jié)部分274的用于左眼的二維圖像提供到用于左眼的切換器82。SDI端子90將來(lái)自視差量調(diào)節(jié)部分274的優(yōu)先順序和用于右眼的二維圖像提供到用于右眼的切換器92，并且將來(lái)自視差量調(diào)節(jié)部分274的用于右眼的二維圖像提供到用于右眼的切換器92。然后在步驟S38，執(zhí)行類(lèi)似于圖8的步驟S4的處理，從而結(jié)束第一視差量調(diào)節(jié)處理。如上所述，根據(jù)第一視差量調(diào)節(jié)處理，如果三維圖像231和232的視差量不同于用戶(hù)的指定操作所指定的優(yōu)先順序所對(duì)應(yīng)的視差量，那么圖像合成設(shè)備211調(diào)節(jié)三維圖像 231和232的視差量以與用戶(hù)的指定操作所指定的優(yōu)先順序?qū)?yīng)。然后，圖像合成設(shè)備211 在調(diào)節(jié)后合成三維圖像231和232。因此，在第一視差量調(diào)節(jié)處理中，防止了以不與要被合成的三維圖像231和232的視差量對(duì)應(yīng)的優(yōu)先順序來(lái)合成三維圖像231和232的情形。因此，可以按照用戶(hù)期望的優(yōu)先順序合成三維圖像231和232?，F(xiàn)在參照?qǐng)D17的流程圖描述圖像合成設(shè)備211執(zhí)行的第二視差量調(diào)節(jié)處理。在步驟S51至S54，分別執(zhí)行類(lèi)似于圖16的步驟S31至S34的處理。在步驟S55，如步驟S35，調(diào)節(jié)量計(jì)算部分273判定與視差量對(duì)應(yīng)地計(jì)算得到的優(yōu)先順序是否與來(lái)自順序獲取部分271的優(yōu)先順序一致。然后，如果調(diào)節(jié)量計(jì)算部分273判定為與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271的優(yōu)先順序不一致，那么處理前進(jìn)到步驟S56。在步驟S56，調(diào)節(jié)量計(jì)算部分273以類(lèi)似于圖16的步驟S36的方式計(jì)算調(diào)節(jié)量，并將計(jì)算的調(diào)節(jié)量提供到視差量調(diào)節(jié)部分274。視差量調(diào)節(jié)部分274將調(diào)節(jié)量從調(diào)節(jié)量計(jì)算部分273提供到內(nèi)置存儲(chǔ)器以存儲(chǔ)在內(nèi)置存儲(chǔ)器中。應(yīng)注意，在圖像合成設(shè)備211執(zhí)行第二視差量調(diào)節(jié)處理的情況下，視差量調(diào)節(jié)部分274具有內(nèi)置在其中的未示出的存儲(chǔ)器。在步驟S57，視差量調(diào)節(jié)部分274判定是否從控制部分251收到用于命令開(kāi)始對(duì)三維圖像231和232進(jìn)行合成的合成命令信號(hào)，并在步驟S57重復(fù)執(zhí)行處理直到在步驟S57 判定為收到合成命令信號(hào)。應(yīng)注意，如果用戶(hù)使用控制臺(tái)21執(zhí)行用于命令開(kāi)始合成三維圖像231和232的操作，那么控制部分251響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)將合成命令信號(hào)提供到視差量調(diào)節(jié)部分274。如果在步驟S57判定為視差量調(diào)節(jié)部分274從控制部分251接收到合成命令信號(hào)，那么處理前進(jìn)到步驟S58。在步驟S58，視差量調(diào)節(jié)部分274基于存儲(chǔ)在內(nèi)置存儲(chǔ)器中的用于三維圖像231 的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像231的視差量。此外，視差量調(diào)節(jié)部分274基于存儲(chǔ)在內(nèi)置存儲(chǔ)器中的用于三維圖像232的調(diào)節(jié)量來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分 272的三維圖像232的視差量。應(yīng)注意，新的視差量可以被正常接收，而不用執(zhí)行在內(nèi)置存儲(chǔ)器中的存儲(chǔ)。然后，視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子85。此外，視差量調(diào)節(jié)部分 274將視差量調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86。此外，視差量調(diào)節(jié)部分274將視差量調(diào)節(jié)后的與三維圖像231對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子90。此外，視差量調(diào)節(jié)部分 274將視差量調(diào)節(jié)后的與三維圖像232對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子91。然后在步驟S59，執(zhí)行類(lèi)似于圖16的步驟S38的處理。
應(yīng)注意，如果步驟S55判定為與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271 的優(yōu)先順序一致，那么調(diào)節(jié)量計(jì)算部分273將該判定通知給視差量調(diào)節(jié)部分274。此后，處理前進(jìn)到步驟S60。在步驟S60，視差量調(diào)節(jié)部分274判定是否從控制部分251收到合成命令信號(hào)，并在步驟S60重復(fù)執(zhí)行處理直到在步驟S60判定為收到合成命令信號(hào)。如果在步驟S60判定為從控制部分251收到合成指令信號(hào)，那么視差量調(diào)節(jié)部分 274分別將來(lái)自視差量測(cè)量部分272的三維圖像231和232的用于左眼的二維圖像提供到 SDI端子85和86，將三維圖像231和232的用于右眼的二維圖像提供到SDI端子90和91。此外，視差量調(diào)節(jié)部分274將來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子 85和90，然后前進(jìn)到步驟S59，以執(zhí)行類(lèi)似于圖16的步驟S38的處理。結(jié)束第二視差量調(diào)節(jié)處理。如上所述，根據(jù)第二視差量調(diào)節(jié)處理，由于圖像合成設(shè)備211在用戶(hù)指示的時(shí)刻合成三維圖像231和232，三維圖像231和232可以在用戶(hù)指定的時(shí)刻合成。此外，在應(yīng)該執(zhí)行合成的時(shí)間點(diǎn)，不執(zhí)行視差的調(diào)節(jié)，而是按照原樣提供圖像。另一方面，通過(guò)合成，可以提供適于具有合成的視差的圖像?，F(xiàn)在參照?qǐng)D18的流程圖描述圖像合成設(shè)備211執(zhí)行的第三視差量調(diào)節(jié)處理。在步驟S71至S76，分別執(zhí)行類(lèi)似于圖17的步驟S51至S56的處理。此外，如果處理從步驟S75前進(jìn)到步驟S82，那么在步驟S82執(zhí)行類(lèi)似于圖17的步驟S60的處理。在步驟S77，基于存儲(chǔ)在內(nèi)置存儲(chǔ)器中的來(lái)自調(diào)節(jié)量計(jì)算部分273的調(diào)節(jié)量，視差量調(diào)節(jié)部分274判定在用調(diào)節(jié)量來(lái)調(diào)節(jié)視差量的情況下調(diào)節(jié)后的三維圖像231和232的至少一個(gè)視差量是否超過(guò)預(yù)先設(shè)定的上限值。如果判定為用調(diào)節(jié)量進(jìn)行了調(diào)節(jié)后的任一個(gè)視差量不超過(guò)其上限值，那么處理前進(jìn)到S78。應(yīng)注意，新的視差量可以被正常接收，而不用執(zhí)行在內(nèi)置存儲(chǔ)器中的存儲(chǔ)。在步驟S78至S80，分別執(zhí)行類(lèi)似于圖17的步驟S57至S59的處理。
另一方面，如果在步驟S77通過(guò)視差量調(diào)節(jié)部分274判定為利用來(lái)自調(diào)節(jié)量計(jì)算部分273的調(diào)節(jié)量調(diào)節(jié)后的一個(gè)視差量超過(guò)其上限值，那么處理前進(jìn)到S81。在步驟S81，視差量調(diào)節(jié)部分274將表示不可能由用戶(hù)的指定操作所指定的優(yōu)先順序來(lái)執(zhí)行合成的錯(cuò)誤通知輸出到未示出的監(jiān)視器等。第三視差量調(diào)節(jié)處理結(jié)束。如上所述，根據(jù)第三視差量調(diào)節(jié)處理，如果在步驟S77通過(guò)視差量調(diào)節(jié)部分274判定為基于來(lái)自調(diào)節(jié)量計(jì)算部分273的調(diào)節(jié)量調(diào)節(jié)得到的視差量超過(guò)其上限值，那么處理前進(jìn)到步驟S81，在步驟S81將表示不可能由用戶(hù)的指定操作所指定的優(yōu)先順序來(lái)執(zhí)行合成的錯(cuò)誤通知輸出到未示出的監(jiān)視器等。由此，可以防止視差量被調(diào)節(jié)而超過(guò)預(yù)先確定的其上限值的情況。在該情形下，可以防止調(diào)節(jié)后的三維圖像由于過(guò)量的視差量調(diào)節(jié)而使觀賞者不舒適的情況。在第二實(shí)施例中，三維圖像231和232的視差量被直接調(diào)節(jié)到與用戶(hù)的指定操作所指定的優(yōu)先順序?qū)?yīng)的視差量。然而，可以采用改變的構(gòu)造，其中，例如，響應(yīng)于操作控制臺(tái)21的完成度改變桿199的操作量，視差量被逐漸調(diào)節(jié)到與優(yōu)先順序?qū)?yīng)的視差量。現(xiàn)在描述第三實(shí)施例，其中響應(yīng)于完成度改變桿199的操作量來(lái)調(diào)節(jié)視差量。3.第三實(shí)施例第三實(shí)施例中的處理的概要圖19A、19B和20A至20C示出了第三實(shí)施例中的處理的概要。圖19A和19B示出了由用戶(hù)的選擇操作從多個(gè)三維圖像中選擇的三維圖像的示例。在圖19A的下側(cè)，示出來(lái)自用戶(hù)選擇的兩個(gè)三維圖像之中的三維圖像291。三維圖像291顯示物理實(shí)體291a。在圖19C的上側(cè)，示出從上方觀察得到物理實(shí)體291a的視圖。在圖19B的下側(cè)，示出來(lái)自用戶(hù)選擇的兩個(gè)三維圖像之中的另一個(gè)三維圖像292。 三維圖像292顯示物理實(shí)體292a。在圖19B的上側(cè)，示出從上方觀察得到的物理實(shí)體292a 的視圖。用戶(hù)可以通過(guò)利用控制臺(tái)21的完成度改變桿199以改變完成度值，來(lái)調(diào)節(jié)物理實(shí)體291a的深度ζ和物理實(shí)體292a的深度ζ。完成度值表示對(duì)視差量的調(diào)節(jié)的進(jìn)展情況或前進(jìn)率。如果完成度值是0%，那么這表示對(duì)視差量的調(diào)節(jié)沒(méi)有被執(zhí)行，如果完成度值是100 %，那么這表示視差量被完全調(diào)節(jié)到與優(yōu)先順序?qū)?yīng)的視差量。圖20Α至20C示出響應(yīng)于完成度值的改變來(lái)調(diào)節(jié)物理實(shí)體291a和物理實(shí)體292a 的深度ζ的方式的示例。圖20A，20B和20C示出分別在完成度值是0%，50% and 100%的情況下通過(guò)合成三維圖像291和292獲得的三維圖像293。在用戶(hù)操作控制臺(tái)21的完成度改變桿199以將完成度值設(shè)為0%的情況下，當(dāng)物理實(shí)體291a的深度ζ大于物理實(shí)體292a的深度ζ時(shí)，物理實(shí)體291a的深度ζ和物理實(shí)體 292a的深度ζ不改變，并且產(chǎn)生在近身側(cè)存在物理實(shí)體292a的三維圖像293，如圖20A所示。另一方面，如果物理實(shí)體292a的深度ζ不大于物理實(shí)體292a的深度z，那么視差被調(diào)節(jié)以建立如圖20A所示的深度ζ的狀態(tài)。
然后，如果用戶(hù)操作控制臺(tái)21的完成度改變桿199以將完成度值設(shè)為50%，那么若以圖20B所示的方式調(diào)節(jié)視差，則產(chǎn)生物理實(shí)體292a的一部分被三維圖像291和292隱藏的三維圖像293。此外，如果用戶(hù)操作控制臺(tái)21的完成度改變桿199以將完成度值設(shè)為100%，那么若以圖20C所示的方式調(diào)節(jié)視差，則產(chǎn)生在近身側(cè)存在物理實(shí)體292a的三維圖像293。圖像合成設(shè)備301的結(jié)構(gòu)的示例圖21示出根據(jù)本發(fā)明第三實(shí)施例的圖像合成設(shè)備301的結(jié)構(gòu)的示例。應(yīng)注意，圖像合成設(shè)備301與圖14所示的第二實(shí)施例中的圖像合成設(shè)備211部分相似地構(gòu)成，因此相同的重復(fù)描述被省略以避免冗余。具體地，參照?qǐng)D21，除了包括控制部分311、完成度調(diào)節(jié)部分312、用于左眼的切換器313和用于右眼的切換器314以分別代替控制部分251、調(diào)節(jié)部分252、用于左眼的切換器82和用于右眼的切換器92之外，圖像合成設(shè)備301與圖像合成設(shè)備211相似地配置?？刂撇糠?11例如響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)來(lái)控制完成度調(diào)節(jié)部分312、 用于左眼的切換器313和用于右眼的切換器314。應(yīng)注意，如果用戶(hù)使用控制臺(tái)21的完成度改變桿199執(zhí)行用于改變完成度值的完成度值改變操作，那么控制臺(tái)21產(chǎn)生與用戶(hù)的完成度值改變操作對(duì)應(yīng)的操作信號(hào)并將產(chǎn)生的操作信號(hào)提供到控制部分311。在該情形下，控制部分311響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)獲取由用戶(hù)的完成度值改變操作改變的完成度值，并將獲得的完成度值提供到完成度調(diào)節(jié)部分312。此外，類(lèi)似于控制部分215，控制部分311將表示用戶(hù)指定的優(yōu)先順序的控制信號(hào)提供到完成度調(diào)節(jié)部分312。完成度調(diào)節(jié)部分312獲取來(lái)自SDI端子83的用于左眼的二維圖像與來(lái)自SDI端子88的用于右眼的二維圖像的組合作為三維圖像291。此外，完成度調(diào)節(jié)部分312獲取來(lái)自SDI端子84用于左眼的二維圖像與來(lái)自SDI端子89的用于右眼的二維圖像的組合，作為三維圖像292。完成度調(diào)節(jié)部分312根據(jù)來(lái)自控制部分311的控制信號(hào)獲取優(yōu)先順序并基于獲得的優(yōu)先順序和來(lái)自控制部分311的完成度值來(lái)調(diào)節(jié)獲得的三維圖像291和292的視差量。在控制部分311的控制下，用于左眼的切換器313從被供應(yīng)的多個(gè)用于左眼的二維圖像當(dāng)中選擇與通過(guò)用戶(hù)的選擇操作所選擇的三維圖像291和292(圖19A和19B)對(duì)應(yīng)的用于左眼的二維圖像。然后，用于左眼的切換器313將與三維圖像291對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子83，并將與三維圖像292對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子84。此外，用于左眼的切換器313以從SDI端子85提供的優(yōu)先順序?qū)?lái)自SDI端子85 的用于左眼的二維圖像與來(lái)自SDI端子86的用于左眼的二維圖像進(jìn)行合成，并將根據(jù)完成度值合成后的用于左眼的二維圖像輸出。在控制部分311的控制下，用于用于右眼的切換器314從被供應(yīng)的多個(gè)用于右眼的二維圖 像當(dāng)中選擇與通過(guò)用戶(hù)的選擇操作所選擇的三維圖像291和292(圖19A和19B) 對(duì)應(yīng)的用于右眼的二維圖像。然后，用于右眼的切換器314將與三維圖像291對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子88，并將與三維圖像292對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子89。 此外，用于右眼的切換器314以從SDI端子90提供的優(yōu)先順序?qū)?lái)自SDI端子90 的用于右眼的二維圖像與來(lái)自SDI端子91的用于右眼的二維圖像進(jìn)行合成，并將根據(jù)完成度值合成后的用于右眼的二維圖像輸出。圖22示出完成度調(diào)節(jié)部分312的結(jié)構(gòu)的示例。應(yīng)注意，完成度調(diào)節(jié)部分312包括數(shù)個(gè)與圖15所示的調(diào)節(jié)部分252中相同的組件，因此相同組件的重復(fù)描述被省略以避免冗余。參照?qǐng)D22，除了包括視差量調(diào)節(jié)部分331以代替視差量調(diào)節(jié)部分274之外，所示的完成度調(diào)節(jié)部分312與調(diào)節(jié)部分252相似地配置。與來(lái)自調(diào)節(jié)量計(jì)算部分273的視差量對(duì)應(yīng)的優(yōu)先順序和來(lái)自順序獲取部分271的優(yōu)先順序一致的通知、或調(diào)節(jié)量中的一者，以及來(lái)自順序獲取部分271的優(yōu)先順序、來(lái)自視差量測(cè)量部分272的三維圖像291和292被提供到視差量調(diào)節(jié)部分331。此外，完成度值從控制部分311被提供到視差量調(diào)節(jié)部分331。在從調(diào)節(jié)量計(jì)算部分273提供調(diào)節(jié)量的情況下，視差量調(diào)節(jié)部分331基于來(lái)自調(diào)節(jié)量計(jì)算部分273的調(diào)節(jié)量和來(lái)自視差量調(diào)節(jié)部分331的完成度值來(lái)調(diào)節(jié)來(lái)自視差量測(cè)量部分272的三維圖像291和292的視差量，使得視差量成為與完成度值對(duì)應(yīng)的視差量。然后，視差量調(diào)節(jié)部分331將調(diào)節(jié)后的與三維圖像291對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子85，并將調(diào)節(jié)后的與三維圖像292 對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86。此外，視差量調(diào)節(jié)部分331將調(diào)節(jié)后的與三維圖像291對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子90，并將調(diào)節(jié)后的與三維圖像292 對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子91。此外，視差量調(diào)節(jié)部分331將調(diào)節(jié)后的三維圖像291和292的視差量分別提供到 SDI端子85和90。從而，SDI端子85將從視差量調(diào)節(jié)部分331所提供的調(diào)節(jié)后的三維圖像291和292 的視差量提供到用于左眼的切換器313。同時(shí)，SDI端子90將從視差量調(diào)節(jié)部分331所提供的調(diào)節(jié)后的三維圖像291和292 的視差量提供到用于右眼的切換器314。應(yīng)注意，如果向視差量調(diào)節(jié)部分331提供了與視差量對(duì)應(yīng)的優(yōu)先順序和來(lái)自順序獲取部分271的優(yōu)先順序一致的通知，那么視差量調(diào)節(jié)部分331執(zhí)行類(lèi)似于視差量調(diào)節(jié)部分274所執(zhí)行的處理。用于左眼的切換器313的結(jié)構(gòu)的示例圖23示出了用于左眼的切換器313的結(jié)構(gòu)的示例。應(yīng)注意，由于用于右眼的切換器314被配置為與用于左眼的切換器313類(lèi)似，僅對(duì)用于左眼的切換器313進(jìn)行描述，本文省去對(duì)用于右眼的切換器314的描述以避免冗余。除了設(shè)置圖像合成部分351代替構(gòu)成圖6所示的用于左眼的切換器82的圖像選擇部分111和圖像合成部分112當(dāng)中的圖像合成部分112之外，用于左眼的切換器313配置為類(lèi)似于用于左眼的切換器82。應(yīng)注意，在圖23中，為了避免復(fù)雜圖示，在類(lèi)似于用于左眼的切換器82的圖像選擇部分111配置的功能框圖和圖像合成部分351當(dāng)中，省略了與用于左眼的切換器82的圖像合成部分112相似地配置的功能框圖。

具體地，除了額外包括深度比較部分371和乘法部分372并且包括合成處理部分 373代替合成處理部分155之外，用于左眼的切換器313的圖像合成部分351配置為類(lèi)似于用于左眼的切換器82的圖像合成部分112。響應(yīng)于完成度值進(jìn)行調(diào)節(jié)后的三維圖像291和292的視差量從SDI端子85提供到用于左眼的切換器313。來(lái)自SDI端子85的三維圖像291的視差量通過(guò)關(guān)鍵信號(hào)處理部分153a提供到深度比較部分371，并且來(lái)自SDI端子85的三維圖像292的視差量通過(guò)關(guān)鍵信號(hào)處理部分153b提供到深度比較部分371?；趤?lái)自關(guān)鍵信號(hào)處理部分153a的三維圖像291的視差量和來(lái)自關(guān)鍵信號(hào)處理部分153b的三維圖像292的視差量，深度比較部分371將三維圖像291中的物理實(shí)體291a 的深度ζ和三維圖像292中的物理實(shí)體292a的深度ζ彼此相比。應(yīng)注意，可以采用另一種結(jié)構(gòu)，其中深度比較部分371不接收視差量，而是與用于右眼的切換器的相關(guān)元件協(xié)作使得由此計(jì)算視差。然后，深度比較部分371基于比較結(jié)果產(chǎn)生關(guān)鍵信號(hào)391，其表示三維圖像292中的物理實(shí)體292a的比三維圖像291中的物理實(shí)體291a存在于更近身側(cè)的一部分，即，物理實(shí)體292a的深度ζ小于物理實(shí)體291a的深度ζ的那部分。然后，深度比較部分371將關(guān)鍵信號(hào)391提供到乘法部分372。除來(lái)自深度比較部分371的關(guān)鍵信號(hào)391外，還將關(guān)鍵信號(hào)392 (表示三維圖像 292的其中存在物理實(shí)體292a的區(qū)域)從關(guān)鍵信號(hào)處理部分153b提供到乘法部分372。乘法部分372將來(lái)自深度比較部分371的關(guān)鍵信號(hào)391和來(lái)自關(guān)鍵信號(hào)處理部分 153b的關(guān)鍵信號(hào)392相乘。然后，乘法部分372將通過(guò)乘法獲得的關(guān)鍵信號(hào)393 (其表示三維圖像292中的物理實(shí)體292a的比三維圖像291中的物理實(shí)體291a存在于更近身側(cè)的那部分所對(duì)應(yīng)的區(qū)域)提供到合成處理部分373。除來(lái)自乘法部分372的關(guān)鍵信號(hào)393外，關(guān)鍵信號(hào)394 (表示三維圖像291中存在物理實(shí)體291a的區(qū)域)從關(guān)鍵信號(hào)處理部分153a被提供到合成處理部分373。此外，與三維圖像291對(duì)應(yīng)的用于左眼的二維圖像和優(yōu)先順序被從關(guān)鍵信號(hào)處理部分153a提供到合成處理部分373，并且與三維圖像292對(duì)應(yīng)的用于左眼的二維圖像被從關(guān)鍵信號(hào)處理部分 153b提供到合成處理部分373。合成處理部分373以來(lái)自關(guān)鍵信號(hào)處理部分153a的優(yōu)先順序?qū)?lái)自關(guān)鍵信號(hào)處理部分153a的用于左眼的二維圖像和來(lái)自關(guān)鍵信號(hào)處理部分153b的用于左眼的二維圖像合成。具體地，例如，如果三維圖像292的優(yōu)先順序的次序是第一并且三維圖像291的優(yōu)先順序的順序是第二，那么視差量測(cè)量部分272合成三維圖像291和292使得與三維圖像 292對(duì)應(yīng)的用于左眼的二維圖像中由來(lái)自乘法部分372的關(guān)鍵信號(hào)393表示的區(qū)域(S卩，存在物理實(shí)體292a的那部分的區(qū)域)比與三維圖像291對(duì)應(yīng)的用于左眼的二維圖像中來(lái)關(guān)鍵信號(hào)處理部分153a的關(guān)鍵信號(hào)394表示的區(qū)域(即，存在物理實(shí)體291a的區(qū)域)在更近身側(cè)。應(yīng)注意，在表示背景圖像的背景圖像信號(hào)被提供到合成處理部分373的情況下，合成處理部分373將被提供的背景圖像信號(hào)所對(duì)應(yīng)的背景圖像作為背景合成。由深度比較部分371和合成處理部分373執(zhí)行的處理圖24A和24B示出了由深度比較部分371和合成處理部分373執(zhí)行的處理。
基于來(lái)自關(guān)鍵信號(hào)處理部分153a的三維圖像291的視差量和來(lái)自關(guān)鍵信號(hào)處理部分153b的三維圖像292的視差量，深度比較部分371將三維圖像291中的物理實(shí)體291a 的深度ζ和三維圖像292中的物理實(shí)體292a的深度ζ彼此相比。然后，深度比較部分371檢測(cè)三維圖像292中的物理實(shí)體292a的比三維圖像291 中的物理實(shí)體291a存在于更近身側(cè)的部分292a'，產(chǎn)生表示部分292a'所在的區(qū)域的關(guān)鍵信號(hào)391并提供給乘法部分372。乘法部分372將來(lái)自關(guān)鍵信號(hào)處理部分153b的關(guān)鍵信號(hào)392和來(lái)自深度比較部分371的關(guān)鍵信號(hào)391和相乘，并將通過(guò)乘法獲得的關(guān)鍵信號(hào)393 (表示部分292a'存在的區(qū)域)提供到合成處理部分373?；趤?lái)自乘法部分372的關(guān)鍵信號(hào)393，合成處理部分373確定物理實(shí)體292a的比三維圖像291中的物理實(shí)體291a顯示在更近身側(cè)的部分292a'。然后，合成處理部分 373將來(lái)自關(guān)鍵信號(hào)處理部分153a的用于左眼的二維圖像和來(lái)自關(guān)鍵信號(hào)處理部分153b 的用于左眼的二維圖像合成，使得檢測(cè)到的物理實(shí)體292a的部分292a'被顯示在比物理實(shí)體291a更近身側(cè)。因此，產(chǎn)生三維圖像293，物理實(shí)體292a的部分292a'和物理實(shí)體291a的部分 291a'被顯示為如圖24B所示。然后，合成處理部分373將通過(guò)合成獲得的合成后的用于左眼的二維圖像輸出。應(yīng)注意，盡管合成處理部分373使用來(lái)自乘法部分372的關(guān)鍵信號(hào)393，由于從乘法部分372輸出的關(guān)鍵信號(hào)393和從深度比較部分371輸出的關(guān)鍵信號(hào)391根據(jù)關(guān)鍵信號(hào)的產(chǎn)生方法而成為相同的關(guān)鍵信號(hào)，從深度比較部分371輸出的關(guān)鍵信號(hào)391可以代替從乘法部分372輸出的關(guān)鍵信號(hào)393被使用。在該情形下，圖像合成部分351可以配置為省略乘法部分372。圖像合成設(shè)備301的操作現(xiàn)在參照?qǐng)D25的流程圖描述圖像合成設(shè)備301執(zhí)行的完成度調(diào)節(jié)處理。例如在用戶(hù)使用控制臺(tái)21執(zhí)行從提供到圖像合成設(shè)備301的多個(gè)三維圖像當(dāng)中選擇要被合成的三維圖像291和292時(shí)，開(kāi)始完成度調(diào)節(jié)處理。此時(shí)，與用戶(hù)的選擇操作對(duì)應(yīng)的操作信號(hào)從控制臺(tái)21提供到控制部分311。然后， 控制部分311響應(yīng)于來(lái)自控制臺(tái)21的操作信號(hào)控制用于左眼的切換器313和用于右眼的切換器314。在步驟S101，類(lèi)似于用于左眼的切換器82，在控制部分311的控制下，用于左眼的切換器313獲取與由用戶(hù)的選擇操作所選擇的兩個(gè)三維圖像291和292對(duì)應(yīng)的用于左眼的
二維圖像。用于左眼的切換器313將所獲得的用于左眼的二維圖像中的一個(gè)提供到SDI端子 83，并將另一個(gè)所獲得的用于左眼的二維圖像提供到SDI端子84。SDI端子83和84將用于左眼的二維圖像從用于左眼的切換器313提供到完成度調(diào)節(jié)部分312的視差量測(cè)量部分 272。
同時(shí)，類(lèi)似于用于左眼的切換器313，在控制部分311的控制下，用于右眼的切換器314將所獲得的用于右眼的二維圖像中的一個(gè)提供到SDI端子88，并將另一個(gè)所獲得的用于右眼的二維圖像提供到SDI端子89。SDI端子88和89分別將用于右眼的二維圖像從用于右眼的切換器314提供到視差量測(cè)量部分272。在步驟S102至S104，分別執(zhí)行類(lèi)似于圖16的步驟S32至S34的處理。在步驟S105，調(diào)節(jié)量計(jì)算部分273判定與視差量對(duì)應(yīng)的計(jì)算的優(yōu)先順序是否與來(lái)自順序獲取部分271的優(yōu)先順序一致。如果判定為與視差量對(duì)應(yīng)的優(yōu)先順序與來(lái)自順序獲取部分271的優(yōu)先順序不一致，那么處理前進(jìn)到步驟S106。在步驟S106，類(lèi)似于圖16中步驟S36的情況，調(diào)節(jié)量計(jì)算部分273計(jì)算調(diào)節(jié)量，并將計(jì)算得到的調(diào)節(jié)量提供到視差量調(diào)節(jié)部分331。與此對(duì)應(yīng)，視差量調(diào)節(jié)部分331將調(diào)節(jié)量從調(diào)節(jié)量計(jì)算部分273提供到未示出的內(nèi)置存儲(chǔ)器中以存儲(chǔ)在該內(nèi)置存儲(chǔ)器中。在步驟S107，視差量調(diào)節(jié)部分331判定來(lái)自控制部分311的完成度值是否被輸入或被提供，并且重復(fù)地執(zhí)行步驟S107處的處理，直到在步驟S107判定為完成度值從控制部分311輸入。 如果視差量調(diào)節(jié)部分331在步驟S107判定為完成度值從控制部分311輸入，那么處理前進(jìn)到步驟S108。在步驟S108，基于存儲(chǔ)在內(nèi)置存儲(chǔ)器中的調(diào)節(jié)量和來(lái)自控制部分 311的完成度值，視差量調(diào)節(jié)部分331將來(lái)自視差量測(cè)量部分272的三維圖像291和292的視差量調(diào)節(jié)為與控制部分311的完成度值對(duì)應(yīng)的視差量。應(yīng)注意，可以采樣這樣的配置不使用存儲(chǔ)在內(nèi)置存儲(chǔ)器中的調(diào)節(jié)量，而是通常計(jì)算并使用最新的調(diào)節(jié)量。然后，視差量調(diào)節(jié)部分331將調(diào)節(jié)后的與三維圖像291對(duì)應(yīng)的用于左眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子85，將調(diào)節(jié)后的與三維圖像292對(duì)應(yīng)的用于左眼的二維圖像提供到SDI端子86。此外，控制部分311將調(diào)節(jié)后的與三維圖像291對(duì)應(yīng)的用于右眼的二維圖像和來(lái)自順序獲取部分271的優(yōu)先順序提供到SDI端子90，并將調(diào)節(jié)后的與三維圖像292對(duì)應(yīng)的用于右眼的二維圖像提供到SDI端子91。此外，視差量調(diào)節(jié)部分331分別將調(diào)節(jié)后的三維圖像291和292的視差量提供到 SDI端子85和90。在步驟S109，SDI端子85將來(lái)視差量調(diào)節(jié)部分331的優(yōu)先順序和用于左眼的二維圖像提供到用于左眼的切換器313，并且SDI端子86將來(lái)自視差量調(diào)節(jié)部分331的用于左眼的二維圖像提供到用于左眼的切換器313。同時(shí)，SDI端子85將所提供的調(diào)節(jié)后的三維圖像291和292的視差量從視差量調(diào)節(jié)部分331提供到用于左眼的切換器313。SDI端子90將來(lái)視差量調(diào)節(jié)部分331的優(yōu)先順序和用于右眼的二維圖像提供到用于右眼的切換器314，SDI端子91將來(lái)自視差量調(diào)節(jié)部分331的用于右眼的二維圖像提供到用于右眼的切換器314。此外，SDI端子90將所提供的調(diào)節(jié)后的三維圖像291和292的視差量從視差量調(diào)節(jié)部分331提供到用于右眼的切換器314。然后在步驟S109，用于左眼的切換器313利用來(lái)自SDI端子85的基于調(diào)節(jié)后的三維圖像291和292的視差量產(chǎn)生的關(guān)鍵信號(hào)，根據(jù)完成度值按照來(lái)自SDI端子85的優(yōu)先順序來(lái)將來(lái)自SDI端子85的用于左眼的二維圖像和來(lái)自SDI端子86的用于左眼的二維圖像合成。然后，用于左眼的切換器313將作為合成結(jié)果得到的合成后的用于左眼的二維圖像輸出到輸出線。同時(shí)，用于右眼的切換器314利用來(lái)自SDI端子90的基于調(diào)節(jié)后的三維圖像291 和292的視差量產(chǎn)生的關(guān)鍵信號(hào)，根據(jù)完成度值按照來(lái)自SDI端子90的優(yōu)先順序來(lái)將來(lái)自SDI端子90的用于右眼的二維圖像和來(lái)自SDI端子91的用于右眼的二維圖像合成。然后，用于右眼的切換器314將作為合成結(jié)果得到的合成后的用于右眼的二維圖像輸出到輸出線。在步驟S109的處理結(jié)束后，處理回到步驟S107，使得從步驟S107開(kāi)始的處理被重
Μ. ο

應(yīng)注意，在步驟S107至S109的處理被重復(fù)執(zhí)行的情況下，例如當(dāng)用戶(hù)使用控制臺(tái) 21發(fā)出結(jié)束完成度調(diào)節(jié)處理的命令時(shí)，該完成度調(diào)節(jié)處理結(jié)束。另一方面，如果調(diào)節(jié)量計(jì)算部分273在步驟S105判定為與視差量對(duì)應(yīng)的計(jì)算的優(yōu)先順序與來(lái)自順序獲取部分271的優(yōu)先順序一致，那么將該通知提供到視差量調(diào)節(jié)部分 331并使處理前進(jìn)到步驟S110。在步驟S110，視差量調(diào)節(jié)部分331執(zhí)行類(lèi)似于處理從圖16的步驟S35前進(jìn)到步驟 S38的情況的處理，并且處理結(jié)束。如上所述，在完成度調(diào)節(jié)處理中，響應(yīng)于用戶(hù)的完成度改變操作所改變的完成度值，將三維圖像291和292合成。因此，用戶(hù)可以通過(guò)響應(yīng)于期望的完成度值合成三維圖像 291和292來(lái)產(chǎn)生三維圖像293。4.修改方案用于左眼的切換器313的結(jié)構(gòu)的示例圖26示出用于左眼的切換器313的圖像合成部分351的結(jié)構(gòu)的另一個(gè)示例。應(yīng)注意，圖像合成部分351包括與圖23的圖像合成部分351的組件相同的幾個(gè)組件，并且該相同組件的重復(fù)描述被省略以避免冗余。具體地，除了包括深度比較部分431和合成處理部分433來(lái)代替深度比較部分371 和合成處理部分373、并且還額外包括乘法部分432之外，圖26的圖像合成部分351被配置為類(lèi)似于圖23的圖像合成部分351，。三維圖像291的視差量從關(guān)鍵信號(hào)處理部分153a被提供到深度比較部分431，并且三維圖像292的視差量從關(guān)鍵信號(hào)處理部分153b被提供到深度比較部分431。基于來(lái)自關(guān)鍵信號(hào)處理部分153a的三維圖像291的視差量和來(lái)自關(guān)鍵信號(hào)處理部分153b的三維圖像292的視差量，深度比較部分431將三維圖像291中的物理實(shí)體291a 的深度ζ和三維圖像292中的物理實(shí)體292a的深度ζ彼此相比。然后，基于比較結(jié)果，深度比較部分431檢測(cè)三維圖像292中的物理實(shí)體292a的比三維圖像291中的物理實(shí)體291a存在于更近身側(cè)的部分292a'，產(chǎn)生表示部分292a' 存在的區(qū)域的關(guān)鍵信號(hào)391并提供到乘法部分372。此外，基于比較結(jié)果，深度比較部分431檢測(cè)三維圖像291中的物理實(shí)體291a的比三維圖像292中的物理實(shí)體292a存在于更近身側(cè)的部分291a'，產(chǎn)生表示部分291a' 存在的區(qū)域的關(guān)鍵信號(hào)441并提供到乘法部分432。
除來(lái)自深度比較部分431的關(guān)鍵信號(hào)441外，還將來(lái)自關(guān)鍵信號(hào)處理部分153a的關(guān)鍵信號(hào)394提供到乘法部分432。乘法部分432將來(lái)自深度比較部分371的關(guān)鍵信號(hào)441 和來(lái)自關(guān)鍵信號(hào)處理部分153a的關(guān)鍵信號(hào)394相乘，將通過(guò)乘法獲得的關(guān)鍵信號(hào)442 (表示部分291a'存在的區(qū)域)提供到合成處理部分433。合 成處理部分433基于來(lái)自關(guān)鍵信號(hào)441的關(guān)鍵信號(hào)442檢測(cè)物理實(shí)體292a的部分292a'。此外，類(lèi)似于合成處理部分373，合成處理部分433基于來(lái)自乘法部分372的關(guān)鍵信號(hào)393檢測(cè)物理實(shí)體292a的比三維圖像291中的物理實(shí)體291a顯示在更近身側(cè)的部分292a ‘。然后，合成處理部分433將來(lái)自關(guān)鍵信號(hào)處理部分153a的用于左眼的二維圖像和來(lái)自關(guān)鍵信號(hào)處理部分153b的用于左眼的二維圖像合成，使得檢測(cè)的物理實(shí)體291a的部分291a'被顯示在比物理實(shí)體292a更近身側(cè)并且檢測(cè)的物理實(shí)體292a的部分292a'被顯示在比物理實(shí)體291a更近身側(cè)。應(yīng)注意，盡管合成處理部分433使用來(lái)自乘法部分432的關(guān)鍵信號(hào)442，但是由于從乘法部分432輸出的關(guān)鍵信號(hào)442和從深度比較部分431輸出的關(guān)鍵信號(hào)441根據(jù)關(guān)鍵信號(hào)的產(chǎn)生方法而成為相同的關(guān)鍵信號(hào)，從深度比較部分431輸出的關(guān)鍵信號(hào)441可以代替從乘法部分432輸出的關(guān)鍵信號(hào)442進(jìn)行使用。在該情形下，圖像合成部分351可以配置為省略乘法部分432。應(yīng)注意，接收相乘后的各種關(guān)鍵信號(hào)的合成處理部分433等可以被配置為使得基于關(guān)鍵信號(hào)執(zhí)行圖像的工作，使得對(duì)合成進(jìn)行管理以用于提供具有良好外觀的圖像(減輕人工痕跡)。盡管在本發(fā)明的第一至第三實(shí)施例的上述描述中描述了由用戶(hù)的選擇操作所選擇的兩個(gè)三維圖像的合成，但是要被合成的三維圖像的數(shù)目不限于兩個(gè)。具體地，例如，如圖27A至27D和圖28所示，要被合成的三維圖像的數(shù)目可以是四個(gè)。圖27A至27D示出了從多個(gè)三維圖像當(dāng)中通過(guò)用戶(hù)的選擇操作選擇的四個(gè)三維圖像的示例。參照?qǐng)D27A至27D，在下側(cè)示出通過(guò)用戶(hù)的選擇操作選擇的四個(gè)三維圖像451至 454。應(yīng)注意，物理實(shí)體451a被顯示在三維圖像451中，物理實(shí)體452a被顯示在三維圖像452中。此外，物理實(shí)體453a和453b被顯示在三維圖像453中，物理實(shí)體454a和454b 被顯示在三維圖像454中。此外，在圖27A上側(cè)，示出從上方觀察的物理實(shí)體451a ；在圖27B上側(cè)，示出從上方觀察的物理實(shí)體452a。此外，在圖27C上側(cè)，示出從上方觀察的物理實(shí)體453a和453b ； 在圖27D上側(cè)，示出從上方觀察的物理實(shí)體454a和454b。圖28示出通過(guò)合成四個(gè)三維圖像451至454獲得的三維圖像456的示例。在圖28上側(cè)，表明了在通過(guò)合成獲得的三維圖像456中顯示的物理實(shí)體451a至 454b的深度ζ。換言之，示出從上方觀察的物理實(shí)體451a至454b的視圖。在物理實(shí)體451a 至454b中，在圖28的上側(cè)存在的物理實(shí)體表現(xiàn)出更大的深度z，即，看起來(lái)位于更遠(yuǎn)處。在圖28下側(cè)，示出三維圖像456。在三維圖像456中，示出物理實(shí)體451a至454b 的被顯示在最近身側(cè)的部分451a'至454b'。
在第一至第三實(shí)施例的任一個(gè)中，通過(guò)合成三維圖像451至454獲得的合成后的三維圖像456可以被輸出，如圖28所示。應(yīng)注意，在第二和第三實(shí)施例中三維圖像451至454的視差量被調(diào)節(jié)的情況下，與視差量對(duì)應(yīng)的深度ζ的范圍Rl至R4通過(guò)三維圖像451至454的視差量的調(diào)節(jié)被改變，如圖28中上側(cè)所示。具體地，例如，如果優(yōu) 先順序被指定為從內(nèi)側(cè)起按照三維圖像451，452，453和454 的順序，范圍Rl至R4改變以使深度ζ按優(yōu)先順序增加。那樣，改變后的范圍Rl至R4被擴(kuò)大或減小到預(yù)定的寬度。具體地，例如，在三維圖像451至454的視差量被調(diào)節(jié)使得它們與優(yōu)先順序?qū)?yīng)的情況下，如果三維圖像451至454的深度ζ的范圍分別被改變到范圍Rl至R4，那么改變后的范圍Rl至R4被擴(kuò)大或減小到預(yù)定的寬度。改變后的范圍Rl小于深度zll而等于或大于深度zl2。同時(shí)，改變后的范圍R2小于深度z21 ( = zl2)而等于或大于深度z22。此外，改變后的范圍R3小于深度z31 ( = z22) 而等于或大于深度z32。此外，改變后的范圍R4小于深度z41( = z32)而等于或大于深度 z42。因此，范圍Rl的寬度或大小zlw為zll-zl2 |，范圍R2的寬度z2w為| z21_z22 |， 范圍R3的寬度z3w為I z31-z32 |，范圍R4的寬度z4w為| z41_z42 |。在第二和第三實(shí)施例中，例如，改變后的范圍Rl至R4的整個(gè)范圍(即寬度 zll-z42|)被擴(kuò)大或減小到小于深度zA而等于或大于深度zB的范圍，即寬度| zA_zB |。具體地，例如，在第二和第三實(shí)施例中，r = zA-zB|/|zlw+z2w+z3w+z4w被計(jì)算并乘以在擴(kuò)大或減小之前范圍Rl至R4的寬度zlw至z4w。由此，計(jì)算擴(kuò)大或減小后的范圍Rl的寬度zlv ( = 21 \1~)、擴(kuò)大或減小后的范圍1 2的寬度22奴=z2wXr)、擴(kuò)大或減小后的范圍R3的寬度z3v( = z3wXr)、擴(kuò)大或減小后的范圍R4的寬度z4v( = z4wXr)。因此，擴(kuò)大后的范圍Rl小于深度zB而等于或大于深度(zB+zlv)，擴(kuò)大后的范圍R2小于深度(zB+zlv)而等于或大于深度(ZB+Zlv+Z2v)，此外，擴(kuò)大后的范圍R3小于深度(ZB+Zlv+Z2v)而等于或大于深度(ZB+Zlv+Z2v+Z3v)，擴(kuò)大后的范圍R4小于深度 (zB+zlv+z2v+z3v)而等于或大于深度zA。具體地，例如，擴(kuò)大前的范圍Rl (小于深度zll而等于或大于深度zl2)被映射使得擴(kuò)大后的范圍Rl成為小于深度zB而等于或大于深度(zB+zlv)。這也類(lèi)似地適用于范圍 R2至R4。應(yīng)注意，盡管通常減小圖像的內(nèi)容的深度不會(huì)給觀賞者帶來(lái)負(fù)擔(dān)，但是擴(kuò)大深度有時(shí)增加觀賞者的疲乏感等，并且通常不優(yōu)選。因此，上述處理僅適用于需要減少的情況， 但是在需要擴(kuò)大的情況下(即，r大于1)，優(yōu)選地抑制與r相乘。因此，是否乘以r應(yīng)根據(jù) r的值來(lái)確定。此外，圖26的圖像合成部分351包括兩個(gè)乘法部分372和432，其輸出針對(duì)兩個(gè)用于左眼的二維圖像的合成所用的關(guān)鍵信號(hào)以將分別與兩個(gè)三維圖像對(duì)應(yīng)的兩個(gè)用于左眼的二維圖像進(jìn)行合成。不過(guò)，可以采用將分別與四個(gè)三維圖像對(duì)應(yīng)的四個(gè)用于左眼的二維圖像合成的結(jié)構(gòu)。具體地，如果如圖29所示設(shè)置四個(gè)乘法部分372和432，471和472，其輸出用于合成四個(gè)用于左眼的二維圖像的關(guān)鍵信號(hào)，那么可以將四個(gè)用于左眼的二維圖像合成。
在該情況下，關(guān)鍵信號(hào)處理部分153c和乘法部分471分別執(zhí)行類(lèi)似于關(guān)鍵信號(hào)處理部分153a和乘法部分432的處理。這類(lèi)似地適應(yīng)于關(guān)鍵信號(hào)處理部分153d和乘法部分 472。應(yīng)注意，如本文所述，在第一實(shí)施例中，功能類(lèi)似于優(yōu)先順序確定部分87的優(yōu)先順序確定部分87a至87d被設(shè)置在如圖9所示用于左眼的切換器182中，同時(shí)在圖像合成設(shè)備22中從SDI端子83至SDI端子86的端子、優(yōu)先順序確定部分87和從SDI端子88至 SDI端子91的端子被省略。類(lèi)似地，同樣在第二實(shí)施例中，如果功能類(lèi)似于調(diào)節(jié)部分252的調(diào)節(jié)部分252a至 252d被設(shè)置在如圖10所示圖像合成設(shè)備211的用于左眼的切換器82中，那么設(shè)置在圖14 的圖像合成設(shè)備211中的從SDI端子83至SDI端子86的端子、調(diào)節(jié)部分252、和從SDI端子88至SDI端子91的端子被省略。這也類(lèi)似地適用于第三實(shí)施例。在該情況下，也類(lèi)似地調(diào)節(jié)部分252與用于右眼的切換器的相關(guān)部分通信并協(xié)作以進(jìn)行操作。應(yīng)注意，調(diào)節(jié)部分可以進(jìn)一步配置在圖30所示的視頻信號(hào)處理部分154a至154c和合成處理部分155之間，使得用于背景的圖像和要被作為關(guān)鍵圖像合成的圖像之間的深度關(guān)系以上述類(lèi)似方式得到處理。由于原理上用于背景的圖像布置在最里側(cè)，優(yōu)選進(jìn)行調(diào)節(jié)以與此一致。此外，在第二實(shí)施例中，圖30的圖像合成設(shè)備211可以被修改，使得如圖31所示， 圖像合成部分112還包括功能類(lèi)似于關(guān)鍵信號(hào)處理部分153a至153d的關(guān)鍵信號(hào)處理部分 153a'至153d'和功能類(lèi)似于合成處理部分155的合成處理部分155'。此外，圖像合成部分112可以被配置為使得，當(dāng)要對(duì)合成的用于左眼的二維圖像進(jìn)行確認(rèn)時(shí)，由關(guān)鍵信號(hào)處理部分153a'至153d'和合成處理部分155'產(chǎn)生用于預(yù)覽的用于左眼的二維圖像，并輸出到預(yù)覽輸出線以輸出預(yù)覽用的用于左眼的二維圖像。在該情形下，如果用戶(hù)適當(dāng)?shù)卮_認(rèn)被輸出用于預(yù)覽并被顯示在顯示部分上的合成后的用于左眼的二維圖像，并滿(mǎn)意于所述用于預(yù)覽被輸出和被顯示的合成后的用于左眼的二維圖像，那么關(guān)鍵信號(hào)處理部分153a至153d和合成處理部分155可以在最終合成后產(chǎn)生用于左眼的二維圖像并作為最終合成的合成結(jié)果輸出。這類(lèi)似地適用于用于右眼的切換 ^^ 92 ο應(yīng)注意，同樣在第一和第三實(shí)施例中，如果還設(shè)置用于預(yù)覽的關(guān)鍵信號(hào)處理部分 153a'至153d'和合成處理部分155'，那么可以產(chǎn)生用于預(yù)覽的用于左眼的二維圖像。此外，盡管在第一實(shí)施例中，圖7的優(yōu)先順序確定部分87由視差量測(cè)量部分171 和順序確定部分172構(gòu)成，然而例如可以?xún)H由順序確定部分172構(gòu)成而省略視差量測(cè)量部分 171。具體地，例如在三維圖像41 (具體地，構(gòu)成三維圖像41的用于左眼的二維圖像和用于右眼的二維圖像的至少一個(gè))包括三維圖像41的視差量并且三維圖像42包括三維圖像42的視差量的情形下，順序確定部分172可以獲取三維圖像41和42并分別從獲得的三維圖像41和42中提取三維圖像41和42的視差量，這類(lèi)似于視差量測(cè)量部分171。此外，順序確定部分172可以執(zhí)行與圖7所示的順序確定部分172類(lèi)似的處理，例如基于檢測(cè)到的三維圖像41和42的視差量確定優(yōu)先順序。這類(lèi)似地還適用于第二和第三實(shí)施例。因此，如果合成的對(duì)象的三維圖像包括三維圖像的視差量，那么提取并獲得包括在三維圖像中的視差量，而不用測(cè)量視差量。因此，同樣的第二和第三實(shí)施例中，可以省略視差量測(cè)量部分272?；蛘?，由于最初所輸入的所有三維圖像的視差的范圍類(lèi)似準(zhǔn)標(biāo)準(zhǔn)(quasi-standard)而通常受限制，整個(gè)范圍可以被減小用于合成。例如，在五個(gè)圖像要被合成的情況下，如果標(biāo)準(zhǔn)視差的范圍相對(duì)于圖像減到 1/5并隨后合成減小的范圍的圖像，那么合成獲得的三維圖像的視差的范圍同樣符合視差的標(biāo)準(zhǔn)范圍。此外，作為根據(jù)第一至第三實(shí)施例的圖像合成設(shè)備，例如合成三維圖像的計(jì)算機(jī)等將字符串等與三維圖像合成或疊加。在該情形下，字符串的圖像由計(jì)算機(jī)圖形設(shè)備產(chǎn)生， 并且易于預(yù)先指定或獲取字符串的圖像的視差。因此，盡管在第一至第三實(shí)施例中相對(duì)輸入的圖像調(diào)節(jié)視差量，通過(guò)向計(jì)算機(jī)圖形設(shè)備指定視差或ζ軸上的位置可以實(shí)現(xiàn)類(lèi)似的效果。盡管上述的一系列處理可以由專(zhuān)用的硬件實(shí)現(xiàn)，但也可以由軟件實(shí)現(xiàn)。如果系列處理由軟件執(zhí)行，構(gòu)成軟件的程序從記錄介質(zhì)安裝到嵌入式計(jì)算機(jī)或者例如通用的個(gè)人計(jì)算機(jī)中，所述計(jì)算機(jī)可通過(guò)安裝不同程序來(lái)執(zhí)行不同功能。個(gè)人計(jì)算機(jī)的結(jié)構(gòu)圖32是示出根據(jù)程序執(zhí)行本文描述的系列處理的個(gè)人計(jì)算機(jī)的結(jié)構(gòu)的示例的框圖。參考圖32，中央處理單元(CPU) 531基于由被存儲(chǔ)在只讀存儲(chǔ)器(ROM) 532或存儲(chǔ)部分538中的程序執(zhí)行各種處理操作。隨機(jī)存取存儲(chǔ)器(RAM) 533恰當(dāng)?shù)卮鎯?chǔ)供CPU 531 執(zhí)行的程序和數(shù)據(jù)等。CPU 531、ROM 532和RAM 533通過(guò)總線534互連。CPU 531還經(jīng)由總線534連接到輸入/輸出接口 535。輸入/輸出接口 535被連接到輸入部分536和輸出部分537，輸入部分536例如具有鍵盤(pán)、鼠標(biāo)和麥克風(fēng)等，輸出部分 537例如具有顯示單元和揚(yáng)聲器等。CPU 531響應(yīng)于通過(guò)輸入部分536輸入的指令來(lái)執(zhí)行各種處理操作。然后，CPU 531將處理結(jié)果輸出到輸出部分537。連接到輸入/輸出接口 535的存儲(chǔ)部分538例如由硬盤(pán)驅(qū)動(dòng)器組成。存儲(chǔ)部分 538存儲(chǔ)供CPU 531使用的程序和各種數(shù)據(jù)。通信部分539經(jīng)由諸如互聯(lián)網(wǎng)或局域網(wǎng)之類(lèi)的網(wǎng)絡(luò)來(lái)與外部設(shè)備通信。通過(guò)通信部分539來(lái)獲得程序并且將所獲得的程序存儲(chǔ)在存儲(chǔ)部分538中。驅(qū)動(dòng)器540連接到輸入/輸出接口 535。當(dāng)可移除介質(zhì)541被適當(dāng)?shù)匮b入驅(qū)動(dòng)器 540時(shí)，驅(qū)動(dòng)器540驅(qū)動(dòng)可移除介質(zhì)541，其中可移除介質(zhì)541例如是磁盤(pán)、光盤(pán)、磁光盤(pán)或半導(dǎo)體存儲(chǔ)器等。從而，驅(qū)動(dòng)器540獲取記錄在可移除介質(zhì)541上的程序、數(shù)據(jù)等。所獲得的程序和數(shù)據(jù)在需要時(shí)被傳遞并存儲(chǔ)在存儲(chǔ)部分538中。如圖32中所示，用于存儲(chǔ)被安裝到計(jì)算機(jī)上并被至于可執(zhí)行狀態(tài)的程序的程序記錄介質(zhì)包括可移除介質(zhì)541，其是由磁盤(pán)(包括軟盤(pán))、光盤(pán)(包括CD-ROM (緊致盤(pán)只讀存儲(chǔ)器)和DVD (數(shù)字通用盤(pán)))、磁光盤(pán)(包括MD (迷你光盤(pán)))、或半導(dǎo)體存儲(chǔ)器組成的封裝介質(zhì)的形式。此外，程序記錄介質(zhì)可以形成為ROM 532、或被包含在存儲(chǔ)部分538等中的硬盤(pán)，在其中臨時(shí)或永久地存儲(chǔ)程序。將程序存儲(chǔ)到程序記錄介質(zhì)中有時(shí)需要通過(guò)使用有線或無(wú)線通信介質(zhì)、經(jīng)由通信部分539(例如路由器或調(diào)制解調(diào)節(jié)器的供接口)來(lái)執(zhí)行的， 其中通信介質(zhì)例如是局域網(wǎng)、互聯(lián)網(wǎng)或數(shù)字衛(wèi)星廣播。應(yīng)當(dāng)注意，在本說(shuō)明書(shū)中，描述被記錄在記錄介質(zhì)中的各個(gè)程序的步驟可以但不一定以所述順序按照時(shí)間序列被執(zhí)行，并可以包括沒(méi)有按照時(shí)間序列執(zhí)行的并行地或單獨(dú)地執(zhí)行的處理操作。本發(fā)明的優(yōu)先實(shí)施例不限于第一至第三實(shí)施例，盡管已經(jīng)使用具體的術(shù)語(yǔ)描述了本發(fā)明的優(yōu)選實(shí)施例，但是這樣的描述僅用于說(shuō)明目的，并且應(yīng)當(dāng)理解，在不偏離本發(fā)明的精神和范圍的情況下，可以進(jìn)行各種更改和變形。本申請(qǐng)包含與2010年4月7日提交給日本專(zhuān)利局的日本在先專(zhuān)利申請(qǐng)JP 2010-088465和2010年4月7日提交給日本專(zhuān)利局的日本在先專(zhuān)利申請(qǐng)JP 2010-088466 中所公開(kāi)的主題有關(guān)的主題，這些申請(qǐng)的全部?jī)?nèi)容通過(guò)引用結(jié)合于此。
權(quán)利要求
1.一種圖像合成設(shè)備，包括圖像選擇裝置，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像； 順序確定裝置，用于基于所選擇的所述三維圖像的視差量來(lái)確定合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；圖像合成裝置，用于根據(jù)所述合成順序來(lái)合成所選擇的所述三維圖像；以及控制裝置，用于響應(yīng)于用戶(hù)的操作來(lái)控制所述圖像選擇裝置、所述順序確定裝置和所述圖像合成裝置。
2.根據(jù)權(quán)利要求1所述的圖像合成設(shè)備，其中所述控制裝置在用戶(hù)的選擇操作用于選擇所述三維圖像中預(yù)定三維圖像使得所述預(yù)定三維圖像以預(yù)定合成順序被合成時(shí)，控制所述順序確定裝置以確定所述預(yù)定三維圖像的合成順序；并且在所述順序確定裝置確定的所述預(yù)定三維圖像的所述合成順序未成為所述預(yù)定合成順序時(shí)，將用戶(hù)的所述選擇操作處理為未執(zhí)行。
3.根據(jù)權(quán)利要求1所述的圖像合成設(shè)備，其中在用戶(hù)的用于改變所述合成順序的改變操作被執(zhí)行時(shí)，所述控制裝置將用戶(hù)的所述改變操作處理為未執(zhí)行。
4.根據(jù)權(quán)利要求1所述的圖像合成設(shè)備，其中在用戶(hù)的用于取消對(duì)所選擇的所述三維圖像中的任意三維圖像的選擇的取消操作被執(zhí)行時(shí)，所述控制裝置控制所述順序確定裝置以確定新的合成順序，所述新的合成順序?qū)⒈贿x擇為取消的所述三維圖像從所述合成順序中排除。
5.根據(jù)權(quán)利要求1所述的圖像合成設(shè)備，還包括用于測(cè)量所選擇的所述三維圖像的視差量的視差量測(cè)量裝置，所述順序確定裝置基于測(cè)量得到的所述視差量來(lái)確定所述合成順序。
6.一種用于圖像合成設(shè)備的圖像合成方法，所述圖像合成設(shè)備用于合成三維圖像，并包括圖像選擇裝置、順序確定裝置、圖像合成裝置和控制裝置，所述圖像合成方法包括由所述圖像選擇裝置執(zhí)行的步驟從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；由所述順序確定裝置執(zhí)行的步驟基于所選擇的所述三維圖像的視差量來(lái)確定合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；由所述圖像合成裝置執(zhí)行的步驟根據(jù)所述合成順序來(lái)合成所選擇的所述三維圖像；以及由所述控制裝置執(zhí)行的步驟響應(yīng)于用戶(hù)的操作來(lái)控制所述圖像選擇裝置、所述順序確定裝置和所述圖像合成裝置。
7.一種圖像合成設(shè)備，包括圖像選擇裝置，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像； 順序獲取裝置，用于獲取合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；視差量調(diào)節(jié)裝置，用于基于所述合成順序來(lái)調(diào)節(jié)所選擇的所述三維圖像的視差量；以及圖像合成裝置，用于根據(jù)所述合成順序?qū)⒄{(diào)節(jié)后的、所選擇的所述三維圖像合成。
8.根據(jù)權(quán)利要求7所述的圖像合成設(shè)備，還包括用于獲取完成度信息的完成度獲取裝置，所述完成度信息表示當(dāng)被選擇的三維圖像的視差量從原始視差量被調(diào)節(jié)到與所述合成順序?qū)?yīng)的視差量時(shí)的進(jìn)展情況；所述視差量調(diào)節(jié)裝置基于所述完成度信息來(lái)調(diào)節(jié)所選擇的所述三維圖像的視差量； 所述圖像合成裝置將基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的所述三維圖像合成。
9.根據(jù)權(quán)利要求7所述的圖像合成設(shè)備，還包括比較產(chǎn)生裝置，用于將基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的所述三維圖像的視差量彼此比較并基于比較結(jié)果產(chǎn)生區(qū)域信息，所述區(qū)域信息表示基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的三維區(qū)域的整體區(qū)域內(nèi)用于顯示合成后的三維圖像的區(qū)域；所述圖像合成裝置基于所述區(qū)域信息將基于所述完成度信息經(jīng)過(guò)調(diào)節(jié)的三維圖像合成。
10.根據(jù)權(quán)利要求7所述的圖像合成設(shè)備，其中，響應(yīng)于由用戶(hù)指定所述合成順序的指定操作，所述順序獲取裝置獲取由用戶(hù)的所述指定操作所指定的所述合成順序。
11.根據(jù)權(quán)利要求10所述的圖像合成設(shè)備，還包括測(cè)量裝置，用于測(cè)量所選擇的所述三維圖像的視差量；以及調(diào)節(jié)量計(jì)算裝置，用于基于所述合成順序來(lái)計(jì)算用于將測(cè)量得到的視差量調(diào)節(jié)到與所述合成順序?qū)?yīng)的視差量的調(diào)節(jié)量；所述視差量調(diào)節(jié)裝置利用基于所述合成順序計(jì)算得到的所述調(diào)節(jié)量來(lái)調(diào)節(jié)所述視差量。
12.根據(jù)權(quán)利要求11所述的圖像合成設(shè)備，還包括用于臨時(shí)保存所述調(diào)節(jié)量的調(diào)節(jié)量保存裝置；所述視差量調(diào)節(jié)裝置響應(yīng)于命令操作，利用保存在所述調(diào)節(jié)量保存裝置中的所述調(diào)節(jié)量來(lái)調(diào)節(jié)所述視差量，所述命令操作被執(zhí)行來(lái)命令以由用戶(hù)的所述指定操作所指定的所述合成順序來(lái)執(zhí)行合成；所述圖像合成裝置根據(jù)由用戶(hù)的所述指定操作所指定的所述合成順序?qū)⒄{(diào)節(jié)后的所述三維圖像合成。
13.根據(jù)權(quán)利要求7所述的圖像合成設(shè)備，其中，僅當(dāng)調(diào)節(jié)后的所述三維圖像的視差量低于預(yù)定的閾值時(shí)，所述視差量調(diào)節(jié)裝置執(zhí)行對(duì)所選擇的所述三維圖像的視差量的調(diào)節(jié)。
14.根據(jù)權(quán)利要求7所述的圖像合成設(shè)備，還包括第一輸出裝置，用于將通過(guò)所述圖像合成裝置的合成獲得的合成三維圖像輸出以作為用于用戶(hù)的確認(rèn)的預(yù)覽確認(rèn)圖像進(jìn)行顯示；以及第二輸出裝置，用于將所述合成三維圖像輸出作為最終合成三維圖像。
15.根據(jù)權(quán)利要求7所述的圖像合成設(shè)備，其中，當(dāng)所選擇的所述三維圖像被合成時(shí)， 所述順序獲取裝置獲取所選擇的所述三維圖像被顯示在近身側(cè)所依據(jù)的順序作為所述合成順序。
16.一種用于圖像合成設(shè)備的圖像合成方法，所述圖像合成設(shè)備用于合成多個(gè)三維圖像，并包括圖像選擇裝置、順序獲取裝置、視差量調(diào)節(jié)裝置和圖像合成裝置，所述圖像合成方法包括由所述圖像選擇裝置執(zhí)行的步驟從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；由所述順序獲取裝置執(zhí)行的步驟獲取合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；由所述視差量調(diào)節(jié)裝置執(zhí)行的步驟基于所述合成順序來(lái)調(diào)節(jié)所選擇的所述三維圖像的視差量；以及由所述圖像合成裝置執(zhí)行的步驟根據(jù)所述合成順序?qū)⒄{(diào)節(jié)后的所選擇的所述三維圖像合成。
17.一種圖像合成設(shè)備，包括圖像選擇部分，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；順序確定部分，用于基于所選擇的所述三維圖像的視差量確定合成順序，所述合成順序表示所選擇的三維圖像被合成的順序；圖像合成部分，用于根據(jù)所述合成順序來(lái)合成所選擇的所述三維圖像；以及控制部分，用于響應(yīng)于用戶(hù)的操作來(lái)控制所述圖像選擇部分、所述順序確定部分和所述圖像合成部分。
18.一種圖像合成設(shè)備，包括圖像選擇部分，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或更多個(gè)三維圖像；順序獲取部分，用于獲取合成順序，所述合成順序表示所選擇的所述三維圖像被合成的順序；視差量調(diào)節(jié)部分，用于基于所述合成順序來(lái)調(diào)節(jié)所選擇的所述三維圖像的視差量；圖像合成部分，用于根據(jù)所述合成順序?qū)⒄{(diào)節(jié)后的所選擇的所述三維圖像合成。
全文摘要
本發(fā)明涉及圖像合成設(shè)備、圖像合成方法和程序。圖像合成設(shè)備包括圖像選擇部分，用于從多個(gè)三維圖像當(dāng)中選擇要被合成的兩個(gè)或多個(gè)三維圖像；順序確定部分，用于基于所選擇的三維圖像的視差量確定合成順序，所述合成順序表示所選擇的三維圖像被合成的順序；圖像合成部分，用于根據(jù)所述合成順序來(lái)合成被選擇的三維圖像；以及控制部分，用于響應(yīng)于用戶(hù)的操作來(lái)控制所述圖像選擇部分、所述順序確定部分和所述圖像合成部分。
文檔編號(hào)H04N13/00GK102215413SQ20111008320
公開(kāi)日2011年10月12日 申請(qǐng)日期2011年3月31日 優(yōu)先權(quán)日2010年4月7日
發(fā)明者中村泉三郎, 藤田晉一 申請(qǐng)人:索尼公司