攝像方法和圖像處理方法以及這些方法的程序、記錄介質(zhì)、及攝像裝置制造方法
【專利摘要】本發(fā)明的一個(gè)方式涉及的攝像方法利用了具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距的多焦點(diǎn)透鏡，該攝像方法包括：合焦?fàn)顟B(tài)控制步驟，對(duì)多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制；以及攝像步驟，在經(jīng)控制的合焦?fàn)顟B(tài)下獲取被攝體的圖像。由于對(duì)具有多個(gè)不同的焦距的多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制來(lái)獲取被攝體的圖像，所以能夠獲取準(zhǔn)確合焦的圖像或高速合焦的圖像等利用了多焦點(diǎn)透鏡的特性的希望的圖像。在這樣的攝像方法中，既可以進(jìn)行與多焦點(diǎn)透鏡的被攝景深和被攝體的距離分布的幅度之間的關(guān)系相應(yīng)的合焦?fàn)顟B(tài)的控制來(lái)獲取圖像，也可以根據(jù)拍攝指示對(duì)合焦?fàn)顟B(tài)進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦來(lái)獲取圖像。
【專利說(shuō)明】攝像方法和圖像處理方法以及這些方法的程序、記錄介質(zhì)、及攝像裝直
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及由具備多焦點(diǎn)透鏡的攝像裝置進(jìn)行合焦?fàn)顟B(tài)的控制的技術(shù)。
【背景技術(shù)】
[0002]近年，已知有使用具有多個(gè)焦點(diǎn)的多焦點(diǎn)透鏡的攝像裝置。例如在專利文獻(xiàn)I中記載有，在具備多焦點(diǎn)透鏡的攝像裝置中，通過(guò)卷積處理來(lái)得到被攝體的圖像的技術(shù)。此夕卜，在專利文獻(xiàn)2中記載有，在具備多焦點(diǎn)透鏡的攝像裝置中，通過(guò)基于點(diǎn)擴(kuò)散函數(shù)的反函數(shù)來(lái)校正攝像信號(hào)的技術(shù)。進(jìn)一步地，在專利文獻(xiàn)I以及2中，使用具備多焦點(diǎn)透鏡的攝像裝置來(lái)獲取焦距不同的圖像，通過(guò)復(fù)原處理來(lái)得到焦點(diǎn)對(duì)準(zhǔn)了的圖像。
[0003]此外，在專利文獻(xiàn)3中記載有，在設(shè)置于多焦點(diǎn)透鏡的中心部分的短焦點(diǎn)區(qū)域進(jìn)行條形碼的讀取，在設(shè)置于透鏡的周邊部分的長(zhǎng)焦點(diǎn)區(qū)域進(jìn)行通常的拍攝。
[0004]另一方面，如專利文獻(xiàn)4所記載的那樣，也可以進(jìn)行如下操作:不使用多焦點(diǎn)透鏡，而通過(guò)焦距不同的多個(gè)照相機(jī)模塊來(lái)拍攝同一被攝體，作為整體來(lái)獲取多焦點(diǎn)的圖像。
[0005]在先技術(shù)文獻(xiàn)
[0006]專利文獻(xiàn)
[0007]專利文獻(xiàn)I JP特開(kāi)2008-58540號(hào)公報(bào)
[0008]專利文獻(xiàn)2 JP特開(kāi)2008-516299號(hào)公報(bào)
[0009]專利文獻(xiàn)3 JP特開(kāi)2003-098426號(hào)公報(bào)
[0010]專利文獻(xiàn)4 JP特開(kāi)2008-172523號(hào)公報(bào)
發(fā)明概要
[0011]發(fā)明要解決的課題
[0012]在上述專利文獻(xiàn)1-2這樣的現(xiàn)有技術(shù)中，對(duì)使用多焦點(diǎn)透鏡獲取到的圖像進(jìn)行卷積處理，或者通過(guò)反函數(shù)來(lái)進(jìn)行校正，由此即使將透鏡保持固定也能得到一定程度對(duì)焦了的圖像。但是，在這樣的現(xiàn)有技術(shù)中，不是有意使被攝體完全合焦，在被攝景深的絕大部分范圍中會(huì)產(chǎn)生一定程度的(容許彌散圓的范圍內(nèi)的)模糊，所以難以得到利用透鏡所具有的最高性能而合焦了的圖像。此外，不能很好地利用由于區(qū)域不同而具有不同的焦距和被攝景深這樣的多焦點(diǎn)透鏡的特性。
[0013]此外，在上述專利文獻(xiàn)1-3這樣的現(xiàn)有技術(shù)中，通過(guò)將透鏡的焦點(diǎn)深度設(shè)定得較深或進(jìn)行獲取到的圖像的復(fù)原處理，從而在較廣的范圍中得到即使將透鏡保持固定也具有一定程度對(duì)焦了的圖像。但是，在這樣的現(xiàn)有技術(shù)中，不是有意使被攝體完全合焦，在被攝景深的大部分范圍中會(huì)產(chǎn)生一定程度的(容許彌散圓的范圍內(nèi)的)模糊，所以難以得到利用透鏡所具有的最高性能而合焦了的圖像。此外，難以追隨移動(dòng)的被攝體來(lái)準(zhǔn)確地對(duì)焦點(diǎn)。
[0014]進(jìn)一步地，也存在如專利文獻(xiàn)4所記載的技術(shù)那樣，如果使用大量的模塊則系統(tǒng)會(huì)復(fù)雜化和大型化這樣的問(wèn)題。
【發(fā)明內(nèi)容】

[0015]本發(fā)明基于這樣的情形而形成，其目的在于，提供一種能夠獲取利用了多焦點(diǎn)透鏡的特性的希望的圖像，并且能夠根據(jù)目的或喜好來(lái)提取/選擇獲取到的圖像的攝像方法和圖像處理方法以及這些方法的程序、記錄介質(zhì)、以及攝像裝置。
[0016]用于解決課題的手段
[0017]為了達(dá)成上述目的，本發(fā)明的第I方式涉及的攝像方法利用了具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距的多焦點(diǎn)透鏡，該攝像方法包括:合焦?fàn)顟B(tài)控制步驟，對(duì)多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制；和攝像步驟，在經(jīng)控制的合焦?fàn)顟B(tài)下獲取被攝體的圖像。在第I方式涉及的攝像方法中，對(duì)具有多個(gè)不同的焦距的多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制來(lái)獲取被攝體的圖像，所以能夠獲取準(zhǔn)確合焦的圖像或高速合焦的圖像等、利用了多焦點(diǎn)透鏡的特性的希望的圖像。
[0018]本發(fā)明的第2方式涉及的攝像方法，在第I方式中，在合焦?fàn)顟B(tài)控制步驟中，根據(jù)多焦點(diǎn)透鏡的被攝景深與被攝體的距離分布的幅度之間的關(guān)系來(lái)控制合焦?fàn)顟B(tài)。
[0019]在第2方式涉及的攝像方法中，通過(guò)根據(jù)多焦點(diǎn)透鏡的被攝景深與被攝體的距離分布的幅度之間的關(guān)系來(lái)進(jìn)行合焦控制，例如能夠根據(jù)拍攝目的自由地進(jìn)行根據(jù)至被攝體為止的距離來(lái)獲取在多個(gè)焦點(diǎn)區(qū)域之中任一個(gè)焦點(diǎn)區(qū)域中準(zhǔn)確合焦的圖像、在與合焦位置不同的透鏡位置進(jìn)行攝像來(lái)獲取特定的被攝體發(fā)生了模糊的圖像等，能夠獲取利用了多焦點(diǎn)透鏡的特性的希望的圖像。另外，在第2方式中，所謂“多焦點(diǎn)透鏡的被攝景深”包括多焦點(diǎn)透鏡的各焦點(diǎn)區(qū)域的被攝景深、以及多焦點(diǎn)透鏡作為整體的被攝景深。
[0020]另外，在第2方式中，距離分布能夠通過(guò)各種方法來(lái)檢測(cè)。例如可以利用相位差信息來(lái)進(jìn)行計(jì)算，也可以通過(guò)對(duì)在不同的透鏡位置獲取到的多個(gè)攝像信號(hào)的對(duì)比度進(jìn)行比較來(lái)計(jì)算。此外，在第2方式中獲取的圖像不限定為靜止圖像，可以根據(jù)被攝體的距離分布的變化連續(xù)地進(jìn)行合焦控制來(lái)獲取動(dòng)態(tài)圖像。此外，在第2方式中，優(yōu)選，攝像裝置具有攝像元件，該攝像元件具備選擇性地接受通過(guò)多個(gè)區(qū)域中的任一個(gè)區(qū)域的光束的受光元件。
[0021]本發(fā)明的第3方式涉及的攝像方法，在第I或第2方式中，在合焦?fàn)顟B(tài)控制步驟中，在多焦點(diǎn)透鏡的作為整體的被攝景深為被攝體的距離分布的幅度以上的情況下，對(duì)合焦?fàn)顟B(tài)進(jìn)行控制，以使被攝體的距離分布的幅度收納于作為整體的被攝景深內(nèi)。
[0022]多焦點(diǎn)透鏡的作為整體的被攝景深與被攝體的距離分布的幅度之間的關(guān)系，根據(jù)多焦點(diǎn)透鏡的設(shè)計(jì)或?qū)嶋H的拍攝狀況等而不同，也可能有某一個(gè)較廣的情況。在第3方式涉及的攝像方法中，考慮這樣的情形，在多焦點(diǎn)透鏡的作為整體的被攝景深為被攝體的距離分布的幅度以上的情況下，進(jìn)行合焦控制以使被攝體的距離分布的幅度收納于被攝景深內(nèi)來(lái)獲取圖像，所以能夠配合被攝體的距離分布來(lái)獲取適當(dāng)合焦的圖像。
[0023]另外，在第3方式中，能夠根據(jù)拍攝目的來(lái)決定如何通過(guò)多焦點(diǎn)透鏡的作為整體的被攝景深來(lái)涵蓋被攝體的距離分布的幅度。例如，在使被攝體的距離分布的幅度收納于作為整體的被攝景深內(nèi)的基礎(chǔ)上，可以進(jìn)行控制以使作為整體的被攝景深的中心與被攝體的距離分布的中心一致，也可以進(jìn)行控制以使作為整體的被攝景深靠近被攝體的距離分布的前側(cè)或后側(cè)。此外，可以在使被攝體的距離分布的幅度收納于作為整體的被攝景深內(nèi)的基礎(chǔ)上，進(jìn)行控制，以使關(guān)于任一個(gè)焦點(diǎn)區(qū)域，針對(duì)主要被攝體等特定的被攝體的合焦度為閾值以上、或者為最大。
[0024]本發(fā)明的第4方式涉及的攝像方法，在第I或第2方式中，在合焦?fàn)顟B(tài)控制步驟中，在多焦點(diǎn)透鏡的作為整體的被攝景深比被攝體的距離分布的幅度窄的情況下，對(duì)合焦?fàn)顟B(tài)進(jìn)行控制，以使在被攝體的距離分布的幅度之中未收納于作為整體的被攝景深的范圍在作為整體的被攝景深的前側(cè)和后側(cè)相等。第4方式對(duì)多焦點(diǎn)透鏡作為整體的被攝景深比被攝體的距離分布的幅度窄的情況下的合焦控制的一個(gè)方式進(jìn)行規(guī)定。
[0025]本發(fā)明的第5方式涉及的攝像方法，在第I或第2方式中，在合焦?fàn)顟B(tài)控制步驟中，在多焦點(diǎn)透鏡的作為整體的被攝景深比被攝體的距離分布的幅度窄的情況下，基于被攝體間的合焦優(yōu)先位次來(lái)控制合焦?fàn)顟B(tài)。在第5方式中，例如，能夠使優(yōu)先位次為第I位的被攝體在任一個(gè)焦點(diǎn)區(qū)域中準(zhǔn)確合焦，或者在使優(yōu)先位次為第I位的被攝體的合焦度為給定值以上的基礎(chǔ)上使優(yōu)先位次為2以下的被攝體的合焦度為最大，由此能夠配合被攝體的距離分布來(lái)獲取適當(dāng)合焦的圖像。
[0026]本發(fā)明的第6方式涉及的攝像方法，在第5方式中，還包括:進(jìn)行人物的面部檢測(cè)的步驟；和對(duì)于檢測(cè)到的面部的人物，將合焦優(yōu)先位次設(shè)定為比人物以外的被攝體高的步驟；在合焦?fàn)顟B(tài)控制步驟中，基于設(shè)定的合焦優(yōu)先位次來(lái)控制合焦?fàn)顟B(tài)。由此，在第6方式涉及的攝像方法中，能夠在考慮了被攝體的距離分布的基礎(chǔ)上，進(jìn)一步獲取使人物優(yōu)先被合焦的圖像。
[0027]本發(fā)明的第7方式涉及的攝像方法，在第5方式中，還包括使攝像裝置的用戶來(lái)指定合焦優(yōu)先位次的步驟，在合焦?fàn)顟B(tài)控制步驟中，基于指定的合焦優(yōu)先位次來(lái)控制合焦?fàn)顟B(tài)。另外，在第7方式涉及的攝像方法中，可以提高人物的合焦優(yōu)先位次，也可以提高人物以外的被攝體的合焦優(yōu)先位次。
[0028]本發(fā)明的第8方式涉及的攝像方法，在第I方式中，在合焦?fàn)顟B(tài)控制步驟中，對(duì)合焦?fàn)顟B(tài)進(jìn)行控制，以使主要被攝體在多個(gè)區(qū)域中的任一個(gè)區(qū)域中合焦。另外，被攝體是否為主要被攝體能夠基于是否為人物的面部、以及占拍攝區(qū)域的比率等來(lái)進(jìn)行判斷。
[0029]本發(fā)明的第9方式涉及的攝像方法，在第8方式中，在合焦?fàn)顟B(tài)控制步驟中，通過(guò)進(jìn)行合焦?fàn)顟B(tài)的控制以使主要被攝體在多個(gè)區(qū)域之中焦距最短的區(qū)域中合焦，由此在攝像步驟中獲取使比主要被攝體更靠近前側(cè)的區(qū)域模糊的圖像。由此，在第9方式中，能夠根據(jù)距主要被攝體的距離來(lái)獲取使比主要被攝體更靠近前側(cè)(接近攝像裝置的一側(cè))的被攝體模糊的圖像。
[0030]本發(fā)明的第10方式涉及的攝像方法，在第8方式中，在合焦?fàn)顟B(tài)控制步驟中，通過(guò)進(jìn)行合焦?fàn)顟B(tài)的控制以使主要被攝體在多個(gè)區(qū)域之中焦距最長(zhǎng)的區(qū)域中合焦，由此在攝像步驟中獲取使比主要被攝體更靠進(jìn)深側(cè)的區(qū)域模糊的圖像。由此，在第10方式中，能夠根據(jù)距主要被攝體的距離來(lái)獲取使比主要被攝體更靠進(jìn)深側(cè)(遠(yuǎn)離攝像裝置的一側(cè))的被攝體模糊的圖像。
[0031]本發(fā)明的第11方式涉及的攝像方法，在第I至第10方式中的任一個(gè)方式中，在合焦?fàn)顟B(tài)控制步驟中，基于多焦點(diǎn)透鏡的光圈值與多焦點(diǎn)透鏡的被攝景深之間的關(guān)系來(lái)控制合焦?fàn)顟B(tài)。被攝景深依賴于透鏡的光圈而發(fā)生變化，一般，光圈值(F值)變大則被攝景深變深，光圈值變小則被攝景深變淺。因此，如第11方式這樣，通過(guò)基于多焦點(diǎn)透鏡的光圈值與多焦點(diǎn)透鏡的被攝景深之間的關(guān)系來(lái)進(jìn)行合焦控制，能夠配合被攝體的距離分布來(lái)獲取適當(dāng)?shù)睾辖沟膱D像。
[0032]本發(fā)明的第12方式涉及的攝像方法，在第I至第11方式中的任一個(gè)方式中，還包括將獲取到的圖像、與表示獲取到的圖像中所包含的被攝體的合焦度的信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。由此，在第12方式涉及的攝像方法中，用戶在圖像獲取后參照合焦度信息，能夠選擇/提取合焦度為給定的值以上的圖像等希望的圖像。
[0033]為了達(dá)成上述目的，本發(fā)明的第13方式涉及的圖像處理方法，包括基于由第12方式記錄的信息來(lái)提取記錄的圖像中所包含的圖像的步驟。此外，本發(fā)明的第14方式涉及的圖像處理方法，在第13方式中，還包括基于記錄的信息提取包含具有指定的合焦度的被攝體在內(nèi)的圖像的步驟。此外，本發(fā)明的第15方式涉及的圖像處理方法，在第13或第14方式中，還包括使用提取出的圖像來(lái)對(duì)指定的被攝體具有指定的合焦度的新的圖像進(jìn)行合成的步驟。在上述方式的圖像處理方法中，用戶能夠根據(jù)目的或喜好來(lái)得到希望的合焦度的圖像。另外，在第13至第15方式中，合焦度既可以指定特定的值，也可以僅僅指定上限值、僅僅指定下限值、或者指定由上限值以及下限值構(gòu)成的范圍。
[0034]為了達(dá)成上述目的，本發(fā)明的第16方式涉及的攝像程序，使攝像裝置執(zhí)行第I至第12方式中的任一個(gè)方式涉及的攝像方法。此外，為了達(dá)成上述目的，本發(fā)明的第17方式涉及的圖像處理程序，使圖像處理裝置執(zhí)行第13至第15中的任一個(gè)方式涉及的圖像處理方法。第16以及第17方式涉及的程序，除了嵌入數(shù)碼照相機(jī)等的攝像裝置中來(lái)使用以外，也可以在個(gè)人計(jì)算機(jī)(PC)等中作為圖像處理/編輯用軟件來(lái)使用。此外，在本發(fā)明的第
18、19方式涉及的記錄介質(zhì)中，分別記錄上述第16、17方式涉及的攝像程序的、計(jì)算機(jī)可讀取的代碼。作為第18、19方式涉及的記錄介質(zhì)的例子，除了數(shù)碼照相機(jī)和PC的R0M/RAM以夕卜，能夠使用CD、DVD和BD、HDD和SSD、各種存儲(chǔ)卡等非暫時(shí)性的(no-transitory)半導(dǎo)體存儲(chǔ)介質(zhì)或光磁記錄介質(zhì)。
[0035]為了達(dá)成上述目的，本發(fā)明的第20方式涉及的攝像裝置，具備:多焦點(diǎn)透鏡，其具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距；合焦?fàn)顟B(tài)控制部件，其對(duì)多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制；和攝像部件，其在經(jīng)控制的合焦?fàn)顟B(tài)下獲取被攝體的圖像；合焦?fàn)顟B(tài)控制部件根據(jù)多焦點(diǎn)透鏡的被攝景深與被攝體的距離分布的幅度之間的關(guān)系來(lái)控制合焦?fàn)顟B(tài)。
[0036]在第20方式涉及的攝像裝置中，通過(guò)根據(jù)多焦點(diǎn)透鏡的被攝景深與被攝體的距離分布的幅度之間的關(guān)系來(lái)進(jìn)行合焦?fàn)顟B(tài)的控制，例如能夠根據(jù)拍攝目的自由地進(jìn)行根據(jù)距被攝體的距離來(lái)獲取在多個(gè)焦點(diǎn)區(qū)域之中任一個(gè)焦點(diǎn)區(qū)域中準(zhǔn)確合焦的圖像、以及在與合焦位置不同的透鏡位置進(jìn)行攝像來(lái)獲取特定的被攝體模糊的圖像等，能夠獲取利用了多焦點(diǎn)透鏡的特性的希望的圖像。另外，在第20方式中，所謂“多焦點(diǎn)透鏡的被攝景深”，與第2方式同樣地，包括多焦點(diǎn)透鏡的各焦點(diǎn)區(qū)域的被攝景深、以及多焦點(diǎn)透鏡作為整體的被攝景深。
[0037]此外，第20方式中獲取的圖像不限定于靜止圖像，可以根據(jù)被攝體的距離分布的變化連續(xù)地進(jìn)行合焦控制來(lái)獲取動(dòng)態(tài)圖像。另外，在第20方式涉及的攝像裝置中，優(yōu)選地，具有攝像元件，該攝像元件具備選擇性地接受通過(guò)多個(gè)區(qū)域中的任一個(gè)區(qū)域的光束的受光元件。
[0038]為了達(dá)成上述目的，本發(fā)明的第21方式涉及的攝像裝置，在第I方式中，在合焦?fàn)顟B(tài)控制步驟中，根據(jù)拍攝指示，對(duì)合焦?fàn)顟B(tài)進(jìn)行控制，以使主要被攝體經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦。
[0039]在第21方式涉及的攝像方法中，對(duì)合焦?fàn)顟B(tài)進(jìn)行控制，以使主要被攝體經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦，所以能夠得到主要被攝體準(zhǔn)確合焦的圖像。此外，由于只要經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦合焦即可，所以能夠使透鏡驅(qū)動(dòng)所需的時(shí)間變短，高速合焦。另外，優(yōu)選，攝像裝置具有攝像元件，該攝像元件具備選擇性地接受通過(guò)多個(gè)區(qū)域中的任一個(gè)區(qū)域的光束。
[0040]另外，在本發(fā)明的各方式中，“多焦點(diǎn)透鏡”不限定為I枚透鏡，也包括由多個(gè)透鏡構(gòu)成的透鏡，所謂“多焦點(diǎn)透鏡的控制”，指的是使構(gòu)成多焦點(diǎn)透鏡的透鏡的至少一部分進(jìn)行移動(dòng)而合焦于被攝體。此外，在本發(fā)明的各方式中，所謂“拍攝指示”，可以通過(guò)用戶按下快門按鈕來(lái)輸入，也可以在動(dòng)畫拍攝中的各拍攝時(shí)刻中由攝像裝置產(chǎn)生。進(jìn)一步地，在本發(fā)明的各方式中，被攝體是否為主要被攝體能夠基于是否為人物的面部、以及占拍攝區(qū)域的比率等來(lái)進(jìn)行判斷。
[0041]本發(fā)明的第22方式涉及的攝像方法，在第21方式中，在合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦。在第22方式涉及的攝像方法中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦，所以能夠進(jìn)一步地高速合焦。
[0042]本發(fā)明的第23方式涉及的攝像方法，在第21或第22方式中，在合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦。在使用多焦點(diǎn)透鏡進(jìn)行攝像的情況下，畫質(zhì)依賴于各焦點(diǎn)區(qū)域的面積，但是在第23方式涉及的攝像方法中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦來(lái)獲取圖像，所以能夠得到準(zhǔn)確合焦的高畫質(zhì)的圖像，能夠利用透鏡所具有的最高性倉(cāng)泛。
[0043]本發(fā)明的第24方式涉及的攝像方法，在第21至第23方式中的任一個(gè)方式中，在合焦?fàn)顟B(tài)控制步驟，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦，在攝像步驟中獲取被攝體的圖像，接著在合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦，在攝像步驟中獲取被攝體的圖像。在第24方式涉及的攝像方法中，進(jìn)行控制以使經(jīng)由多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦來(lái)獲取圖像，接著進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦來(lái)獲取圖像，所以能夠得到高速合焦的沒(méi)有時(shí)間延遲的圖像、和雖然有若干時(shí)間延遲但是高畫質(zhì)且準(zhǔn)確合焦的圖像。用戶從這些圖像中，能夠符合目的或喜好來(lái)選擇希望的圖像。
[0044]本發(fā)明的第25方式涉及的攝像方法，在第21至第24方式中的任一個(gè)方式中，在攝像步驟中，在拍攝指示之后，進(jìn)行合焦?fàn)顟B(tài)控制步驟之前，維持拍攝指示時(shí)的合焦?fàn)顟B(tài)不變對(duì)多個(gè)區(qū)域的所有區(qū)域獲取圖像。由于維持?jǐn)z像指示時(shí)的合焦?fàn)顟B(tài)不變來(lái)進(jìn)行攝像，并且使用多焦點(diǎn)透鏡，所以在多個(gè)區(qū)域中的任一個(gè)區(qū)域中，能夠高速得到一定程度合焦的圖像。
[0045]本發(fā)明的第26方式涉及的攝像方法，在第21至第25方式中任一個(gè)方式中，根據(jù)拍攝指示，連續(xù)地進(jìn)行以下之中的至少一者來(lái)獲取被攝體的動(dòng)態(tài)圖像:在合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦，在攝像步驟中獲取被攝體的圖像；和在合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦，在攝像步驟中獲取被攝體的圖像。
[0046]在第26方式涉及的攝像方法中，由于根據(jù)拍攝指示，連續(xù)地進(jìn)行以下之中的至少一者來(lái)獲取被攝體的動(dòng)態(tài)圖像:進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦的圖像獲取；和進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦的圖像獲取；所以能夠連續(xù)地得到高速合焦的圖像和準(zhǔn)確合焦的高畫質(zhì)的圖像中的至少一者。另外，獲取哪一個(gè)圖像可以由用戶指定，也可以連續(xù)獲取兩者圖像并在事后進(jìn)行選擇/編輯，由此，用戶能夠得到符合目的或喜好的希望的圖像。
[0047]本發(fā)明的第27方式涉及的攝像方法，在第21至第26方式中的任一個(gè)方式中，還包括將獲取到的圖像、與表示從拍攝指示起至圖像獲取為止的時(shí)間的攝像時(shí)間信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。在第27方式涉及的攝像方法中，由于將獲取到的圖像、與表示從拍攝指示起至圖像獲取為止的時(shí)間的攝像時(shí)間信息建立關(guān)聯(lián)地進(jìn)行記錄，所以用戶能夠在圖像獲取后參照攝像時(shí)間信息，對(duì)攝像時(shí)間為給定的時(shí)間以下的圖像等希望的圖像進(jìn)行選擇/提取。
[0048]本發(fā)明的第28方式涉及的攝像方法，在第21至第27方式中的任一個(gè)方式中，還包括將獲取到的圖像、與表示獲取到的圖像的合焦程度的合焦度信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。在第28方式涉及的攝像方法中，由于將獲取到的圖像、與表示獲取到的圖像的合焦程度的合焦度信息建立關(guān)聯(lián)地進(jìn)行記錄，所以用戶能夠在圖像獲取后參照合焦度信息，對(duì)合焦度為給定的值以上的圖像等希望的圖像進(jìn)行選擇/提取。
[0049]本發(fā)明的第29方式涉及的攝像方法，在第21至第28方式的任一個(gè)方式中，還包括將獲取到的圖像、與表示獲取到的圖像是通過(guò)哪一個(gè)區(qū)域獲取的攝像區(qū)域信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。在第29方式涉及的攝像方法中，由于將獲取到的圖像、與表示獲取到的圖像是通過(guò)哪一個(gè)區(qū)域獲取的攝像區(qū)域信息建立關(guān)聯(lián)地進(jìn)行記錄，所以用戶能夠根據(jù)目的或喜好對(duì)在特定的區(qū)域(例如，主區(qū)域)中拍攝的圖像進(jìn)行選擇/提取。
[0050]為了達(dá)成上述目的，本發(fā)明的第30方式涉及的圖像處理方法，還包括基于由第27至第29方式中的任一個(gè)方式涉及的攝像方法記錄的信息，來(lái)提取記錄的圖像中所包含的圖像的步驟。在第30方式涉及的圖像處理方法中，由于參照與圖像建立關(guān)聯(lián)地進(jìn)行了記錄的攝像時(shí)間信息、合焦度信息、攝像區(qū)域信息來(lái)提取圖像，所以用戶能夠根據(jù)目的或喜好來(lái)得到希望的圖像。
[0051 ] 為了達(dá)成上述目的，本發(fā)明的第31方式涉及的攝像程序，使攝像裝置執(zhí)行第21至第30方式中的任一個(gè)方式涉及的攝像方法。
[0052]為了達(dá)成上述目的，本發(fā)明的第32方式涉及的攝像程序使攝像裝置執(zhí)行第30方式涉及的攝像方法。第32方式涉及的程序除了嵌入數(shù)碼照相機(jī)等的攝像裝置來(lái)使用以外，也可以在個(gè)人計(jì)算機(jī)(PC)等中作為圖像處理/編輯用軟件來(lái)使用。此外，在本發(fā)明的第33,34方式涉及的記錄介質(zhì)中，分別記錄有上述第31、32方式涉及的攝像程序的計(jì)算機(jī)可讀取的代碼。作為第33、34方式涉及的記錄介質(zhì)的例子，除了數(shù)碼照相機(jī)和PC的R0M/RAM以外，能夠使用CD、DVD和BD、HDD和SSD、各種存儲(chǔ)卡等非暫時(shí)性的(no-transitory)半導(dǎo)體存儲(chǔ)介質(zhì)或光磁記錄介質(zhì)。[0053]為了達(dá)成上述目的，本發(fā)明的第35方式涉及的攝像裝置具備:具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距的多焦點(diǎn)透鏡；對(duì)多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制的合焦?fàn)顟B(tài)控制部件；和在經(jīng)控制的狀態(tài)下獲取被攝體的圖像的攝像部件；攝像部件根據(jù)拍攝指示，進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦。
[0054]在第35方式涉及的攝像裝置中，由于對(duì)多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制以使主要被攝體經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦來(lái)獲取圖像，所以能夠得到對(duì)主要被攝體準(zhǔn)確合焦的圖像。此外，由于經(jīng)由多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦即可，所以透鏡驅(qū)動(dòng)所需的時(shí)間較短，能夠高速合焦。另外，優(yōu)選，攝像裝置具有攝像元件，該攝像元件具備選擇性地接受通過(guò)多個(gè)區(qū)域中的任一個(gè)區(qū)域的光束的受光元件。
[0055]在本發(fā)明的第36方式涉及的攝像裝置中，合焦?fàn)顟B(tài)控制部件按照相位差方式來(lái)進(jìn)行合焦?fàn)顟B(tài)的控制。雖然在攝像裝置所使用的合焦控制中存在所謂對(duì)比度方式和相位差方式，但是相對(duì)于在對(duì)比度方式中驅(qū)動(dòng)透鏡來(lái)檢測(cè)合焦?fàn)顟B(tài)，在相位差方式中由于基于被攝體像的相位差來(lái)檢測(cè)合焦?fàn)顟B(tài)，因此相比對(duì)比度方式，能夠進(jìn)行更高速的合焦控制，進(jìn)一步發(fā)揮準(zhǔn)確且高速的合焦這樣的本發(fā)明的效果。
[0056]另外，在上述的本發(fā)明的各方式中，“多焦點(diǎn)透鏡”不限定于I枚透鏡，還包括由多個(gè)透鏡構(gòu)成的透鏡，“多焦點(diǎn)透鏡的控制”指的是使構(gòu)成多焦點(diǎn)透鏡的透鏡的至少一部分進(jìn)行移動(dòng)而合焦于被攝體。
[0057]發(fā)明效果
[0058]如上所述，根據(jù)本發(fā)明，能夠獲取利用了多焦點(diǎn)透鏡的特性的希望的圖像，并且能夠根據(jù)目的或喜好來(lái)提取/選擇已獲取的圖像。
【專利附圖】

【附圖說(shuō)明】
[0059]圖1是表示攝像裝置10的構(gòu)成的方框圖。
[0060]圖2是表示拍攝透鏡12的示意圖。
[0061]圖3是表示多焦點(diǎn)透鏡的其他例子的示意圖。
[0062]圖4是表示拍攝透鏡12中的被攝體距離和合焦程度之間的關(guān)系的示意圖。
[0063]圖5是表示攝像元件16的構(gòu)成的示意圖。
[0064]圖6是表示攝像元件16中的受光元件的排列的示意圖。
[0065]圖7是表示本發(fā)明的第I實(shí)施方式涉及的攝像方法的流程圖。
[0066]圖8是表示本發(fā)明的第I實(shí)施方式涉及的攝像方法的概念圖。
[0067]圖9是表示本發(fā)明的第2實(shí)施方式涉及的攝像方法的流程圖。
[0068]圖10是表示本發(fā)明的第3實(shí)施方式涉及的攝像方法的流程圖。
[0069]圖11是表示本發(fā)明的第3實(shí)施方式涉及的攝像方法中的被攝體間的優(yōu)先級(jí)設(shè)定的例子的圖。
[0070]圖12是表示本發(fā)明的第4實(shí)施方式涉及的攝像方法的流程圖。
[0071]圖13是表示本發(fā)明的第5實(shí)施方式涉及的圖像處理方法的流程圖。
[0072]圖14是表示本發(fā)明的第6實(shí)施方式涉及的圖像處理方法的流程圖。
[0073]圖15是表示拍攝透鏡12中的被攝體距離和合焦程度之間的關(guān)系的示意圖。
[0074]圖16是表示本發(fā)明的第7實(shí)施方式涉及的攝像方法的流程圖。[0075]圖17是表示本發(fā)明的第7實(shí)施方式涉及的攝像方法的其他的流程圖。
[0076]圖18是表示本發(fā)明的第8實(shí)施方式涉及的攝像方法的流程圖。
[0077]圖19是表示本發(fā)明的第8實(shí)施方式涉及的攝像方法的其他的流程圖。
[0078]圖20是表示本發(fā)明的第9實(shí)施方式涉及的攝像方法的流程圖。
[0079]圖21是表示本發(fā)明的第9實(shí)施方式涉及的攝像方法的其他的流程圖。
[0080]圖22是表示本發(fā)明的第9實(shí)施方式涉及的攝像方法的概念圖。
[0081]圖23是表示攝像裝置10中的主要被攝體指定的例子的示意圖。
[0082]圖24是表示本發(fā)明中的圖像提取處理的概念圖。
【具體實(shí)施方式】
[0083]以下，通過(guò)附圖，詳細(xì)說(shuō)明用于實(shí)施本發(fā)明涉及的攝像方法及圖像處理方法、以及這些方法的程序、記錄介質(zhì)、及攝像裝置的方式。
[0084][攝像裝置的構(gòu)成]
[0085]圖1是表示本發(fā)明的第I實(shí)施方式涉及的攝像裝置10 (攝像裝置、圖像處理裝置)的實(shí)施方式的方框圖。攝像裝置10的裝置整體的動(dòng)作通過(guò)中央處理裝置(CPU)40(合焦?fàn)顟B(tài)控制部件、攝像部件)進(jìn)行集中控制，CPU40的動(dòng)作所需的程序(包括本發(fā)明涉及的合焦?fàn)顟B(tài)的控制和攝像、圖像的提取/合成等處理中使用的程序)和參數(shù)存儲(chǔ)在EEPROM (ElectronicalIy Erasable and Programmable Read Only Memory) 46 (記錄介質(zhì))中。另外，本發(fā)明涉及的程序(攝像程序、圖像處理程序)除了攝像裝置10的EEPR0M46以夕卜，記錄在CD、DVD和BD、HDD和SSD、各種存儲(chǔ)卡等非暫時(shí)性的(no-transitory)的半導(dǎo)體存儲(chǔ)介質(zhì)和光磁記錄介質(zhì)中，能夠在數(shù)碼照相機(jī)和個(gè)人計(jì)算機(jī)(PC)等圖像處理裝置中使用。
[0086]在攝像裝置10中設(shè)置有快門按鈕、模式盤、再現(xiàn)按鈕、MENU/0K按鍵、十字按鍵、BACK按鍵等操作部38。來(lái)自該操作部38的信號(hào)被輸入至CPU40，CPU40基于輸入信號(hào)，如后述對(duì)攝像裝置10的各電路進(jìn)行控制。
[0087]快門按鈕是輸入拍攝開(kāi)始的指示的操作按鈕，由具有SI開(kāi)關(guān)和S2開(kāi)關(guān)的二級(jí)行程(stroke)式的開(kāi)關(guān)構(gòu)成,其中，SI開(kāi)關(guān)在半按時(shí)設(shè)為ON, S2開(kāi)關(guān)在全按時(shí)設(shè)為0N。模式盤是選擇靜止圖像/動(dòng)畫拍攝模式、手動(dòng)/自動(dòng)拍攝模式、以及拍攝場(chǎng)景等的部件。
[0088]再現(xiàn)按鈕是用于切換為使拍攝記錄的圖像的靜止圖像或動(dòng)畫顯示于液晶監(jiān)視器30的再現(xiàn)模式的按鈕。MENU/0K按鍵是兼有以下功能的操作按鍵:用于進(jìn)行在液晶監(jiān)視器30的畫面上顯示菜單的指令的功能；和對(duì)選擇內(nèi)容的確定以及執(zhí)行等進(jìn)行指令的功能。十字按鍵是輸入上下左右的4方向的指示的操作部，作為光標(biāo)移動(dòng)操作部件和變焦開(kāi)關(guān)、再現(xiàn)模式時(shí)的幀前進(jìn)按鈕等來(lái)發(fā)揮功能。BACK按鍵在選擇項(xiàng)目等希望的對(duì)象的刪除和指示內(nèi)容的取消、或者返回I個(gè)之前的操作狀態(tài)時(shí)等使用。這些按鈕和按鍵能夠在圖像提取和合成處理、或者后述的被攝體間的優(yōu)先級(jí)設(shè)定時(shí)在必要的操作中使用。
[0089]在拍攝模式時(shí)，表示被攝體的圖像光經(jīng)由拍攝透鏡12、光圈14而成像于固體攝像元件(以下，稱為“(XD”)16(攝像部件)的受光面。拍攝透鏡12由被CPU40控制的透鏡驅(qū)動(dòng)部36 (合焦?fàn)顟B(tài)控制部件)驅(qū)動(dòng)，進(jìn)行后述的合焦控制等。透鏡驅(qū)動(dòng)部36按照來(lái)自CPU40的指令，使拍攝透鏡12在光軸方向上移動(dòng)，使焦點(diǎn)位置可變。[0090]拍攝透鏡12(多焦點(diǎn)透鏡、攝像部件)是具有以下區(qū)域的多焦點(diǎn)透鏡(3焦點(diǎn)透鏡):具有較短的焦距并進(jìn)行近距離拍攝的區(qū)域(以下，稱為近焦點(diǎn)區(qū)域)12a;具有比近焦點(diǎn)區(qū)域長(zhǎng)的焦距并能夠進(jìn)行人物等的拍攝的區(qū)域(以下，稱為中焦點(diǎn)區(qū)域)12b ;具有比中焦點(diǎn)區(qū)域更長(zhǎng)的焦距并能夠進(jìn)行風(fēng)景等拍攝的區(qū)域(以下，稱為遠(yuǎn)焦點(diǎn)區(qū)域)12c。拍攝透鏡12，如圖2所示，從正面觀察，半月形的區(qū)域設(shè)置在圖2的上下，其間，設(shè)置包含透鏡中心O在內(nèi)的帶狀的區(qū)域，從上部開(kāi)始按順序成為近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c。本實(shí)施方式中面積最大的中焦點(diǎn)區(qū)域12b為主區(qū)域。在這些區(qū)域中，焦距的具體的值可以配合拍攝目的等來(lái)設(shè)定。
[0091]另外，在圖2的例子中，將各焦點(diǎn)區(qū)域形成為半月形或帶狀，但是也可以如圖3所示的拍攝透鏡12’那樣，由包含透鏡中心O’在內(nèi)的圓形的區(qū)域12a’(中焦點(diǎn)區(qū)域)和其周邊的圓環(huán)狀的區(qū)域12b’、12c’(其中一者是近焦點(diǎn)區(qū)域，另一者是遠(yuǎn)焦點(diǎn)區(qū)域)形成。此夕卜，近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c面積比能夠例如設(shè)為30: 50: 20，但是也可以根據(jù)光學(xué)系統(tǒng)的特性和拍攝目的來(lái)設(shè)定為與上述不同的比率。此外，焦點(diǎn)區(qū)域的數(shù)目不限于3個(gè)，可以是2焦點(diǎn)，也可以是4焦點(diǎn)以上。
[0092]圖4(攝像方法、攝像程序)是表示拍攝透鏡12中的被攝體距離與合焦程度之間的關(guān)系的概念圖。在圖4中，合焦度曲線Ca、Cb、Cc是表示近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c的距離D處的合焦程度的曲線。曲線成為峰值的點(diǎn)Pa、Pb、Pc的距離表示拍攝透鏡12的各區(qū)域的合焦距離，曲線的高度與合焦程度對(duì)應(yīng)，曲線的廣度(spread)與被攝景深對(duì)應(yīng)。因此，如果控制拍攝透鏡12以使被攝體距離與Pa、Pb、Pc —致，則被攝體在各焦點(diǎn)區(qū)域準(zhǔn)確合焦，如果被攝體存在于各曲線Ca、Cb、Ce的廣度內(nèi)(分別為Wa、Wb、Wc)，則根據(jù)距Pa、Pb、Pc的距離在各個(gè)區(qū)域中進(jìn)行一定程度的合焦。此外，如果被攝體處于拍攝透鏡12作為整體的被攝景深內(nèi)，則在任一個(gè)區(qū)域中進(jìn)行一定程度的合焦。
[0093]這些曲線包圍的區(qū)域的面積與各焦點(diǎn)區(qū)域的面積對(duì)應(yīng)。各曲線的形狀及與其他曲線的重合情形、以及由此決定的作為拍攝透鏡12整體的被攝景深DOF可以根據(jù)光學(xué)系統(tǒng)的特性和拍攝目的來(lái)設(shè)定。另外,這些曲線Ca、Cb、Cc與各區(qū)域的MTF(Modulation TransferFunction ;調(diào)制傳遞函數(shù))曲線對(duì)應(yīng)。
[0094]通過(guò)了拍攝透鏡12的近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c的光束入射至(XD16的各光敏傳感器。如圖5所示，(XD16具有:近圖像用受光單元16a，其接受通過(guò)拍攝透鏡12的近焦點(diǎn)區(qū)域12a的光束；中圖像用受光單元16b，其接受通過(guò)中焦點(diǎn)區(qū)域12b的光束；以及遠(yuǎn)圖像用受光單元16c，其接受通過(guò)遠(yuǎn)焦點(diǎn)區(qū)域12c的光束。受光單元16a、16b、16c通過(guò)設(shè)置在微透鏡ML、以及受光部17的前面的遮光膜18a、18b、18c而分別選擇性地接受通過(guò)近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c的光束，由此，遮光膜18a、18b、18c分別成為不同的形狀。另外，也可以取代在受光部17的前面設(shè)置遮光膜，而在微透鏡ML的前面設(shè)置遮光構(gòu)件。
[0095]另外，如圖6所示，這些受光單元的數(shù)目成為與對(duì)應(yīng)的透鏡區(qū)域的面積相應(yīng)的比率，在本實(shí)施方式中，與中焦點(diǎn)區(qū)域12b對(duì)應(yīng)的中圖像用受光單元16b變得元件數(shù)最多。在本實(shí)施方式中，從中圖像用受光單元16b得到的圖像為主圖像，通過(guò)根據(jù)拍攝透鏡的面積比來(lái)增多中圖像用受光單元16b，能夠得到高畫質(zhì)的主圖像。另外，各受光單元的數(shù)目可以與和受光單元對(duì)應(yīng)的焦點(diǎn)區(qū)域的面積比大致相等。此外，受光單元優(yōu)選配置為在得到的圖像中在特定的區(qū)域和方向上畫質(zhì)不劣化，與多個(gè)焦點(diǎn)區(qū)域中的每一個(gè)區(qū)域相對(duì)應(yīng)的單元混在一起所導(dǎo)致的像素?cái)?shù)據(jù)的欠缺優(yōu)選通過(guò)插值等來(lái)適當(dāng)補(bǔ)償。
[0096]此外，CPU40經(jīng)由光圈驅(qū)動(dòng)部34來(lái)控制光圈14，并且經(jīng)由CXD控制部32進(jìn)行(XD16中的電荷蓄積時(shí)間(快門速度)和來(lái)自CCD16的圖像信號(hào)的讀出控制等。蓄積在CCD16中的信號(hào)電荷基于從CCD控制部32施加的讀出信號(hào)而作為與信號(hào)電荷相應(yīng)的電壓信號(hào)而被讀出，并被施加至模擬信號(hào)處理部20。
[0097]模擬信號(hào)處理部20對(duì)從(XD16輸出的電壓信號(hào)通過(guò)相關(guān)二重取樣處理來(lái)對(duì)各像素的R、G、B信號(hào)進(jìn)行取樣保持，并在放大后施加至A/D變換器21。A/D變換器21將依次輸入的模擬的R、G、B信號(hào)變換為數(shù)字的R、G、B信號(hào)并輸出至圖像輸入控制器22。
[0098]數(shù)字信號(hào)處理部24對(duì)經(jīng)由圖像輸入控制器22輸入的數(shù)字的圖像信號(hào)，進(jìn)行包括偏移(offset)處理、白平衡校正、以及靈敏度校正在內(nèi)的增益/控制處理、伽馬校正處理、YC處理等的給定的信號(hào)處理。
[0099]由數(shù)字信號(hào)處理部24處理后的圖像數(shù)據(jù)被輸入至VRAM50。在VRAM50中包含對(duì)各自表示I幀的圖像的圖像數(shù)據(jù)進(jìn)行存儲(chǔ)的A區(qū)域和B區(qū)域，在A區(qū)域和B區(qū)域中交替重寫表示I幀的圖像的圖像數(shù)據(jù)，從重寫了圖像數(shù)據(jù)的區(qū)域以外的區(qū)域中讀出所寫入的圖像數(shù)據(jù)。從VRAM50讀出的圖像數(shù)據(jù)在視頻編碼器28中編碼后被輸出至液晶監(jiān)視器30，由此，將被攝體像顯示在液晶監(jiān)視器30中。
[0100]液晶監(jiān)視器30采用觸摸面板來(lái)顯示已獲取的圖像，并且如后述，通過(guò)經(jīng)由畫面的用戶的操作，能夠如后述，來(lái)進(jìn)行主要被攝體以及其他被攝體的指定，此外，還能進(jìn)行被攝體間的合焦優(yōu)先位次的設(shè)定、模糊區(qū)域的指定等操作。
[0101]此外，如果存在操作部38的快門按鈕的第I階段的按下(半按)，則CPU40使AF動(dòng)作(合焦?fàn)顟B(tài)控制步驟)開(kāi)始，并經(jīng)由透鏡驅(qū)動(dòng)部36來(lái)進(jìn)行拍攝透鏡12的合焦?fàn)顟B(tài)的控制。此外，在快門按鈕的半按時(shí)，從A/D變換器21輸出的圖像數(shù)據(jù)被取入至AE檢測(cè)部44。
[0102]CPU40根據(jù)從AE檢測(cè)部44輸入的G信號(hào)的累計(jì)值來(lái)計(jì)算被攝體的明亮度(拍攝Ev值)，基于該拍攝Ev值來(lái)決定光圈14的光圈值以及CCD16的電子快門(快門速度)，并基于該結(jié)果來(lái)控制光圈14以及CCD16中的電荷蓄積時(shí)間。
[0103]AF處理部42 (合焦?fàn)顟B(tài)控制部件)是進(jìn)行相位差A(yù)F處理的部分，對(duì)拍攝透鏡12內(nèi)的聚焦透鏡進(jìn)行控制，以使根據(jù)圖像數(shù)據(jù)之中的給定的聚焦區(qū)域內(nèi)的主像素、副像素的圖像數(shù)據(jù)的相位差而求取的散焦量為O。
[0104]如果AE動(dòng)作以及AF動(dòng)作結(jié)束，存在快門按鈕的第2階段的按下(全按)，則響應(yīng)于該按下而從圖像輸入控制器22將從A/D變換器21輸出的圖像數(shù)據(jù)輸入至存儲(chǔ)器(SDRAM) 48，進(jìn)行暫時(shí)存儲(chǔ)。
[0105]向存儲(chǔ)器48的暫時(shí)存儲(chǔ)后，通過(guò)數(shù)字信號(hào)處理部24中的YC處理等的信號(hào)處理和壓縮解壓處理部26中的向JPEG(joint photographic experts group ;聯(lián)合圖像專家組)形式的壓縮處理等來(lái)生成圖像文件，該圖像文件由介質(zhì)控制器52讀出并記錄至存儲(chǔ)卡54。存儲(chǔ)卡54中記錄的圖像能夠通過(guò)操作操作部38的再現(xiàn)按鈕而由液晶監(jiān)視器30再現(xiàn)顯示。
[0106][本發(fā)明中的攝像處理]
[0107]〈第I實(shí)施方式〉
[0108]接著，說(shuō)明由上述構(gòu)成的攝像裝置10進(jìn)行的攝像處理。圖7(攝像方法、攝像程序)是表示本發(fā)明的第I實(shí)施方式涉及的攝像處理的流程圖，CPU40基于EEPR0M46 (記錄介質(zhì))中存儲(chǔ)的程序(攝像程序)來(lái)控制執(zhí)行。在第I實(shí)施方式中，進(jìn)行控制以使主要被攝體在作為主區(qū)域的中焦點(diǎn)區(qū)域12b中進(jìn)行合焦來(lái)獲取圖像。攝像處理的圖形在圖8(a)?(f)(攝像方法、攝像程序)中示出。在圖8(a)中，主要被攝體是孩子Ql，狗Q2和樹(shù)木Q3是除此以外的被攝體。另外，在圖8(a)中，省略焦點(diǎn)區(qū)域12a、12c、以及與這些區(qū)域?qū)?yīng)的合焦曲線Ca、Ce的圖示。
[0109]開(kāi)始攝像處理后，首先，將透鏡移動(dòng)至初始位置(S100)。初始位置可以任意設(shè)定，例如，能夠?qū)⑹棺鳛橹鲄^(qū)域的中焦點(diǎn)區(qū)域12b合焦于距離2m的被攝體的透鏡位置設(shè)為初始位置。如果將拍攝透鏡12移動(dòng)至初始位置，則能夠進(jìn)行拍攝，如果用戶按下操作部38的快門按鈕并輸入拍攝指示(S102)，則基于光圈14的光圈值來(lái)檢測(cè)被攝體的距離分布(S104)，基于檢測(cè)到的距離分布，使作為主要被攝體的孩子Ql在主區(qū)域中合焦(S106:合焦?fàn)顟B(tài)控制步驟)。在該狀態(tài)下，孩子Ql處于中焦點(diǎn)區(qū)域12b的幅度Wb內(nèi)(也處于拍攝透鏡12作為整體的被攝景深DOF的范圍內(nèi))，孩子Ql的位置與曲線Cb的峰值Pb的位置一致。另外，在S106中，被攝體是否為主要被攝體的判斷能夠通過(guò)是否為人物的面部、占拍攝區(qū)域的比率、或者經(jīng)由液晶監(jiān)視器30的用戶的指定等來(lái)進(jìn)行。
[0110]另外，在第I實(shí)施方式中，距離分布能夠通過(guò)各種方法來(lái)檢測(cè)。例如，如JP特開(kāi)2011-124712號(hào)中所記載的那樣，可以利用相位差信息來(lái)計(jì)算，也可以通過(guò)對(duì)在不同的透鏡位置獲取到的多個(gè)攝像信號(hào)的對(duì)比度進(jìn)行比較來(lái)計(jì)算。對(duì)于后述的第2?第4實(shí)施方式也同樣。
[0111]在S106的合焦控制后，獲取圖像(S108:攝像步驟)，將獲取到的圖像與合焦信息(被攝體的距離分布的幅度、拍攝透鏡12的被攝景深、被攝體的合焦度等)建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S110)。由此，如后述那樣，能夠進(jìn)行參照了合焦度信息的圖像的提取/合成
坐寸ο
[0112]另外，在第I實(shí)施方式中進(jìn)行動(dòng)畫拍攝的情況下，根據(jù)主要被攝體的移動(dòng)(即，距離分布的變化)來(lái)連續(xù)地進(jìn)行S104?SllO的處理來(lái)獲取圖像，并進(jìn)行記錄。
[0113]〈第2實(shí)施方式〉
[0114]圖9(攝像方法、攝像程序)是表示本發(fā)明的第2實(shí)施方式涉及的攝像處理的流程圖，CPU40基于EEPR0M46中存儲(chǔ)的程序來(lái)控制執(zhí)行。在第2實(shí)施方式中，進(jìn)行與拍攝透鏡12的被攝景深是否為被攝體的距離分布的幅度以上相應(yīng)的合焦控制。
[0115]如果開(kāi)始攝像處理，則CPU40使拍攝透鏡12移動(dòng)至初始位置(S200)。如果輸入拍攝指示(S202)，則基于光圈14的光圈值計(jì)算拍攝透鏡12作為整體的被攝景深DOF (S204)，接著，檢測(cè)被攝體的距離分布(S206)。其結(jié)果，在被攝景深DOF為被攝體的距離分布的幅度SD以上的情況下(S208中“是”)，進(jìn)入S210(合焦?fàn)顟B(tài)控制步驟)，如圖8(b)所示，進(jìn)行合焦控制，以使幅度SD收納于被攝景深DOF內(nèi)。
[0116]在S210的合焦控制時(shí)如何通過(guò)多焦點(diǎn)透鏡作為整體的被攝景深DOF來(lái)涵蓋被攝體的距離分布的幅度SD，能夠根據(jù)DOF和SD的廣度的不同的程度或拍攝目的來(lái)決定。例如，可以在使距離分布的幅度SD收納于被攝景深DOF內(nèi)的基礎(chǔ)上，進(jìn)行控制以使DOF的中心與SD的中心一致，也可以進(jìn)行控制以使DOF靠近SD的前側(cè)或后側(cè)。此外，關(guān)于任一個(gè)焦點(diǎn)區(qū)域，也可以進(jìn)行控制以使針對(duì)主要被攝體等特定的被攝體的合焦度為最大。[0117]在S210中的合焦控制后，進(jìn)行攝像(S212:攝像步驟)，將獲取到的圖像與各被攝體Ql?Q3的合焦度信息合焦信息(被攝體的距離分布的幅度、拍攝透鏡12的被攝景深、被攝體的合焦度等)建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S214)。
[0118]另一方面，在被攝景深DOF比被攝體的距離分布的幅度SD窄的情況下(S208中“否”)，進(jìn)入S216 (合焦?fàn)顟B(tài)控制步驟)，如圖8 (c)所示，進(jìn)行合焦控制以使SD在DOF的前后均等地突出，并獲取圖像(S218:攝像步驟)，將獲取到的圖像和各被攝體Ql?Q3的合焦度信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S220)。
[0119]另外，在第2實(shí)施方式中進(jìn)行動(dòng)畫拍攝的情況下，連續(xù)地進(jìn)行S204?S214或S204?S220的處理。
[0120]這樣，在第2實(shí)施方式中，進(jìn)行與拍攝透鏡12作為整體的被攝景深DOF是否為上述被攝體的距離分布的幅度SD以上相應(yīng)的合焦控制來(lái)獲取圖像，所以能夠配合被攝體的距離分布而獲取適當(dāng)合焦的圖像。
[0121]〈第3實(shí)施方式〉
[0122]圖10(攝像方法、攝像程序)是表示本發(fā)明的第3實(shí)施方式涉及的攝像處理的流程圖，CPU40基于EEPR0M46中存儲(chǔ)的程序來(lái)控制執(zhí)行。在第3實(shí)施方式中，與第2實(shí)施方式同樣地，進(jìn)行與拍攝透鏡12的被攝景深是否為被攝體的距離分布的幅度以上相應(yīng)的合焦控制，但是與第2實(shí)施方式不同，在被攝景深DOF比被攝體的距離分布的幅度SD窄的情況下，基于被攝體間的合焦優(yōu)先位次進(jìn)行上述合焦控制來(lái)獲取圖像。
[0123]在圖10的流程圖中，S300?S314的處理與圖9的流程圖的S200?S214相同。另外，與第2實(shí)施方式同樣地，在S204中基于光圈14的光圈值來(lái)計(jì)算拍攝透鏡12作為整體的被攝景深DOF。
[0124]在圖10的流程圖中，在被攝景深DOF比被攝體的距離分布的幅度SD窄的情況下(S308中“否”)，首先，進(jìn)入S316來(lái)指定被攝體間的優(yōu)先級(jí)。優(yōu)先級(jí)的指定既可以將由攝像裝置10側(cè)進(jìn)行面部檢測(cè)而檢測(cè)到的面部的人物的優(yōu)先位次設(shè)定得比該人物以外的被攝體高，也可以經(jīng)由具有觸摸面板功能的液晶監(jiān)視器30來(lái)受理用戶的指定。
[0125]圖11 (a)?(C)(攝像方法、攝像程序)是表示這樣的優(yōu)先位次設(shè)定的例子的圖。如圖11 (a)這樣，在作為被攝體的孩子Ql、狗Q2、和樹(shù)木Q3存在的情況下，在攝像裝置10側(cè)進(jìn)行面部檢測(cè)并附加優(yōu)先位次的例子為圖11(b)，在該例子中，孩子Ql為主要被攝體且優(yōu)先位次為第I位,狗Q2優(yōu)先位次為第2位，樹(shù)木Q3優(yōu)先位次為第3位。對(duì)這些被攝體Ql?Q3按照優(yōu)先位次的順序，來(lái)附加框FLl (粗實(shí)線)、框FL2 (細(xì)實(shí)線)、框FL3 (點(diǎn)線)，以便用戶能夠確認(rèn)被攝體間的優(yōu)先位次。另外，枠FLl?3也可以通過(guò)用戶在液晶監(jiān)視器30上進(jìn)行操作來(lái)變更大小和位置、顯示的0N(啟用)/0FF(禁用)等。
[0126]圖11(c)是用戶設(shè)定被攝體間的優(yōu)先位次的情況下的例子。在圖11(c)中，按照用戶觸摸的順序(這里，設(shè)為孩子Q1、狗Q2、樹(shù)木Q3的順序)來(lái)設(shè)定優(yōu)先位次，與圖11(b)同樣地來(lái)顯示框FLl?FL3。
[0127]這樣，如果在S316中設(shè)定優(yōu)先位次，則進(jìn)入S318(合焦?fàn)顟B(tài)控制步驟)，進(jìn)行合焦控制以使優(yōu)先位次高的被攝體收納于拍攝透鏡12的被攝景深DOF內(nèi)。另外，在該合焦控制中，在將優(yōu)先位次高的被攝體收納于拍攝透鏡12的被攝景深DOF內(nèi)的基礎(chǔ)上，關(guān)于進(jìn)一步如何進(jìn)行控制，能夠采用各種手法。例如，能夠或者使優(yōu)先位次為第I位的被攝體Ql在拍攝透鏡12的任一個(gè)焦點(diǎn)區(qū)域中準(zhǔn)確合焦，或者如圖8 (d)那樣，一邊盡可能地提高優(yōu)先位次為第I位的被攝體Ql的合焦度，一邊將優(yōu)先位次為第2位的被攝體Q2收納于被攝景深DOF內(nèi)。或者也可以將盡可能多的被攝體收納于被攝景深DOF內(nèi)。
[0128]如果合焦控制結(jié)束，則獲取被攝體的圖像(S320:攝像步驟)，將該獲取到的圖像與合焦信息(被攝體的距離分布的幅度、拍攝透鏡12的被攝景深、被攝體的合焦度等)建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S322)。
[0129]另外，在第3實(shí)施方式中進(jìn)行動(dòng)畫拍攝的情況下，連續(xù)地進(jìn)行S304?S322的處理。
[0130]這樣，在第3實(shí)施方式中，能夠配合被攝體的距離分布而獲取適當(dāng)合焦的圖像。
[0131]〈第4實(shí)施方式〉
[0132]圖12(攝像方法、攝像程序)是表示本發(fā)明的第4實(shí)施方式涉及的攝像處理的流程圖，CPU40基于EEPR0M46中存儲(chǔ)的程序來(lái)控制執(zhí)行。在第4實(shí)施方式中，獲取使主要被攝體的近前側(cè)或進(jìn)深側(cè)的區(qū)域模糊的圖像。
[0133]在圖12的流程圖中，S400?S406的處理與圖9的流程圖的S200?S206、圖10的流程圖的S300?S306的處理相同。另外，與第2、第3實(shí)施方式同樣地，在S404中基于光圈14的光圈值來(lái)計(jì)算拍攝透鏡12作為整體的被攝景深D0F。
[0134]在圖12的流程圖中，如果至S406為止的處理結(jié)束，則判斷是否使主要被攝體的近前模糊(S408)。在通過(guò)經(jīng)由操作部38、液晶監(jiān)視器30的用戶的指示輸入而判斷為使主要被攝體的近前模糊的情況下(S408中“是”)，CPU40進(jìn)行控制，以使如圖8(e)所示那樣，作為主要被攝體的孩子Ql在拍攝透鏡12的近焦點(diǎn)區(qū)域12a中進(jìn)行合焦(S410:合焦?fàn)顟B(tài)控制步驟)，并進(jìn)行攝像(S412:攝像步驟)。并將攝像到的圖像與合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54 (S414)。通過(guò)上述攝像處理，比孩子Ql更靠進(jìn)深側(cè)的被攝體(例如樹(shù)木Q3)在拍攝透鏡12的被攝景深DOF的范圍內(nèi)進(jìn)行合焦，但是比孩子Ql更靠近前的被攝體(例如狗Q2)根據(jù)距孩子Ql的距離而變模糊。另外，在圖8(e)中，省略拍攝透鏡12中的中焦點(diǎn)區(qū)域12b和與其對(duì)應(yīng)的合焦度曲線Cb的圖示。
[0135]另一方面，在判斷為使主要被攝體的進(jìn)深側(cè)模糊的情況下(S408中“否”)，CPU40進(jìn)行控制，以使如圖8(f)所示那樣，作為主要被攝體的孩子Ql在拍攝透鏡12的遠(yuǎn)焦點(diǎn)區(qū)域12c中進(jìn)行合焦(S416:合焦?fàn)顟B(tài)控制步驟)，并進(jìn)行攝像(S418:攝像步驟)。將攝像到的圖像與合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S420)。通過(guò)上述攝像處理，比孩子Ql更靠近前的被攝體(例如狗Q2)在拍攝透鏡12的被攝景深DOF的范圍內(nèi)進(jìn)行合焦，但比孩子Ql更靠進(jìn)深側(cè)的被攝體(例如樹(shù)木Q3)根據(jù)距孩子Ql的距離而變模糊。另外，在圖8(f)中，省略拍攝透鏡12中的中焦點(diǎn)區(qū)域12b和與其對(duì)應(yīng)的合焦度曲線Cb的圖示。
[0136]這樣，在第4實(shí)施方式中，用戶能夠配合拍攝目的來(lái)獲取使主要被攝體的近前側(cè)或進(jìn)深側(cè)模糊的希望的圖像。另外，也可以經(jīng)由液晶監(jiān)視器30使用戶指定模糊對(duì)象區(qū)域，進(jìn)行合焦控制以使該區(qū)域模糊從而進(jìn)行攝像。
[0137][本發(fā)明中的圖像處理]
[0138]接著，說(shuō)明由上述的手法獲取到的圖像的提取/合成。
[0139]〈第5實(shí)施方式〉
[0140]圖13 (圖像處理方法、圖像處理程序)是表示本發(fā)明的第5實(shí)施方式涉及的圖像處理的流程圖，CPU40基于EEPR0M46 (記錄介質(zhì))中存儲(chǔ)的程序(圖像處理程序)來(lái)控制執(zhí)行。在圖13的流程圖中，說(shuō)明以下情況:從由上述的第I?第4實(shí)施方式涉及的手法獲取到的圖像之中提取圖像，從提取出的圖像中，對(duì)所有的被攝體具有閾值以上的合焦度的新的圖像進(jìn)行合成的情況。
[0141]首先，在S500中，從存儲(chǔ)卡54中記錄的圖像中，檢測(cè)包含成為對(duì)象的被攝體(這里，如圖11(a)?(c)的例子那樣，說(shuō)明存在孩子Q1、狗Q2、樹(shù)木Q3的情況)在內(nèi)的圖像。若檢測(cè)到成為對(duì)象的被攝體，例如孩子Ql，則檢測(cè)該對(duì)象被攝體的合焦度，判斷合焦度是否為閾值以上(S502)。如在上述的第I?第4實(shí)施方式中說(shuō)明的那樣，由于在存儲(chǔ)卡54中將圖像和合焦信息(被攝體的距離分布的幅度、拍攝透鏡12的被攝景深、被攝體的合焦度等)建立關(guān)聯(lián)地進(jìn)行記錄，所以能夠通過(guò)參照該合焦信息來(lái)檢測(cè)對(duì)象被攝體的合焦度。另夕卜，閾值可以使用在攝像裝置10側(cè)設(shè)定的值，也可以使用經(jīng)由操作部38由用戶指定的值。此外，也可以按每個(gè)被攝體來(lái)設(shè)定閾值。
[0142]在檢測(cè)到的對(duì)象被攝體的合焦度為閾值以上的情況下(S502中“是”)進(jìn)入S504判斷檢測(cè)到的合焦度是否為最大，在判斷為是最大的情況下(S504中“是”)將處理對(duì)象的圖像更新為與對(duì)象被攝體相關(guān)的合成源圖像并進(jìn)入S508，針對(duì)所有圖像判斷是否進(jìn)行了處理。另外，在S502、S504中為“否”的情況下，不更新合成源圖像而進(jìn)入S508。在S508中為“是”的情況下進(jìn)入S510，在為“否”的情況下，重復(fù)S502?S506的處理直至針對(duì)所有圖像處理結(jié)束。由此，在存儲(chǔ)卡54中記錄的圖像之中，提取對(duì)象被攝體的合焦度為閾值以上且為最大的圖像。
[0143]這樣，如果針對(duì)一個(gè)對(duì)象被攝體的圖像提取處理結(jié)束，則針對(duì)所有的被攝體判斷處理是否結(jié)束(S510)。在圖11(a)?(c)示出的例子中，雖然針對(duì)孩子Ql的提取處理結(jié)束，但是直至針對(duì)狗Q2以及樹(shù)木Q3的處理結(jié)束為止，S510的判斷都為“否”，也針對(duì)Q2、Q3重復(fù)直至S500?S508的處理。如果S510的判斷為“是”(即，如果針對(duì)所有的被攝體，提取處理結(jié)束)，則在S512中進(jìn)行圖像合成。該圖像合成是從提取的圖像中按每個(gè)對(duì)象被攝體來(lái)提取該對(duì)象被攝體的部分，并合成為I張圖像的處理。
[0144]這樣，在第5實(shí)施方式中，能夠?qū)λ械谋粩z體具有閾值以上的合焦度的圖像進(jìn)行合成。另外，圖像的提取/合成可以將處理前的圖像以及處理后的圖像顯示于液晶監(jiān)視器30中來(lái)進(jìn)行。
[0145]〈第6實(shí)施方式〉
[0146]圖14(圖像處理方法、圖像處理程序)是表示本發(fā)明的第6實(shí)施方式涉及的圖像處理的流程圖，CPU40基于EEPR0M46中存儲(chǔ)的程序(圖像處理程序)來(lái)控制執(zhí)行。在圖14的流程圖中，針對(duì)以下情況進(jìn)行說(shuō)明:在從由上述的第I?第4實(shí)施方式涉及的手法獲取到的圖像之中提取圖像，并從提取出的圖像中，對(duì)特定的被攝體(關(guān)系被攝體)的合焦度為閾值以上且除此以外的被攝體的合焦度具有閾值以下的合焦度這樣的新的圖像進(jìn)行合成的情況下(例如，主要被攝體為合焦度較高，針對(duì)這以外的被攝體降低合焦度的情況)。
[0147]首先，在S600中，從記錄在存儲(chǔ)卡54中的圖像中，檢測(cè)包含成為對(duì)象的被攝體(這里，說(shuō)明如圖11(a)?(c)的例子那樣存在孩子Q1、狗Q2、樹(shù)木Q3的情況)在內(nèi)的圖像。檢測(cè)到成為對(duì)象的被攝體后，判斷該檢測(cè)到的被攝體是否為關(guān)注被攝體(S602)。在圖11(a)?(c)的例子中，能夠通過(guò)攝像裝置10或用戶的指定來(lái)將作為主要被攝體的孩子Ql設(shè)為關(guān)注被攝體，但是也可以是其他的被攝體。在檢測(cè)到的被攝體為關(guān)注被攝體的情況下進(jìn)入S604，在不是關(guān)注被攝體的情況下(S602中“否”)進(jìn)入S614。
[0148]在S604中，檢測(cè)關(guān)注被攝體的合焦度，判斷合焦度是否為閾值以上。如在上述的第I?第4實(shí)施方式中說(shuō)明的那樣，在存儲(chǔ)卡54中將圖像和合焦信息(被攝體的距離分布的幅度、拍攝透鏡12的被攝景深、被攝體的合焦度等)建立關(guān)聯(lián)地進(jìn)行記錄，所以能夠通過(guò)參照該合焦信息來(lái)檢測(cè)關(guān)注被攝體的合焦度。另外，閾值可以使用在攝像裝置10側(cè)設(shè)定的值，也可以使用經(jīng)由操作部38由用戶指定的值。此外，也可以按每個(gè)被攝體來(lái)設(shè)定閾值。
[0149]在關(guān)注被攝體的合焦度為閾值以上的情況下(S604中“是”)進(jìn)入606判斷檢測(cè)到的合焦度是否為最大。在判斷為是最大的情況下(S606中“是”)將處理對(duì)象的圖像更新為與關(guān)注被攝體相關(guān)的合成源圖像(S608)并進(jìn)入S610，判斷是否針對(duì)所有圖像進(jìn)行了處理。另外，在S604、S606中為“否”的情況下，不更新合成源圖像而進(jìn)入S610。在S610中判斷結(jié)果為“是”的情況下進(jìn)入S612，在“否”的情況下，重復(fù)S600?S608的處理直至針對(duì)所有圖像處理結(jié)束為止。由此，在記錄于存儲(chǔ)卡54中的圖像之中，提取關(guān)注被攝體的合焦度為閾值以上且為最大的圖像。
[0150]另一方面，在檢測(cè)到的被攝體不是關(guān)注被攝體而進(jìn)入S614的情況下，判斷合焦度是否為閾值以下，在判斷結(jié)果為“是”的情況下進(jìn)入S616判斷合焦度是否為最小。在判斷結(jié)果為“是”的情況下進(jìn)入S618將處理對(duì)象的圖像更新為與關(guān)注被攝體以外的被攝體相關(guān)的合成源圖像，進(jìn)入S610。另外，在S614、S616中判斷結(jié)果為“否”的情況下，不進(jìn)行合成源圖像的更新而進(jìn)入S610。
[0151]這樣，如果針對(duì)一個(gè)對(duì)象被攝體的圖像提取處理結(jié)束，則針對(duì)所有的被攝體判斷是否處理結(jié)束(S610)。如果S610的判斷為“是”，則在S612中進(jìn)行圖像合成。該圖像合成是從提取出的圖像中，按每個(gè)對(duì)象被攝體，提取該對(duì)象被攝體的部分來(lái)合成為I張圖像的處理。如上述那樣，針對(duì)關(guān)注被攝體，提取合焦度高的圖像，針對(duì)這以外的被攝體提取合焦度低的圖像，所以通過(guò)合成處理，對(duì)關(guān)注被攝體的合焦度為閾值以上且這以外的被攝體的合焦度具有閾值以下的合焦度這樣的新的圖像進(jìn)行合成。另外，圖像的提取/合成可以將處理前的圖像以及處理后的圖像顯示在液晶監(jiān)視器30中進(jìn)行。
[0152]另外，在第5以及第6實(shí)施方式中，在針對(duì)動(dòng)態(tài)圖像來(lái)對(duì)圖像進(jìn)行提取/合成的情況下，可以按每個(gè)時(shí)刻來(lái)改變提取的基準(zhǔn)值(合焦度的閾值)。例如，可以不是在所有的時(shí)刻中提取具有固定的閾值以上的合焦度的圖像，而是在最初提取合焦度低的圖像，隨著時(shí)間的經(jīng)過(guò)漸漸提取合焦度高的圖像。如果將這樣提取的圖像作為動(dòng)畫進(jìn)行再現(xiàn)，則最初模糊的被攝體漸漸被清晰映出，在若突然合焦則會(huì)存在不適感的情況下，能夠得到自然的動(dòng)態(tài)圖像。此外，相反，可以按照合焦的被攝體漸漸模糊的方式來(lái)提取圖像。這樣進(jìn)行時(shí)間變化的基準(zhǔn)值(閾值)可以由攝像裝置設(shè)定，也可以使用經(jīng)由液晶監(jiān)視器30、操作部38而由用戶設(shè)定的值。
[0153]在上述的實(shí)施方式中，以進(jìn)行攝像處理以及圖像處理的裝置作為攝像裝置10進(jìn)行了說(shuō)明，但是本發(fā)明涉及的攝像處理以及圖像處理不限定為攝像裝置中的執(zhí)行，可以在帶照相機(jī)的便攜式電話、個(gè)人計(jì)算機(jī)(PC)、便攜式游戲機(jī)等中執(zhí)行。
[0154]〈第7實(shí)施方式〉
[0155][攝像裝置的構(gòu)成][0156]接著，說(shuō)明本發(fā)明的第7實(shí)施方式。第7實(shí)施方式涉及的攝像裝置10 (攝像裝置、圖像處理裝置)的構(gòu)成與上述第I?第6實(shí)施方式涉及的攝像裝置10相同(參照?qǐng)D1?
3、5、6等)，所以省略詳細(xì)的說(shuō)明，針對(duì)與這些實(shí)施方式的不同進(jìn)行說(shuō)明。
[0157]圖15(攝像方法、攝像程序)是表示拍攝透鏡12 (多焦點(diǎn)透鏡)中的被攝體距離和合焦程度之間的關(guān)系的示意圖。在圖15中，合焦度曲線Ca、Cb、Cc是表示近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c的距離D處的合焦程度的曲線。曲線成為峰值的點(diǎn)Px、Pb、Pc的距離表示拍攝透鏡12的各區(qū)域的合焦距離，曲線的高度與合焦程度對(duì)應(yīng)，曲線的廣度與被攝景深對(duì)應(yīng)。因此，如果按照被攝體距離與Pa、Pb、Pc 一致的方式來(lái)控制拍攝透鏡，則被攝體經(jīng)由各焦點(diǎn)區(qū)域進(jìn)行合焦，如果被攝體存在于各曲線Ca、Cb、Cx的廣度內(nèi)，則進(jìn)行一定程度的合焦。曲線包圍的區(qū)域的面積與各焦點(diǎn)區(qū)域的面積對(duì)應(yīng)。各曲線的形狀以及與其他的曲線重合的程度可以根據(jù)光學(xué)系統(tǒng)的特性或拍攝目的來(lái)設(shè)定。在本實(shí)施方式中，合焦度曲線Ca、Cb、Cc設(shè)定為涵蓋從Im以下的近距離至遠(yuǎn)距離(無(wú)限遠(yuǎn))。另外，這些曲線Ca、Cb、Ce 與各區(qū)域的 MTF (Modulation Transfer Function)曲線相對(duì)應(yīng)。
[0158][攝像處理]
[0159]接著，說(shuō)明由上述構(gòu)成的攝像裝置10進(jìn)行的攝像處理。圖16 (攝像方法、攝像程序)是表示進(jìn)行靜止圖像拍攝的情況下的攝像處理的流程圖，CPU40基于EEPR0M46 (記錄介質(zhì))中存儲(chǔ)的程序(攝像程序)來(lái)控制執(zhí)行。如果開(kāi)始攝像處理，則CPU40使拍攝透鏡12移動(dòng)至初始位置(S700)，如果輸入拍攝指示(S702)，則維持拍攝指示時(shí)的透鏡位置不變，在所有區(qū)域中獲取圖像，并進(jìn)行記錄(S704)。在S704中記錄獲取到的圖像時(shí)，可以使與后述的合焦信息建立關(guān)聯(lián)進(jìn)行記錄。接著，CPU40檢測(cè)拍攝透鏡12的合焦?fàn)顟B(tài)，計(jì)算各焦點(diǎn)區(qū)域12a、12b、12c中的合焦所需的時(shí)間(S706)。合焦時(shí)間計(jì)算的結(jié)果是，在主區(qū)域中的合焦時(shí)間為最短的情況下(S708中“是”)，進(jìn)行向主要被攝體的主區(qū)域的合焦控制(S709:合焦?fàn)顟B(tài)控制步驟)來(lái)獲取圖像(S710:攝像步驟)，將獲取到的圖像與合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S712)。另一方面，在主區(qū)域不是合焦時(shí)間最短的情況下(S708為“否”)，進(jìn)入S714控制攝像透鏡12以使經(jīng)由所需合焦時(shí)間最短的區(qū)域來(lái)進(jìn)行合焦(S714:合焦?fàn)顟B(tài)控制步驟)并獲取圖像(S716:攝像步驟)，將獲取到的圖像和合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S718)。
[0160]在第7實(shí)施方式中進(jìn)行動(dòng)畫拍攝的情況下，如圖17 (攝像方法、攝像程序)的流程圖所示，在直至動(dòng)畫拍攝結(jié)束為止的期間(S720中“否”)重復(fù)S706?S716的處理。其他的處理與圖16的流程圖相同。
[0161]另外，在上述攝像處理中，合焦所需的時(shí)間能夠根據(jù)攝像指示時(shí)的透鏡位置、合焦的透鏡位置、以及透鏡移動(dòng)速度來(lái)計(jì)算。
[0162]通過(guò)這樣的處理，在第7實(shí)施方式中，根據(jù)拍攝指示，經(jīng)由所需合焦時(shí)間最短的區(qū)域使主要被攝體合焦來(lái)獲取圖像，所以能夠獲取高速(無(wú)時(shí)間延遲)合焦的圖像。此外，由于經(jīng)由任一個(gè)焦點(diǎn)區(qū)域使主要被攝體合焦，所以能夠得到準(zhǔn)確合焦的圖像。
[0163]〈第8實(shí)施方式〉
[0164]接著，說(shuō)明本發(fā)明涉及的攝像處理的第8實(shí)施方式。圖18 (攝像方法、攝像程序)是表示進(jìn)行靜止圖像拍攝的情況下的攝像處理的流程圖，CPU40基于EEPR0M46中存儲(chǔ)的程序(攝像程序)來(lái)控制執(zhí)行。[0165]如果開(kāi)始攝像處理，則CPU40使拍攝透鏡12移動(dòng)至初始位置(S800)，如果輸入拍攝指示(S802)，則維持拍攝指示時(shí)的透鏡位置不變，在所有區(qū)域中獲取圖像，并進(jìn)行記錄(S804:攝像步驟)。在S804中記錄獲取到的圖像時(shí)，也可以將后述的合焦信息建立關(guān)聯(lián)進(jìn)行記錄。接著，CPU40檢測(cè)拍攝透鏡12的合焦?fàn)顟B(tài)(S806)，經(jīng)由主區(qū)域使主要被攝體合焦(S807:合焦?fàn)顟B(tài)控制步驟)并獲取圖像(S808:攝像步驟)，將獲取到的圖像與合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S810)。
[0166]在進(jìn)行動(dòng)畫拍攝的情況下，如圖19 (攝像方法、攝像程序)的流程圖所示，在直至動(dòng)畫拍攝結(jié)束為止的期間，重復(fù)S806?S810的處理(S812中“否”)。其他的處理與圖18的流程圖相同。
[0167]通過(guò)這樣的處理，在第8實(shí)施方式中，根據(jù)拍攝指示，在主區(qū)域中使主要被攝體合焦來(lái)獲取圖像，所以能夠獲取準(zhǔn)確合焦的高質(zhì)量的圖像。
[0168]〈第9實(shí)施方式〉
[0169]接著，說(shuō)明本發(fā)明涉及的攝像處理的第9實(shí)施方式。圖20 (攝像方法、攝像程序)是表示進(jìn)行靜止圖像拍攝的情況下的攝像處理的流程圖，CPU40基于EEPR0M46中存儲(chǔ)的程序(攝像程序)來(lái)控制執(zhí)行。如以下說(shuō)明的那樣，在第9實(shí)施方式中，首先進(jìn)行合焦所需時(shí)間最短的焦點(diǎn)區(qū)域中的攝像，在合焦所需時(shí)間最短的焦點(diǎn)區(qū)域不是主區(qū)域的情況下，進(jìn)一步地進(jìn)行主區(qū)域中的攝像。
[0170]如果開(kāi)始攝像處理，則CPU40使拍攝透鏡12移動(dòng)至初始位置(S900)。示意性表示該狀態(tài)的圖是圖22(a)。初始位置可以任意設(shè)定，但是例如，能夠?qū)⑹古c主區(qū)域?qū)?yīng)的中焦點(diǎn)區(qū)域12b合焦于距離2m的被攝體的透鏡位置作為初始位置。如果使拍攝透鏡12移動(dòng)至初始位置，則能夠進(jìn)行拍攝，如果輸入拍攝指示(S902)，則維持拍攝指示時(shí)的透鏡位置不變，在所有區(qū)域中(即，近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c的所有中)獲取圖像，并進(jìn)行記錄(S904:攝像步驟)。這里，如針對(duì)圖15所說(shuō)明的那樣，拍攝透鏡12的各焦點(diǎn)區(qū)域設(shè)定為涵蓋從近距離至遠(yuǎn)距離，所以如圖22 (b)那樣，在主要被攝體Q處于遠(yuǎn)焦點(diǎn)區(qū)域的峰值Pc和中焦點(diǎn)區(qū)域的峰值Pb之間且任一個(gè)焦點(diǎn)區(qū)域都沒(méi)有完全合焦的情況下，即使維持拍攝指示時(shí)的透鏡位置不變來(lái)獲取圖像(即，即使不進(jìn)行合焦控制就獲取圖像)，主要被攝體Q在任一個(gè)焦點(diǎn)區(qū)域中也一定程度地合焦。因此，能夠高速地獲取給定的畫質(zhì)的圖像。另外，在S304中記錄獲取到的圖像時(shí)，也可以使與后述的合焦信息建立關(guān)聯(lián)地進(jìn)行記錄。
[0171]接著，CPU40檢測(cè)拍攝透鏡12的合焦?fàn)顟B(tài)，計(jì)算各焦點(diǎn)區(qū)域中的合焦所需的時(shí)間(S906)。合焦時(shí)間計(jì)算的結(jié)果是，在主區(qū)域(中焦點(diǎn)區(qū)域12b)中的合焦時(shí)間為最短的情況下(S908中“是”)，進(jìn)入S909(合焦?fàn)顟B(tài)控制步驟)進(jìn)行向主區(qū)域的合焦控制并獲取圖像(S910:攝像步驟)，將獲取到的圖像與合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S912)。另一方面，在主區(qū)域不是合焦時(shí)間最短的情況下(S908中“否”)，對(duì)拍攝透鏡12進(jìn)行控制以使經(jīng)由所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦(S914:合焦?fàn)顟B(tài)控制步驟)并獲取圖像(S916:攝像步驟)，將獲取到的圖像和合焦信息建立關(guān)聯(lián)而記錄至存儲(chǔ)卡54(S918)。在圖22(a)?(f)(攝像方法、攝像程序)中所示的例子中，由于主要被攝體Q距峰值Pc距離最近且在遠(yuǎn)焦點(diǎn)區(qū)域12c中的合焦時(shí)間最短，所以如圖22(c)所示，經(jīng)由遠(yuǎn)焦點(diǎn)區(qū)域12c合焦并獲取圖像(S914、S916)，之后，如圖22(d)那樣，經(jīng)由作為主區(qū)域的中焦點(diǎn)區(qū)域12b合焦來(lái)獲取圖像(S910、S912)。在上述處理中所需合焦時(shí)間最短的區(qū)域?yàn)橹鲄^(qū)域的情況下，在主區(qū)域中的圖像獲取/記錄(S910、S912)后，可以不進(jìn)行其他的區(qū)域中的圖像獲取就結(jié)束處理。
[0172]另外，在第9實(shí)施方式中，所謂“合焦信息”意思是表示從拍攝指示起至圖像獲取為止的時(shí)間的攝像時(shí)間信息、表示獲取到的圖像的合焦程度的合焦信息、以及表示是通過(guò)拍攝透鏡12的哪一個(gè)區(qū)域而獲取到的圖像的攝像區(qū)域信息。在第7以及第8實(shí)施方式中也同樣。
[0173]這樣，在第9實(shí)施方式中，根據(jù)拍攝指示，維持透鏡位置為初始位置不變，在所有的焦點(diǎn)區(qū)域中獲取圖像，接著，在所需合焦時(shí)間最短的區(qū)域中獲取圖像，進(jìn)一步地在所需合焦時(shí)間最短的區(qū)域不是主區(qū)域的情況下，在主區(qū)域中也獲取圖像，由此能夠獲取高速合焦的圖像和準(zhǔn)確合焦的高畫質(zhì)的圖像。此外，通過(guò)經(jīng)由作為多焦點(diǎn)透鏡的拍攝透鏡12的焦點(diǎn)區(qū)域中的任一個(gè)焦點(diǎn)區(qū)域進(jìn)行合焦并進(jìn)行攝像，能夠獲取至透鏡的最高性能而合焦的圖像。
[0174]另外，在第9實(shí)施方式中，關(guān)于主要被攝體的指定，在檢測(cè)到人物的面部的情況下，既可以將該人物識(shí)別為主要被攝體，也可以將面積最大的被攝體識(shí)別為主要被攝體。此夕卜，也可以將與用戶通過(guò)具有觸摸面板功能的液晶監(jiān)視器30觸摸的部位所對(duì)應(yīng)的被攝體識(shí)別為主要被攝體。圖23 (a)?(C)(攝像方法、攝像程序)是表示這樣的主要被攝體的指定處理的圖，如圖23(a)那樣，示出在近前(近距離)存在狗Q2，在中距離處存在孩子Q1，在遠(yuǎn)距離處存在樹(shù)木Q3的例子。圖23 (b)是攝像裝置10通過(guò)面部識(shí)別將孩子Ql識(shí)別為主要被攝體的情況下的例子，將表示是主要被攝體的框FL顯示在孩子Ql的面部的周圍。另一方面，圖23 (c)是用戶通過(guò)在液晶監(jiān)視器30上觸摸孩子Ql的面部部分而將孩子Ql識(shí)別為主要被攝體的情況下的例子，以用戶觸摸的點(diǎn)為中心來(lái)顯示框FL。另外，這樣的框FL可以通過(guò)經(jīng)由液晶監(jiān)視器30的用戶的操作來(lái)進(jìn)行大小的變更/位置的移動(dòng)。
[0175]接著，說(shuō)明在第9實(shí)施方式中進(jìn)行動(dòng)畫拍攝的情況。圖21 (攝像方法、攝像程序)是表示第9實(shí)施方式涉及的動(dòng)畫拍攝的處理的流程圖。針對(duì)進(jìn)行與圖20的流程圖相同的處理的步驟附加相同的符號(hào)，省略詳細(xì)的說(shuō)明。
[0176]在圖21所示的流程圖中，在主區(qū)域中的圖像獲取/記錄(S910、S912)后，在直至動(dòng)畫拍攝結(jié)束為止的期間(S920中“否”)，連續(xù)地進(jìn)行S906?S912的處理。即，在所需合焦時(shí)間最短的區(qū)域中獲取圖像，進(jìn)一步地在所需合焦時(shí)間最短的區(qū)域不是主區(qū)域的情況下，在主區(qū)域中也獲取圖像，重復(fù)上述處理直至動(dòng)畫拍攝結(jié)束為止。在圖22(a)?(f)的例子中，在圖22(d)中使主要被攝體Q在主區(qū)域中合焦來(lái)獲取/記錄圖像(S910，S912)，之后，主要被攝體Q移動(dòng)至前方(接近攝像裝置10的一方)，如果近焦點(diǎn)區(qū)域12a的所需合焦時(shí)間成為最短(S908中“否”)，則CPU40如圖22(e)所示，控制拍攝透鏡12以使主要被攝體在近焦點(diǎn)區(qū)域12a中進(jìn)行合焦(S914)并獲取/記錄圖像(S916、S918)，進(jìn)一步地如圖22 (f)所示，控制拍攝透鏡12以使在作為主區(qū)域的中焦點(diǎn)區(qū)域12b中進(jìn)行合焦(S909)并獲取/記錄圖像(S910、S912)。
[0177]在圖21所示的流程中，通過(guò)上述處理，在動(dòng)畫拍攝的情況下根據(jù)拍攝指示而在所需合焦時(shí)間最短的區(qū)域中獲取圖像，進(jìn)一步地在所需合焦時(shí)間最短的區(qū)域不是主區(qū)域的情況下，在主區(qū)域中也獲取圖像，由此能夠獲取高速合焦的圖像和準(zhǔn)確合焦的高畫質(zhì)的圖像。此外，通過(guò)經(jīng)由作為多焦點(diǎn)透鏡的拍攝透鏡12的焦點(diǎn)區(qū)域中的任一個(gè)焦點(diǎn)區(qū)域進(jìn)行合焦并進(jìn)行攝像，能夠獲取至透鏡的最高性能合焦的圖像。另外，在圖21的流程圖中，省略拍攝指示后的所有區(qū)域中的拍攝(S904)，可以根據(jù)需要來(lái)進(jìn)行這樣的拍攝。
[0178]在上述第7至第9實(shí)施方式中，說(shuō)明了 AF處理部42進(jìn)行相位差A(yù)F處理的情況，但也可以是，AF處理部42進(jìn)行對(duì)比度AF處理。在進(jìn)行對(duì)比度AF處理的情況下，AF處理部42對(duì)給定的聚焦區(qū)域內(nèi)的圖像數(shù)據(jù)的高頻分量進(jìn)行積分，計(jì)算表示合焦?fàn)顟B(tài)的AF評(píng)價(jià)值，控制拍攝透鏡12的合焦?fàn)顟B(tài)，以使該AF評(píng)價(jià)值成為極大。
[0179][本發(fā)明中的圖像處理]
[0180]接著，說(shuō)明本發(fā)明中的圖像處理。在本發(fā)明中，如上述的攝像處理的第7?第9實(shí)施方式所示，將獲取到的圖像與合焦信息建立關(guān)聯(lián)地進(jìn)行記錄，所以能夠參照該合焦信息選擇/提取希望的圖像。具體的處理是，CPU40基于EEPR0M46中存儲(chǔ)的程序(圖像處理程序)來(lái)控制執(zhí)行。
[0181]圖24(a)?(C)(圖像處理方法、圖像處理程序)是表示本發(fā)明中的圖像提取處理的概念圖。其中，說(shuō)明進(jìn)行時(shí)刻h?~間的動(dòng)畫拍攝的情況。在本發(fā)明涉及的攝像方法中進(jìn)行動(dòng)畫拍攝的情況下，在哪一個(gè)焦點(diǎn)區(qū)域中獲取圖像雖然依賴于使用上述攝像處理的第7至第9實(shí)施方式中的哪一個(gè)、以及主要被攝體如何進(jìn)行移動(dòng)，但是，其中，通過(guò)上述的攝像處理的第9實(shí)施方式，采用圖24(a)所示的模式來(lái)獲取圖像。在圖24(a)中，各時(shí)刻t0?tf下所示的A、B、C分別表示在近焦點(diǎn)區(qū)域12a、中焦點(diǎn)區(qū)域12b、遠(yuǎn)焦點(diǎn)區(qū)域12c中合焦/獲取到的圖像。另外，在攝像處理的第3實(shí)施方式中，在所需合焦時(shí)間最短的區(qū)域中獲取圖像，進(jìn)一步地在所需合焦時(shí)間最短的區(qū)域不是主區(qū)域的情況下，在主區(qū)域中也獲取圖像，所以雖然有時(shí)按照動(dòng)畫拍攝的各幀的間隔Λ t以下的時(shí)間間隔來(lái)獲取2張圖像，但是在以下的說(shuō)明中，將這樣2張圖像總結(jié)記載為“在時(shí)刻\下拍攝的圖像A、B”。
[0182]在圖24(a)中，在時(shí)刻tQ、W......V1Uf下獲取圖的下側(cè)所示的圖像。例如，
示出以下?tīng)顩r:在時(shí)刻h所需合焦時(shí)間最短的區(qū)域?yàn)檫h(yuǎn)焦點(diǎn)區(qū)域12c，所以獲取圖像C，由于所需合焦時(shí)間最短的區(qū)域不是主區(qū)域(中焦點(diǎn)區(qū)域12b)，所以在主區(qū)域中獲取圖像B。
[0183]在上述的攝像處理的第9實(shí)施方式中，說(shuō)明了圖21的S912以及S918，將圖像和合焦信息(攝像時(shí)間信息、合焦度信息、攝像區(qū)域信息)建立關(guān)聯(lián)進(jìn)行記錄。因此，能夠通過(guò)參照對(duì)各圖像記錄的合焦信息，來(lái)選擇/提取希望的圖像。
[0184]例如,通過(guò)參照表示從拍攝指示起至圖像獲取為止的時(shí)間的攝像時(shí)間信息,能夠提取時(shí)間延遲短且高速合焦/攝像到的圖像。圖24(b)是從圖24(a)所示的圖像組中提取攝像時(shí)間最短的圖像的例子。例如，在時(shí)刻h，首先獲取圖像C，之后，獲取了圖像B，因此提取圖像C。同樣地，如圖24(c)的例子所示，還能夠參照攝像區(qū)域信息來(lái)提取在主區(qū)域中攝像到的圖像B。此外，也可以參照合焦度信息，提取合焦度為閾值以上的圖像。在該情況下合焦程度為閾值以上的圖像存在多個(gè)的情況下，也可以提取合焦度最高的圖像。
[0185]另外，在參照上述的合焦信息來(lái)提取圖像的情況下，可以按照每個(gè)時(shí)刻來(lái)改變參照的信息，此外，也可以按每個(gè)時(shí)刻來(lái)改變提取的基準(zhǔn)值。例如，在參照合焦度來(lái)提取圖像的情況下，可以是，在所有的時(shí)刻中，不是提取合焦度為閾值以上的圖像，而是最先提取合焦度低的圖像，隨著時(shí)間的經(jīng)過(guò)漸漸地提取合焦度高的圖像。如果將這樣提取的圖像再現(xiàn)為動(dòng)畫，則最初模糊的被攝體漸漸清晰地映出，在若突然合焦則存在不適感的情況下也能得到自然的動(dòng)態(tài)圖像。此外，相反，也可以按照使合焦的被攝體漸漸模糊的方式來(lái)選擇/提取圖像。
[0186]這樣的圖像的選擇/提取可以將處理前的圖像以及處理后的圖像顯示在液晶監(jiān)視器30中進(jìn)行。
[0187]以上，使用實(shí)施方式來(lái)說(shuō)明了本發(fā)明，但是本發(fā)明的技術(shù)范圍不限定為上述實(shí)施方式中記載的范圍。能夠?qū)ι鲜鰧?shí)施方式施加多種變更或改良是本領(lǐng)域技術(shù)人員所明了的。施加了這樣的變更或改良的方式也包含在本發(fā)明的技術(shù)范圍中，由權(quán)利要求書(shū)的記載可以明確。
[0188]權(quán)利要求書(shū)、說(shuō)明書(shū)、以及附圖中所示的裝置、系統(tǒng)、程序、以及方法中的動(dòng)作、程序、步驟、以及階段等各處理的執(zhí)行順序，沒(méi)有特別明示為“更前”、“在先”等，此外，只要不是在之后的處理中使用之前的處理的輸出，就可以按照任意的順序來(lái)實(shí)現(xiàn)，請(qǐng)注意這一點(diǎn)。關(guān)于權(quán)利要求書(shū)、說(shuō)明書(shū)、以及附圖中的動(dòng)作流程，即便為了方便而使用“首先”、“接著”等來(lái)進(jìn)行了說(shuō)明，也并不意味著必須按照該順序來(lái)實(shí)施。
[0189]符號(hào)說(shuō)明
[0190]10…攝像裝置，12…拍攝透鏡，12a…近焦點(diǎn)區(qū)域，12b...中焦點(diǎn)區(qū)域，12c…遠(yuǎn)焦點(diǎn)區(qū)域，16…固體攝像兀件(CO)), 16a...近圖像用受光單兀，16b...中圖像用受光單兀，16c…遠(yuǎn)圖像用受光單元，18a、18b、18c…遮光膜，30...液晶監(jiān)視器，38…操作部，40...CPU，46…EEPR0M，48…存儲(chǔ)器，54…存儲(chǔ)卡，Ca、Cb、Ce...合焦度曲線，DOF…被攝景深，SD…被攝體的距離分布的幅 度。
【權(quán)利要求】
1.一種攝像方法，利用了具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距的多焦點(diǎn)透鏡，該攝像方法包含: 合焦?fàn)顟B(tài)控制步驟，對(duì)上述多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制；和 攝像步驟，在經(jīng)上述控制的合焦?fàn)顟B(tài)下獲取被攝體的圖像。
2.根據(jù)權(quán)利要求1所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，根據(jù)上述多焦點(diǎn)透鏡的被攝景深與上述被攝體的距離分布的幅度之間的關(guān)系來(lái)控制上述合焦?fàn)顟B(tài)。
3.根據(jù)權(quán)利要求1或2所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，在上述多焦點(diǎn)透鏡的作為整體的被攝景深為上述被攝體的距離分布的幅度以上的情況下，對(duì)上述合焦?fàn)顟B(tài)進(jìn)行控制，以使上述被攝體的距離分布的幅度收納于上述作為整體的被攝景深內(nèi)。
4.根據(jù)權(quán)利要求1或2所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，在上述多焦點(diǎn)透鏡的作為整體的被攝景深比上述被攝體的距離分布的幅度窄的情況下，對(duì)上述合焦?fàn)顟B(tài)進(jìn)行控制，以使在上述被攝體的距離分布的幅度之中未收納于上述作為整體的被攝景深的范圍在上述作為整體的被攝景深的前側(cè)和后側(cè)相等。
5.根據(jù)權(quán)利 要求1或2所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，在上述多焦點(diǎn)透鏡的作為整體的被攝景深比上述被攝體的距離分布的幅度窄的情況下，基于被攝體間的合焦優(yōu)先位次來(lái)控制上述合焦?fàn)顟B(tài)。
6.根據(jù)權(quán)利要求5所述的攝像方法，其特征在于， 還包括: 進(jìn)行人物的面部檢測(cè)的步驟；和 對(duì)于檢測(cè)到的面部的人物，將上述合焦優(yōu)先位次設(shè)定為比人物以外的被攝體高的步驟， 在上述合焦?fàn)顟B(tài)控制步驟中，基于上述設(shè)定的合焦優(yōu)先位次來(lái)控制上述合焦?fàn)顟B(tài)。
7.根據(jù)權(quán)利要求5所述的攝像方法，其特征在于， 還包括使攝像裝置的用戶來(lái)指定上述合焦優(yōu)先位次的步驟， 在上述合焦?fàn)顟B(tài)控制步驟中，基于上述指定的合焦優(yōu)先位次來(lái)控制上述合焦?fàn)顟B(tài)。
8.根據(jù)權(quán)利要求1所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，對(duì)上述合焦?fàn)顟B(tài)進(jìn)行控制，以使主要被攝體在上述多個(gè)區(qū)域中的任一個(gè)區(qū)域中合焦。
9.根據(jù)權(quán)利要求8所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，通過(guò)進(jìn)行上述合焦?fàn)顟B(tài)的控制以使上述主要被攝體在上述多個(gè)區(qū)域之中焦距最短的區(qū)域中進(jìn)行合焦，由此在上述攝像步驟中獲取使比上述主要被攝體更靠近前側(cè)的區(qū)域模糊的圖像。
10.根據(jù)權(quán)利要求8所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，通過(guò)進(jìn)行上述合焦?fàn)顟B(tài)的控制以使上述主要被攝體在上述多個(gè)區(qū)域之中焦距最長(zhǎng)的區(qū)域中進(jìn)行合焦，由此在上述攝像步驟中獲取使比上述主要被攝體更靠進(jìn)深側(cè)的區(qū)域模糊的圖像。
11.根據(jù)權(quán)利要求1~10中任一項(xiàng)所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，基于上述多焦點(diǎn)透鏡的光圈值與上述多焦點(diǎn)透鏡的被攝景深之間的關(guān)系來(lái)控制上述合焦?fàn)顟B(tài)。
12.根據(jù)權(quán)利要求1~11中任一項(xiàng)所述的攝像方法，其特征在于， 還包括將上述獲取到的圖像、與表示上述獲取到的圖像中所包含的被攝體的合焦度的信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。
13.一種圖像處理方法，包括基于通過(guò)權(quán)利要求12所述的攝像方法記錄的信息來(lái)提取上述記錄的圖像中所包含的圖像的步驟。
14.根據(jù)權(quán)利要求13所述的圖像處理方法，其特征在于， 還包括基于上述記錄的信息來(lái)提取包含具有指定的合焦度的被攝體在內(nèi)的圖像的步驟。
15.根據(jù)權(quán)利要求13或14所述的圖像處理方法，其特征在于， 還包括使用上述提取出的圖像來(lái)對(duì)指定的被攝體具有指定的合焦度的新的圖像進(jìn)行合成的步驟。
16.一種攝像程序，使攝像裝置執(zhí)行權(quán)利要求1~12中任一項(xiàng)所述的攝像方法。
17.一種圖像處理程序，使圖像處理裝置執(zhí)行權(quán)利要求13~15中任一項(xiàng)所述的圖像處理方法。
18.—種記錄介質(zhì)，記錄有權(quán)利要求16所述的攝像程序的計(jì)算機(jī)可讀取的代碼。
19.一種記錄介質(zhì)，記錄有權(quán)利要求17所述的圖像處理程序的計(jì)算機(jī)可讀取的代碼。
20.一種攝像裝置，具備: 多焦點(diǎn)透鏡，其具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距； 合焦?fàn)顟B(tài)控制部件，其對(duì)上述多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制；和 攝像部件，其在上述經(jīng)控制的合焦?fàn)顟B(tài)下獲取被攝體的圖像， 上述合焦?fàn)顟B(tài)控制部件根據(jù)上述多焦點(diǎn)透鏡的被攝景深與被攝體的距離分布的幅度之間的關(guān)系來(lái)控制上述合焦?fàn)顟B(tài)。
21.根據(jù)權(quán)利要求1所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，根據(jù)拍攝指示，對(duì)上述合焦?fàn)顟B(tài)進(jìn)行控制，以使主要被攝體經(jīng)由上述多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦。
22.根據(jù)權(quán)利要求21所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使上述主要被攝體經(jīng)由上述多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦。
23.根據(jù)權(quán)利要求21或22所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使上述主要被攝體經(jīng)由上述多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦。
24.根據(jù)權(quán)利要求21~23中任一項(xiàng)所述的攝像方法，其特征在于， 在上述合焦?fàn)顟B(tài)控制 步驟中，進(jìn)行控制以使上述主要被攝體經(jīng)由上述多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦，在上述攝像步驟中獲取上述被攝體的圖像， 接著，在上述合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使上述主要被攝體經(jīng)由上述多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦，在上述攝像步驟中獲取上述被攝體的圖像。
25.根據(jù)權(quán)利要求21~24中任一項(xiàng)所述的攝像方法，其特征在于， 在上述攝像步驟中，在上述拍攝指示之后，進(jìn)行上述合焦?fàn)顟B(tài)控制步驟之前，維持上述拍攝指示時(shí)的合焦?fàn)顟B(tài)不變對(duì)上述多個(gè)區(qū)域的所有區(qū)域獲取圖像。
26.根據(jù)權(quán)利要求21~25中任一項(xiàng)所述的攝像方法，其特征在于， 根據(jù)上述拍攝指示，持續(xù)地進(jìn)行以下之中的至少一者來(lái)獲取被攝體的動(dòng)態(tài)圖像: 在上述合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使上述主要被攝體經(jīng)由上述多個(gè)區(qū)域之中所需合焦時(shí)間最短的區(qū)域進(jìn)行合焦，在上述攝像步驟中獲取上述被攝體的圖像；和 在上述合焦?fàn)顟B(tài)控制步驟中，進(jìn)行控制以使上述主要被攝體經(jīng)由上述多個(gè)區(qū)域之中具有最大的面積的主區(qū)域進(jìn)行合焦，在上述攝像步驟中獲取上述被攝體的圖像。
27.根據(jù)權(quán)利要求21~26中任一項(xiàng)所述的攝像方法，其特征在于， 還包括將上述獲取到的圖像、與表示從上述拍攝指示起至圖像獲取為止的時(shí)間的攝像時(shí)間信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。
28.根據(jù)權(quán)利要求21~27中任一項(xiàng)所述的攝像方法，其特征在于， 還包括將上述獲取到的圖像、與表示上述獲取到的圖像的合焦程度的合焦度信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。
29.根據(jù)權(quán)利要求21~28中任一項(xiàng)所述的攝像方法，其特征在于， 還包括將上述獲取到的圖像、與表示上述獲取到的圖像是通過(guò)哪一個(gè)區(qū)域獲取的攝像區(qū)域信息建立關(guān)聯(lián)地進(jìn)行記錄的步驟。
30.一種圖像處理方法，還包括基于由權(quán)利要求27~29中任一項(xiàng)所述的攝像方法記錄的信息，來(lái)提取上述記錄的圖像中所包含的圖像的步驟。
31.一種攝像程序，使攝像裝置執(zhí)行權(quán)利要求21~30中任一項(xiàng)所述的攝像方法。
32.—種圖像處理程序，使圖像處理裝置執(zhí)行權(quán)利要求30所述的圖像處理方法。
33.一種記錄介質(zhì)，記錄有權(quán)利要求31所述的攝像程序的計(jì)算機(jī)可讀取的代碼。
34.一種記錄介質(zhì)，記錄有權(quán)利要求32所述的圖像處理程序的計(jì)算機(jī)可讀取的代碼。
35.一種攝像裝置，具備: 多焦點(diǎn)透鏡，其具有多個(gè)區(qū)域且該多個(gè)區(qū)域中的每一個(gè)區(qū)域具有不同的焦距； 合焦?fàn)顟B(tài)控制部件，其對(duì)上述多焦點(diǎn)透鏡的合焦?fàn)顟B(tài)進(jìn)行控制；和 攝像部件，其在上述經(jīng)控制的合焦?fàn)顟B(tài)下獲取被攝體的圖像， 上述攝像部件根據(jù)拍攝指示，進(jìn)行控制以使主要被攝體經(jīng)由上述多個(gè)區(qū)域中的任一個(gè)區(qū)域進(jìn)行合焦。
36.根據(jù)權(quán)利要求35所述的攝像裝置，其特征在于， 上述合焦?fàn)顟B(tài)控制部件按照相位差方式來(lái)進(jìn)行上述合焦?fàn)顟B(tài)的控制。
【文檔編號(hào)】G03B13/36GK103907043SQ201280053034
【公開(kāi)日】2014年7月2日 申請(qǐng)日期:2012年10月23日 優(yōu)先權(quán)日:2011年10月28日
【發(fā)明者】小野修司 申請(qǐng)人:富士膠片株式會(huì)社