專利名稱：圖像處理裝置、三維攝像裝置、圖像處理方法、以及圖像處理程序的制作方法
技術領域：
本申請涉及利用I個光學系統(tǒng)和I個攝像元件來生成具有視差的多個圖像的單眼三維攝像技術。
背景技術：
近年來，在利用了 CXD或CMOS等固體攝像元件(以下，有時稱作“攝像元件”)的數(shù)碼照相機或數(shù)碼攝錄像機(digital camcorder)的高功能化、高性能化中存在令人瞠目的技術。尤其是由于半導體制造技術的進步，固體攝像元件中的像素構造的微小化不斷進步。結果，實現(xiàn)了固體攝像元件的像素以及驅(qū)動電路的高集成化。因此，在短短的數(shù)年中攝像元件的像素數(shù)就從100萬像素程度顯著增加到了 1000萬像素以上。并且，通過攝像而得到的圖像的質(zhì)量也飛躍性地提高。另一方面，關于顯示裝置，通過薄型的液晶或等離子所構成的顯示器，能夠不占空間地以高分辨率進行高對比度的顯示，實現(xiàn)了高性能。這種影像的高品質(zhì)化的趨勢，從二維圖像日益擴展到三維圖像。近來，雖然需要偏光眼鏡，但高畫質(zhì)的三維顯示裝置已經(jīng)開始被開發(fā)。關于三維攝像技術，作為具有簡單的構成的代表性的方式，存在如下方式:利用由2個照相機構成的攝像系統(tǒng)，來分別取得右眼用的圖像以及左眼用的圖像。在這種所謂雙眼攝像方式中，由于利用2個照相機，因此攝像裝置可能變得大型，成本也可能變高。因此，研究了利用I個照相機來取得具有視差的多個圖像(以下，有時稱作“多視點圖像:mult1-viewpoint images”)的方式(單眼攝像方式)。例如，在專利文獻I中公開了一種利用彩色濾光器來同時取得具有視差的2個圖像的技術。圖10是示意性地表示專利文獻I中公開的攝像系統(tǒng)的圖。該技術中的攝像系統(tǒng)，具備:透鏡3 ;透鏡光圈19 ;配置了透射波長段不同的2個彩色濾光器20a、20b的光束限制板20 ;和感光膜21。在此，彩色濾光器20a、20b，例如是使紅色系、藍色系的光分別透射的濾光器。通過以上的構成，入射光透射透鏡3、透鏡光圈19、以及光束限制板20，在感光膜上成像。此時，光束限制板20中的2個彩色濾光器20a、20b，分別僅透射紅色系、藍色系的光。結果，在感光膜上形成基于分別透射了這2個彩色濾光器的光而產(chǎn)生的深紅色(magenta)系的顏色的像。在此，由于彩色濾光器20a、20b的位置不同，因此在感光膜上形成的像產(chǎn)生視差。在此，若從感光膜制作照片，并使用分別粘貼了右眼用的紅色膜以及左眼用的藍色膜的眼鏡，則能夠觀看有進深感的圖像。像這樣，根據(jù)專利文獻I中公開的技術，能夠使用2個彩色濾光器來制作多視點圖像。專利文獻I中公開的技術，是使光在感光膜上成像，并制作具有視差的多個圖像的技術，另一方面，在專利文獻2中公開了一種將具有視差的圖像變換為電信號來進行獲取的技術。圖11是示意性地表示該技術中的光束限制板的圖。在該技術中，使用在與攝像光學系統(tǒng)的光軸垂直的平面上，設置了透射紅色光的R區(qū)域22R、透射綠色光的G區(qū)域22G、透射藍色光的B區(qū)域22B的光束限制板22。通過用具有紅色用的R像素、綠色用的G像素、藍色用的B像素的彩色攝像元件來接收透射了這些區(qū)域的光，能夠取得透射了各區(qū)域的光所產(chǎn)生的圖像。此外，在專利文獻3中，也公開了一種利用與專利文獻2同樣的構成來取得具有視差的多個圖像的技術。圖12是示意性地表示專利文獻3中公開的光束限制板的圖。在該技術中，通過入射光透射設置于光束限制板23的R區(qū)域23R、G區(qū)域23G、B區(qū)域23B從而也能夠制作存在視差的圖像。專利文獻4也同樣公開了一種利用相對于光軸對稱地配置的、彼此顏色不同的一對濾光器來生成具有視差的多個圖像的技術。通過利用紅色的濾光器以及藍色的濾光器作為一對濾光器，探測紅色光的R像素觀測透射了紅色濾光器的光，探測藍色光的B像素觀測透射了藍色濾光器的光。由于紅色濾光器和藍色濾光器位置不同，因此R像素所接收的光的入射方向與B像素所接收的光的入射方向彼此不同。結果，用R像素觀測到的圖像與用B像素觀測到的圖像，成為彼此視點不同的圖像。通過根據(jù)這些圖像按照每個像素求出對應點，來算出視差量。根據(jù)算出的視差量和照相機的焦點距離信息，來求出從照相機到被攝體的距離。專利文獻5公開了如下技術:根據(jù)利用安裝了 口徑尺寸相互不同的2個彩色濾光器的光圈、或者相對于光軸在左右對稱的位置安裝了顏色不同的2個彩色濾光器的光圈而取得的2個圖像來求出被攝體的距離信息。在該技術中，在觀測分別透射了 口徑尺寸相互不同的紅色以及藍色的彩色濾光器的光的情況下，按照每個顏色而觀測到的模糊的程度不同。因此，與紅色以及藍色的彩色濾光器分別對應的2個圖像，成為根據(jù)被攝體的距離的不同而模糊的程度不同的圖像。通過根據(jù)這些圖像求出對應點，并對模糊的程度進行比較，從而能夠得到從照相機到被攝體的距離信息。另一方面，在觀測分別透射了相對于光軸在左右對稱的位置安裝的顏色不同的2個彩色濾光器的光的情況下，按照每個顏色而觀測到的入射光的方向不同。因此，與紅色以及藍色的彩色濾光器分別對應的2個圖像，成為具有視差的圖像。通過根據(jù)這些圖像求出對應點，并求出對應點間的距離，從而能夠得到從照相機到被攝體的距離信息。根據(jù)上述專利文獻I 5所示的技術，通過在光束限制板配置RGB的彩色濾光器能夠生成存在視差的圖像。但是，由于使用光束限制板，因此入射光量減少。此外，為了提高視差的效果需要將RGB的彩色濾光器配置在相互遠離的位置，并減小它們的面積，這樣一來入射光量進一步減少。針對以上技術，在專利文獻6中公開了一種利用配置了 RGB的彩色濾光器的光圈，來得到具有視差的多個圖像和光量上沒有問題的通常圖像的技術。在該技術中，在關閉了光圈的狀態(tài)下僅有透射了 RGB的彩色濾光器的光被接收，在打開了光圈的狀態(tài)下RGB的彩色濾光器區(qū)域被從光程中去掉，因此能夠接收所有入射光。由此，在關閉了光圈的狀態(tài)下取得存在視差的圖像，在打開了光圈的狀態(tài)下能夠得到光利用率高的通常圖像。在先技術文獻專利文獻專利文獻I JP特開平2-171737號公報
專利文獻2 JP特開2002-344999號公報專利文獻3 JP特開2009-276294號公報專利文獻4 JP特開2010-38788號公報專利文獻5 JP特開2010-79298號公報專利文獻6 JP特開2003-134533號公報非專利文獻非專利文獻I 利用了通過反復進行平滑化處理而進行的圖割(graph cut)的圖像分割”，永橋知行、藤吉弘亙、金出武雄，信息處理學會論文志CVM，Vol.1，N0.2,pp.10-20,2008.

發(fā)明內(nèi)容
發(fā)明要解決的課題根據(jù)現(xiàn)有技術，雖然能夠取得具有視差的多個圖像，但由于使用原色(RGB)的彩色濾光器，因此攝像元件的受光量減少。為了充分確保入射光量，如專利文獻6中記載的那樣，需要利用通過機械驅(qū)動來從光程中去除彩色濾光器的機構，來取得光利用率高的通常圖像。但是，在設置了這種機構的情況下，存在導致裝置的大型化以及高成本化的課題。本發(fā)明的實施方式，鑒于上述課題，提供一種無需進行機械驅(qū)動，就能夠取得光利用率高的多視點圖像的攝像技術。用于解決課題的技術手段本發(fā)明的一個方式的圖像處理裝置，使具有視差的2個圖像的顏色匹配。所述圖像處理裝置具備:合焦區(qū)域提取部，其提取所述2個圖像的合焦區(qū)域；顏色變換矩陣計算部，其基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣；和顏色變換部，其利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換。上述一般且特定的方式，可以利用系統(tǒng)、方法、以及計算機程序來安裝，或者利用系統(tǒng)、方法以及計算機程序的組合來實現(xiàn)。發(fā)明效果根據(jù)本發(fā)明的實施方式，無需進行機械驅(qū)動，就能夠取得光利用率高的多視點圖像。


圖1是表示實施方式中的三維攝像裝置的整體構成的框圖。圖2是表示實施方式中的透光板、光學系統(tǒng)、以及攝像元件的概略構成的示意圖。圖3是表示實施方式中的透光板的透射區(qū)域的配置的圖。圖4是表示實施方式中的攝像元件的透射濾光器的基本構成的圖。圖5是表示實施方式中的彩色攝像元件的透射濾光器的基本構成的圖。圖6是表示實施方式中的被攝體的合焦狀態(tài)的例子的圖。圖7A是表示實施方式中的圖像信號生成部的功能模塊的圖。圖7B是表示實施方式中的圖像信號生成部中的顏色變換處理的流程的圖。
圖8(a)是表示實施方式中的多視點圖像的一個例子的圖，(b)是表示提取了高頻成分后的結果的例子的圖，(C)是表示對合焦區(qū)域進行計算而得到的結果的例子的圖。圖9是表示利用變換矩陣Mc來對顏色變換前的L圖像的各像素的顏色進行變換的處理樣態(tài)的圖。圖10是專利文獻中的攝像系統(tǒng)的構成圖。圖11是專利文獻中的光束限制板的外觀圖。圖12是專利文獻中的光束限制板的外觀圖。
具體實施例方式(I)為了解決上述課題，本發(fā)明的一個方式的圖像處理裝置，使具有視差的2個圖像的顏色匹配，所述圖像處理裝置具備:合焦區(qū)域提取部，其提取所述2個圖像的合焦區(qū)域；顏色變換矩陣計算部，其基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣；和顏色變換部，其利用所述顏色變換矩陣來對所述2個圖像的中的一方的顏色進行變換。(2)在項目(I)所述的圖像處理裝置的某方式中，還具備高頻成分計算部，所述高頻成分計算部算出所述2個圖像的至少一方的高頻成分，所述合焦區(qū)域提取部基于算出的所述高頻成分，來提取所述合焦區(qū)域。(3)在項目(2)所述的圖像處理裝置的某方式中，所述合焦區(qū)域提取部，提取所述高頻成分的量比預先決定的閾值多的高頻像素的附近作為合焦區(qū)域。(4)在項目(3)所述的圖像處理裝置的某方式中，所述合焦區(qū)域提取部提取包含所述高頻像素在內(nèi)的η個像素Xm個像素(n、m是I以上的整數(shù))的矩形區(qū)域作為所述合焦區(qū)域。(5)在項目(3)或(4)所述的圖像處理裝置的某方式中，所述合焦區(qū)域提取部提取以所述高頻像素為中心的η個像素Xm個像素(n、m是I以上的整數(shù))的矩形區(qū)域作為所述合焦區(qū)域。(6)在項目(I)到(5)中任一項所述的圖像處理裝置的某方式中，所述顏色變換矩陣計算部，利用基于最小平方法的線性運算、M估計法、以及RANSAC法中的任意一種方法來求出所述顏色變換矩陣。(7)本發(fā)明的一個方式的三維攝像裝置，具備:透光部，其具有分光透射率特性相互不同的2個透射區(qū)域；攝像元件，其按照接收透射了所述透光部的光的方式配置，具有分光透射率特性相互不同的2種像素；和圖像處理部，其基于從所述攝像元件輸出的像素信號來生成具有視差的2個圖像。所述圖像處理部具有:合焦區(qū)域提取部，其提取所述2個圖像的合焦區(qū)域；顏色變換矩陣計算部，其基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣；和顏色變換部，其利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換。(8)本發(fā)明的一個方式的圖像處理方法，是使具有視差的2個圖像的顏色匹配的圖像處理方法，所述圖像處理方法包括如下步驟:提取所述2個圖像的合焦區(qū)域的步驟；基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣的步驟；和利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換的步驟。(9)本發(fā)明的一個方式的圖像處理程序，是使具有視差的2個圖像的顏色匹配的圖像處理程序，所述圖像處理程序使計算機執(zhí)行如下步驟:提取所述2個圖像的合焦區(qū)域的步驟；基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣的步驟；和利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換的步驟。以下，參照附圖對本發(fā)明的更具體的實施方式進行說明。在以下的說明中，對公共或?qū)囊馗郊酉嗤姆?。另外，在本說明書中，有時將表示圖像的信號或信息簡稱為“圖像”。(實施方式)圖1是表示本發(fā)明的實施方式的三維攝像裝置(以下，簡稱“攝像裝置”。)的整體構成的框圖。本實施方式的攝像裝置是數(shù)字式的電子照相機，具備:攝像部100 ;和基于從攝像部100輸出的信號來生成表示圖像的信號(圖像信號)的信號處理部200。攝像部100具備:具有在攝像面上排列的多個光感知單元的攝像元件(圖像傳感器)I ;具有透射波長段相互不同的2個透射區(qū)域的透光板2 ;用于在攝像元件I的攝像面上形成像的光學透鏡3 ;和紅外截止濾光器4。攝像部100還具備:產(chǎn)生用于對攝像元件I進行驅(qū)動的基本信號并且接收來自攝像元件I的輸出信號來送出到信號處理部200的信號產(chǎn)生/接收部5 ;和基于由信號產(chǎn)生/接收部5產(chǎn)生的基本信號來對攝像元件I進行驅(qū)動的元件驅(qū)動部6。攝像元件I典型的是CXD或CMOS傳感器，通過公知的半導體制造技術而制造。信號產(chǎn)生/接收部5以及元件驅(qū)動部30例如由CXD驅(qū)動器等LSI構成。信號處理部200具備:對從攝像部100輸出的信號進行處理來生成圖像信號的圖像信號生成部7 ;保存用于圖像信號的生成的各種數(shù)據(jù)的存儲器30 ;和將所生成的圖像信號送出到外部的接口(IF)部8。圖像信號生成部7可以通過公知的數(shù)字信號處理器(DSP)等硬件、和執(zhí)行包括圖像信號生成處理在內(nèi)的圖像處理的軟件的組合而最佳地實現(xiàn)。存儲器30由DRAM等構成。存儲器30記錄從攝像部100得到的信號，并且暫時存儲由圖像信號生成部7生成的圖像數(shù)據(jù)、壓縮后的圖像數(shù)據(jù)。這些圖像數(shù)據(jù)通過接口部8被送出到未圖示的記錄介質(zhì)或顯示部等。另外，本實施方式的攝像裝置可以具備電子快門、取景器、電源(電池)、閃光燈等公知的構成要素，但它們的說明并不是本發(fā)明的理解所必須的因而省略。此外，上述構成是一例，在本實施方式中，透光板2、攝像元件1、圖像信號生成部7以外可以適當將公知的要素組合來使用。接著，參照圖2 4更詳細地說明攝像部100的構成。圖2是示意性地表示攝像部100中的透光板2、透鏡3、以及攝像元件I的配置關系的圖。另外，在圖2中，省略了透光板2、透鏡3、以及攝像元件I以外的構成要素。透鏡3可以是由多個透鏡群構成的透鏡單元，但在圖2中為了簡單，描繪成了單一的透鏡。透光板2具有光透射率的波長依賴性(分光透射率)相互不同的2個透射區(qū)域Cl、C2。透鏡3是公知的透鏡，對透射了透光板2的光進行聚光，并在攝像元件I的攝像面Ia成像。另外，在本實施方式中，透光板2的透射區(qū)域C1、C2以外的區(qū)域，由遮光性構件構成。
圖3是本實施方式中的透光板2的主視圖。本實施方式中的透光板2的形狀與透鏡3相同，為圓形，但也可以為其他形狀。在區(qū)域Cl中，配置有使可見光的任意波長段的光透射的濾光器W1。區(qū)域C2也同樣地配置使可見光的任意波長段的光透射的濾光器W2。濾光器Wl和濾光器W2的透射率的波長依賴性不同。即，即使在相同的光通過了各個濾光器的情況下，透射光的明亮度(亮度)也不同。濾光器Wl以及濾光器W2，只要是以希望的透射率使光透射的材料，則可以用玻璃、塑料、玻璃紙(cellophane)等、任何材料構成。另外，本實施方式中的Wl濾光器以及W2濾光器，使可見光的任意波長段的光透射，但不必一定具有這種特性。也可以構成為Wl濾光器以及W2濾光器的一方或者雙方使一部分波長段的可見光不透射。在此，區(qū)域Cl以及區(qū)域C2在X方向分離配置。這些區(qū)域的中心間的距離L，根據(jù)透鏡3的尺寸，按照所取得的圖像具有合適的視差的方式來決定。距離L，例如，可以設定為數(shù)_ 數(shù)cm。此外，區(qū)域C1、C2，一般相對于光軸左右對稱且為相同面積。通過這種構成，能夠使入射到區(qū)域Cl、C2的光的量實質(zhì)上相等。此外，在根據(jù)用途想要取得具有上下視差的多視點圖像的情況下，也可以將區(qū)域Cl、C2上下(沿著y方向)配置。在分別配置于區(qū)域Cl、C2的濾光器Wl的透射率與濾光器W2的透射率的差較大的情況下，通過后述的攝像元件I的各光感知單元而觀測到的光電變換信號的值(像素值)的差變大。因此，也可以按照具有視差的2個圖像的整體的明亮度接近的方式，來調(diào)整區(qū)域C1、C2的面積。或者，也可以通過將ND濾光器等使可見光段的所有光的透射率均等地下降的濾光器與透光板2并用來調(diào)整實現(xiàn)透射區(qū)域Cl、C2的光的量成為相同程度。在圖2所示的攝像元件I的攝像面la，形成有二維排列的光感知單元陣列以及與光感知單元陣列對置配置的透射濾光器陣列。光感知單元陣列以及透射濾光器陣列由多個單位要素構成。各光感知單元，典型的是光電二極管，通過光電變換而輸出與各自的受光量相應的電信號(光電變換信號或像素信號)。此外，各透射濾光器利用公知的顏料或電介質(zhì)多層膜等來制作，設計為使入射光的至少一部分透射。在以下的說明中，首先，以各單位要素包含2種透射濾光器的情況為例，對本實施方式的基本原理進行說明。圖4是示意性地表示本實施方式中的透射濾光器陣列的一部分的圖。如圖所示，在攝像面Ia上矩陣狀地排列有多個透射濾光器110。接近的2個透射濾光器110以及與它們對置的2個光感知單元120構成了 I個單位要素。各單位要素所具有的2個透射濾光器D1、D2，都使可見光段的任意的光透射，但分光透射率相互不同。即，雖然透射濾光器D1、D2都使紅色(R)、綠色(G)、藍色(B)的波長段的光透射，但它們的透射率的波長依賴性不同。另外，在圖4所示的例子中，I個單位要素中包含的2個光感知單元120橫向(X方向)排列，但本發(fā)明不限定于這種例子。攝像元件I中的光感知單元的排列可以為公知的任何排列。根據(jù)以上的構成，在曝光過程中入射到攝像裝置的光，通過透光板2、透鏡3、紅外截止濾光器4、透射濾光器110而入射到光感知單元120。各光感知單元120對透射了透光板2的各個區(qū)域Cl、C2的光中、通過了對置的透射濾光器的光進行接收，并輸出與所接收的光的量相應的光電變換信號。由各光感知單元輸出的光電變換信號，通過信號產(chǎn)生/接收部5而被送出到信號處理部200。信號處理部200中的圖像信號生成部7基于從攝像部100送出的信號來生成具有視差的圖像。以下，對被從各光感知單元120輸出的光電變換信號進行說明。首先，對與透射了透光板2的區(qū)域Cl、C2的光的強度相當?shù)男盘柗謩e附加下標“i”用Cil、Ci2來表示。在此，假定入射的光中可見光以外的成分被止透(cut)。此外，在本實施方式中，假定該入射光中可見光段的任何波長的光都包含相等的量。此外，假設將透鏡3以及紅外截止濾光器4加起來的分光透射率為Tw，區(qū)域Cl的Wl濾光器的分光透射率為TCl，區(qū)域C2的W2濾光器的分光透射率為TC2。濾光器Wl和濾光器W2雖然都使可見光段的任意的光透射，但每個波長的透射率不同。即，濾光器Wl以及濾光器W2雖然都使R、G、B的光透射，但各色成分的透射量在兩濾光器中不同。同樣，將攝像元件I中的透射濾光器Dl、D2的分光透射率分別表示為TDl、TD2。TDl、TD2也與TCl、TC2同樣地每個波長的透射率不同，但具有使R、G、B的光透射的特性。因此，在本實施方式中，入射光中包含的R、G、B的各成分的光的至少一部分，透射全部濾光器C1、C2、D1、D2。因此，攝像元件I的與透射濾光器D1、D2對置的2個光感知單元都能夠得到R、G、B的3色成分重疊的信號。在此，Tw、TCl、TC2、TDl、TD2是依賴于入射的光的波長λ的函數(shù)。將表示透射了透射濾光器Dl、D2而入射到與透射濾光器Dl、D2對置的光感知單兀的光的強度的信號,分別表示為dl、d2。此外，用記號Σ來表示可見光的波長段的分光透射率的積分運算。例如，將針對波長λ的積分運算/ TwTClTDldA等表示為Σ TwTClTDl等。在此，積分在可見光的全部波長段進行。于是，dl與將Cil Σ TwTCITDI和Ci2 Σ TwTC2TD2合計而得到的結果成比例。同樣，d2與將Cil Σ TwTCITD2和Ci2 Σ TwTC2TD2合計而得到的結果成比例。若將這些關系中的比例系數(shù)設為1，則dl、d2可以用以下的式I 2來表示。(式l)dl = Cil Σ TwTClTDl+Ci2 Σ TwTC2TDl(式2)d2 = Cil Σ TwTClTD2+Ci2 Σ TwTC2TD2在式1、2 中，將Σ TwTClTDUE TwTC2TDUE TwTClTD2,E TwTC2TD2 分別用 Mxll、Mxl2、Mx21、Mx22來表示。于是，式I可以利用矩陣用以下的式3來表示。數(shù)I在此，若將由式3中的要素Mxll Mx22構成的矩陣的逆矩陣的要素分別設為iMll iM22，則式3可以變形為以下的式4。即，可以利用光電變換信號dl、d2來示出表示透射了區(qū)域Cl、C2的光的強度的信號。數(shù)2
(式4)
權利要求
1.種圖像處理裝置，使具有視差的2個圖像的顏色匹配， 所述圖像處理裝置具備: 合焦區(qū)域提取部，其提取所述2個圖像的合焦區(qū)域； 顏色變換矩陣計算部，其基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣；和 顏色變換部，其利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換。
2.據(jù)權利要求1所述的圖像處理裝置，其中， 所述圖像處理裝置還具備高頻成分計算部，該高頻成分計算部算出所述2個圖像中的至少一方的高頻成分， 所述合焦區(qū)域提取部，基于算出的所述高頻成分來提取所述合焦區(qū)域。
3.據(jù)權利要求2所述的圖像處理裝置，其中， 所述合焦區(qū)域提取部，提取所述高頻成分的量比預先規(guī)定的閾值更多的高頻像素的附近作為合焦區(qū)域。
4.據(jù)權利要求3所述的圖像處理裝置，其中， 所述合焦區(qū)域提取部，提取包含所述高頻像素在內(nèi)的η個像素Xm個像素的矩形區(qū)域作為所述合焦區(qū)域，其中n、m是I以上的整數(shù)。
5.據(jù)權利要求3或4所述的圖像處理裝置，其中， 所述合焦區(qū)域提取部，提取以所述高頻像素為中心的η個像素Xm個像素的矩形區(qū)域作為所述合焦區(qū)域，其中n、m是I以上的整數(shù)。
6.據(jù)權利要求1 5中任一項所述的圖像處理裝置，其中， 所述顏色變換矩陣計算部，利用基于最小平方法的線性運算、M估計法、以及RANSAC法中的任意一種方法來求出所述顏色變換矩陣。
7.種三維攝像裝置，具備: 透光部，其具有分光透射率特性相互不同的2個透射區(qū)域； 攝像元件，其按照對透射了所述透光部的光進行接收的方式配置，具有分光透射率特性相互不同的2種像素；和 圖像處理部，其基于從所述攝像元件輸出的像素信號來生成具有視差的2個圖像， 所述圖像處理部具有: 合焦區(qū)域提取部，其提取所述2個圖像的合焦區(qū)域； 顏色變換矩陣計算部，其基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣；和 顏色變換部，其利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換。
8.種圖像處理方法，是使具有視差的2個圖像的顏色匹配的圖像處理方法， 所述圖像處理方法包括如下步驟: 提取所述2個圖像的合焦區(qū)域的步驟； 基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣的步驟；和 利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換的步驟。
9.種圖像處理程序，是使具有視差的2個圖像的顏色匹配的圖像處理程序，所述圖像處理程序使計算機執(zhí)行如下步驟: 提取所述2個圖像的合焦區(qū)域的步驟； 基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息，來求出所述2個圖像間的顏色變換矩陣的步驟；和 利用所述顏色變換矩陣 來對所述2個圖像中的一方的顏色進行變換的步驟。
全文摘要
本發(fā)明的圖像處理裝置(7)具備提取具有視差的2個圖像的合焦區(qū)域的合焦區(qū)域提取部(72)；基于所述2個圖像的合焦區(qū)域中包含的像素的顏色信息來求出所述2個圖像間的顏色變換矩陣的顏色變換矩陣計算部(73)；和利用所述顏色變換矩陣來對所述2個圖像中的一方的顏色進行變換的顏色變換部(74)。
文檔編號H04N9/04GK103098480SQ201280002528
公開日2013年5月8日 申請日期2012年7月4日 優(yōu)先權日2011年8月25日
發(fā)明者石井育規(guī), 平本政夫 申請人:松下電器產(chǎn)業(yè)株式會社