運動圖像捕獲裝置以及用于運動圖像的電子縮放方法
【專利摘要】提供了包括運動圖像捕獲裝置的裝置和運動圖像的電子縮放方法。該運動圖像捕獲裝置包括：剪切單元，配置為基于縮放率信息根據(jù)從圖像傳感器讀取的圖像尺寸來剪切圖像信號，以及尺寸轉(zhuǎn)換單元，配置為如果必要則基于所述縮放率信息對由所述剪切單元剪切的圖像信號進行圖像尺寸轉(zhuǎn)換處理。
【專利說明】運動圖像捕獲裝置以及用于運動圖像的電子縮放方法
【技術(shù)領(lǐng)域】
[0001 ] 本技術(shù)涉及運動圖像捕獲裝置以及用于運動圖像的電子縮放方法。
【背景技術(shù)】
[0002]例如，靜態(tài)圖像的記錄和運動圖像的記錄兩者都可以配置為在例如作為成像裝置的數(shù)字靜態(tài)相機裝置、具有相機功能等的電子設(shè)備(例如，智能手機等)中使能。
[0003]通常，上述成像裝置具有在靜態(tài)圖像的記錄(輸出)和運動圖像的記錄(輸出)中共享圖像傳感器的配置。在此情況下，在運動圖像中，從處理能力等方面看，其輸出圖像尺寸通常設(shè)置為小于圖像傳感器的有效像素的數(shù)量(被讀取圖像尺寸)。例如，當(dāng)圖像傳感器的被讀取圖像尺寸是大約10兆(M)像素時，所記錄的運動圖像的圖像尺寸設(shè)置為大約2M像素(例如，參見 JP2008-294504A )。
[0004]在用于輸出根據(jù)小于如上所述圖像傳感器的被讀取圖像尺寸的圖像尺寸的運動圖像的系統(tǒng)中，在圖像信號處理之前的階段以相對重的處理負(fù)擔(dān)預(yù)先進行到運動圖像輸出尺寸的轉(zhuǎn)換(減小)。
[0005]由此，在其中上述傳感器的被讀取圖像尺寸=IOM像素，而運動圖像輸出圖像尺寸=2M像素的示例中，處理負(fù)擔(dān)可以減小為大約1/5。
[0006]另一方面，存在在成像裝置中提供的電子縮放功能。如果必需的話，該電子縮放功能例如可以通過剪切部分捕獲圖像并且調(diào)整該已剪切圖像的圖像尺寸為與輸出圖像尺寸一致而實現(xiàn)。
[0007]例如，在作為現(xiàn)有技術(shù)的成像裝置的、進行用于減小上述處理負(fù)擔(dān)的圖像尺寸減小處理的成像裝置中，在進行減小為輸出圖像尺寸的處理之后進行用于電子縮放功能的剪切處理。即，在此情況下，進行減小為輸出圖像尺寸的處理_>對應(yīng)于縮放率的剪切_>已剪切圖像到輸出圖像尺寸的放大。

【發(fā)明內(nèi)容】

[0008]當(dāng)在如上所述的現(xiàn)有技術(shù)的成像裝置中實現(xiàn)電子縮放處理時，可以放大已剪切圖像以調(diào)整為輸出圖像尺寸。其結(jié)果是，輸出圖像的圖像質(zhì)量的惡化是不可避免的。
[0009]作為電子縮放功能，例如，除了如上所述的剪切圖像信號的技術(shù)之外，也可以實現(xiàn)圖像傳感器的部分讀取。
[0010]然而，在此情況下，因為需要設(shè)計實現(xiàn)圖像傳感器的讀取電路(通過該電路，部分讀取是可能的)，需要根據(jù)縮放率等切換讀取電路的讀取方案，所以電路配置的復(fù)雜度或電路規(guī)模增大，并且因此成本增加。
[0011]期望在運動圖像上抑制由于電子縮放引起的圖像質(zhì)量的惡化并且使得低成本實現(xiàn)可能且無復(fù)雜配置。
[0012]為了解決上述問題，如下配置本技術(shù)中的用于捕獲運動圖像的運動圖像捕獲裝置。[0013]S卩，根據(jù)本技術(shù)的實施例的運動圖像捕獲裝置包括剪切單元，配置為基于縮放率信息根據(jù)從圖像傳感器讀取的圖像尺寸來剪切圖像信號。
[0014]另外，運動圖像捕獲裝置包括尺寸轉(zhuǎn)換單元，配置為如果必需的話，基于縮放率信息對由剪切單元剪切的圖像信號進行圖像尺寸轉(zhuǎn)換處理。
[0015]根據(jù)本技術(shù)的上述實施例，通過剪切捕獲圖像并且隨后進行與必要性對應(yīng)的圖像尺寸轉(zhuǎn)換來實現(xiàn)電子縮放功能。由此，因為當(dāng)根據(jù)現(xiàn)有技術(shù)的尺寸轉(zhuǎn)換之后進行剪切時的必需圖像尺寸放大處理不是必需的，所以可以有效地防止圖像惡化。
[0016]另外，因為當(dāng)依據(jù)本技術(shù)的實施例實現(xiàn)電子縮放功能時圖像傳感器不必需進行部分讀取，所以可以防止配置的復(fù)雜性以及成本的增加。
[0017]根據(jù)上述本技術(shù)的實施例，可以對運動圖像抑制由于電子縮放引起的圖像質(zhì)量的惡化并且使得簡單且低成本實現(xiàn)可能而無復(fù)雜配置。
【專利附圖】

【附圖說明】
[0018]圖1是圖示實施例的成像裝置的內(nèi)部配置的框圖；
[0019]圖2A和圖2B是圖示現(xiàn)有技術(shù)的成像裝置中的電子縮放技術(shù)的示意圖；
[0020]圖3A和圖3B是圖示實施例的電子縮放技術(shù)的概述的示意圖；
[0021]圖4是圖不有關(guān)到切的具體配置的不意圖；
[0022]圖5是圖示當(dāng)向存儲器的寫入受控時由剪切控制單元執(zhí)行的具體處理的過程的流程圖；
[0023]圖6是圖示當(dāng)從存儲器的讀取受控時由剪切控制單元執(zhí)行的具體處理的過程的流程圖；
[0024]圖7A到圖7C是圖示剪切所需的存儲器容量的示意圖；
[0025]圖8A到圖8G是圖示正常同步傳播的示意圖；
[0026]圖9A到圖9H是圖示同步傳輸?shù)氖疽鈭D；
[0027]圖10是圖示當(dāng)在寫入側(cè)進行與存儲器積累量對應(yīng)的控制時采用的配置的圖；
[0028]圖11是圖示當(dāng)進行與存儲器積累量對應(yīng)的寫入控制時執(zhí)行的具體處理的過程的流程圖；并且
[0029]圖12是圖示用作包括壓縮單元和解壓縮單元的變型示例的配置的示意圖?！揪唧w實施方式】
[0030]以下，本公開的優(yōu)選實施例將參考附圖詳細(xì)描述。注意，在此說明書和附圖中，具有基本相同功能和結(jié)構(gòu)的結(jié)構(gòu)要素用相同附圖標(biāo)記表示，并且省略了這些結(jié)構(gòu)要素的重復(fù)說明。
[0031]以下，將描述依據(jù)本技術(shù)的實施例。
[0032]同樣，將以如下順序給出描述。
[0033]〈1、成像裝置的整體配置〉
[0034]〈2、現(xiàn)有技術(shù)〉
[0035]〈3、實施例的電子縮放技術(shù)〉
[0036][3.1 概述][0037][3.2剪切技術(shù)的具體示例]
[0038][3.3同步傳輸]
[0039]〈4、變型示例>
[0040]〈1、成像裝置的整體配置〉
[0041]圖1是圖示用作依據(jù)本技術(shù)的實施例的成像裝置I的內(nèi)部配置的框圖。
[0042]此實施例的成像裝置I配置為根據(jù)用戶操作選擇性執(zhí)行靜態(tài)圖像的記錄和運動圖像的記錄。另外，在所記錄運動圖像的方面，此實施例的成像裝置I具有電子放大/縮小圖像的電子縮放功能。
[0043]在圖1中，成像裝置I包括成像光學(xué)系統(tǒng)2、圖像傳感器3、讀取單元4、圖像信號處理單元5、編碼/解碼單元6、記錄設(shè)備7、顯示單元8、存儲器單元9、控制器10和操作單元
11。另外，成像裝置I包括總線12。成像光學(xué)系統(tǒng)2、圖像信號處理單元5、編碼/解碼單元
6、記錄設(shè)備7、顯示單元8、存儲器單元9和控制器10的各部分經(jīng)由總線12互相連接。連接到總線12的部分可以經(jīng)由總線12進行數(shù)據(jù)的傳輸或者命令(控制信號)的交換。
[0044]成像光學(xué)系統(tǒng)2在圖像傳感器3的成像平面上形成被攝體的光學(xué)圖像。成像光學(xué)系統(tǒng)2具有用于調(diào)整焦距、被攝體距離、光圈等的機制，從而根據(jù)來自控制器10的指令獲得恰當(dāng)?shù)膱D像。
[0045]圖像傳感器3根據(jù)光電轉(zhuǎn)換將所形成的光學(xué)圖像轉(zhuǎn)換為電信號。具體地，圖像傳感器3由電荷耦合器件(CXD)傳感器、互補金屬氧化物半導(dǎo)體(CMOS)傳感器等實現(xiàn)。
[0046]讀取單元4通過讀取由圖像傳感器3獲得的電信號而獲得捕獲圖像信號。
[0047]圖像信號處理單元5對由讀取單元4獲得的上述捕獲圖像信號進行預(yù)定圖像信號處理。
[0048]同樣，將稍后描述圖像信號處理單元5的內(nèi)部配置。
[0049]編碼/解碼單元6配置為通過在圖像信號處理單元5進行預(yù)定圖像信號處理之后對捕獲圖像信號進行預(yù)定編碼處理而獲得壓縮圖像數(shù)據(jù)，并且對所輸入的壓縮圖像數(shù)據(jù)進行解碼處理。
[0050]具體地，基于來自控制器10的指令，編碼/解碼單元6例如通過在靜態(tài)圖像記錄期間根據(jù)預(yù)定靜態(tài)圖像壓縮編碼(諸如圖像專家聯(lián)合小組(JPEG)格式之類)對上述捕獲圖像信號進行編碼處理而獲得壓縮靜態(tài)圖像數(shù)據(jù)，并且，例如通過在運動圖像記錄期間根據(jù)預(yù)定運動圖像壓縮編碼(諸如H.264 (MPEG-4AVC))進行編碼處理獲得壓縮運動圖像數(shù)據(jù)。
[0051]另外，在再現(xiàn)期間，基于來自控制器10的指令進行解碼輸入壓縮圖像數(shù)據(jù)的處理。
[0052]記錄設(shè)備7包括諸如半導(dǎo)體存儲器之類的記錄介質(zhì)和用于該記錄介質(zhì)的記錄再現(xiàn)系統(tǒng)電路/機制，該半導(dǎo)體存儲器比如是諸如閃存、磁盤、光盤或磁光盤。
[0053]在記錄期間，向記錄設(shè)備7供應(yīng)由編碼/解碼單元6獲得的壓縮的靜態(tài)圖像數(shù)據(jù)和壓縮的運動圖像數(shù)據(jù)。記錄設(shè)備7將如上所述供應(yīng)的壓縮的靜態(tài)圖像數(shù)據(jù)和壓縮的運動圖像數(shù)據(jù)記錄在上述記錄介質(zhì)上。
[0054]另外，在再現(xiàn)期間，在上述記錄介質(zhì)上記錄的壓縮的靜態(tài)圖像數(shù)據(jù)和壓縮的運動圖像數(shù)據(jù)讀取到存儲器單元9并且經(jīng)歷編碼/解碼單元6的解碼處理。解碼的圖像數(shù)據(jù)也可以顯示在顯示單元8上或者通過外部接口(未示出)向外部設(shè)備輸出。[0055]顯示單元8包括將輸入圖像數(shù)據(jù)轉(zhuǎn)換為模擬圖像信號的數(shù)模(D/A)轉(zhuǎn)換電路、將模擬圖像信號解碼為適于后續(xù)階段顯示裝置的格式的視頻信號的視頻編碼器、以及用于顯示與輸入視頻信號對應(yīng)的圖像的顯示裝置。
[0056]例如由液晶顯示器(IXD)或有機電致發(fā)光(LE)面板實現(xiàn)上述顯示裝置，并且也具有作為取景器的功能。
[0057]控制器10包括中央處理器(CPU)和控制程序，并且控制成像裝置I的各部分。上述控制程序本身例如存儲在存儲器單元9中，并且由上述CPU執(zhí)行。
[0058]操作單元11連接到控制器10。操作單元11例如包括諸如快門、操作撥盤之類的硬件按鍵或諸如觸摸板之類的輸入設(shè)備，檢測成像人(用戶)的輸入操作，并且向控制器10傳遞所檢測的輸入操作。控制器10根據(jù)用戶的輸入操作確定成像裝置I的操作，并且控制每個部分進行必要的操作。
[0059]特別是，在此實施例中，操作單元11配置為使得用戶的縮放操作是可能的，并且控制器10根據(jù)縮放操作計算縮放率(電子縮放的縮放率)。
[0060]在此將稍后描述的實施例中，圖像信號處理單元5設(shè)置為執(zhí)行實現(xiàn)電子縮放功能的剪切處理，并且控制器10向圖像信號處理單元5供應(yīng)與計算的縮放率對應(yīng)的縮放率信
肩、O
[0061]具體地，在此示例中，上述縮放率信息假定為關(guān)于剪切起始像素位置的信息和關(guān)于已剪切圖像的圖像尺寸(像素的數(shù)量)的信息。
[0062]存儲器單元9例如包括諸如動態(tài)隨機存取存儲器(DRAM)之類的半導(dǎo)體存儲器，并且記錄由編碼/解碼單元6獲得的圖像數(shù)據(jù)、由控制器10處理的各種數(shù)據(jù)、由圖像信號處理單元5處理的圖像數(shù)據(jù)等。
[0063]〈2、現(xiàn)有技術(shù)〉
[0064]在實施例的電子縮放技術(shù)的描述之前，將首先具體描述現(xiàn)有技術(shù)的電子縮放方案。
[0065]圖2A和圖2B是圖示現(xiàn)有技術(shù)的成像裝置中的電子縮放技術(shù)的示意圖。
[0066]在圖2A和圖2B中，圖2A圖示在現(xiàn)有技術(shù)的成像裝置中提供的圖像信號處理單元5’的內(nèi)部配置。
[0067]如圖2A所示，現(xiàn)有技術(shù)的圖像信號處理單元5’包括第一信號處理單元101、尺寸轉(zhuǎn)換單元102、第二信號處理單元103和電子縮放/相機抖動校正單元104。
[0068]來自讀取單元4的圖像傳感器3的被讀取圖像被輸入到第一信號處理單元101，并且進行鉗位調(diào)整處理或白平衡調(diào)整處理。
[0069]尺寸轉(zhuǎn)換單元102對由第一信號處理單元101處理的圖像信號進行圖像尺寸轉(zhuǎn)換處理。
[0070]另外，第二信號處理單元103在尺寸轉(zhuǎn)換單元102的圖像尺寸轉(zhuǎn)換之后，對圖像信號進行像素內(nèi)插處理或者輪廓增強處理。
[0071]電子縮放/相機抖動校正單元104在第二信號處理單元103的處理之后對圖像信號進行電子縮放處理和相機抖動校正處理。
[0072]向電子縮放/相機抖動校正單元104給出來自外部的縮放率信息，并且通過根據(jù)該縮放率信息剪切輸入圖像的部分來實現(xiàn)電子縮放功能。[0073]這里，由第一信號處理單元101執(zhí)行的鉗位調(diào)整處理或白平衡調(diào)整處理是計算量相對小的簡單處理。
[0074]另一方面，要由第二信號處理單元103執(zhí)行的像素內(nèi)插處理或輪廓增強處理是計算量大且處理負(fù)擔(dān)相對大的處理。當(dāng)計算量大的上述處理以圖像傳感器3的被讀取圖像尺寸進行時，需要大量的信號處理能力，第二信號處理單元103的電路規(guī)模大，且功耗也增加。
[0075]因而，在現(xiàn)有技術(shù)中，如圖2A所示，尺寸轉(zhuǎn)換單元102在第二信號處理單元103的處理進行之前減小圖像尺寸。具體地，尺寸轉(zhuǎn)換單元102將圖像尺寸減小到大約運動圖像的輸出圖像尺寸(記錄圖像尺寸)。
[0076]圖2B示意性地圖示由尺寸轉(zhuǎn)換單元102進行的圖像尺寸減小處理和由圖2A所示的電子縮放/相機抖動校正單元104進行的電子縮放處理(剪切/放大處理)。
[0077]如圖2B所示，在圖2A所示的現(xiàn)有技術(shù)的配置中，減小到大約輸出圖像尺寸的圖像經(jīng)歷與縮放率對應(yīng)的剪切。因而，進行圖像調(diào)整處理以調(diào)整如上所述的已剪切圖像到輸出圖像尺寸。同樣，由電子縮放/相機抖動校正單元104進行放大處理。
[0078]在如上所述的尺寸減小之后進行與縮放率對應(yīng)的剪切的現(xiàn)有技術(shù)中，用于調(diào)整已剪切圖像為輸出圖像尺寸的放大處理是必需的。因此，在現(xiàn)有技術(shù)中，輸出圖像的圖像質(zhì)量的惡化(分辨率感受的退化)是不可避免的。
[0079]這里，作為電子縮放功能，例如，除了傳感器的讀取之后剪切圖像信號的技術(shù)之夕卜，還可以進行圖像傳感器的部分讀取。據(jù)此，可以最小化分辨率感受的退化。
[0080]然而，需要設(shè)計用于實現(xiàn)通過其部分讀取是可能的圖像傳感器的讀取電路。另外，需要根據(jù)縮放率切換讀取電路的驅(qū)動方案。從這些方面看，通過圖像傳感器的部分讀取實現(xiàn)電子縮放功能的技術(shù)導(dǎo)致電路配置的復(fù)雜度的上升以及電路規(guī)模的增大并且因此導(dǎo)致成本的上升。
[0081]考慮上述問題已經(jīng)提出此實施例，并且期望抑制關(guān)于運動圖像由于電子縮放引起的圖像質(zhì)量的惡化并且使得簡單而低成本實現(xiàn)是可能的且無復(fù)雜配置。
[0082]〈3、實施例的電子縮放技術(shù)〉
[0083][3.1 概述]
[0084]圖3A和圖3B是圖示實施例的電子縮放技術(shù)的概述的示意圖。
[0085]圖3A是圖示圖1所示的圖像信號處理單元5的內(nèi)部配置。
[0086]如所示，圖像信號處理單元5包括第一信號處理單元15、剪切單元16、尺寸轉(zhuǎn)換單元17、第二信號處理單元18和相機抖動校正單元19。
[0087]類似上述第一信號處理單元101，第一信號處理單元15關(guān)于由讀取單元4獲得的圖像信號進行鉗位調(diào)整處理或白平衡調(diào)整處理。
[0088]如上所述，上述處理具有相對小的計算量，并且甚至當(dāng)在圖像傳感器3的被讀取圖像尺寸下進行處理時也可以抑制電路規(guī)?；蚬牡脑龃蟆?br> [0089]在剪切單元16中，剪切由第一信號處理單元15處理之后的圖像信號。在剪切單元16中，根據(jù)來自圖1所示的控制器10的縮放率信息進行剪切。
[0090]同樣，剪切單元16的內(nèi)部配置將稍后再次描述。
[0091]如果必需的話，尺寸轉(zhuǎn)換單元17關(guān)于由剪切單元16獲得的已剪切圖像信號進行圖像尺寸轉(zhuǎn)換處理。
[0092]這里，因為由剪切單元16獲得的已剪切圖像尺寸是與縮放率對應(yīng)的尺寸，所以已剪切圖像尺寸不必與運動圖像輸出圖像尺寸一致。尺寸轉(zhuǎn)換單元17將由剪切單元16剪切的圖像的圖像尺寸轉(zhuǎn)換為與運動圖像輸出圖像尺寸對應(yīng)的尺寸。具體地，在此示例中，由于在后續(xù)階段進行相機抖動校正處理的關(guān)系，進行到大約輸出圖像尺寸的預(yù)定圖像尺寸的轉(zhuǎn)換。
[0093]基于從控制器10供應(yīng)的縮放率信息，尺寸轉(zhuǎn)換單元17確定圖像尺寸的縮小量并且進行圖像尺寸轉(zhuǎn)換處理。
[0094]同樣，圖像尺寸轉(zhuǎn)換處理例如可以通過簡單稀疏或圖像相加、通過濾波器的分辨率轉(zhuǎn)換技術(shù)等實現(xiàn)。
[0095]第二信號處理單元18在尺寸轉(zhuǎn)換單元17的尺寸轉(zhuǎn)換處理之后關(guān)于圖像信號進行類似于上述第二信號處理單元103的像素內(nèi)插處理或輪廓增強處理的像素內(nèi)插處理或輪廓增強處理。
[0096]相機抖動校正單元19關(guān)于由第二信號處理單元103處理的圖像信號進行相機抖動校正處理。該相機抖動校正處理例如可以通過剪切基于運動向量檢測結(jié)果指定的預(yù)定圖像區(qū)域而實現(xiàn)。
[0097]圖3B示意性地圖示剪切單元16中的剪切和尺寸轉(zhuǎn)換單元17的尺寸轉(zhuǎn)換。
[0098]如圖3B所示，在圖像傳感器3的被讀取圖像尺寸經(jīng)歷與根據(jù)圖3A所示的圖像信號處理單元5的配置的縮放率對應(yīng)的剪切之后進行到大約輸出圖像尺寸的圖像尺寸轉(zhuǎn)換。
[0099]根據(jù)如上所述的實施例的電子縮放技術(shù)，可以不需要如在其中在尺寸轉(zhuǎn)換之后進行與縮放率對應(yīng)的剪切的現(xiàn)有技術(shù)中那樣對于到輸出圖像尺寸的最終調(diào)整而進行放大處理。由此，可以有效地抑制輸出圖像的分辨率感受的惡化并且抑制圖像惡化。
[0100]另外，依據(jù)此實施例，與如被讀取圖像尺寸-> 輸出圖像尺寸那樣以固定減小率進行圖像尺寸轉(zhuǎn)換的現(xiàn)有技術(shù)相比，圖像尺寸取決于縮放率，但是可以減小圖像尺寸的縮小率。即，即使在這點上，相比于現(xiàn)有技術(shù)，可以抑制圖像質(zhì)量的惡化。
[0101]另外，依據(jù)此實施例，不需要在實現(xiàn)電子縮放功能時進行圖像傳感器3的部分讀取。在這點上，防止配置的復(fù)雜度的增加或者成本的增加。
[0102]依據(jù)上述的此實施例，可以抑制由于運動圖像的電子縮放引起的圖像質(zhì)量的惡化并且使得簡單且低成本的實現(xiàn)可能而無復(fù)雜配置。
[0103][3.2剪切技術(shù)的具體示例]
[0104]圖4是圖示有關(guān)剪切的具體配置的示意圖。
[0105]在圖4中，第一信號處理單元15和尺寸轉(zhuǎn)換單元17與剪切單元16的內(nèi)部配置一同圖示。
[0106]如所示，在剪切單元16中提供剪切控制單元16A和存儲器16B。
[0107]向剪切控制單元16A輸入來自控制器10的縮放率信息。另外，從第一信號處理單元15向剪切控制單元16A輸入同步信號syncl。
[0108]這里，將表示與一幀對應(yīng)的處理時間的開頭(開始)定時的同步信號sync傳播到圖像信號處理單兀5內(nèi)的每一部分。
[0109]如圖，將輸入到第一信號處理單元15的同步信號sync設(shè)為“syncO”，將從第一信號處理單元15輸出到剪切控制單元16A的同步信號sync設(shè)為“syncl”，將從剪切控制單元16A輸出到尺寸轉(zhuǎn)換單元17的同步信號sync設(shè)為“sync2”，并且將從尺寸轉(zhuǎn)換單元17輸出到圖3A所示的第二信號處理單元18的同步信號sync設(shè)為“sync3”。
[0110]在此實施例中，剪切控制單元16A使得第一信號處理單元15根據(jù)縮放率信息在存儲器16B中選擇性地存儲由第一信號處理單元15處理的圖像并且使得尺寸轉(zhuǎn)換單元17順序地讀取所積累的圖像，從而實現(xiàn)圖像剪切。
[0111]首先，將描述與由第一信號處理單元15向存儲器16B寫入圖像有關(guān)的控制。
[0112]每當(dāng)?shù)谝恍盘柼幚韱卧?5輸出圖像數(shù)據(jù)時，剪切控制單元16A向上計數(shù)輸出像素計數(shù)值Gct并且使用該輸出像素計數(shù)值Gct指定當(dāng)前輸出像素位置(坐標(biāo))。
[0113]根據(jù)如上所述指定的輸出像素位置已經(jīng)達到由控制器10指示的剪切開始像素位置的狀態(tài)，使得第一信號處理單元15開始隨后要輸出的圖像數(shù)據(jù)到存儲器16B的寫入。
[0114]然后，在到存儲器16B的圖像數(shù)據(jù)的寫入已經(jīng)如上所述地開始之后，每次寫入時就通過向上計數(shù)寫入像素計數(shù)值Wct指定寫入像素的數(shù)量。根據(jù)其中寫入像素的數(shù)量已經(jīng)與從控制器10指示的作為縮放慮信息的剪切像素的數(shù)量一致的狀態(tài)，停止由第一信號處理單元15向存儲器16B的寫入。
[0115]由此，可以在存儲器16B中僅選擇性地積累與縮放率對應(yīng)的范圍的圖像。
[0116]圖5是圖示當(dāng)向存儲器的寫入受控時由剪切控制單元16A執(zhí)行的具體處理的過程的流程圖。
[0117]首先，剪切控制單元16A等待來自第一信號處理單元15的同步信號syncl (步驟S101)，并且根據(jù)已經(jīng)檢測到同步信號syncl的狀態(tài)來初始化輸出像素計數(shù)值Gct和寫入像素計數(shù)值Wct (O重置)(步驟S102和S103)。
[0118]另外，剪切控制單元16A在初始化上述計數(shù)值之后等待來自第一信號處理單元15的像素輸出(步驟S104)。然后，在當(dāng)存在像素輸出時向上計數(shù)輸出像素計數(shù)值Gct(Gct=Gct+l)之后(步驟S105)，確定剪切開頭位置是否已經(jīng)達到(步驟S106)。即，確定由輸出像素計數(shù)值Gct指定的當(dāng)前輸出位置是否已經(jīng)與指示為縮放率信息的剪切開始像素位
置一致。
[0119]當(dāng)在上述確定中獲得指示剪切開頭位置尚未達到的否定結(jié)果時，處理回到步驟S104并且再次等待來自第一信號處理單元15的像素輸出。
[0120]當(dāng)在上述確定中獲得指示剪切開頭位置已經(jīng)達到的肯定結(jié)果時，剪切控制單元16A指令第一信號處理單元15向存儲器16B寫入(步驟S107)。
[0121]另外，剪切控制單元16A根據(jù)寫入指令已經(jīng)發(fā)布的狀態(tài)向上計數(shù)寫入像素計數(shù)值Wct (ffct=ffct+l)(步驟 S108)。
[0122]在寫入像素計數(shù)值Wct已經(jīng)向上計數(shù)之后，剪切控制單元16A確定寫入是否已經(jīng)完成(步驟S109)。具體地，確定寫入像素計數(shù)值Wct是否大于或等于指示為縮放率信息的剪切像素的數(shù)量的值。
[0123]當(dāng)獲得指示寫入像素計數(shù)值Wct不大于或等于剪切像素的指示數(shù)量且寫入尚未完成的否定結(jié)果時，剪切控制單元16A等待來自第一信號處理單元15的像素輸出(步驟S110)。然后，當(dāng)存在像素輸出時，處理回到上述步驟S107，并且指令第一信號處理單元15再次向存儲器16B寫入。[0124]由此，執(zhí)行與剪切像素的指示數(shù)量對應(yīng)的寫入。
[0125]另外，當(dāng)獲得指示寫入像素計數(shù)值Wct大于或等于剪切像素的指示數(shù)量且寫入已經(jīng)完成的肯定結(jié)果時，剪切控制單元16A返回上述步驟S101，并且等待再次檢測到同步信號 syncI ο
[0126]接著，將描述讀取側(cè)的控制。
[0127]在此實施例中，剪切控制單元16A根據(jù)存儲器16B的數(shù)據(jù)積累量控制尺寸轉(zhuǎn)換單元17的讀取操作。
[0128]首先，作為假設(shè)，上述情況的尺寸轉(zhuǎn)換單元17設(shè)置為向如圖4所示的剪切控制單元16A發(fā)布用于讀取存儲器16B的請求。
[0129]具體地，尺寸轉(zhuǎn)換單元17根據(jù)其中開始與一幀對應(yīng)的處理的指令已經(jīng)由同步信號sync2發(fā)布的狀態(tài)，開始剪切控制單元16A的讀取請求。
[0130]剪切控制單元16A根據(jù)是否已經(jīng)對于來自尺寸轉(zhuǎn)換單元17的讀取請求給出讀取準(zhǔn)許而控制尺寸轉(zhuǎn)換單元17從存儲器16B的圖像數(shù)據(jù)的讀取。
[0131]當(dāng)已經(jīng)根據(jù)來自尺寸轉(zhuǎn)換單元17的讀取請求發(fā)布讀取準(zhǔn)許時，剪切控制單元16A確定存在來自存儲器16B的圖像數(shù)據(jù)的讀取，并且向上計數(shù)讀取像素計數(shù)值Ret。可以根據(jù)讀取像素計數(shù)值Rct指定已剪切圖像中的讀取位置。
[0132]這里，如上所述，剪切控制單元16A計數(shù)寫入像素計數(shù)值Wct以管理存儲器16B的圖像數(shù)據(jù)的寫入次數(shù)。
[0133]剪切控制單元16A通過計算寫入像素計數(shù)值Wct和上述讀取像素計數(shù)值Rct之間的差來指定在存儲器16B中積累的圖像數(shù)據(jù)的容量(像素的數(shù)量)，并且根據(jù)如上所述的存儲器16B的圖像數(shù)據(jù)的積累量來控制尺寸轉(zhuǎn)換單元17的讀取操作。具體地，控制尺寸轉(zhuǎn)換單元17的讀取操作從而當(dāng)用作圖像數(shù)據(jù)的積累量的“Wct-Rct”的值超出了設(shè)置的閾值th時給出上述讀取準(zhǔn)許并且當(dāng)“Wct-Rct”的值未超出設(shè)置的閾值th時不給出上述讀取準(zhǔn)許。
[0134]圖6是圖示當(dāng)執(zhí)行上述讀取控制時由剪切控制單元16A執(zhí)行的具體處理的過程的流程圖。
[0135]首先，剪切控制單元16A等待來自第一信號處理單元15的同步信號syncl (步驟S201)，并且根據(jù)已經(jīng)檢測到同步信號syncl的狀態(tài)初始化讀取像素計數(shù)值Rct (O重置)(步驟 S202)。
[0136]然后，在計數(shù)值Rct已經(jīng)初始化之后，剪切控制單元16A等待來自尺寸轉(zhuǎn)換單元17的讀取請求(步驟S203)。
[0137]當(dāng)存在來自尺寸轉(zhuǎn)換單元17的讀取請求時，剪切控制單元16A確定存儲器16B中的積累量是否足夠(步驟S204)。具體地，確定上述“Wct-Rct”值是否超出設(shè)置的閾值th。
[0138]當(dāng)在上述確定中獲得指示“Wct-Rct”值尚未超出設(shè)置的閾值th且積累量不足夠的否定結(jié)果時，剪切控制單元16A確定寫入是否已經(jīng)完成(步驟S205)。即，為了確定是否已經(jīng)完成由第一信號處理單元15向存儲器16B寫入與剪切范圍對應(yīng)的圖像數(shù)據(jù)，確定寫入像素計數(shù)值Wct是否大于或等于指示為縮放率信息的剪切像素的數(shù)量。
[0139]當(dāng)在步驟S205中在確定中獲得指示寫入像素計數(shù)值Wct不大于或等于剪切像素的數(shù)量且寫入尚未完成的否定結(jié)果時，剪切控制單元16A返回上述步驟S203，并且再次等待來自尺寸轉(zhuǎn)換單元17的讀取請求。[0140]另一方面，在上述步驟S204的確定中獲得指示“Wct-Rct”值已經(jīng)超出設(shè)置的閾值th并且積累量足夠的肯定結(jié)果時或者當(dāng)在上述步驟S204中的確定中積累量確定為不足夠但是獲得在上述步驟S205的確定中指示寫入已經(jīng)完成的肯定結(jié)果時，剪切控制單元16A向尺寸轉(zhuǎn)換單元17發(fā)布讀取準(zhǔn)許(步驟S206)。
[0141]同樣，為了清楚，如果與剪切范圍對應(yīng)的圖像數(shù)據(jù)已經(jīng)寫入到存儲器16B，則無論存儲器16B的積累量如何都應(yīng)當(dāng)將全部積累的數(shù)據(jù)讀取到尺寸轉(zhuǎn)換單元17。因此，當(dāng)如上所述在步驟S205中獲得肯定結(jié)果時，無論存儲器16B的積累量如何都向尺寸轉(zhuǎn)換單元17發(fā)布讀取準(zhǔn)許。
[0142]剪切控制單元16A根據(jù)如上所述地已經(jīng)發(fā)布讀取準(zhǔn)許的狀態(tài)向上計數(shù)讀取像素計數(shù)值 Rct (Rct=Rct+l)(步驟 S207)。
[0143]然后，在讀取像素計數(shù)值Rct已經(jīng)如上所述向上計數(shù)之后，剪切控制單元16A確定讀取是否已經(jīng)完成。具體地，確定讀取像素計數(shù)值Rct大于或等于指示為縮放率信息的剪切像素的數(shù)量的值。
[0144]當(dāng)獲得指示讀取像素計數(shù)值Rct不大于或等于如上所指示的剪切像素的數(shù)量的值并且讀取尚未完成的否定結(jié)果時，剪切控制單元16A返回上述步驟S203，并且等待來自尺寸轉(zhuǎn)換單元17的讀取請求。
[0145]另一方面，當(dāng)獲得指示讀取像素計數(shù)值Rct大于或等于如上所指示的剪切像素的數(shù)量的值并且讀取已經(jīng)完成的肯定結(jié)果時，剪切控制單元16A返回上述步驟S201并且再次等待同步信號sync I。
[0146]這里，將參考圖7A到圖7C描述剪切需要的存儲器容量。
[0147]首先，作為假設(shè)，根據(jù)圖像傳感器3的讀取速率為常數(shù)的狀態(tài)，第一信號處理單元15向存儲器16B寫入的速率也變?yōu)槌?shù)。同樣，在圖中，寫入速度用“R_w”表示。
[0148]另一方面，存儲器16B的讀取速率(圖中的“R_r”)是根據(jù)縮放率的變量。S卩，讀取速率與以I的縮放率的寫入速率一致(沒有電子縮放)。當(dāng)縮放率進一步增加時，讀取速率設(shè)置為低于寫入速率。盡管如圖所示的與一幀對應(yīng)的處理時間(從時間點O到時間點Tfr)設(shè)置為用于在圖像信號處理單元5內(nèi)的每一部分中處理與一幀對應(yīng)的圖像的時間(參見稍后將描述的同步信號sync)，但是設(shè)置與縮放率對應(yīng)的可變讀取速率從而對于與一幀對應(yīng)的處理時間也完成來自存儲器16B的已剪切圖像的讀取。
[0149]根據(jù)此假設(shè)，在此情況的剪切中，應(yīng)當(dāng)設(shè)置存儲器16B的容量從而寫入側(cè)的超出(overtake)不發(fā)生。
[0150]在圖7A到圖7C中，剪切前的圖像20和該圖像20中的剪切范圍20A在圖7A中圖示。剪切范圍20A根據(jù)設(shè)置的縮放率而變化。
[0151]另外，在圖7A中，連同剪切前的圖像20和剪切范圍20A，通過在圖的右邊指定水平軸為時間T并且指定垂直軸為線的數(shù)量來圖示對于存儲器16B的寫入速率R_w和讀取速率R_r之間的關(guān)系。
[0152]這里，剪切前的圖像20的水平尺寸(水平方向上像素的數(shù)量)設(shè)置為W并且垂直尺寸(垂直方向上像素的數(shù)量)設(shè)置為H。另外，縮放率的倒數(shù)設(shè)置為K。
[0153]據(jù)此，剪切范圍20A的水平尺寸可以用K.W表示而垂直尺寸可以用K.H表示。
[0154]另外，圖7B圖示當(dāng)縮放率小于圖7A中的縮放率時(S卩，K的值大于圖7A中K的值)寫入速率R_w和讀取速率R_r之間的關(guān)系，而圖7C圖示當(dāng)縮放率大于圖7A中的縮放率時(即，K的值小于圖7A中K的值)寫入速率R_w和讀取速率R_r之間的關(guān)系。
[0155]在圖7A到圖7C中，在每個圖中，剪切范圍20A內(nèi)全部數(shù)據(jù)到存儲器16B的寫入結(jié)束的時間點變?yōu)闀r間點Twe。另外，在此情況下，在上述讀取速率R_r的可變設(shè)置下，剪切范圍20A內(nèi)全部數(shù)據(jù)從存儲器16B的讀取結(jié)束的時間點變?yōu)闀r間點Tfr。
[0156]如圖中顯而易見的，在時間點Tfr指示的“與一幀對應(yīng)的處理時間”與向存儲器16B寫入圖像20 (縮放率=1的圖像)花費的時間一致。
[0157]將描述將設(shè)置以防止發(fā)生寫入側(cè)的超出的存儲器16B的容量(也簡稱為所需存儲器大小)。
[0158]在圖7A到圖7C的情況下，可以用圖中的X表示最大所需存儲器大小。具體地，最大所需存儲器大小是在已經(jīng)將剪切范圍20A的整個圖像寫入存儲器16B的時間點Twe時未讀取數(shù)據(jù)的量。
[0159]這里，可以看到當(dāng)圖7A到圖7C彼此比較時用作最大所需存儲器大小的X的值根據(jù)縮放率而變化。具體地，基于給定縮放率，用作最大所需存儲器大小的X的值在縮放率小于或大于給定縮放率時逐漸減小。換而言之，當(dāng)縮放率變?yōu)榻o定值時(設(shè)置為標(biāo)準(zhǔn)縮放率)，所需存儲器大小具有最大值。
[0160]因此，如果已知標(biāo)準(zhǔn)縮放率，則X的值被稱為最大所需存儲器大小(B卩，要確保以防止發(fā)生寫入側(cè)的超出的存儲器16B的容量)。
[0161]具體地，在此情況下，導(dǎo)出最大所需存儲器大小。
[0162]首先，因為讀取速率R_r是根據(jù)縮放率可變的(讀取完成時間與Tfr 一致)，所以寫入速率R_w和讀取速率R_r可以如下表示。
[0163]R_w= (H) /Tfr
[0164]R_r= (K.H) /Tfr...(I)
[0165]這里，在任意時間點t，用表達式(2)表示寫入線的數(shù)量而用表達式(3)表示讀取線的數(shù)量。
[0166]R_w.t...⑵
[0167]R_r.t...⑶
[0168]兩者間的差在時間點t變?yōu)樗璐鎯ζ鞔笮　Ｔ诖藭r間點t，所需存儲器大小M(t)可以用表達式(4)表示。
[0169]M(t) =H/Tfr-K.Η/Tfr.t...(4)
[0170]此時，如果因為與要寫入/讀取的一條線對應(yīng)的數(shù)據(jù)量變?yōu)镵 -W,所以上述表達式
(4)轉(zhuǎn)換為數(shù)據(jù)量，則如表達式(5)那樣重寫M(t)。
[0171]M (t) =K.W.(H/Tfr-K.H/Tfr.t)...(5)
[0172]如從以上描述所理解的，M(t)的值在t=Twe時變?yōu)樽畲?。S卩，用表達式(6)表示M(Twe)。
[0173]M(Twe) =K.(1-K).W.H.Twe/Tre...(6)
[0174]此時，參考圖7A到圖7C，可以根據(jù)三角形的相似原理而獲得表達式(7 )。
[0175]Twe/Tre= (K.H) / (H)...(7)
[0176]根據(jù)這點，所需存儲器大小和縮放率的倒數(shù)K之間的關(guān)系用以下表達式(8)表示。[0177]M(K)=K.K.(1-K).W.H...(8)
[0178]這里，根據(jù)數(shù)學(xué)的極值原理，當(dāng)M(K)具有最大值/最小值時，M(K)的一階導(dǎo)數(shù)可以變?yōu)镺。
[0179]M(K)的一階導(dǎo)用表達式(9)表不。
[0180]dM (K) = (2K-3K.K).W.H...(9)
[0181]由此，當(dāng)K=O和K=2/3時，M⑷具有極值。
[0182]進一步，根據(jù)二階導(dǎo)數(shù)的分析，可以看到，當(dāng)K=O時極值點具有最小值(O)且當(dāng)Κ=2/3時極值點具有最大值。
[0183]根據(jù)以上，當(dāng)Κ=2/3時，即當(dāng)縮放率=1.5時，所需存儲器大小變?yōu)樽畲蟆纳鲜霰磉_式(8)計算最大值為“4/27.W.H”。
[0184]如上所述，僅需要確保至少剪切之前圖像20的4/27的尺寸的容量為存儲器16Β的容量以防止寫入側(cè)的超出。
[0185][3.3同步傳輸]
[0186]這里，在此實施例中，同步傳輸設(shè)置為與根據(jù)剪切的電子縮放功能的實現(xiàn)相對應(yīng)地進行。
[0187]首先，作為假設(shè)，將參考圖8Α到圖SG描述正常同步傳播。
[0188]在圖8Α到圖SG中，假定以信號處理I —信號處理2 —信號處理3的次序處理圖像信號。圖8 A所示的同步信號SYNCO、圖8C所示的同步信號SYNCl以及圖8Ε所示的同步信號SYNC2是表不信號處理1、信號處理2以及信號處理3中的一巾貞的處理時間的開始定時的信號。圖8G的SYNC3是代表信號處理3的后續(xù)階段的信號處理中的一幀的處理時間的開始定時的信號。
[0189]在圖8Β、圖8D和圖8F中，白色所示的幀I到3分別表示基于SYNCl、SYNC2和SYNC3分配給信號處理1、2和3的幀I到3的幀處理時間。
[0190]對于從信號處理I到信號處理2輸出的同步信號SYNCl,圖中用Dl表不的延遲分派給輸入到信號處理I的同步信號SYNC0。延遲Dl變?yōu)榕c信號處理I的處理時間對應(yīng)的延遲。
[0191]另外，對于從信號處理2到信號處理3輸出的同步信號SYNC2，圖中用D2表示的延遲分派給輸入到信號處理2的同步信號SYNCl。延遲D2變?yōu)榕c信號處理2的處理時間對應(yīng)的延遲。
[0192]另外，對于從信號處理3輸出的同步信號SYNC3,圖中用D3表不的延遲分派給輸入到信號處理3的同步信號SYNC2。延遲D3變?yōu)榕c信號處理3的處理時間對應(yīng)的延遲。
[0193]在如上所述的正常同步傳播中，向下一階段的信號處理傳播一同步信號，向該同步信號分派與信號處理I到3的每一信號處理所需的處理時間對應(yīng)的延遲D。
[0194]為此，與剪切單元16根據(jù)此實施例中的剪切進行電子縮放處理的狀態(tài)對應(yīng)地進行上述同步傳輸。
[0195]圖9A到圖9H是圖示同步傳輸?shù)氖疽鈭D。
[0196]圖9A圖不輸入到第一信號處理單兀15的同步信號syncO,圖9C圖不從第一信號處理單元15輸出到剪切控制單元16A的同步信號syncl，而圖9E圖示從剪切控制單元16A輸出到尺寸轉(zhuǎn)換單元17的同步信號sync2。[0197]圖9B圖示基于同步信號syncO設(shè)置的第一信號處理單元15的用于每幀的處理時間，圖9D圖示基于同步信號syncl設(shè)置的剪切控制單元16A的用于每幀的處理時間，而圖9F圖示基于同步信號sync2設(shè)置的尺寸轉(zhuǎn)換單元17的用于每幀的處理時間。這里，從幀I到幀4的四幀圖示為在圖9B、圖9D和圖9E中圖示的每幀的處理時間。在圖9D和圖9F中，虛線指示的幀意味著基于同步信號sync設(shè)置的用于一幀的處理時間。
[0198]同樣，為了清楚，在運動圖像捕獲中，請求在同步信號sync設(shè)置的一個周期內(nèi)處理的完成。當(dāng)請求未滿足時，難以實現(xiàn)恒定幀速率。
[0199]首先，從同步信號syncO和同步信號syncl之間的關(guān)系的角度看，在同步信號syncl中向同步信號syncO給出與第一信號處理單元15的處理時間對應(yīng)的延遲(圖中的D1)。換而言之，通過向同步信號syncO分派延遲Dl獲得的同步信號syncl輸入到剪切控制單元16A中。
[0200]這里，考慮如下情況:其中，向其分派類似于正常同步傳播的延遲的延遲的同步信號sync (即，向其分派對于剪切控制單元16A的處理時間的延遲的同步信號sync(sync2))從剪切控制單元16A輸出到尺寸轉(zhuǎn)換單元17。
[0201]圖9G圖示上述同步信號sync2’的波形,而圖9F圖示當(dāng)已經(jīng)分派同步信號sync2’時尺寸轉(zhuǎn)換單元17的用于每一幀的處理時間。
[0202]當(dāng)與剪切控制單元16A的處理時間對應(yīng)的延遲D指定為D2時，同步信號sync2’可以指示“D1+D2”的延遲分派給如圖9G所示的同步信號syncO。
[0203]這里，應(yīng)當(dāng)注意，當(dāng)進行剪切的電子縮放處理時，要處理的數(shù)據(jù)被讀取到尺寸轉(zhuǎn)換單元17的定時晚于對剪切處理設(shè)置的一幀的處理時間的開頭定時(圖9D)。這是因為，當(dāng)如上所述使用存儲器16B進行剪切的電子縮放處理時，發(fā)生從來自第一信號處理單元15的剪切之前的圖像的開頭像素數(shù)據(jù)的輸出開始的時間到剪切范圍的開頭的像素數(shù)據(jù)寫入存儲器16B的時間的時間差。
[0204]在圖9H中，虛線的幀指示基于同步信號sync2’在尺寸轉(zhuǎn)換單元17中設(shè)置的處理時間，而實線的幀指示其中像素數(shù)據(jù)可以從存儲器16B讀取并且實際處理的時間。
[0205]從它們之間的比較，當(dāng)剪切控制單元16A已經(jīng)向尺寸轉(zhuǎn)換單元17輸出向其分派與正常同步傳播的延遲類似的延遲的同步信號sync2’時，處理的空閑部分在尺寸轉(zhuǎn)換單元17中發(fā)生(圖中的WS)。即，WS的處理時間的缺乏發(fā)生。
[0206]因而，為了恰當(dāng)?shù)卮_保處理時間，通過以與縮放率對應(yīng)的量延遲分派給尺寸轉(zhuǎn)換單元17的同步信號sync2，在剪切單元16和尺寸轉(zhuǎn)換單元17之間進行同步傳輸。
[0207]具體地，在此情況下，在圖9D和圖9E之間分派以“Dz”指示的延遲。
[0208]此延遲Dz與在第一信號處理單元15中開始剪切之前的圖像的開頭像素數(shù)據(jù)的輸出的定時和向存儲器16B寫入剪切范圍的開頭像素數(shù)據(jù)的定時之間的時間差對應(yīng)。此時間差變?yōu)榕c指示的縮放率對應(yīng)的值。因此，延遲Dz變?yōu)榕c縮放率對應(yīng)的量的延遲。
[0209]從剪切控制單元16A向尺寸轉(zhuǎn)換單元17輸出已經(jīng)向其分派上述延遲Dz的同步信號sync2,并且因此如圖9H所示的上述空閑部分不如圖9F所示地在尺寸轉(zhuǎn)換單元17中發(fā)生，并且可以恰當(dāng)?shù)卮_保尺寸轉(zhuǎn)換單元17的處理時間。
[0210]為了實現(xiàn)上述同步傳輸，在從第一信號處理單元15接收同步信號syncl之后，剪切控制單元16A在等待第一信號處理單元15向存儲器16B寫入剪切范圍的開頭像素數(shù)據(jù)之后發(fā)布同步信號sync2。
[0211]具體地，根據(jù)如下狀態(tài)發(fā)布同步信號sync2:由上述輸出像素計數(shù)值Gct指定的當(dāng)前像素位置已經(jīng)與由縮放率信息指示的剪切開始像素位置一致。
[0212]順便提及，因為當(dāng)縮放率波動時剪切范圍的開頭像素位置也改變，所以存在如下情況:其中，即使當(dāng)剪切范圍的開頭像素數(shù)據(jù)偶然地寫入存儲器16B時，尺寸轉(zhuǎn)換單元17還尚未完成前一巾貞的處理。
[0213]圖9A到圖9H圖示了在幀3和幀4之間存在縮放率的改變點的示例。
[0214]當(dāng)如在此實施例中輸出以與縮放率對應(yīng)的量延遲的同步信號sync2時，存在如下情況:其中，改變(erode)在縮放率改變之前幀中的處理時間，如圖9A到圖9H的Y所指示的。
[0215]處理時間的上述改變發(fā)生，并且因此存在如下情況:其中，即使當(dāng)剪切范圍的開頭像素數(shù)據(jù)寫入存儲器16B時，在尺寸轉(zhuǎn)換單元17中還尚未完成前一幀的處理。
[0216]因而，作為同步信號sync2的發(fā)布條件，可以僅設(shè)置第一信號處理單元15已經(jīng)向存儲器16B寫入剪切范圍的開頭像素數(shù)據(jù)的條件，也可以設(shè)置完成尺寸轉(zhuǎn)換單元17中前一幀的處理的條件。
[0217]具體地，在此情況下，剪切控制單元16A確定是否如上所述由輸出像素計數(shù)值Gct指定的當(dāng)前像素位置與由縮放率信息指示的剪切開始像素位置一致并且確定尺寸轉(zhuǎn)換單元17是否已經(jīng)完成前一幀的處理。
[0218]因而，當(dāng)確定結(jié)果指示已經(jīng)滿足完成前一幀的處理的條件以及由輸出像素計數(shù)值Gct指定的當(dāng)前像素位置與由縮放率信息指示的剪切開始像素位置一致的條件時，發(fā)布同步信息sync2。
[0219]因而，可以恰當(dāng)?shù)卮_保尺寸轉(zhuǎn)換單元17的處理時間同時防止前一幀的處理的改變。
[0220]通過進行與上述縮放率對應(yīng)的同步傳輸，可以確保尺寸轉(zhuǎn)換單元17之后的處理時間同時最小化同步延遲，并且縮放率的平滑轉(zhuǎn)變是可能的。
[0221]〈4、變型示例〉
[0222]盡管以上描述了依據(jù)本技術(shù)的實施例，但是本技術(shù)不限于上述具體示例。
[0223]例如，盡管涉及從用于剪切的存儲器讀取/向用于剪切的存儲器寫入僅在讀取側(cè)進行與存儲器積累量對應(yīng)的控制的操作已經(jīng)在以上描述，但是也可以在寫入側(cè)進行與存儲器積累量對應(yīng)的控制。
[0224]圖10是圖示當(dāng)如上所述在寫入側(cè)進行與存儲器積累量對應(yīng)的控制時采用的配置。
[0225]相同的附圖標(biāo)記分派給與如上所述類似的圖10中的部分，且省略其描述。
[0226]在此情況下，不像圖4所示的上述配置，提供剪切單元16’取代剪切單元16。具體地，剪切單兀16’不同于上述剪切單兀16在于:提供第一信號處理單兀15’取代第一信號處理單元15并且提供剪切控制單元16A’取代剪切控制單元16A。
[0227]不像第一信號處理單元15，第一信號處理單元15’向剪切控制單元16A’發(fā)布寫入請求。具體地，第一信號處理單元15’每當(dāng)存在經(jīng)歷了其自己的處理的像素數(shù)據(jù)的輸出時就向剪切控制單元16A’發(fā)布寫入請求。另外，第一信號處理單元15’向存儲器16B寫入像素數(shù)據(jù)，對于該像素數(shù)據(jù)已經(jīng)從剪切控制單元16A’發(fā)布了寫入準(zhǔn)許。
[0228]圖11是圖示當(dāng)進行與存儲器積累量對應(yīng)的寫入控制時剪切控制單元16A’執(zhí)行的具體處理的過程的流程圖。
[0229]首先，剪切控制單元16A’等待來自第一信號處理單元15’的同步信號syncl (步驟S301 )，并且根據(jù)已經(jīng)輸入同步信號syncl的狀態(tài)初始化輸出像素計數(shù)值Gct和寫入像素計數(shù)值Wct (O重置)(步驟S302和S303)。
[0230]在已經(jīng)初始化計數(shù)值Gct和Wct之后，剪切控制單元16A’等待來自第一信號處理單元15’的寫入請求(步驟S304)。換而言之，等待來自第一信號處理單元15’的像素輸出。
[0231]當(dāng)存在來自第一信號處理單元15’的寫入請求時，剪切控制單元16A’向上計數(shù)輸出像素計數(shù)值Gct(Gct=Gct+l)(步驟S305)，并且隨后確定是否已經(jīng)達到剪切開頭位置(步驟S305)。S卩，由輸出像素計數(shù)值Gct指定的像素位置已經(jīng)與由縮放率信息指示的剪切開始像素位置一致。
[0232]當(dāng)獲得指示尚未達到剪切開頭位置的否定結(jié)果時，剪切控制單元16A’通過回到步驟S304再次等待來自第一信號處理單元15’的寫入請求。
[0233]另一方面，當(dāng)獲得指示已經(jīng)達到剪切開頭位置的肯定結(jié)果時，剪切控制單元16A’確定是否存在剩余存儲器容量(步驟S307)。具體地，確定由“Wct-Rct”計算的存儲器16B中的數(shù)據(jù)積累量是否小于存儲器16B的容量。
[0234]當(dāng)在確定中獲得指示“Wct-Rct”的值不小于存儲器16B的容量且不存在剩余存儲器容量的否定結(jié)果時，剪切控制單元16A’通過回到上述步驟S304等待來自第一信號處理單元15’的寫入請求。即，當(dāng)確定剩余存儲器容量缺失時，即使當(dāng)已經(jīng)達到剪切開頭位置時也禁止到存儲器16B的寫入。
[0235]另外，當(dāng)獲得指示“Wct-Rct”的值小于存儲器16B的容量且存在剩余存儲器容量的肯定結(jié)果時，剪切控制單元16A’向尺寸轉(zhuǎn)換單元17發(fā)布寫入準(zhǔn)許(步驟S308)，并且向上計數(shù)寫入像素計數(shù)值Wct (ffct=ffct+l)(步驟S309)。
[0236]在寫入像素計數(shù)值Wct已經(jīng)向上計數(shù)之后，剪切控制單元16A’確定寫入是否已經(jīng)完成(步驟S310)。即，確定寫入像素計數(shù)值Wct是否大于或等于指示為縮放率信息的剪切像素的速率的值。
[0237]當(dāng)獲得指示寫入像素計數(shù)值Wct不大于或等于指示的剪切像素的數(shù)量的值且寫入尚未完成的否定結(jié)果時，剪切控制單元16A’通過回到上述步驟S304等待來自第一信號處理單元15’的寫入請求。
[0238]另一方面，當(dāng)獲得指示寫入像素計數(shù)值Wct大于或等于指示的剪切像素的數(shù)量的值且寫入已經(jīng)完成的肯定結(jié)果時，剪切控制單元16A’通過返回步驟S301等待再次檢測到同步信號syncl。
[0239]通過進行上述寫入控制可以防止存儲器16B的過載。
[0240]另外，盡管以上已經(jīng)描述了在剪切單元16內(nèi)提供用于剪切處理使用的存儲器的示例，但是在上述圖1中圖示的用作存儲器單元9的共享存儲器可以用作存儲器。
[0241]盡管當(dāng)存儲器單元9用作用于剪切的存儲器時根據(jù)電子縮放處理消耗總線12的頻段，但是可以如圖12所示地提供壓縮寫入到存儲器單元9的數(shù)據(jù)的壓縮單元16C和解壓縮從存儲器單元9讀取的壓縮數(shù)據(jù)的解壓縮單元16D，以減小上述總線的頻段的消耗以及存儲器單元9的容量的消耗。
[0242]這里，如所示地在剪切單元16’’內(nèi)提供壓縮單元16C和解壓縮單元16D。
[0243]同樣，相同的附圖標(biāo)記分派給類似于上述的圖12的各部分，并且省略其描述。
[0244]壓縮單元16C根據(jù)預(yù)定數(shù)據(jù)壓縮方案進行壓縮來自第一信號處理單元15的寫入數(shù)據(jù)的處理并且在總線12上傳送壓縮數(shù)據(jù)。
[0245]解壓縮單元16D進行解壓縮經(jīng)由總線12從存儲器單元9讀取到尺寸轉(zhuǎn)換單元17的壓縮數(shù)據(jù)的處理，并且向尺寸轉(zhuǎn)換單元17傳送解壓縮的讀取數(shù)據(jù)。
[0246]即使當(dāng)采用了通用壓縮/解壓縮技術(shù)時，可以獲得至少1/2或更高的壓縮率。因此，根據(jù)使用上述配置的電子縮放處理的執(zhí)行可以有效地抑制總線頻段以及存儲器單元9的容量消耗的增加。
[0247]本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)理解，只要在所附權(quán)利要求或其等同的范圍之內(nèi)，取決于設(shè)計要求和其他因素可以發(fā)生各種變型、組合、部分組合和變更。
[0248]另外，本技術(shù)也可以如下配置。
[0249](I) 一種運動圖像捕獲裝置，包括:
[0250]剪切單元，配置為基于縮放率信息根據(jù)從圖像傳感器讀取的圖像尺寸剪切圖像信號；以及
[0251]尺寸轉(zhuǎn)換單元，配置為如果必要則基于所述縮放率信息關(guān)于由所述剪切單元剪切的圖像信號進行圖像尺寸轉(zhuǎn)換處理。
[0252](2)根據(jù)(I)所述的運動圖像捕獲裝置，
[0253]其中，所述剪切單元在存儲器中選擇性地積累由所述縮放率信息指定的剪切目標(biāo)范圍的圖像信號，并且
[0254]其中，所述尺寸轉(zhuǎn)換單元通過讀取在所述存儲器中積累的圖像信號獲得所剪切的圖像信號。
[0255](3)根據(jù)(2)所述的運動圖像捕獲裝置，其中，所述剪切單元根據(jù)所述存儲器中的數(shù)據(jù)積累量控制所述尺寸轉(zhuǎn)換單元的存儲器讀取操作。
[0256](4)根據(jù)(2)所述的運動圖像捕獲裝置，其中，所述剪切單元以與所述縮放率信息對應(yīng)的時間長度延遲代表每幀的處理開始定時的同步信號，并且向所述尺寸轉(zhuǎn)換單元輸出延遲的同步信號。
[0257]( 5 )根據(jù)(4 )所述的運動圖像捕獲裝置，其中，所述剪切單元根據(jù)所述剪切目標(biāo)范圍的開頭部分是否已經(jīng)在所述存儲器中積累而向所述尺寸轉(zhuǎn)換單元輸出所述同步信號。
[0258](6)根據(jù)(5)所述的運動圖像捕獲裝置，其中，所述剪切單元確定所述剪切目標(biāo)范圍的開頭部分是否已經(jīng)在所述存儲器中積累以及所述尺寸轉(zhuǎn)換單元是否已經(jīng)完成與前一幀對應(yīng)的尺寸轉(zhuǎn)換處理，并且當(dāng)已經(jīng)在兩個確定中獲得肯定結(jié)果時向所述尺寸轉(zhuǎn)換單元輸出同步信號。
[0259](7)根據(jù)(2)到(6)的任一項所述的運動圖像捕獲裝置，包括:
[0260]壓縮處理單元，配置為關(guān)于寫入到所述存儲器的圖像信號進行壓縮處理；以及
[0261]解壓縮處理單元，配置為關(guān)于從所述存儲器讀取的圖像信號進行解壓縮處理。
[0262]本技術(shù)包含與公開在于2012年5月16日向日本專利局提交的日本優(yōu)先專利申請JP2012-112422的主題有關(guān)的主題，其整體內(nèi)容通過引用并入于此。
【權(quán)利要求】
1.一種運動圖像捕獲裝置，包括: 剪切單元，配置為基于縮放率信息來剪切根據(jù)從圖像傳感器讀取的圖像尺寸的圖像信號；以及 尺寸轉(zhuǎn)換單元，配置為如果必要則基于所述縮放率信息關(guān)于由所述剪切單元剪切的圖像信號進行圖像尺寸轉(zhuǎn)換處理。
2.根據(jù)權(quán)利要求1所述的運動圖像捕獲裝置， 其中，所述剪切單元在存儲器中選擇性地積累由所述縮放率信息指定的剪切目標(biāo)范圍的圖像信號，并且 其中，所述尺寸轉(zhuǎn)換單元通過讀取在所述存儲器中積累的圖像信號獲得所剪切的圖像信號。
3.根據(jù)權(quán)利要求2所述的運動圖像捕獲裝置，其中，所述剪切單元根據(jù)所述存儲器中的數(shù)據(jù)積累量來控制所述尺寸轉(zhuǎn)換單元的存儲器讀取操作。
4.根據(jù)權(quán)利要求2所述的運動圖像捕獲裝置，其中，所述剪切單元以與所述縮放率信息對應(yīng)的時間長度延遲代表每幀的處理開始定時的同步信號，并且向所述尺寸轉(zhuǎn)換單元輸出延遲的同步信號。
5.根據(jù)權(quán)利要求4所述的運動圖像捕獲裝置，其中，所述剪切單元根據(jù)所述剪切目標(biāo)范圍的開頭部分是否已經(jīng)在所述存儲器中積累而向所述尺寸轉(zhuǎn)換單元輸出所述同步信號。
6.根據(jù)權(quán)利要求5所述的運動圖像捕獲裝置，其中，所述剪切單元確定所述剪切目標(biāo)范圍的開頭部分是否已經(jīng)在所述存儲器中積累以及所述尺寸轉(zhuǎn)換單元是否已經(jīng)完成與前一幀對應(yīng)的尺寸轉(zhuǎn)換處理，并且當(dāng)已經(jīng)在兩個確定中獲得肯定結(jié)果時向所述尺寸轉(zhuǎn)換單元輸出同步信號。
7.根據(jù)權(quán)利要求2所述的運動圖像捕獲裝置，包括: 壓縮處理單元，配置為關(guān)于寫入到所述存儲器的圖像信號進行壓縮處理；以及 解壓縮處理單元，配置為關(guān)于從所述存儲器讀取的圖像信號進行解壓縮處理。
8.—種運動圖像的電子縮放方法，包括: 基于縮放率信息來剪切根據(jù)從圖像傳感器讀取的圖像尺寸的圖像信號；以及如果必要則基于所述縮放率信息關(guān)于在所述剪切步驟中剪切的圖像信號進行圖像尺寸轉(zhuǎn)換處理。
【文檔編號】H04N5/76GK103428421SQ201310168328
【公開日】2013年12月4日 申請日期:2013年5月9日 優(yōu)先權(quán)日:2012年5月16日
【發(fā)明者】李志文 申請人:索尼公司