專利名稱:圖像處理裝置和電子照相機(jī)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及圖像處理裝置和電子照相機(jī),特別涉及具有抖動(dòng)校正等檢測圖像的移動(dòng)量的功能的圖像處理裝置和電子照相機(jī)。
背景技術(shù):
提出了各種電子照相機(jī),這些電子照相機(jī)具有利用作為數(shù)字?jǐn)?shù)據(jù)得到的圖像對(duì)因抖動(dòng)導(dǎo)致的圖像的抖動(dòng)進(jìn)行校正的所謂電子抖動(dòng)校正功能。在電子抖動(dòng)校正中,考慮到抖動(dòng)引起的圖像的移動(dòng)而預(yù)先獲取大范圍的圖像,在檢測出抖動(dòng)引起的圖像的移動(dòng)量之后,進(jìn)行切出獲取的大范圍圖像中的一部分而進(jìn)行讀取的控制。通過該控制得到抖動(dòng)已校正的狀態(tài)的圖像。
此外,例如在專利第06-46311(特開平6-46311)號(hào)公報(bào)中提出了的照相機(jī),其利用如上述的電子抖動(dòng)校正功能的思考方法,進(jìn)行抖動(dòng)發(fā)生時(shí)的AF(AutoFocus自動(dòng)對(duì)焦)運(yùn)算、AE(Auto Exposure自動(dòng)曝光)運(yùn)算、AWB(Auto White Balance自動(dòng)白平衡)運(yùn)算。
一般,在利用數(shù)字圖像進(jìn)行AF的情況下,對(duì)通過攝像元件得到的模擬攝像信號(hào)進(jìn)行AD轉(zhuǎn)換之后,抽取適合進(jìn)行AF檢測的規(guī)定頻率成分的信號(hào)。并且,以數(shù)字形式對(duì)該抽取的信號(hào)進(jìn)行累加運(yùn)算以求出AF評(píng)價(jià)數(shù)據(jù),基于該AF評(píng)價(jià)數(shù)據(jù)在CPU等運(yùn)算部中進(jìn)行規(guī)定的運(yùn)算,進(jìn)行公知的焦點(diǎn)檢測和焦點(diǎn)控制。
在這里,在專利第06-46311號(hào)公報(bào)中,與電子抖動(dòng)校正的情況相同,預(yù)先獲取大范圍的圖像。如圖15A-圖15C所示,在發(fā)生抖動(dòng)時(shí),進(jìn)行如下控制根據(jù)抖動(dòng)量來調(diào)整位置,僅從上述預(yù)先獲取的大范圍的圖像的一部分中切出區(qū)域101來進(jìn)行讀取。并且,對(duì)所讀取的區(qū)域101內(nèi)的數(shù)據(jù)進(jìn)行累加運(yùn)算而得到AF評(píng)價(jià)數(shù)據(jù)。根據(jù)這種方法,可以基于抖動(dòng)校正之后的數(shù)據(jù)進(jìn)行AF。
此外,在圖15A-圖15C的例中,進(jìn)行累加運(yùn)算的區(qū)域?yàn)?個(gè),但也可以對(duì)多個(gè)區(qū)域進(jìn)行累加運(yùn)算。在這種情況下,例如,如圖16A-圖16C所示,將區(qū)域101進(jìn)一步分割成多個(gè)塊101a,對(duì)每個(gè)所分割的塊進(jìn)行累加運(yùn)算。
進(jìn)而,在AE和AWB的情況下,根據(jù)圖像的移動(dòng)而變更圖像的切出區(qū)域101的位置之后,對(duì)每個(gè)顏色成分進(jìn)行累加運(yùn)算。
然而,在上述專利第06-46311號(hào)公報(bào)的方法中,不進(jìn)行任何關(guān)于AF控制、AE控制、AWB控制的處理,直到檢測出圖像的移動(dòng)量為止。因此,在上述專利第06-46311號(hào)公報(bào)的方法中,發(fā)生抖動(dòng)時(shí)的AF控制、AE控制、AWB控制的處理時(shí)間產(chǎn)生延遲,其延遲量是移動(dòng)量檢測的時(shí)間。
發(fā)明內(nèi)容
本發(fā)明就是鑒于上述的問題而提出的,其目的在于,提供一種即使在發(fā)生了抖動(dòng)的情況下,仍能更高速地進(jìn)行AF控制、AE控制、AWB控制等各種控制的圖像處理裝置和裝配了這種圖像處理裝置的電子照相機(jī)。
本發(fā)明的圖像處理裝置具有對(duì)通過攝像元件所攝像的圖像的抖動(dòng)(圖像的移動(dòng))進(jìn)行檢測的檢測部(檢測單元、檢測電路等),與上述檢測部的檢測動(dòng)作并列地對(duì)所攝像的圖像的評(píng)價(jià)數(shù)據(jù)進(jìn)行運(yùn)算(簡易運(yùn)算simplified calculation)直至中間值(簡易評(píng)價(jià)數(shù)據(jù)simplifiedanalysis data),將其結(jié)果記錄到存儲(chǔ)器中。并且,在上述檢測單元的檢測結(jié)束之后,基于由上述檢測部檢測出的抖動(dòng),根據(jù)記錄在上述存儲(chǔ)器中的評(píng)價(jià)數(shù)據(jù)的中間值運(yùn)算上述評(píng)價(jià)數(shù)據(jù)的最終值(最終運(yùn)算finalcalculation)。這樣,在檢測圖像的抖動(dòng)的前后將一系列運(yùn)算分成2個(gè)部分,因此可以縮短圖像的抖動(dòng)檢測之后的運(yùn)算時(shí)間。
作為圖像的評(píng)價(jià)數(shù)據(jù),可舉出用于AF控制、AE控制、AWB控制等的評(píng)價(jià)數(shù)據(jù)。例如,在最終運(yùn)算中,校正抖動(dòng)的影響從攝像圖像中切出區(qū)域,且作為在該區(qū)域內(nèi)用于上述各控制的評(píng)價(jià)數(shù)據(jù),可以運(yùn)算亮度和顏色信息。在這種情況下,可以基于由檢測部檢測出的抖動(dòng),決定從上述圖像中切出的區(qū)域,僅將該切出區(qū)域當(dāng)作運(yùn)算對(duì)象。也可以對(duì)多個(gè)圖像中的上述切出區(qū)域的上述評(píng)價(jià)數(shù)據(jù)的中間值進(jìn)行累計(jì),從而運(yùn)算上述評(píng)價(jià)數(shù)據(jù)的最終值。進(jìn)而,在該累計(jì)時(shí),通過將規(guī)定數(shù)量的數(shù)據(jù)集中為1個(gè)數(shù)據(jù),可以減少數(shù)據(jù)量。
此外,也可以在簡易運(yùn)算中,僅以由攝像裝置所攝像的上述圖像的一部分為對(duì)象來進(jìn)行運(yùn)算。由此,可以減少運(yùn)算的數(shù)據(jù)量。繼而在最終運(yùn)算中還可以基于檢測出的抖動(dòng)進(jìn)一步從上述圖像的一部分中切出區(qū)域。由此,可以進(jìn)一步減少運(yùn)算對(duì)象的數(shù)據(jù)。
當(dāng)然,也可以在簡易運(yùn)算中,通過將規(guī)定數(shù)量的數(shù)據(jù)集中為1個(gè)數(shù)據(jù),來減少數(shù)據(jù)量。
例如,也可以將本發(fā)明理解為具有如下部分的圖像處理裝置或電子照相機(jī)輸入部,其輸入進(jìn)行攝像而得到的攝像數(shù)據(jù);簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部,其將通過上述輸入部輸入的上述攝像數(shù)據(jù)轉(zhuǎn)換成簡易評(píng)價(jià)數(shù)據(jù);存儲(chǔ)部,其存儲(chǔ)通過上述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部轉(zhuǎn)換的上述簡易評(píng)價(jià)數(shù)據(jù);移動(dòng)檢測部,其根據(jù)前一次攝像時(shí)通過上述輸入部輸入的攝像數(shù)據(jù)和此次攝像時(shí)通過上述輸入部輸入的攝像數(shù)據(jù)檢測圖像的移動(dòng);和最終評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部,其根據(jù)在上述移動(dòng)檢測部中檢測出的上述圖像的移動(dòng),將存儲(chǔ)在上述存儲(chǔ)部中的上述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換成最終評(píng)價(jià)數(shù)據(jù)。
根據(jù)本發(fā)明,通過將攝像數(shù)據(jù)暫時(shí)轉(zhuǎn)換成簡易評(píng)價(jià)數(shù)據(jù),可使AF控制、AE控制、AWB控制等控制高速化。
根據(jù)本發(fā)明,可以提供即使在發(fā)生抖動(dòng)的情況下也能更高速地進(jìn)行AF控制、AE控制、AWB控制等控制的圖像處理裝置和裝配了這種圖像處理裝置的電子照相機(jī)。
考慮下面的說明、附加的權(quán)利要求和附圖,本發(fā)明的裝置和方法的上述特征及其它特征、方面和優(yōu)點(diǎn)將變得更易于理解。
圖1是裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)的電路結(jié)構(gòu)圖;
圖2是表示裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)中的數(shù)據(jù)流程的第1圖;圖3是表示裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)中的數(shù)據(jù)流程的第2圖;圖4是表示裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)中的數(shù)據(jù)流程的第3圖;圖5是電子抖動(dòng)校正的說明圖;圖6是表示裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)中的數(shù)據(jù)流程的第4圖;圖7是表示裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)中的AF運(yùn)算時(shí)的處理的流程圖;圖8是AF時(shí)的累加運(yùn)算處理的示意圖;圖9是表示裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)中的AE/AWB運(yùn)算時(shí)的處理的流程圖;圖10是用于詳細(xì)地對(duì)累加運(yùn)算處理進(jìn)行說明的圖的第1圖;圖11是用于詳細(xì)地對(duì)累加運(yùn)算處理進(jìn)行說明的圖的第2圖;圖12是用于詳細(xì)地對(duì)累加運(yùn)算處理進(jìn)行說明的圖的第3圖;圖13A是現(xiàn)有的AF和AE運(yùn)算時(shí)的時(shí)序圖;圖13B是表示裝配了本發(fā)明的一個(gè)實(shí)施方式的圖像處理裝置的電子照相機(jī)中的AF和AE運(yùn)算時(shí)的時(shí)序圖;圖14是用于對(duì)本發(fā)明的實(shí)施方式的變形例進(jìn)行說明的圖;圖15A-15C是表示現(xiàn)有例的AF運(yùn)算的第1圖;圖16A-16C是表示現(xiàn)有例的AF運(yùn)算的第2圖。
具體實(shí)施例方式
下面參照附圖對(duì)發(fā)明的優(yōu)選實(shí)施方式進(jìn)行說明。
圖1是裝配了本發(fā)明的實(shí)施方式的圖像處理裝置的電子照相機(jī)的電路結(jié)構(gòu)圖。即,圖1的電子照相機(jī)具有攝像元件(CCD電荷耦合器件)1、第1AF運(yùn)算器(auto focus arithmetic unit)2、第1AE運(yùn)算器(auto exposure arithmetic unit)3、第1AWB運(yùn)算器(auto whitebalance arithmetic unit)4、預(yù)處理電路(preprocess circuit)5、(傳輸圖像數(shù)據(jù)的)圖像總線(image bus)6、SDRAM(Synchronous DRAM同步動(dòng)態(tài)存儲(chǔ)器)7和移動(dòng)檢測塊8。電子照相機(jī)還具有CPU總線9、第2AF運(yùn)算器10、第2AE運(yùn)算器11、第2AWB運(yùn)算器12、圖像處理塊13、CPU 14、視頻編碼器15和TET(Thin Film Transistor薄膜晶體管)顯示器16。這些結(jié)構(gòu)也可以采用單芯片來構(gòu)成。
下面,按照處理數(shù)據(jù)的流程,對(duì)圖1所示的結(jié)構(gòu)的電子照相機(jī)的動(dòng)作進(jìn)行說明。
通過攝影光學(xué)系統(tǒng)(未圖示)入射的來自被攝體(未圖示)的光束成像于作為輸入部件和攝像部件的CCD 1上。CCD 1通過光電轉(zhuǎn)換將被攝體光束轉(zhuǎn)換成模擬的攝像信號(hào),再通過AD轉(zhuǎn)換器(未圖示)將攝像信號(hào)轉(zhuǎn)換成數(shù)字的攝像數(shù)據(jù)。
圖2表示通過CCD 1得到的攝像數(shù)據(jù)的流程。攝像數(shù)據(jù)被輸出到作為簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部(simplified analysis data conversionportion)的第1AF運(yùn)算器2、第1AE運(yùn)算器3、第1AWB運(yùn)算器4,并且還被輸出到預(yù)處理電路5中。
第1AF運(yùn)算器2從輸入的攝像數(shù)據(jù)中抽取亮度(Y)數(shù)據(jù),對(duì)抽取的Y數(shù)據(jù)進(jìn)行累加運(yùn)算而求出簡易AF評(píng)價(jià)數(shù)據(jù)。第1AE運(yùn)算器3針對(duì)每個(gè)顏色成分對(duì)輸入的攝像數(shù)據(jù)進(jìn)行累加運(yùn)算而求出簡易AE評(píng)價(jià)數(shù)據(jù)。
第1AWB運(yùn)算器4針對(duì)每個(gè)顏色成分對(duì)輸入的攝像數(shù)據(jù)進(jìn)行累加運(yùn)算而求出簡易AWB評(píng)價(jià)數(shù)據(jù)。這些簡易評(píng)價(jià)數(shù)據(jù)如圖2所示被發(fā)送到圖像總線6,然后存儲(chǔ)在作為存儲(chǔ)部(存儲(chǔ)器)的SDRAM 7中。
此外,預(yù)處理電路5在針對(duì)輸入的攝像數(shù)據(jù)進(jìn)行噪聲去除和信號(hào)放大等預(yù)處理(preprocess)之后,將預(yù)處理后的攝像數(shù)據(jù)發(fā)送到圖像總線6上。該預(yù)處理后的攝像數(shù)據(jù)被存儲(chǔ)在SDRAM 7中。
圖3表示關(guān)于圖像的移動(dòng)(抖動(dòng))檢測的數(shù)據(jù)的流程。移動(dòng)檢測塊8基于存儲(chǔ)在SDRAM 7中的攝像數(shù)據(jù)進(jìn)行圖像的移動(dòng)檢測。檢測出的圖像的移動(dòng)信息被發(fā)送到CPU總線9上。在這里,例如通過采用塊匹配運(yùn)算等方法來比較前一次攝像時(shí)得到的攝像數(shù)據(jù)(第n-1幀的攝像數(shù)據(jù))與此次攝像時(shí)得到的攝像數(shù)據(jù)(第n幀的攝像數(shù)據(jù))而進(jìn)行移動(dòng)檢測。在進(jìn)行這種比較的情況下,SDRAM 7需要具備至少能夠存儲(chǔ)2幀的攝像數(shù)據(jù)的容量。而且,也可以通過使用陀螺傳感器和角速度傳感器等直接檢測電子照相機(jī)的抖動(dòng),來檢測圖像的移動(dòng)。
圖4表示發(fā)送到CPU總線9的移動(dòng)信息的流程。如圖4所示,移動(dòng)信息被發(fā)送到作為最終評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部(final analysis dataconversion portion)的第2AF運(yùn)算器10、第2AE運(yùn)算器11和第2AWB運(yùn)算器12中,并且還被發(fā)送到圖像處理塊13中。此外,存儲(chǔ)在SDRAM 7中的簡易評(píng)價(jià)數(shù)據(jù)分別被發(fā)送到第2AF運(yùn)算器10、第2AE運(yùn)算器11和第2AWB運(yùn)算器12中。
第2AF運(yùn)算器10基于輸入的移動(dòng)信息對(duì)簡易AF評(píng)價(jià)數(shù)據(jù)進(jìn)行累加運(yùn)算而求出最終AF評(píng)價(jià)數(shù)據(jù)。第2AE運(yùn)算器11基于輸入的移動(dòng)信息對(duì)簡易AE評(píng)價(jià)數(shù)據(jù)進(jìn)行累加運(yùn)算而求出最終AE評(píng)價(jià)數(shù)據(jù)。第2AWB運(yùn)算器12基于輸入的移動(dòng)信息對(duì)簡易AWB評(píng)價(jià)數(shù)據(jù)進(jìn)行累加運(yùn)算而求出最終AWB評(píng)價(jià)數(shù)據(jù)。通過第2AF運(yùn)算器10、第2AE運(yùn)算器11、第2AWB運(yùn)算器12轉(zhuǎn)換而得到的最終評(píng)價(jià)數(shù)據(jù)通過CPU總線9被發(fā)送到CPU 14。而且,也可以將最終評(píng)價(jià)數(shù)據(jù)寫入到SDRAM中。
CPU 14基于分別從第2AF運(yùn)算器10、第2AE運(yùn)算器11和第2AWB運(yùn)算器12輸入的最終評(píng)價(jià)數(shù)據(jù),進(jìn)行周知的焦點(diǎn)檢測處理、測光處理和白平衡調(diào)整處理。
此外,如圖5所示,圖像處理塊13基于移動(dòng)信息,從存儲(chǔ)在SDRAM7中的攝像數(shù)據(jù)30中讀取例如區(qū)域31或區(qū)域32的攝像數(shù)據(jù)。然后針對(duì)讀取的圖像,進(jìn)行g(shù)amma校正處理和顏色校正處理、亮度色差轉(zhuǎn)換處理等周知的圖像處理。即,通過考慮移動(dòng)量來控制攝像數(shù)據(jù)的讀取位置,可以得到校正了抖動(dòng)的狀態(tài)的圖像。而且,通過作為讀取控制部的CPU 14來進(jìn)行如上述那樣的攝像數(shù)據(jù)的讀取位置控制。
在圖像處理塊13中得到的亮度色差數(shù)據(jù)(YC數(shù)據(jù))通過圖像總線6再次存儲(chǔ)到SDRAM 7中。然后,存儲(chǔ)在SDRAM 7中的YC數(shù)據(jù)如圖6所示被發(fā)送到視頻編碼器15中。視頻編碼器15將YC數(shù)據(jù)轉(zhuǎn)換成NTSC等視頻信號(hào),基于該視頻信號(hào)在TFT顯示器16上進(jìn)行圖像顯示。
接著,更詳細(xì)地對(duì)本實(shí)施方式中的AF、AE、AWB進(jìn)行說明。
首先,對(duì)AF進(jìn)行說明。圖7是表示本實(shí)施方式的AF評(píng)價(jià)數(shù)據(jù)算出運(yùn)算的程序的流程圖。
當(dāng)向第1AF運(yùn)算器2輸入攝像數(shù)據(jù)時(shí),第1AF運(yùn)算器2根據(jù)輸入的攝像數(shù)據(jù)生成Y數(shù)據(jù)(步驟S1)。Y數(shù)據(jù)例如通過對(duì)攝像數(shù)據(jù)進(jìn)行YC分離而獲得。接著,利用低通濾波器和高通濾波器抽取在步驟S1中得到的Y數(shù)據(jù)的規(guī)定頻率成分(步驟S2)。接著,對(duì)Y數(shù)據(jù)進(jìn)行累加運(yùn)算直至為規(guī)定數(shù)據(jù)大小,從而生成簡易AF評(píng)價(jià)數(shù)據(jù),將生成的簡易AF評(píng)價(jià)數(shù)據(jù)存儲(chǔ)到SDRAM 7中(步驟S3)。到此為止的處理與圖像的移動(dòng)檢測并列地進(jìn)行。
圖像的移動(dòng)檢測之后,第2AF運(yùn)算器10從SDRAM 7中讀取簡易AF評(píng)價(jià)數(shù)據(jù),對(duì)讀取的簡易AF評(píng)價(jià)數(shù)據(jù)進(jìn)行累加運(yùn)算而得到最終AF評(píng)價(jià)數(shù)據(jù)(步驟S4)。在這里,通過進(jìn)行讀取控制以便根據(jù)圖像的移動(dòng)信息切出簡易AF評(píng)價(jià)數(shù)據(jù)的規(guī)定區(qū)域的數(shù)據(jù),僅對(duì)該區(qū)域內(nèi)的數(shù)據(jù)進(jìn)行累加運(yùn)算而獲得最終AF評(píng)價(jià)數(shù)據(jù)。而且,如上所述的攝像數(shù)據(jù)的讀取位置控制通過CPU 14進(jìn)行。
如圖8所示,在本實(shí)施方式的AF中,與圖像的移動(dòng)檢測并列地求出簡易AF評(píng)價(jià)數(shù)據(jù)41,在圖像的移動(dòng)檢測之后再對(duì)簡易評(píng)價(jià)數(shù)據(jù)41進(jìn)行累加運(yùn)算,求出最終AF評(píng)價(jià)數(shù)據(jù)42。這樣,根據(jù)本實(shí)施方式,可以與圖像的移動(dòng)檢測并列地求出具有攝像數(shù)據(jù)40與最終評(píng)價(jià)數(shù)據(jù)42的中間的數(shù)據(jù)大小的簡易AF評(píng)價(jià)數(shù)據(jù)41。由此,圖像的移動(dòng)檢測之后的處理僅僅是根據(jù)簡易AF評(píng)價(jià)數(shù)據(jù)41求出最終AF評(píng)價(jià)數(shù)據(jù)42。因此,檢測出圖像的移動(dòng)之后,不必進(jìn)行Y數(shù)據(jù)抽取等處理,且還減少了累加運(yùn)算的處理量,因此可以縮短用于AF的時(shí)間。
圖9是表示本實(shí)施方式的AE評(píng)價(jià)數(shù)據(jù)和AWB評(píng)價(jià)數(shù)據(jù)算出運(yùn)算的步驟的流程圖。在這里,AE評(píng)價(jià)數(shù)據(jù)算出運(yùn)算和AWB評(píng)價(jià)數(shù)據(jù)算出運(yùn)算按照同一流程進(jìn)行,因此在這里,僅對(duì)AE評(píng)價(jià)數(shù)據(jù)的算出進(jìn)行說明。
當(dāng)向第1AE運(yùn)算器3輸入攝像數(shù)據(jù)時(shí),第1AE運(yùn)算器3針對(duì)每個(gè)顏色成分對(duì)所輸入的攝像數(shù)據(jù)進(jìn)行累計(jì)而生成簡易AE評(píng)價(jià)數(shù)據(jù)(步驟S11)。該處理在第1AE運(yùn)算器3中與圖像的移動(dòng)檢測并列地進(jìn)行。
圖像的移動(dòng)檢測之后,第2AE運(yùn)算器11從SDRAM 7中讀取簡易AE評(píng)價(jià)數(shù)據(jù),針對(duì)每個(gè)顏色成分對(duì)讀取的簡易AE評(píng)價(jià)數(shù)據(jù)進(jìn)行累加運(yùn)算而得到最終AE評(píng)價(jià)數(shù)據(jù)(步驟S12)。進(jìn)行讀取控制以便根據(jù)圖像的移動(dòng)信息切出簡易AE評(píng)價(jià)數(shù)據(jù)41的規(guī)定區(qū)域的數(shù)據(jù),僅對(duì)該區(qū)域內(nèi)的數(shù)據(jù)進(jìn)行累加運(yùn)算而求出該最終AE評(píng)價(jià)數(shù)據(jù)。在這里,在AE和AWB中最終評(píng)價(jià)數(shù)據(jù)算出時(shí)的數(shù)據(jù)大小不同。
通過這種方法,與AF的情況一樣,對(duì)于AE和AWB也能縮短檢測圖像的移動(dòng)之后的處理時(shí)間。
更詳細(xì)地對(duì)本實(shí)施方式中所進(jìn)行的累加運(yùn)算進(jìn)行說明。在CCD 1中讀取圖10所示的攝像數(shù)據(jù)40中的一部分區(qū)域,按照每規(guī)定數(shù)個(gè)數(shù)據(jù)對(duì)該一部分區(qū)域內(nèi)所包含的攝像數(shù)據(jù)進(jìn)行累加運(yùn)算而集中為1個(gè)數(shù)據(jù),由此得到圖11所示的簡易評(píng)價(jià)數(shù)據(jù)41。將該簡易評(píng)價(jià)數(shù)據(jù)41存儲(chǔ)到SDRAM7中。而且,在圖11中作為例子,將5×5個(gè)數(shù)據(jù)累加運(yùn)算成1個(gè)數(shù)據(jù),但該數(shù)僅僅是一例而已,可以變更。
此外,在AF的情況下,可以簡單地對(duì)相鄰的規(guī)定數(shù)的數(shù)據(jù)進(jìn)行累加運(yùn)算,但在AE和AWB的情況下,針對(duì)每個(gè)顏色進(jìn)行累加運(yùn)算。例如,如果攝像元件的像素排列是[RGB]拜爾(Bayer)排列,則針對(duì)R、Gr、Gb、B的每個(gè)顏色進(jìn)行累加運(yùn)算。
第2次的第2AF運(yùn)算器10基于在移動(dòng)檢測塊8中檢測出的圖像移動(dòng)決定簡易評(píng)價(jià)數(shù)據(jù)41中的切出區(qū)域,再按照每規(guī)定數(shù)個(gè)數(shù)據(jù)對(duì)已決定的切出區(qū)域中的數(shù)據(jù)進(jìn)行累計(jì),得到最終評(píng)價(jià)數(shù)據(jù)42。而且,在圖12中作為例子,以簡易評(píng)價(jià)數(shù)據(jù)41的單位將3×3個(gè)數(shù)據(jù)累加運(yùn)算成1個(gè)數(shù)據(jù)。
圖13A表示現(xiàn)有的AF、AE處理的時(shí)序圖,圖13B表示本實(shí)施方式的AF、AE處理的時(shí)序圖。而且,由于AWB是與AE相同的處理,因此在這里省略圖示。如圖13A和圖13B所示,就圖像的移動(dòng)檢測之后的數(shù)據(jù)處理量而言,從簡易評(píng)價(jià)數(shù)據(jù)得到最終評(píng)價(jià)數(shù)據(jù)的方法的處理量比從攝像數(shù)據(jù)直接得到最終評(píng)價(jià)數(shù)據(jù)的方法的處理量少,因此在整體上縮短了AF和AE所需的處理時(shí)間。
基于以上的實(shí)施方式對(duì)本發(fā)明進(jìn)行說明,但本發(fā)明不限定于上述的實(shí)施方式,而當(dāng)然可以在本發(fā)明的要旨的范圍內(nèi)進(jìn)行各種變形和應(yīng)用。
例如,在圖12中的例子中,只能以簡易評(píng)價(jià)數(shù)據(jù)中的每個(gè)數(shù)據(jù)單位來變更移動(dòng)檢測之后的數(shù)據(jù)的切出區(qū)域。然而,圖像的移動(dòng)信息并非針對(duì)簡易評(píng)價(jià)數(shù)據(jù)而算出,而是針對(duì)原來的攝像數(shù)據(jù)而算出的,因此在從簡易評(píng)價(jià)數(shù)據(jù)切出圖像時(shí),還會(huì)有偏離簡易評(píng)價(jià)數(shù)據(jù)的1個(gè)數(shù)據(jù)大小的情況。在這種情況下,也可以通過插值法求出偏離簡易評(píng)價(jià)數(shù)據(jù)的數(shù)據(jù)大小的部分,并進(jìn)行讀取控制以便切出該求出的區(qū)域42的數(shù)據(jù),轉(zhuǎn)換成最終評(píng)價(jià)數(shù)據(jù)。通過這種方法,在第2次累加運(yùn)算時(shí),可以反映出更正確的移動(dòng)信息。
雖然示出并描述了本發(fā)明的優(yōu)選實(shí)施方式,但當(dāng)然可以在不脫離本發(fā)明的精神的范圍內(nèi)在形式或細(xì)節(jié)上容易地進(jìn)行各種變形和變化。因此這意味著本發(fā)明不僅限于所描述和例示的具體形式,而覆蓋所有的可能落入所附的權(quán)利要求的范圍的變形。
權(quán)利要求
1.一種圖像處理裝置,包括檢測單元,所述檢測單元檢測通過攝像元件所攝像的圖像的抖動(dòng),其特征在于,所述圖像處理裝置包括簡易運(yùn)算單元,其與所述檢測部的檢測動(dòng)作并列地運(yùn)算所攝像的圖像的評(píng)價(jià)數(shù)據(jù)的中間值;存儲(chǔ)器,其記錄所述簡易運(yùn)算單元的運(yùn)算結(jié)果;和最終運(yùn)算單元,在所述檢測單元的檢測結(jié)束之后,基于由所述檢測單元檢測出的抖動(dòng),根據(jù)記錄在所述存儲(chǔ)器中的評(píng)價(jià)數(shù)據(jù)的中間值運(yùn)算所述評(píng)價(jià)數(shù)據(jù)的最終值。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,所述最終運(yùn)算單元具有基于由檢測單元檢測出的抖動(dòng)來決定從所述圖像中切出的區(qū)域的功能,僅將該切出的區(qū)域當(dāng)作運(yùn)算對(duì)象。
3.根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于,所述最終運(yùn)算單元對(duì)多個(gè)圖像中的所述切出區(qū)域的所述評(píng)價(jià)數(shù)據(jù)的中間值進(jìn)行累計(jì),運(yùn)算所述評(píng)價(jià)數(shù)據(jù)的最終值。
4.根據(jù)權(quán)利要求3所述的圖像處理裝置,其特征在于,所述最終運(yùn)算單元通過將規(guī)定數(shù)的數(shù)據(jù)集中為1個(gè)數(shù)據(jù)來進(jìn)行減少數(shù)據(jù)量的運(yùn)算。
5.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,所述簡易運(yùn)算單元僅以攝像裝置所攝像的所述圖像的一部分為對(duì)象來進(jìn)行運(yùn)算。
6.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,所述最終運(yùn)算單元具有基于由檢測單元檢測出的抖動(dòng)來決定從所述圖像中切出包含在被所述簡易運(yùn)算單元當(dāng)作運(yùn)算對(duì)象的區(qū)域中的、比該區(qū)域窄的區(qū)域的功能,所述最終運(yùn)算單元僅將該切出的區(qū)域當(dāng)作運(yùn)算對(duì)象。
7.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,所述簡易運(yùn)算單元通過將規(guī)定數(shù)的數(shù)據(jù)集中為1個(gè)數(shù)據(jù)來進(jìn)行減少數(shù)據(jù)量的運(yùn)算。
8.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于,所述評(píng)價(jià)數(shù)據(jù)是用于圖像的AF控制、AE控制、AWB控制中的至少1個(gè)控制的數(shù)據(jù)。
9.一種圖像處理裝置,包括輸入攝像得到的攝像數(shù)據(jù)的輸入部,其特征在于,所述圖像處理裝置包括簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部,其將通過所述輸入部輸入的所述攝像數(shù)據(jù)轉(zhuǎn)換成簡易評(píng)價(jià)數(shù)據(jù);存儲(chǔ)部,其存儲(chǔ)通過所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部轉(zhuǎn)換的所述簡易評(píng)價(jià)數(shù)據(jù);移動(dòng)檢測部,其根據(jù)在前一次攝像時(shí)由所述輸入部輸入的攝像數(shù)據(jù)和此次攝像時(shí)由所述輸入部輸入的攝像數(shù)據(jù)來檢測圖像的移動(dòng);和最終評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部,其根據(jù)在所述移動(dòng)檢測部中檢測出的所述圖像的移動(dòng),將存儲(chǔ)在所述存儲(chǔ)部中的所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換成最終評(píng)價(jià)數(shù)據(jù)。
10.根據(jù)權(quán)利要求9所述的圖像處理裝置,其特征在于,還包括讀取控制部,其根據(jù)在所述移動(dòng)檢測部中檢測出的所述圖像的移動(dòng),進(jìn)行存儲(chǔ)在所述存儲(chǔ)部中的所述簡易評(píng)價(jià)數(shù)據(jù)的讀取控制。
11.根據(jù)權(quán)利要求9所述的圖像處理裝置,其特征在于,在所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部中得到的所述簡易評(píng)價(jià)數(shù)據(jù)是焦點(diǎn)檢測的評(píng)價(jià)數(shù)據(jù)、測光的評(píng)價(jià)數(shù)據(jù)和白平衡調(diào)整的評(píng)價(jià)數(shù)據(jù)中的至少1個(gè)評(píng)價(jià)數(shù)據(jù)。
12.根據(jù)權(quán)利要求11所述的圖像處理裝置,其特征在于,所述攝像數(shù)據(jù)是包含亮度信息的數(shù)據(jù),所述焦點(diǎn)檢測的評(píng)價(jià)數(shù)據(jù)是對(duì)所述亮度信息的一部分進(jìn)行累加運(yùn)算而得到的評(píng)價(jià)數(shù)據(jù)。
13.根據(jù)權(quán)利要求11所述的圖像處理裝置,其特征在于,所述攝像數(shù)據(jù)是包含多個(gè)顏色信息的數(shù)據(jù),所述測光的評(píng)價(jià)數(shù)據(jù)和所述白平衡調(diào)整的評(píng)價(jià)數(shù)據(jù)是針對(duì)每個(gè)顏色對(duì)所述攝像數(shù)據(jù)的一部分進(jìn)行累加運(yùn)算而得到的評(píng)價(jià)數(shù)據(jù)。
14.根據(jù)權(quán)利要求9所述的圖像處理裝置,其特征在于,所述最終評(píng)價(jià)數(shù)據(jù)是對(duì)所述簡易評(píng)價(jià)數(shù)據(jù)的一部分進(jìn)行累加運(yùn)算而得到的評(píng)價(jià)數(shù)據(jù)。
15.根據(jù)權(quán)利要求9所述的圖像處理裝置,其特征在于,所述最終評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部基于在所述移動(dòng)檢測部中檢測出的所述圖像的移動(dòng),將對(duì)所述簡易評(píng)價(jià)數(shù)據(jù)的數(shù)據(jù)大小進(jìn)行了插值的位置的簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換成所述最終評(píng)價(jià)數(shù)據(jù)。
16.根據(jù)權(quán)利要求9所述的圖像處理裝置,其特征在于,所述移動(dòng)檢測部進(jìn)行的所述圖像的移動(dòng)檢測與所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部進(jìn)行的向所述簡易評(píng)價(jià)數(shù)據(jù)的轉(zhuǎn)換并列地進(jìn)行。
17.根據(jù)權(quán)利要求9所述的圖像處理裝置,其特征在于,至少把所述輸入部、所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部、所述存儲(chǔ)部、所述移動(dòng)檢測部以及所述最終評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部形成在同一芯片上。
18.一種電子照相機(jī),包括對(duì)被攝體進(jìn)行攝像而獲得攝像數(shù)據(jù)的攝像部,其特征在于,所述電子照相機(jī)包括簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部,其將通過所述攝像部攝像的所述攝像數(shù)據(jù)轉(zhuǎn)換成簡易評(píng)價(jià)數(shù)據(jù);存儲(chǔ)部,其存儲(chǔ)通過所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部轉(zhuǎn)換的所述簡易評(píng)價(jià)數(shù)據(jù);抖動(dòng)檢測部,其根據(jù)在前一次攝像時(shí)由所述攝像部攝像的攝像數(shù)據(jù)和此次攝像時(shí)由所述攝像部攝像的攝像數(shù)據(jù)來檢測該電子照相機(jī)的抖動(dòng);和最終評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換部,其根據(jù)在所述抖動(dòng)檢測部中檢測出的所述電子照相機(jī)的抖動(dòng),將存儲(chǔ)在所述存儲(chǔ)部中的所述簡易評(píng)價(jià)數(shù)據(jù)轉(zhuǎn)換成最終評(píng)價(jià)數(shù)據(jù)。
全文摘要
本發(fā)明提供一種具有抖動(dòng)校正等檢測圖像的移動(dòng)量的功能的圖像處理裝置和電子照相機(jī)。在具有對(duì)通過攝像元件所攝像的圖像的抖動(dòng)(圖像的移動(dòng))進(jìn)行檢測的檢測部的電子照相機(jī)等圖像處理裝置中,為了使各種控制(AF、AE、AWB等)高速化,與圖像的抖動(dòng)檢測并行地進(jìn)行上述控制所需的解析/運(yùn)算的一部分。在結(jié)束了圖像的抖動(dòng)檢測之后,校正抖動(dòng)的影響進(jìn)行最終運(yùn)算。在這種情況下,也可以限定運(yùn)算對(duì)象的圖像區(qū)域來提高處理效率。
文檔編號(hào)H04N5/225GK1761287SQ20051011282
公開日2006年4月19日 申請(qǐng)日期2005年10月12日 優(yōu)先權(quán)日2004年10月13日
發(fā)明者田中義信, 上野晃, 梁田崇志 申請(qǐng)人:奧林巴斯株式會(huì)社