圖像拾取裝置、圖像拾取方法、程序以及存儲介質(zhì)的制作方法
【專利摘要】一種圖像拾取單元12(12-1、12-2)獲得三維圖像。顯示單元18顯示所獲得的三維圖像。顯示控制單元61使所述顯示單元18顯示第一引導(dǎo)幀。被攝體圖像檢測單元62從所獲得的三維圖像檢測特定被攝體圖像。距離信息獲得單元(63)獲得涉及與所檢測到的被攝體圖像相對應(yīng)的被攝體的距離并且還涉及從所述圖像拾取單元12到所述被攝體的距離的信息。雙眼視覺適合性評估單元(64)基于所獲得的距離相關(guān)信息來評估所述第一引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺。在所述第一引導(dǎo)幀中的所述被攝體圖像被評估為適合于所述雙眼視覺的情況下,所述顯示控制單元(61)使所述第一引導(dǎo)幀的位置和尺寸中的至少一個與適合于所述雙眼視覺的所述被攝體圖像的那些相匹配。如此,在視覺上幫助用戶使得能夠容易地捕獲具有適當視差的三維圖像。
【專利說明】圖像拾取裝置、圖像拾取方法、程序以及存儲介質(zhì)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種能夠在視覺上幫助用戶能夠容易地拍攝具有適當視差的立體圖像的圖像拾取裝置、圖像拾取方法、程序以及存儲介質(zhì)。
【背景技術(shù)】
[0002]在拍攝右和左視差圖像以執(zhí)行立體可見圖像顯示的情況下,當被攝體太靠近圖像拾取裝置時,視差間隙增加并且立體顯示圖像(3D圖像)模糊。另一方面,當被攝體離圖像拾取裝置太遠時,發(fā)生其中視差間隙減少并且不可以獲取立體效果的現(xiàn)象。
[0003]專利文獻I公開了一種配置,所述配置用來檢測被攝體位置,確定被攝體位置是否在可以拍攝立體可見視差圖像的雙眼視覺許可范圍內(nèi),并且在確定被攝體位置是在雙眼視覺許可范圍內(nèi)的情況下,在預(yù)定時間之后執(zhí)行視差圖像的成像。
[0004]專利文獻2公開一種配置,所述配置用來確定在多個視點處的圖像是否適合于雙眼視覺,并且,在確定它們不適合于雙眼視覺的情況下,將在多個視點處的圖像轉(zhuǎn)換成二維圖像。
[0005]專利文獻3公開了一種用來重疊眼位置引導(dǎo)圖像的配置,所述眼位置引導(dǎo)圖像示出了右眼和左眼的適當位置以使用戶在顯示屏上立體地查看3D圖像,其中用戶圖像被顯示在監(jiān)視器上。
[0006]{引用列表}
[0007]{專利文獻}
[0008]{PTL1}日本專利申請?zhí)亻_ N0.2011-33990
[0009]{PTL2}日本專利申請?zhí)亻_ N0.2005-167310
[0010]{PTL3}日本專利申請?zhí)亻_ N0.2009-250987
【發(fā)明內(nèi)容】
[0011]{技術(shù)問題}
[0012]然而,存在以下問題:用戶不知道在哪里查看以拍攝圖像,用戶不知道在哪一個狀態(tài)或場景下能夠獲取適合的立體圖像,以及用戶不知道在哪一個狀態(tài)或場景下雙眼視覺不是適合的(直到成像被執(zhí)行為止它是未知的)。
[0013]在專利文獻I中的配置中,盡管可以在被攝體位置是在雙眼視覺許可范圍內(nèi)的情況下拍攝圖像,但是不可以在視覺上幫助用戶容易地拍攝具有適當視差的立體圖像。
[0014]在專利文獻2中的配置中,盡管可以在它不適合于雙眼視覺的情況下輸出二維圖像,但是不可以在視覺上幫助用戶容易地拍攝具有適當視差的立體圖像。
[0015]在專利文獻3中的配置中,盡管可以將用戶的眼位置引導(dǎo)到適合于雙眼視覺的位置,但是不可以在視覺上幫助用戶能夠容易地拍攝具有適當視差的立體圖像。
[0016]本發(fā)明鑒于這樣的條件而被做出,并且目的是提供能夠在視覺上幫助用戶能夠容易地拍攝具有適當視差的立體圖像的圖像拾取裝置、圖像拾取方法、程序以及存儲介質(zhì)。[0017]{問題的解決方案}
[0018]為了實現(xiàn)上面提到的被攝體,根據(jù)本發(fā)明的一個方面的圖像拾取裝置包括:圖像拾取單元,所述圖像拾取單元被配置成對被攝體進行成像并且獲取用多個視點圖像形成的立體圖像;顯示單元,所述顯示單元能夠顯示由圖像拾取單元獲取的立體圖像;顯示控制單元,所述顯示控制單元被配置成將預(yù)定尺寸的第一引導(dǎo)幀顯示在所述顯示單元上;被攝體圖像檢測單元,所述被攝體圖像檢測單元被配置成從由圖像拾取單元獲取的立體圖像檢測特定被攝體圖像;距離信息獲取單元,所述距離信息獲取單元被配置成獲取涉及與由所述被攝體圖像檢測單元所檢測到的被攝體圖像相對應(yīng)的被攝體的距離并且涉及從圖像拾取單元到被攝體的距離的信息;以及雙眼視覺適合性確定單元,所述雙眼視覺適合性確定單元被配置成基于涉及由距離信息獲取單元所獲取的距離的信息來確定第一引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺,其中,在所述雙眼視覺適合性確定單元確定第一引導(dǎo)幀中的被攝體圖像適合于雙眼視覺的情況下,所述顯示控制單元使第一引導(dǎo)幀的位置和尺寸中的至少一個與適合于雙眼視覺的被攝體圖像相匹配。在這里,動態(tài)圖片圖像在所述顯示單元中的顯示在三維顯示(立體顯示)的情況下未被特別限制,并且包括二維顯示(平面顯示)的情況。
[0019]根據(jù)這個配置,可以減少并且抑制立體圖像的失效圖片,并且此外,用戶能夠通過引導(dǎo)幀的幫助容易地確認在所述顯示單元中要看哪里,以及容易地且在視覺上確認它是否適合于雙眼視覺。而且,為了實現(xiàn)這個圖像拾取裝置,因為在相關(guān)技術(shù)中它不必將新的部分添加到所述圖像拾取裝置,所以也獲取了成本抑制效果。
[0020]根據(jù)一個方面,所述顯示控制單元除第一引導(dǎo)幀之外還將比第一引導(dǎo)幀更大尺寸的第二引導(dǎo)幀顯示在所述顯示單元上,并且在所述被攝體圖像檢測單元從第二引導(dǎo)幀檢測到與由所述雙眼視覺適合性確定單元確定為適合于雙眼視覺的被攝體圖像不同的至少一個其它被攝體圖像的情況下,所述顯示控制單元使第二引導(dǎo)幀與所述至少一個其它被攝體圖像相匹配。
[0021]根據(jù)一個方面,所述雙眼視覺適合性確定單元確定第二引導(dǎo)幀中的至少一個其它被攝體圖像是否適合于雙眼視覺,并且在所述雙眼視覺適合性確定單元確定第二引導(dǎo)幀中的至少一個其它被攝體圖像適合于雙眼視覺的情況下,所述顯示控制單元使第二引導(dǎo)幀與適合于雙眼視覺的至少一個其它被攝體圖像相匹配。
[0022]根據(jù)一個方面,它包括:圖像拾取指令輸入單元,所述圖像拾取指令輸入單元被配置成接受來自用戶的圖像拾取指令的輸入;以及記錄單元,所述記錄單元被配置成:在所述雙眼視覺適合性確定單元確定立體圖像適合于雙眼視覺的情況下,當在圖像拾取指令輸入單元中輸入圖像拾取指令時,將由圖像拾取單元獲取的立體圖像記錄在預(yù)定存儲介質(zhì)中。
[0023]根據(jù)一個方面,它進一步包括:雙眼視覺適合性通知單元,所述雙眼視覺適合性通知單元被配置成:在所述雙眼視覺適合性確定單元確定立體圖像適合于雙眼視覺的情況下,通知立體圖像適合于雙眼視覺;以及記錄單元,所述記錄單元被配置成:當在雙眼視覺適合性通知單元通知立體圖像適合于雙眼視覺之后特定時間段過去時,將由圖像拾取單元所獲取的立體圖像記錄在預(yù)定存儲介質(zhì)中。也就是說,因為快門被自動地激活,所以可以減輕由于快門操作而導(dǎo)致的模糊。[0024]根據(jù)一個方面,所述顯示控制單元使所述顯示單元執(zhí)行多個視點圖像的一個視點圖像的平面顯示,將引導(dǎo)幀重疊在經(jīng)歷這個平面顯示的所述一個視點圖像上并且使所述顯示單元執(zhí)行平面顯示,以及,在所述雙眼視覺適合性確定單元確定被攝體圖像適合于雙眼視覺的情況下,使所述顯示單元執(zhí)行立體圖像的立體顯示。
[0025]根據(jù)一個方面,當引導(dǎo)幀中被攝體圖像的數(shù)目超過閾值時,所述雙眼視覺適合性確定單元確定立體圖像不適合于雙眼視覺。
[0026]根據(jù)一個方面,當引導(dǎo)幀中被攝體圖像的尺寸等于或小于第一閾值或者引導(dǎo)幀中被攝體圖像的尺寸超過大于第一閾值的第二閾值時,所述雙眼視覺適合性確定單元確定立體圖像不適合于雙眼視覺。
[0027]根據(jù)一個方面,在引導(dǎo)幀中存在多個被攝體圖像的情況下,所述雙眼視覺適合性確定單元計算所述多個被攝體圖像中的被攝體距離的最大值與最小值之間的差作為被攝體距離范圍,并且在被攝體距離范圍不在容許范圍內(nèi)的情況下,確定它不適合于雙眼視覺。
[0028]根據(jù)一個方面,它進一步包括雙眼視覺不適合性通知單元,所述雙眼視覺不適合性通知單元被配置成:當所述雙眼視覺適合性確定單元確定立體圖像不適合于雙眼視覺時,通知立體圖像不適合于雙眼視覺。也就是說,可以在視覺上確認它不適合于雙眼視覺。
[0029]根據(jù)一個方面,當所述雙眼視覺適合性確定單元確定立體圖像不適合于雙眼視覺時,所述雙眼視覺不適合性通知單元將所述顯示單元的顯示從立體顯示切換到平面顯示。
[0030]根據(jù)一個方面,當所述雙眼視覺適合性確定單元確定立體圖像不適合于雙眼視覺時,所述雙眼視覺不適合性通知單元執(zhí)行用來切換在所述顯示單元上顯示的引導(dǎo)幀的色彩的控制或用來使引導(dǎo)幀閃爍的控制。
[0031]根據(jù)一個方面,當所述雙眼視覺適合性確定單元確定立體圖像不適合于雙眼視覺時,所述雙眼視覺不適合性通知單元使用發(fā)光二極管、所述顯示單元以及聲音輸出設(shè)備中的任何一個作為通知單元來執(zhí)行通知。
[0032]根據(jù)一個方面,它進一步包括設(shè)定輸入單元,所述設(shè)定輸入單元被配置成接受以下中的至少一個設(shè)定的輸入:通過所述顯示控制單元的引導(dǎo)幀顯示是否被執(zhí)行、以及通過所述雙眼視覺適合性確定單元的雙眼視覺適合性確定是否被執(zhí)行、在所述被攝體圖像檢測單元中檢測到的被攝體圖像的類型、和在所述顯示單元上顯示的引導(dǎo)幀的類型。
[0033]而且,一種使用圖像拾取單元和顯示單元的根據(jù)本發(fā)明的另一方面的圖像拾取方法,所述圖像拾取單元被配置成對被攝體進行成像并且獲取用多個視點圖像形成的立體圖像,所述顯示單元能夠顯示由圖像拾取單元獲取的立體圖像,包括:將預(yù)定尺寸的引導(dǎo)幀顯示在所述顯示單元上的引導(dǎo)幀顯示步驟;從由所述圖像拾取單元獲取的立體圖像檢測特定被攝體圖像的被攝體圖像檢測步驟;獲取涉及與在所述被攝體圖像檢測步驟中檢測到的被攝體圖像相對應(yīng)的被攝體的距離并且涉及從所述圖像拾取單元到被攝體的距離的信息的距離信息獲取步驟;基于涉及在所述距離信息獲取步驟中獲取的距離的信息來確定引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺的雙眼視覺適合性確定步驟;以及在所述雙眼視覺適合性確定步驟中確定引導(dǎo)幀中的被攝體圖像適合于雙眼視覺的情況下使引導(dǎo)幀的位置和尺寸中的至少一個與適合于雙眼視覺的被攝體圖像相匹配的步驟。
[0034]甚至通過這個圖像拾取方法,用戶能夠通過引導(dǎo)幀的幫助容易地確認在所述顯示單元中要看哪里,并且容易地且在視覺上確認它是否適合于雙眼視覺。[0035]而且,根據(jù)本發(fā)明的另一方面,提供了使處理器(例如,安裝在所述圖像拾取裝置上的處理器)執(zhí)行所述圖像拾取方法的程序。通過使處理器執(zhí)行根據(jù)本發(fā)明的程序,可以實現(xiàn)與所述圖像拾取方法類似的效果。而且,根據(jù)本發(fā)明的另一方面,提供了記錄了使處理器執(zhí)行所述圖像拾取方法的程序的可讀存儲介質(zhì)。通過使處理器從根據(jù)本發(fā)明的存儲介質(zhì)讀出程序并且執(zhí)地它,可以實現(xiàn)與所述圖像拾取方法類似的效果。
[0036]{發(fā)明的有益效果}
[0037]根據(jù)本發(fā)明,可以在視覺上幫助用戶能夠容易地拍攝具有適當視差的立體圖像。
【專利附圖】
【附圖說明】
[0038]圖1是根據(jù)本發(fā)明的圖像拾取裝置的一個示例的整個配置圖。
[0039]圖2是圖像拾取裝置的主體的后視圖。
[0040]圖3是圖示圖像拾取裝置的功能配置的框圖。
[0041]圖4是用來描述適當?shù)碾p眼視覺范圍的解釋性圖。
[0042]圖5是圖示第一實施例中的圖像拾取處理示例的流程的流程圖。
[0043]圖6是示意性地圖示其中多個被攝體被成像的成像場景的一個示例的解釋性圖。
[0044]圖7是圖示顯示主引導(dǎo)幀和子引導(dǎo)幀兩者的顯示示例的解釋性圖。
[0045]圖8A是圖示其中主引導(dǎo)幀被聚焦在主被攝體圖像上的狀態(tài)的解釋性圖(版本I)。
[0046]圖SB是圖示其中主引導(dǎo)幀被聚焦在主被攝體圖像上的狀態(tài)的解釋性圖(版本2)。
[0047]圖9A是圖示其中子引導(dǎo)幀被聚焦在多個子被攝體圖像上的狀態(tài)的解釋性圖(版本I)。
[0048]圖9B是圖示其中子引導(dǎo)幀被聚焦在多個子被攝體圖像上的狀態(tài)的解釋性圖(版本2) ο
[0049]圖10是圖示第二實施例中的圖像拾取處理示例的流程的流程圖。
[0050]圖11是圖示第三實施例中的圖像拾取處理示例的流程的流程圖。
[0051]圖12是圖示第四實施例中的圖像拾取處理示例的流程的流程圖。
[0052]圖13A是典型地圖示2D直通圖像顯示的解釋性圖。
[0053]圖13B是典型地圖示3D直通圖像顯示的解釋性圖。
[0054]圖14A是在引導(dǎo)幀中被攝體圖像的數(shù)目超過閾值的情況下的解釋性圖(版本I)。
[0055]圖14B是在引導(dǎo)幀中被攝體圖像的數(shù)目超過閾值的情況下的解釋性圖(版本2)。
[0056]圖14C是在引導(dǎo)幀中被攝體圖像的數(shù)目超過閾值的情況下的解釋性圖(版本3)。
[0057]圖15A是在引導(dǎo)幀中被攝體圖像的尺寸等于或小于閾值的情況下的解釋性圖(版本I)。
[0058]圖15B是在引導(dǎo)幀中被攝體圖像的尺寸等于或小于閾值的情況下的解釋性圖(版本2) ο
[0059]圖15C是在引導(dǎo)幀中被攝體圖像的尺寸等于或小于閾值的情況下的解釋性圖(版本3) ο
[0060]圖16是在引導(dǎo)幀中被攝體圖像的尺寸超過閾值的情況下的解釋性圖。
[0061]圖17是在尺寸超過引導(dǎo)幀的被攝體圖像被檢測到的情況下的解釋性圖。
[0062]圖18是用來描述被攝體距離范圍的解釋性圖。[0063]圖19是示出成像模式的選擇菜單的一個示例的解釋性圖。
【具體實施方式】
[0064]在下文中,參考附圖詳細地描述本發(fā)明的實施例。
[0065]圖1是根據(jù)本發(fā)明的圖像拾取裝置的一個示例的整個配置圖。
[0066]本示例的圖像拾取裝置10包括兩個圖像拾取單元12-1和12-2。在這里,可以安裝兩個或更多個圖像拾取單元12。
[0067]圖像拾取單元12-1和12-2拍攝被攝體的圖像并且獲取用多個視點圖像形成的立體圖像。
[0068]CPU(中央處理單元)14是根據(jù)程序來執(zhí)行圖像拾取裝置10的整個操作的整體控制的控制設(shè)備。
[0069]本示例的CPU14用信號處理IC來形成。這個信號處理IC包括ROM(只讀存儲器)、EPROM (可擦可編程ROM)以及工作存儲器(RAM(隨機存取存儲器))。由CPU14所執(zhí)行的控制程序和控制所需要的各種種類的數(shù)據(jù)等等被存儲在ROM中。諸如用戶設(shè)定信息的與圖像拾取裝置10的操作相關(guān)的各種種類的設(shè)定信息被存儲在EPROM中,并且即使它被斷電也未從其刪除存儲內(nèi)容的非易失性存儲器被用作EEPR0M。工作存儲器包括CPU14的計算工作區(qū)域和圖像數(shù)據(jù)的臨時存儲區(qū)域,并且作為易失性存儲器的動態(tài)RAM通常根據(jù)成本性能被使用。
[0070]操作單元16是接受用戶的指令輸入的操作設(shè)備。圖2圖示了圖1中的圖像拾取裝置10的主體的背面。如圖2中所圖示的,在圖像拾取裝置10的主體的背面中,作為操作單元16的組件,布置了:接受圖像拾取指令的輸入的釋放開關(guān)50 ;接受變焦指令的輸入的變焦桿51 ;接受操作模式切換指令的輸入的模式開關(guān)52a、52b以及52c ;能夠發(fā)射各種色彩的光的LED (發(fā)光二極管)53 ;接受視差調(diào)整的指令輸入的視差調(diào)整按鈕54 ;接受3D (三維)圖像拾取模式和2D (二維)圖像拾取模式的切換指令的輸入的3D/2D切換按鈕54;接受菜單顯示指令等的輸入的“菜單/0K”按鈕55 ;接受右、左、頂部以及底部的四個方向的指令輸入的交叉按鈕56 ;接受諸如顯示指令的指令輸入的“顯示/0K”按鈕57。而且,在圖像拾取裝置10的主體的正面上,布置了接受圖像拾取裝置10的通電/斷電的切換指令的輸入的電源開關(guān)。
[0071]模式開關(guān)52a、52b以及52c是用于執(zhí)行圖像拾取裝置10的操作模式的切換輸入的操作手段。在本示例中,模式開關(guān)被形成包括:成像/重放切換按鈕52a,成像/重放切換按鈕52a接受重放模式和圖像拾取模式(2D圖像拾取模式和3D圖像拾取模式)的切換指令的輸入;3D/2D切換按鈕52b,3D/2D切換按鈕52b接受3D圖像拾取模式和2D圖像拾取模式的切換指令的輸入;以及移動/靜止圖像切換按鈕52c,移動/靜止圖像切換按鈕52c接受移動圖像成像和靜止圖像成像的切換指令的輸入。
[0072]釋放開關(guān)50用包括所謂的“半按”和“全按”的兩級行程類型的開關(guān)來形成。當釋放開關(guān)50在拍攝靜止圖像(SI通(ON))的模式時在中途被按時,圖像拾取準備處理(例如,AE(自動曝光)調(diào)整處理)、AF(自動聚焦)處理以及AWB(自動白平衡)調(diào)整處理被執(zhí)行。另外,當釋放開關(guān)50被全按(S2通)時,靜止圖像的圖像拾取和記錄處理被執(zhí)行。另外,在拍攝移動圖像的模式時,移動圖像的圖像拾取在釋放開關(guān)50被全按時啟動,并且當它被再次全按時移動圖像的圖像拾取被終止。在這里,可以單獨地安裝用于靜止圖像的圖像拾取的釋放開關(guān)和用于移動圖像的圖像拾取的釋放開關(guān)。
[0073]而且,變焦桿51被安裝在釋放開關(guān)50的外周邊中。變焦桿51是用于執(zhí)行圖像拾取單元12-1和12-2的變焦操作的操作手段,并且能夠輸入攝遠側(cè)的變焦指令和廣角側(cè)的變焦指令。
[0074]顯示單元18例如是包括彩色IXD (液晶顯示器)的顯示裝置。顯示單元18充當顯示被拍攝圖像的顯示單元,并且當與圖像拾取裝置10的各種功能相關(guān)的設(shè)定被執(zhí)行時充當用戶接口。而且,顯示單元18充當顯示實況視圖圖像(移動圖像)以確認在圖像拾取模式時的視角的電子取景器。
[0075]顯示單元18是能夠執(zhí)行由圖像拾取單元12-1和12-2獲取的立體圖像的立體顯示的顯示設(shè)備。本示例的顯示單元18具有顯示用戶或觀察者能夠在3D圖像拾取模式時立體地查看的立體(3D)圖像的功能。作為3D圖像的顯示系統(tǒng),例如,光方向控制系統(tǒng)被采用。光方向控制系統(tǒng)交替地(例如,以1/60秒間隔)重復(fù)用來將用于左眼的圖像數(shù)據(jù)顯示在LCD上并且輻射給予方向性以通過背光面板達到用戶的左眼的光照光的處理、以及用來將用于右眼的圖像數(shù)據(jù)顯示在LCD上并且輻射給予方向性以通過背光面板達到用戶的右眼的光照光的處理。通過這種手段,因為相互具有視差的左眼圖像和右眼圖像能夠被用戶的右眼和左眼交替地觀察到,所以用戶能夠觀察到立體圖像。存在用來顯示立體圖像的許多方法,并且能夠使用它們中的任何一個。
[0076]記錄單元20記錄被拍攝圖像文件和各種種類的數(shù)據(jù)。例如,記錄單元20可以是諸如SD存儲器卡(注冊商標)和xD圖片卡(注冊商標)的可拆卸記錄介質(zhì),或內(nèi)置到圖像拾取裝置10的主體中的存儲器。然而,在內(nèi)置到圖像拾取裝置10的主體中的存儲器被使用的情況下,有必要使用非易失性存儲器使得甚至在相機主體的電源被切斷的情況下圖像也未被刪除。
[0077]揚聲器21是執(zhí)行聲音輸出的聲音輸出設(shè)備。
[0078]接下來,描述了圖像拾取裝置10的圖像拾取功能。在這里,盡管附圖標記“I”和“2”被指配給圖像拾取單元12-1和12-2并且在圖1中被區(qū)別,但是因為每個單元的功能是基本上類似的,所以連字符(hyphen)和后續(xù)附圖標記“I”和“2”在以下解釋中被任意地省略并且描述。
[0079]每個圖像拾取單元12具有包括聚焦透鏡24、變焦透鏡26、光圈28以及機械快門30的圖像拾取透鏡(成像透鏡)22。在本實施例中,圖像拾取透鏡22-1和22-2的會聚角Θ c是固定的。
[0080]聚焦透鏡24和變焦透鏡26沿著每個圖像拾取單元12的光軸來回移動。CPU14控制安裝在光學(xué)系統(tǒng)驅(qū)動單元32中的聚焦致動器的操作,并且調(diào)整聚焦透鏡24的位置以及執(zhí)行聚焦。而且,CPU14控制安裝在光學(xué)系統(tǒng)驅(qū)動單元32中的變焦距致動器的操作,并且調(diào)整變焦透鏡26的位置以及執(zhí)行變焦。而且,通過控制安裝在光學(xué)系統(tǒng)驅(qū)動單元32中的光圈致動器的驅(qū)動器,CPU14調(diào)整光圈28的開口量(光圈值)并且控制到圖像拾取元件34的入射光線量。
[0081]當從圖像拾取元件34讀出數(shù)據(jù)時,機械快門30被關(guān)閉。通過這種手段,在數(shù)據(jù)讀出時進入到圖像拾取元件34中的光被阻擋。[0082]CPU14在3D圖像拾取模式時驅(qū)動圖像拾取單元12-1和12-2的圖像拾取透鏡22-1和22-1 (也就是說,聚焦透鏡24-1和24-2、變焦透鏡26_1和26_2以及光圈28_1和28_2)并且使其同步。也就是說,圖像拾取單元12-1和12-2在3D圖像拾取模式時總是被設(shè)置為相同的焦距(變焦放大率)并且光圈被調(diào)整成總是提供相同的入射光線量(光圈值)。另夕卜,在3D圖像拾取模式時,聚焦調(diào)整被執(zhí)行使得相同的被攝體總是被聚焦。
[0083]圖像拾取元件34例如是CMOS (互補金屬氧化物半導(dǎo)體)圖像傳感器。在這里,可以使用除CMOS圖像傳感器外的其它圖像拾取元件作為圖像拾取元件34。例如,存在CCD (電荷耦合器件)圖像傳感器。
[0084]許多光電二極管被二維地布置在圖像拾取元件34的光接收表面上。在每個光電二極管中,預(yù)定色彩(例如,紅(R)、綠(G)以及藍(B)的三個原色)的濾色器被布置在預(yù)定陣列中。在這里,濾色器的色彩不限于R、G以及B的三個原色,并且例如,還可以使用互補系統(tǒng)的濾色器。當被攝體光通過圖像拾取單元12被形成在圖像拾取元件34的光接收表面上時,這個被攝體光通過光電二極管被轉(zhuǎn)換成與入射光線量相對應(yīng)的信號電荷。圖像拾取元件34包括電子快門功能,并且CPU14通過控制光電二極管的電荷存儲時間來控制曝光時間(快門速度)。在每個光電二極管中累積的信號電荷在根據(jù)CPU14的指令從定時發(fā)生器(TG) 36給出的驅(qū)動脈沖的基礎(chǔ)上被從圖像拾取元件34順序地讀出為與電荷量相對應(yīng)的圖像信號(R、G以及B信號)。從圖像拾取元件34讀出的圖像信號通過放大器38在模擬信號處理單兀40中被輸入。
[0085]模擬信號處理單元40包括:用來去除在從圖像拾取元件34輸出的R、G以及B信號中包括的重置噪聲(低頻)的CDS (相關(guān)雙采樣)電路;用來將R、G以及B信號放大并且控制到恒定電平幅度的AGC(自動增益控制)電路;以及將模擬信號轉(zhuǎn)換成數(shù)字信號的A/D轉(zhuǎn)換器。從圖像拾取元件34輸出的模擬R、G以及B信號經(jīng)歷相關(guān)雙采樣處理并且被模擬信號處理單元40放大。R、G以及B信號在模擬信號處理單元40中的放大增益對應(yīng)于成像靈敏度(ISO靈敏度)。CPU14通過根據(jù)被攝體的亮度等等調(diào)整這個放大增益來設(shè)置成像靈敏度。在這里,在具有相同靈敏度的兩個圖像拾取元件被用來拍攝圖像(3D圖像拾取模式)的情況下,這個增益在[I]-系統(tǒng)模擬信號處理單元40-1與[2]-系統(tǒng)模擬信號處理單元40-2之間被設(shè)置為相同的值。
[0086]經(jīng)歷增益調(diào)整的模擬R、G以及B信號通過A/D轉(zhuǎn)換器而被轉(zhuǎn)換成數(shù)字R、G以及B信號,并且其后通過緩沖存儲器在信號處理IC14中輸入。
[0087]像上面那樣所生成的數(shù)字R、G以及B信號經(jīng)歷預(yù)定處理(例如,補償由于單個圖像拾取元件的濾色器陣列而導(dǎo)致的色彩信號的特殊間隙并且產(chǎn)生R、G以及B色彩信號的處理)、白平衡調(diào)整處理、分級轉(zhuǎn)換(伽馬校正)處理以及通過信號處理IC的輪廓校準處理,并且被轉(zhuǎn)換成輝度信號(Y信號)和色差信號(Cr和Cb信號),也就是說,Y/C信號。
[0088]在作為確認在拍攝靜止圖像或移動圖像的情況下的視角的圖像的實況視圖圖像(直通圖像)被顯示在顯示單元18上的情況下,在圖像拾取元件34中累積的圖像信號被變薄并且以預(yù)定時間間隔讀取。所讀取的圖像信號經(jīng)歷通過信號處理IC的預(yù)定處理并且轉(zhuǎn)換成Y/C信號。另外,這個Y/C信號被轉(zhuǎn)換成適合于在顯示單元18中顯示的信號(例如,R、G以及B信號)并且其后通過每次一幀輸出到顯示單元18。通過這種手段,用于確認視角的移動圖像(直通圖像)被顯示在顯示單元18上。在2D圖像拾取模式時,用于直通圖像的圖像信號被僅從一個圖像拾取單元12讀出。另一方面,在3D圖像拾取模式時,用于直通圖像的圖像信號被從右圖像拾取單元12-1和左圖像拾取單元12-2兩者讀出,并且使用兩個圖像來顯示3D直通圖像(移動圖像)。
[0089]在這里,在3D圖像拾取模式時,可以根據(jù)設(shè)定通過2D顯示器來顯示該直通圖像。在這種情況下,使用從右圖像拾取單元12-1和左圖像拾取單元12-2中的一個獲取的圖像產(chǎn)生的直通圖像被顯示。在被攝體在3D圖像拾取模式時被檢測到(面部檢測)的情況下,也許可以根據(jù)被攝體是否是在適當?shù)碾p眼視覺范圍中來改變指配給從上面提到的2D直通圖像檢測到的被攝體的圖(例如,面部檢測幀)的色彩。
[0090]接下來,描述了圖像的圖像拾取和記錄處理。在2D圖像拾取模式時,由一個預(yù)定圖像拾取單元(例如,12-1)來拍攝用于記錄的圖像。在這里,也許可以使圖像拾取單元12-1和12-2(諸如圖像拾取透鏡22和圖像拾取元件34)的特性變得相互不同,使得用戶能夠選擇在2D圖像拾取模式時使用圖像拾取單元中的哪一個。
[0091]在2D圖像拾取模式時,由圖像拾取單元12-1所拍攝的圖像被信號處理IC壓縮。經(jīng)壓縮的圖像數(shù)據(jù)作為格式的圖像文件被記錄在記錄單元20中。例如,靜止圖像被記錄為符合JPEG (聯(lián)合影像專家組)的標準的壓縮圖像文件,并且移動圖像被記錄為符合MPEG-2、MPEG4或H.264等等的標準的壓縮圖像文件。然而,壓縮方案不限于這些。
[0092]在3D圖像拾取模式時,圖像被圖像拾取單元12-1和12_2同步地拍攝。在上面提到的3D圖像拾取模式時,AF處理和AE處理在由圖像拾取單元12-1和12_2中的一個獲取的圖像信號的基礎(chǔ)上被執(zhí)行。在上面提到的3D圖像拾取模式時,在兩上視點處由圖像拾取單元12-1和12-2所拍攝的圖像被壓縮、存儲為一個文件并且記錄在記錄單元20中。文件存儲兩個視點的壓縮圖像數(shù)據(jù)以及被攝體距離信息和關(guān)于圖像拾取單元12的圖像拾取透鏡的間隔和會聚角的信息。
[0093]在重放模式時,在記錄單元20中記錄的最后的圖像文件(最后一次記錄的圖像文件)被信號處理IC讀出并且擴展為非壓縮Y/C信號。這個非壓縮Y/C信號被轉(zhuǎn)換成R、G以及B信號并且其后輸出到顯示單元18。通過這種手段,在記錄單元20中記錄的圖像文件被顯示在顯示單元18上。
[0094]當在3D圖像拾取模式下拍攝的圖像被播放時,可以通過設(shè)定來選擇3D顯示和2D顯示。在圖像中檢測到被攝體(面部檢測)的情況下,也許可以根據(jù)被攝體在圖像拾取時是否是在適當?shù)碾p眼視覺范圍內(nèi)來改變指配給從上面提到的2D顯示檢測到的被攝體的圖(例如,面部檢測幀)的色彩。
[0095]接下來,使用圖3來描述在圖1中圖示的圖像拾取裝置10的功能配置。
[0096]如圖3中所圖示的,CPU14包括:顯示控制單元61,顯示控制單元61將預(yù)定尺寸的引導(dǎo)幀(主引導(dǎo)幀和子引導(dǎo)幀)顯示在顯示單元18上;被攝體圖像檢測單元62,被攝體圖像檢測單元62從由圖像拾取單元12獲取的立體圖像檢測特定被攝體圖像;距離信息獲取單元63,距離信息獲取單元63獲取涉及與由被攝體圖像檢測單元62所檢測到的被攝體圖像相對應(yīng)的被攝體的距離并且涉及從圖像拾取單元12到被攝體的距離的信息(其在下面可以被簡單地稱為“距離信息”);雙眼視覺適合性確定單元64,雙眼視覺適合性確定單元64在由距離信息獲取單元63所獲取的距離信息的基礎(chǔ)上通過確定引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺來確定立體圖像是否適合于雙眼視覺;以及通知控制單元66 (雙眼視覺適合性通知控制單元和雙眼視覺不適合性通知控制單元),通知控制單元66通知立體圖像適合于雙眼視覺并且立體圖像不適合于雙眼視覺。在雙眼視覺適合性確定單元64確定引導(dǎo)幀中的被攝體圖像適合于雙眼視覺的情況下,顯示控制單元61將引導(dǎo)幀位置和尺寸中的至少任何一個調(diào)整為適合于雙眼視覺的被攝體圖像。
[0097]在這里,“特定被攝體圖像”是通過本實施例中的被攝體圖像檢測單元62從立體圖像檢測到的被攝體的圖像。至于“特定被攝體圖像”的具體示例,盡管面部圖像被提供為代表性示例,但是除面部圖像外的其它被攝體(被攝體圖像)或具有等于或大于閾值的高頻分量(邊緣)的被攝體圖像是可能的。
[0098]此外,“涉及距離的信息”不限于直接地示出從圖像拾取單元12到被攝體的距離的數(shù)值(被攝體距離)。例如,“涉及距離的信息”可以是由CPU14通過圖像拾取單元12的聚焦透鏡24的聚焦控制所獲取的信息,或從由CPU14在形成立體圖像的多個視點圖像的基礎(chǔ)上生成的視差圖所獲取的信息。通過檢測每個像素在多個視點圖像之間的對應(yīng)點來獲取視差圖。
[0099]“引導(dǎo)幀”是示出圖像中的預(yù)定區(qū)域的顯示。在這里,“引導(dǎo)幀”不限于在本說明書中所描述的示例。
[0100]例如,顯示控制單元61、被攝體圖像檢測單元62、距離信息獲取單元63、雙眼視覺適合性確定單元64以及通知控制單元66用微計算機設(shè)備和電子電路來形成。
[0101]接下來,描述了由雙眼視覺適合性確定單元64所執(zhí)行的雙眼視覺適合性確定。在下文中,其中被攝體圖像在立體圖像中的視差適合于雙眼視覺的范圍被稱為“適當?shù)碾p眼視覺范圍”。
[0102]使用圖4來描述適當?shù)碾p眼視覺范圍的計算示例。在圖4中,SB表示基線長(立體基線),Pc表示交叉點,Pn表示在適當?shù)碾p眼視覺范圍R內(nèi)的最近點(其后被稱為“近點”),Pf表示在適當?shù)碾p眼視覺范圍R內(nèi)的最遠點(其后被稱為“遠點”),并且ec表示交叉點Pc的角度(其后被稱為“會聚角”),其是由圖4中的左光學(xué)系統(tǒng)的光軸和右光學(xué)系統(tǒng)的光軸所形成的角度。θ?.和θ η是定義容許視差量的角度。也就是說,適當?shù)碾p眼視覺范圍R表示從圖像拾取裝置I的主體的前表面(其是圖像拾取單元12被布置在其中的參考表面)到近點Pn的距離Dn與從圖像拾取裝置I的主體的前表面到遠點Pf的距離Df之間的范圍。
[0103]為了簡要地描述適當?shù)碾p眼視覺范圍R的計算示例,在圖4中,示出右光學(xué)系統(tǒng)(例如,圖1中的圖像拾取透鏡22-1)的光軸方向的角度,即,由右光學(xué)系統(tǒng)的光軸和SB所形成的角度被假定為9R,并且示出左光學(xué)系統(tǒng)(例如,圖1中的圖像拾取透鏡22-2)的光軸方向的角度,即,由左光學(xué)系統(tǒng)的光軸和SB所形成的角度被假定為0L。如果假定Θ L=90 [度],則到近點Pn的距離Dn和到遠點Pf的距離Df由以下等式來表達。
[0104][等式I]
[0105]Dn=SB X tan ( Θ R- θ η)
[0106]Df=SB X tan ( Θ R+ θ f)
[0107]在這里,0R=9O-0C[度]在這個示例中被設(shè)置。因此,能夠使用基線長SB、會聚角Θc以及定義容許視差量的角度0f和Θn作為參數(shù)來計算示出適當?shù)碾p眼視覺范圍R的 Dn-Df。[0108]盡管省略了關(guān)于適當?shù)碾p眼視覺范圍R在ΘΙΧ90[度]的情況下的計算的解釋,但是甚至在ΘΙΧ90 [度]的情況下僅必須使用基線長SB、會聚角Θ c以及定義容許視差量的角度Gf和Θ n作為參數(shù)來計算示出適當?shù)碾p眼視覺范圍R的Dn和Df。
[0109]如圖4中所圖示的,能夠通過確定從圖像拾取單元12到與特定被攝體圖像相對應(yīng)的被攝體的距離是否是在適當?shù)碾p眼視覺范圍R內(nèi)來執(zhí)行關(guān)于立體圖像中的特定被攝體圖像是否適合于雙眼視覺的確定。
[0110]在這里,盡管已經(jīng)使用真實空間中的被攝體距離描述了適當?shù)碾p眼視覺范圍以便促進對本發(fā)明的理解,但是在使用真實空間中的被攝體距離的情況下,在本發(fā)明中對于雙眼視覺適合性的確定未被特別限制。能夠使用任何信息,只要該信息對應(yīng)于被攝體距離。
[0111][第一實施例]
[0112]圖5是圖示第一實施例中的圖像拾取處理示例的流程的流程圖,其是圖示在圖1至3中圖示的圖像拾取裝置中的圖像拾取處理的一個示例的流程。本處理由CPU14根據(jù)程序來執(zhí)行。
[0113]首先,電源激活處理被執(zhí)行(步驟S2)。
[0114]接下來,預(yù)定尺寸的主引導(dǎo)幀(第一引導(dǎo)幀)和子引導(dǎo)幀(第二引導(dǎo)幀)被顯示在顯示單元18 (步驟S4)上。子引導(dǎo)幀的尺寸大于主引導(dǎo)幀的尺寸。
[0115]接下來,被攝體圖像檢測單元62從由圖像拾取單元12所獲取的立體圖像檢測特定被攝體圖像(步驟S6)。在本示例中,盡管面部圖像被檢測為特定被攝體圖像,但是除面部圖像外的其它被攝體圖像或具有等于或大于閾值的高頻分量(例如,邊緣)的被攝體圖像可以被檢測為特定被攝體圖像。
[0116]接下來,確定所檢測到的被攝體圖像是否是在主引導(dǎo)幀中(步驟S8)。在這里,在這個示例中,主引導(dǎo)幀被顯示重疊立體圖像,并且確定特定被攝體圖像(其在本示例中是面部圖像)是否存在于由主引導(dǎo)幀在立體圖像中所示出的區(qū)域中。
[0117]接下來,由距離信息獲取單元63來獲取關(guān)于與在主引導(dǎo)幀中檢測到的被攝體圖像相對應(yīng)的被攝體的距離的信息(距離信息)(步驟S10)。在這里,距離信息表示與從圖像拾取單元12到被攝體的距離(被攝體距離)相對應(yīng)的信息,并且它不關(guān)心它是否是是直接地指示該被攝體距離的值。
[0118]在圖6中所圖示的示例中,由距離信息獲取單元63來獲取到多個被攝體圖像(其在本示例中是面部圖像)的距離L1、L2以及L3??梢酝ㄟ^圖像處理從立體圖像檢測到與這些L1、L2以及L3相對應(yīng)的被攝體圖像的視差??梢允褂糜蓤D像拾取單元12的聚焦透鏡24的聚焦控制所獲取的信息(聚焦信息)或者可以使用從視差圖所獲取的信息(視差信息)。
[0119]接下來,在所紅區(qū)的距離信息的基礎(chǔ)上確定主引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺(步驟S12)。
[0120]接下來,顯示控制單元61將主引導(dǎo)幀聚焦到對于雙眼視覺最適合的被攝體圖像(其后被稱為“最佳被攝體圖像”)(步驟S14)。
[0121]圖7圖示了主引導(dǎo)幀80M和比主引導(dǎo)幀80M更大尺寸的子引導(dǎo)幀80S被作為引導(dǎo)幀顯示在顯示單元18上的示例。在本示例中,兩個引導(dǎo)幀(主引導(dǎo)幀80M和子引導(dǎo)幀80S)中的每一個都通過多個轉(zhuǎn)角圖像(在本示例中主引導(dǎo)幀80M中的兩個轉(zhuǎn)角圖像和子引導(dǎo)幀80S中的四個轉(zhuǎn)角圖像)來示出圖像中的預(yù)定區(qū)域。主引導(dǎo)幀80M的中心和立體圖像的中心18C匹配。也就是說,主引導(dǎo)幀80M被顯示在顯示單元18的屏幕的中心18C上。
[0122]圖8A和8B是描述在在主引導(dǎo)幀80M中檢測到多個被攝體圖像的情況下的處理的圖。在圖8A中,多個被攝體圖像101和102 (其在本示例中是面部圖像)被包括在主引導(dǎo)幀80M中。在從如圖8A中所圖示的主引導(dǎo)幀80M檢測到多個被攝體圖像101和102的情況下,顯示控制單元61從主引導(dǎo)幀80M中的多個被攝體圖像101和102選擇對于雙眼視覺最適合的被攝體圖像作為最佳被攝體圖像101?!斑m合于雙眼視覺”例如示出了在存在于具有圖4中所圖示的參考字符R的適當?shù)碾p眼視覺范圍中的被攝體的被攝體圖像之中具有最大視差的被攝體圖像。在圖4中,“最大視差”示出了與從在適當?shù)碾p眼視覺范圍R中的交叉點Pc具有最大距離的被攝體相對應(yīng)的被攝體圖像。換句話說,它是在形成立體圖像的多個視點圖像之中在容許視差量的范圍(在圖4中與適當?shù)碾p眼視覺范圍R相對應(yīng)的與0R-0n至0R+0f相對應(yīng)的視差量范圍)內(nèi)具有最大視差量的被攝體圖像。
[0123]另外,顯示控制單元61執(zhí)行引導(dǎo)幀聚焦以使主引導(dǎo)幀80M的位置和尺寸與最佳被攝體圖像101的位置和尺寸相匹配(其在下面可以被簡單地稱為“聚焦”)。在這里,盡管主引導(dǎo)幀80M的位置和尺寸兩者在圖8B中都被改變,但是存在僅改變它們中的一個的情況。
[0124]接下來,確定除最佳被攝體圖像101外的至少一個其它被攝體圖像(其后被稱為“至少一個其它被攝體圖像”)是否是在子引導(dǎo)幀80S中(步驟S16)。在至少一個其它被攝體圖像存在于子引導(dǎo)幀80S中的情況下繼續(xù)到步驟S18,并且在至少一個其它被攝體圖像不存在的情況下繼續(xù)到步驟S26。
[0125]在至少一個其它被攝體圖像存在于子引導(dǎo)幀80S中的情況下,確定在子引導(dǎo)幀80S中是否存在多個其它被攝體圖像(步驟S18)。
[0126]接下來,獲取關(guān)于與子引導(dǎo)幀80S中的每個被攝體圖像相對應(yīng)的被攝體的距離的信息(距離信息)(步驟S20)。在本示例中,計算從圖像拾取單元12到被攝體的距離。該距離信息可以是通過圖像拾取單元12的聚焦透鏡的聚焦控制相對于被攝體所獲取的信息(聚焦信息)或從在形成立體圖像的多個視點圖像的基礎(chǔ)上生成的視差圖所獲取的信息(視差/[目息)。
[0127]接下來,在所獲取的距離信息的基礎(chǔ)上確定子引導(dǎo)幀中的每個被攝體圖像是否適合于雙眼視覺(步驟S22)。關(guān)于子引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺的確定可以像關(guān)于主引導(dǎo)幀中的被攝體圖像是否適合于雙眼視覺的確定一樣被執(zhí)行。
[0128]接下來,子引導(dǎo)幀被聚焦在適合于雙眼視覺的每個被攝體圖像上(步驟S24)。也就是說,如圖9A和9B中所圖示的,在從子引導(dǎo)幀80S檢測到作為除最佳被攝體圖像101外的其它被攝體圖像的適合于雙眼視覺的被攝體圖像(在本示例中103和104)的情況下,子引導(dǎo)幀80S的位置和尺寸依照被攝體圖像103和104而被改變。在圖9B中所圖示的示例中,子引導(dǎo)幀80S被劃分成使位置和尺寸與第三被攝體圖像103相匹配的子引導(dǎo)幀80S-1和使位置和尺寸與第四被攝體圖像104相匹配的子引導(dǎo)幀80S-2兩個,并且被顯示。
[0129]接下來,顯示單元18向用戶通知至少在主引導(dǎo)幀80M中存在適合于雙眼視覺的被攝體圖像(步驟S26)。
[0130]接下來,確定是否已通過操作單元6接受了來自用戶的圖像拾取指令的輸入(步驟 S28)。[0131]當圖像拾取指令在操作單元16中被輸入時,對由圖像拾取單元12所獲取的立體圖像執(zhí)行預(yù)定圖像處理(信號處理)并且經(jīng)歷圖像處理的立體圖像通過記錄單元20被記錄(存儲)在預(yù)定存儲介質(zhì)中(步驟S30)。
[0132]在本實施例中,在雙眼視覺適合性確定單元64確定立體圖像適合于雙眼視覺的情況下,當圖像拾取指令在操作單元16 (圖像拾取指令輸入單元)中被輸入時,由圖像拾取單元12所獲取的立體圖像通過記錄單元20被記錄在預(yù)定存儲介質(zhì)中。
[0133]在這里,至于主引導(dǎo)幀和子引導(dǎo)幀相對于被攝體圖像的聚焦(用來使引導(dǎo)幀的位置和尺寸中的至少一個與適合于雙眼視覺的被攝體圖像相匹配的顯示控制),存在要改變幀的情況和要顯示新的幀的情況。
[0134][第二實施例]
[0135]圖10是圖示第二實施例中的圖像拾取處理示例的流程的流程圖。本處理由CPU14根據(jù)程序來執(zhí)行。在這里,步驟S2至S6與圖5中所圖示的第一實施例中的處理類似,并且因此省略解釋。
[0136]在步驟S42中,等待恒定時間過去。
[0137]步驟S44與第一實施例中的步驟S30類似,對由圖像拾取單元12所獲取的立體圖像執(zhí)行預(yù)定圖像處理,并且經(jīng)歷圖像處理的立體圖像通過記錄單元20被記錄在預(yù)定存儲介質(zhì)中。
[0138]在本實施例中,在雙眼視覺適合性確定單元64確定立體圖像適合于雙眼視覺的情況下,當自顯示單元18 (雙眼視覺適合性通知單元)通知立體圖像適合于雙眼視覺以來恒定時間已過去時,由圖像拾取單元12所獲取的立體圖像通過記錄單元20被記錄在預(yù)定存儲介質(zhì)中。
[0139][第三實施例]
[0140]圖11是圖示第三實施例中的圖像拾取處理示例的流程的流程圖。本處理由CPU14根據(jù)程序來執(zhí)行。在這里,步驟S2至S24與圖5中所圖示的第一實施例中的處理類似,并且因此省略解釋。
[0141]在步驟S52中,在主引導(dǎo)幀和子引導(dǎo)幀中適合于雙眼視覺的被攝體圖像的數(shù)目與閾值相比較。在它等于或大于閾值的情況下繼續(xù)到步驟S54,并且在它小于閾值的情況下返回到步驟S4。
[0142]在與第一實施例中的步驟S30類似的步驟S54中,對由圖像拾取單元12所獲取的立體圖像執(zhí)行預(yù)定圖像處理并且經(jīng)歷圖像處理的立體圖像通過記錄單元20被記錄在預(yù)定存儲介質(zhì)中。
[0143]在本實施例中,在雙眼視覺適合性確定單元64確定立體圖像適合于雙眼視覺的情況下,當在主引導(dǎo)幀和子引導(dǎo)幀中適合于雙眼視覺的被攝體圖像的數(shù)目等于或大于由閾值所指示的特定數(shù)目時,由圖像拾取單元12所獲取的立體圖像通過記錄單元20被記錄在預(yù)定存儲介質(zhì)中。
[0144][第四實施例]
[0145]在第四實施例的圖像拾取裝置10中,初始顯示狀態(tài)被假定為2D顯示并且引導(dǎo)幀被事先設(shè)置在顯示單元18上,在被攝體圖像進入引導(dǎo)幀并且確定它適合于雙眼視覺的情況下,2D顯示(其可以被稱為“二維顯示”或“平面顯示”)被切換到3D顯示(其可以被稱為“三維顯示”或“立體顯示”),并且在用戶確認圖像之后,快門按鈕的圖像拾取指令的輸入被接受以執(zhí)行成像。
[0146]圖12是圖示第四實施例中的圖像拾取處理示例的流程的流程圖。本處理由CPU14根據(jù)程序來執(zhí)行。
[0147]在電源激活處理(步驟S2)之后,確定它是否是簡易多人物立體圖像拾取模式(步驟 S102)。
[0148]在它是簡易多人物立體圖像拾取模式的情況下,直通圖像通過2D來顯示(步驟S104)。也就是說,顯示控制單元61將在由圖像拾取單元12-1和12-2獲取的多視點圖像(左視點圖像和右視點圖像)之中的一個視點圖像(左視點圖像或右視點圖像)顯不在顯示單元18上。接下來,步驟S4至S24被執(zhí)行。在這里,步驟S4至S24與圖5中所圖示的第一實施例中的處理類似,并且因此在本文中省略解釋。
[0149]當它是簡易多人物立體圖像拾取模式時,在直通圖像在步驟S4至S24中通過2D來顯示的情況下,在顯示引導(dǎo)幀、檢測到被攝體圖像、確定它是否適合于雙眼視覺、并且聚焦引導(dǎo)幀之后,顯示被切換到3D顯示(步驟S124)。
[0150]圖13A典型地圖示2D顯示(平面顯示)。也就是說,在立體圖像中存在被攝體圖像的情況下,被攝體圖像被二維地顯示。在這里,圖13A典型地指示了在引導(dǎo)幀80中存在被攝體圖像的情況。
[0151]步驟S26至S30與圖5中所圖示的第一實施例中的處理類似,并且因此在本文中省略解釋。
[0152]在它不是簡易多人物立體圖像拾取模式的情況下,直通圖像通過3D來顯示(步驟S106)。也就是說,顯示控制單元61執(zhí)行由圖像拾取單元12-1和12-2所獲取的多個視點圖像(左視點圖像和右視點圖像)在顯示單元18上的立體顯示。圖13B典型地圖示3D顯示(立體顯示)。也就是說,在立體圖像中存在被攝體圖像的情況下,被攝體圖像被二維地顯示。在這里,盡管圖13B圖示了引導(dǎo)幀80被顯示以用于與圖13A比較的情況,但是引導(dǎo)幀80在圖12中所圖示的圖像拾處理示例中未被顯示。
[0153]在本實施例中,顯示控制單元61首先執(zhí)行多個視點圖像之中的一個視點圖像在顯示單元18上的平面顯示,將引導(dǎo)幀重疊在經(jīng)歷這個平面顯示的一個視點圖像上并且執(zhí)行平面顯示,以及,在雙眼視覺適合性確定單元64確定被攝體圖像適合于雙眼視覺的情況下,執(zhí)行立體圖像的三維顯示(立體顯示)。
[0154]在這里,盡管已經(jīng)在向用戶通知輸入圖像拾取指令時執(zhí)行圖像拾取(步驟S26至S30)的第四實施例中對示例進行了描述,但是本發(fā)明不限于這樣的情況。也許可以像如圖10中所圖示的第二實施例(圖10中的步驟S26和S42至S44) —樣在從向用戶通知起特定時間段的過去之后自動地拍攝圖像,或者也許可以像如圖11中所圖示的第三實施例(圖11中的步驟S52至S54) —樣在引導(dǎo)幀中的聚焦數(shù)目等于或大于閾值的情況下自動地拍攝圖像。
[0155]接下來,描述了適用于第一至第四實施例中的雙眼視覺適合性確定的各種變化功倉泛。
[0156]圖14A至14C是用來描述當引導(dǎo)幀中的被攝體圖像的數(shù)目超過閾值時通知立體圖像不適合于雙眼視覺的功能的解釋性圖。[0157]在本示例中,引導(dǎo)幀80像在圖14A至14C中所圖示的那樣被顯示在顯示單元18上。另外,雙眼視覺適合性確定單元64確定引導(dǎo)幀80中被攝體圖像的數(shù)目是否超過閾值,當引導(dǎo)幀80中被攝體圖像的數(shù)目超過閾值時確定立體圖像不適合于雙眼視覺,并且使顯示單元18顯示(通知)“不適合于雙眼視覺”的消息。
[0158]圖15A至15C是用來描述當引導(dǎo)幀中被攝體圖像的尺寸等于或小于閾值時通知立體圖像不適合于雙眼視覺的功能的解釋性圖。
[0159]在本示例中,引導(dǎo)幀80像在圖15A至15C中所圖示的那樣被顯示在顯示單元18上。另外,雙眼視覺適合性確定單元64確定引導(dǎo)幀80中被攝體圖像的尺寸是否超過閾值,當引導(dǎo)幀80中被攝體圖像的尺寸等于或小于閾值時確定立體圖像不適合于雙眼視覺,并且使顯示單元18顯示(通知)“不適合于雙眼視覺”的消息。
[0160]圖16是用來描述當引導(dǎo)幀中被攝體圖像的尺寸超過閾值時通知立體圖像不適合于雙眼視覺的功能的解釋性圖。
[0161]在本示例中,引導(dǎo)幀80被顯示在顯示單元18上。另外,雙眼視覺適合性確定單元64確定引導(dǎo)幀80中被攝體圖像的尺寸是否超過閾值,當引導(dǎo)幀80中被攝體圖像的尺寸超過閾值時確定立體圖像不適合于雙眼視覺,并且使顯示單元18像在圖16中所圖示的那樣顯示(通知)“不適合于雙眼視覺”的消息。
[0162]圖17是用來解釋當檢測到尺寸超過引導(dǎo)幀的被攝體圖像時通知立體圖像不適合于雙眼視覺的功能的解釋性圖。
[0163]在本示例中,引導(dǎo)幀80被顯示在顯示單元18上。另外,雙眼視覺適合性確定單元64確定是否存在尺寸超過引導(dǎo)幀80的被攝體圖像,當存在尺寸超過引導(dǎo)幀80的被攝體圖像時確定立體圖像不適合于雙眼視覺,并且使顯示單元18像在圖17中所圖示的那樣顯示(通知)“不適合于雙眼視覺”的消息。
[0164]圖18是用來描述在被攝體距離范圍的基礎(chǔ)上執(zhí)行雙眼視覺適合性確定的情況的解釋性圖。
[0165]在圖18中,LI表示從圖像拾取裝置10到第一被攝體的被攝體距離,L2表示從圖像拾取裝置10到第二被攝體的被攝體距離,并且L3表示從圖像拾取裝置10到第三被攝體的被攝體距離。在分別與第一、第二以及第三被攝體相對應(yīng)的多個被攝體圖像(第一被攝體的被攝體圖像、第二被攝體的被攝體圖像以及第三被攝體的被攝體圖像)是在引導(dǎo)幀80中的情況下,在被攝體距離L1、L2以及L3之中的最大值(在本示例中L2)與最小值(在本示例中LI)之間的差SR=L1-L2被稱為“被攝體距離范圍”。
[0166]在本示例中,通過將引導(dǎo)幀80顯示在顯示單元18上、由雙眼視覺適合性確定單元64相對于引導(dǎo)幀中的被攝體圖像來計算被攝體距離范圍、以及確定被攝體距離范圍SR是否是在適當?shù)娜菰S范圍內(nèi)(例如,在適當?shù)碾p眼視覺范圍R中)而確定立體圖像是否適合于雙眼視覺。
[0167]在雙眼視覺適合性確定單元64確定立體圖像不適合于雙眼視覺的情況下,存在針對用戶的各種通知模式。在下文中,代表性通知模式I至6被示出。
[0168]〈通知模式I>
[0169]顯示單元18的顯示被從三維顯示(立體顯示)切換到二維顯示(平面顯示)。
[0170]<通知模式2>[0171]在顯示單元18上顯示的引導(dǎo)幀80的色彩被切換。
[0172]〈通知模式3>
[0173]在顯示單元18上顯示的引導(dǎo)幀80被閃爍。
[0174]<通知模式4>
[0175]LED53被閃爍或者點亮。
[0176]〈通知模式5>
[0177]示出它不適合于雙眼視覺的字符串被顯示在顯示單元18上。
[0178]〈通知模式6>
[0179]示出它不適合于雙眼視覺的語音被輸出到揚聲器21 (聲音輸出單元)。
[0180]圖19是用來描述根據(jù)圖像拾取場景來設(shè)置并且輸入圖像拾取模式的功能的解釋性圖。
[0181]在圖19中,顯示單元18顯示菜單以選擇簡易多人物立體圖像拾取模式、簡易特寫鏡頭立體圖像拾取模式以及簡易圖像拾取模式并且執(zhí)行指令輸入。用戶能夠通過利用作為操作單元16的部分的交叉按鈕56和“菜單/0K”按鈕55根據(jù)圖像拾取場景來選擇圖像拾取模式并且執(zhí)行指令輸入。
[0182]具體而言,以下選擇I至選擇3通過由操作單元16執(zhí)行圖像拾取模式的指令輸入是可能的。
[0183]〈選擇1>
[0184]關(guān)于是否執(zhí)行引導(dǎo)幀顯示和雙眼視覺適合性確定的選擇
[0185]〈選擇2>
[0186]在被攝體圖像檢測單元62中檢測到的被攝體圖像的類型(是否檢測到人的面部圖像等等)。
[0187]〈選擇3>
[0188]在顯示單元上顯示的引導(dǎo)幀的類型(是否顯示了子引導(dǎo)幀等等)
[0189]例如,在簡易多人物立體圖像拾取模式中,執(zhí)行引導(dǎo)幀顯示和雙眼視覺適合性確定并且顯示子引導(dǎo)幀。而且,例如,在簡易特寫鏡頭立體圖像拾取模式下,除人物圖像外的另一被攝體圖像被檢測為被攝體圖像,并且未執(zhí)行引導(dǎo)幀顯示和雙眼視覺適合性確定。而且,例如,在簡易圖像拾取模式下,執(zhí)行引導(dǎo)幀顯示和雙眼視覺適合性確定但未顯示子引導(dǎo)。
[0190]在這里,盡管已經(jīng)描述了用多個視點圖像形成的動態(tài)圖片圖像通過顯示單元18被三維地顯示(立體顯示)的示例情況,但是本發(fā)明適用于動態(tài)圖片圖像被二維地顯示(平面顯示)的情況。也就是說,本發(fā)明的圖像拾取裝置包括能夠僅二維顯示用多個視點圖像形成的動態(tài)圖片圖像的圖像拾取裝置。
[0191]本發(fā)明不限于本說明書中所描述的示例和附圖中所圖示的示例,并且很自然的是,在不背離本發(fā)明的范圍的情況下能夠執(zhí)行各種設(shè)計改變和改進是自然的。
[0192]例如,同樣可以通過準備使處理器(例如,安裝到圖像拾取裝置的處理器)執(zhí)行在每個實施例中描述的圖像拾取方法的程序并且使處理器執(zhí)行這個程序來實現(xiàn)在每個實施例中描述的圖像拾取方法。而且,也許可以創(chuàng)建存儲介質(zhì),所述介質(zhì)能夠被處理器讀出并且記錄程序以使處理器執(zhí)行在每個實施例中描述的圖像拾取方法,并且使處理器從這個存儲介質(zhì)讀出并且執(zhí)行該程序。甚至在這種情況下,同樣可以實現(xiàn)在每個實施例中描述的圖像拾取方法。
[0193]<變化示例>
[0194]盡管已經(jīng)在上面提到的實施例中描述了提供了兩個圖像拾取單元12-1和12-2的情況,但是本發(fā)明不限于這種情況。本發(fā)明適用于在不取決于圖像拾取單元的數(shù)目的情況下拍攝包括多個視點圖像的立體圖像的情況。換句話說,它同樣適用于使用一個圖像拾取單元來拍攝包括多個視點圖像的立體圖像的情況,或者它同樣適用于使用三個或更多個圖像拾取單元來拍攝包括多個視點圖像的立體圖像的情況。
[0195]{參考符號列表}
[0196]12(12-1,12-2)圖像拾取單元
[0197]14CPU
[0198]16操作單元
[0199]18顯示單元
[0200]20 記錄單元
[0201]21 揚聲器
[0202]61 顯示控制單元
[0203]62 被攝體圖像檢測單元
[0204]63距離信息獲取單元
[0205]64 雙眼視覺適合性確定單元
[0206]66 通知控制單元
【權(quán)利要求】
1.一種圖像拾取裝置,包括: 圖像拾取單元,所述圖像拾取單元被配置成:對被攝體進行成像并且獲取用多個視點圖像形成的立體圖像; 顯示單元,所述顯示單元能夠顯示由所述圖像拾取單元獲取的所述立體圖像; 顯示控制單元,所述顯示控制單元被配置成:將預(yù)定尺寸的第一引導(dǎo)幀顯示在所述顯示單元上; 被攝體圖像檢測單元,所述被攝體圖像檢測單元被配置成:從由所述圖像拾取單元獲取的所述立體圖像檢測特定被攝體圖像; 距離信息獲取單元,所述距離信息獲取單元被配置成:獲取涉及被攝體距離和涉及從所述圖像拾取單元到所述被攝體的距離的信息,所述被攝體距離與由所述被攝體圖像檢測單元檢測到的所述被攝體圖像相對應(yīng);以及 雙眼視覺適合性確定單元,所述雙眼視覺適合性確定單元被配置成:基于涉及由所述距離信息獲取單元獲取的所述距離的所述信息,來確定所述第一引導(dǎo)幀中的所述被攝體圖像是否適合于雙眼視覺, 其中,在所述雙眼視覺適合性確定單元確定所述第一引導(dǎo)幀中的所述被攝體圖像適合于所述雙眼視覺的情況下,所述顯示控制單元使所述第一引導(dǎo)幀的位置和尺寸中的至少一個與適合于所述雙眼視覺的所述被攝體圖像相匹配。
2.根據(jù)權(quán)利要求1 所述的圖像拾取裝置,其中,除所述第一引導(dǎo)幀之外,所述顯示控制單元還將比所述第一引導(dǎo)幀更大尺寸的第二引導(dǎo)幀顯示在所述顯示單元上,以及,在所述被攝體圖像檢測單元從所述第二引導(dǎo)幀檢測到至少一個其它被攝體圖像的情況下,所述顯示控制單元使所述第二引導(dǎo)幀與所述至少一個其它被攝體圖像相匹配,其中,所述至少一個其它被攝體圖像與由所述雙眼視覺適合性確定單元確定為適合于所述雙眼視覺的所述被攝體圖像是不同的。
3.根據(jù)權(quán)利要求2所述的圖像拾取裝置,其中,所述雙眼視覺適合性確定單元確定所述第二引導(dǎo)幀中的所述至少一個其它被攝體圖像是否適合于所述雙眼視覺;以及 在所述雙眼視覺適合性確定單元確定所述第二引導(dǎo)幀中的所述至少一個其它被攝體圖像適合于所述雙眼視覺的情況下,所述顯示控制單元使所述第二引導(dǎo)幀與適合于所述雙眼視覺的所述至少一個其它被攝體圖像相匹配。
4.根據(jù)權(quán)利要求1至3中任何一項所述的圖像拾取裝置,進一步包括: 圖像拾取指令輸入單元,所述圖像拾取指令輸入單元被配置成:接受來自用戶的圖像拾取指令的輸入;以及 記錄單元,所述記錄單元被配置成:在所述雙眼視覺適合性確定單元確定所述立體圖像適合于所述雙眼視覺的情況下,當在所述圖像拾取指令輸入單元中輸入所述圖像拾取指令時,將由所述圖像拾取單元獲取的所述立體圖像記錄在預(yù)定存儲介質(zhì)中。
5.根據(jù)權(quán)利要求1至3中任何一項所述的圖像拾取裝置,進一步包括: 雙眼視覺適合性通知單元,所述雙眼視覺適合性通知單元被配置成:在所述雙眼視覺適合性確定單元確定所述立體圖像適合于所述雙眼視覺的情況下,通知所述立體圖像適合于所述雙眼視覺;以及 記錄單元,所述記錄單元被配置成:當在所述雙眼視覺適合性通知單元通知所述立體圖像適合于所述雙眼視覺之后過去了特定時間段時,將由所述圖像拾取單元獲取的所述立體圖像記錄在預(yù)定存儲介質(zhì)中。
6.根據(jù)權(quán)利要求1至5中任何一項所述的圖像拾取裝置,其中,所述顯示控制單元使所述顯示單元執(zhí)行所述多個視點圖像的一個視點圖像的平面顯示,將所述引導(dǎo)幀重疊在經(jīng)歷了這個平面顯示的所述一個視點圖像上并且使所述顯示單元執(zhí)行平面顯示,以及,在所述雙眼視覺適合性確定單元確定所述被攝體圖像適合于所述雙眼視覺的情況下,使所述顯示單元執(zhí)行所述立體圖像的立體顯示。
7.根據(jù)權(quán)利要求1至6中任何一項所述的圖像拾取裝置,其中,當所述引導(dǎo)幀中所述被攝體圖像的數(shù)目超過閾值時,所述雙眼視覺適合性確定單元確定所述立體圖像不適合于所述雙眼視覺。
8.根據(jù)權(quán)利要求1至6中任何一項所述的圖像拾取裝置,其中,當所述引導(dǎo)幀中所述被攝體圖像的尺寸等于或小于第一閾值或者所述引導(dǎo)幀中所述被攝體圖像的所述尺寸超過第二閾值時,所述雙眼視覺適合性確定單元確定所述立體圖像不適合于所述雙眼視覺,其中,所述第二閾值大于所述第一閾值。
9.根據(jù)權(quán)利要求1至6中任何一項所述的圖像拾取裝置,其中,在所述引導(dǎo)幀中存在多個所述被攝體圖像的情況下,所述雙眼視覺適合性確定單元計算在所述多個被攝體圖像中被攝體距離的最大值與最小值之間的差作為被攝體距離范圍,以及,在所述被攝體距離范圍不在容許范圍內(nèi)的情況下,確定所述立體圖像不適合于所述雙眼視覺。
10.根據(jù)權(quán)利要求1至9中任何一項所述的圖像拾取裝置,進一步包括雙眼視覺不適合性通知單元,所述雙眼視覺不適合性通知單元被配置成:當所述雙眼視覺適合性確定單元確定所述立體圖像不適合 于所述雙眼視覺時,通知所述立體圖像不適合于所述雙眼視覺。
11.根據(jù)權(quán)利要求10所述的圖像拾取裝置,其中,當所述雙眼視覺適合性確定單元確定所述立體圖像不適合于所述雙眼視覺時,所述雙眼視覺不適合性通知單元將所述顯示單元的顯示從所述立體顯示切換到所述平面顯示。
12.根據(jù)權(quán)利要求10所述的圖像拾取裝置,其中,當所述雙眼視覺適合性確定單元確定所述立體圖像不適合于所述雙眼視覺時,所述雙眼視覺不適合性通知單元執(zhí)行用來切換在所述顯示單元上顯示的所述引導(dǎo)幀的色彩的控制或用來使所述引導(dǎo)幀閃爍的控制。
13.根據(jù)權(quán)利要求10所述的圖像拾取裝置,其中,當所述雙眼視覺適合性確定單元確定所述立體圖像不適合于所述雙眼視覺時,所述雙眼視覺不適合性通知單元使用發(fā)光二極管、所述顯示單元以及聲音輸出設(shè)備中的任何一個作為所述通知單元來執(zhí)行通知。
14.根據(jù)權(quán)利要求1至13中任何一項所述的圖像拾取裝置,進一步包括設(shè)定輸入單元,所述設(shè)定輸入單元被配置成:接受以下中的至少一個設(shè)定的輸入:通過所述顯示控制單元的所述引導(dǎo)幀顯示是否被執(zhí)行以及通過所述雙眼視覺適合性確定單元的所述雙眼視覺適合性確定是否被執(zhí)行、在所述被攝體圖像檢測單元中檢測到的所述被攝體圖像的類型、和在所述顯示單元上顯示的所述引導(dǎo)幀的類型。
15.一種使用圖像拾取單元和顯示單元的圖像拾取方法,所述圖像拾取單元被配置成:對被攝體進行成像并且獲取用多個視點圖像形成的立體圖像,所述顯示單元能夠顯示由所述圖像拾取單元獲取的所述立體圖像,所述方法包括: 引導(dǎo)幀顯示步驟:將預(yù)定尺寸的引導(dǎo)幀顯示在所述顯示單元上;被攝體圖像檢測步驟:從由所述圖像拾取單元獲取的所述立體圖像檢測特定被攝體圖像; 距離信息獲取步驟:獲取涉及被攝體距離和涉及從所述圖像拾取單元到所述被攝體的距離的信息,所述被攝體距離與在所述被攝體圖像檢測步驟中檢測到的所述被攝體圖像相對應(yīng); 雙眼視覺適合性確定步驟:基于涉及在所述距離信息獲取步驟中獲取的所述距離的所述信息,來確定所述引導(dǎo)幀中的所述被攝體圖像是否適合于雙眼視覺;以及 在所述雙眼視覺適合性確定步驟中確定所述引導(dǎo)幀中的所述被攝體圖像適合于所述雙眼視覺的情況下、使所述引導(dǎo)幀的位置和尺寸中的至少一個與適合于所述雙眼視覺的所述被攝體圖像相匹配的步驟。
16.一種程序,所述程序使處理器執(zhí)行根據(jù)權(quán)利要求15的圖像拾取方法。
17.一種存儲介質(zhì),在所述存儲介質(zhì)中記錄了使處理器執(zhí)行根據(jù)權(quán)利要求15的圖像拾取方法。
【文檔編號】G03B15/00GK103843331SQ201280047602
【公開日】2014年6月4日 申請日期:2012年9月13日 優(yōu)先權(quán)日:2011年9月30日
【發(fā)明者】藤田廣大 申請人:富士膠片株式會社