專利名稱:成像設(shè)備,成像方法和程序的制作方法
技術(shù)領(lǐng)域:
本公開涉及成像設(shè)備,具體地說,涉及生成全景圖像的成像設(shè)備和成像方法,和使計算機執(zhí)行該方法的程序。
背景技術(shù):
近年來,拍攝諸如風景之類的被攝物體從而生成圖像(圖像數(shù)據(jù)),和把生成的圖像記錄為圖像文件的成像設(shè)備,比如數(shù)字靜態(tài)照相機已得到廣泛使用。另外,提出了一種按照時間先后順序連續(xù)生成多個圖像,并利用這些生成的多個圖像生成包括具有較寬范圍的被攝物體的全景圖像的成像設(shè)備。例如,提出了一種成像設(shè)備,其中在以成像設(shè)備的后方(例如,攝影者的位置)作為軸移動成像設(shè)備,以致畫出圓弧的時候,生成多個圖像,并利用這些多個圖像生成全景圖像(例如,參見未經(jīng)審查的日本專利申請公報No. 2009-268037)。
發(fā)明內(nèi)容
按照上述現(xiàn)有技術(shù),在用戶把成像設(shè)備握在手中的狀態(tài)下,通過移動成像設(shè)備,以致畫出弧線,可以進行全景圖像的成像操作,從而,用戶可按照相對容易的方式進行所述成像操作。這樣,在利用上述現(xiàn)有技術(shù)進行全景圖像的成像操作的情況下,全景圖像的構(gòu)圖是按照依據(jù)用戶操作的成像操作的開始指令決定的。因而,如果進行全景圖像的成像操作, 那么在環(huán)顧四周之后,用戶必須確認充當全景圖像的成像對象的被攝物體,并例如識別成像操作的開始位置和終止位置。隨后,在成像操作的開始位置,執(zhí)行成像操作開始指令之后,用戶通過把成像設(shè)備移動到成像操作的終止位置,進行全景圖像的成像操作。不過,在按照這種方式根據(jù)用戶的確認進行全景圖像的成像操作的情況下,構(gòu)圖可能不同于用戶預期的構(gòu)圖。例如,可能存在用戶意圖位于全景圖像中的中心位置的對象未能位于全景圖像中的中心位置的情況。這種情況下,例如,用戶通過試錯過程進行多次成像操作,或者妥協(xié)于具有非預期構(gòu)圖的全景圖像。發(fā)現(xiàn)理想的是能夠容易地生成用戶中意的全景圖像。按照第一例證實施例,本公開目的在于一種圖像處理設(shè)備,包括接收識別被攝物體的輸入的接口,和根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置的處理器。按照另一個例證實施例,本公開目的在于一種圖像處理設(shè)備,所述圖像處理設(shè)備包括接收識別被攝物體的輸入的接口,捕捉用于生成全景圖像的圖像數(shù)據(jù)的成像單元,和根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置的處理
ο按照另一個例證實施例,本公開目的在于一種由圖像處理設(shè)備執(zhí)行的圖像處理方法。所述方法包括在圖像處理設(shè)備的接口,接收識別被攝物體的輸入,在圖像處理設(shè)備的處理器,根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置。按照上述結(jié)構(gòu),能夠獲得突出的優(yōu)點,因為能夠容易地生成用戶中意的全景圖像。
圖1是圖解說明按照本公開的第一實施例的成像設(shè)備的內(nèi)部結(jié)構(gòu)例子的方框圖;圖2是是圖解說明按照本公開的第一實施例的成像設(shè)備的功能結(jié)構(gòu)例子的方框圖;圖3A和;3B是圖解說明按照本公開的第一實施例的成像設(shè)備的外觀的透視圖;圖4是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板上的顯示屏幕例子的示圖;圖5A和5B圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板上的設(shè)定屏幕例子的示圖;圖6A和6B是圖解說明在利用按照本公開的第一實施例生成全景圖像的情況下的成像操作,和利用該成像操作生成的全景圖像之間的關(guān)系的示圖;圖7A和7B是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板上的設(shè)定屏幕例子的示圖;圖8A和8B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖9A和9B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖IOA和IOB是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖IlA和IlB是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖12A和12B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖13A和1 是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖14A和14B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖15是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板上的擺動操作幫助屏幕的例子的示圖;圖16A和16B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖17A和17B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖18A和18B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖19A和19B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖20A和20B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖21A和21B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖22A和22B是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖23A和2 是示意圖解說明按照本公開的第一實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的轉(zhuǎn)變例子的示圖;圖M是圖解說明按照本公開的第一實施例的成像設(shè)備的成像控制處理的例子的流程圖;圖25是圖解說明按照本公開的第一實施例的成像設(shè)備的成像控制處理的例子的流程圖;圖沈是圖解說明按照本公開的第一實施例的成像設(shè)備的成像控制處理的例子的流程圖;圖27A和27B是圖解說明按照本公開的第二實施例,顯示在輸入/輸出面板上的顯示屏幕例子的示圖;圖28A和28B是示意圖解說明按照本公開的第二實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的例子的示圖;圖^A、29B和29C是示意圖解說明按照本公開的第二實施例的成像設(shè)備的取向, 顯示在輸入/輸出面板上的顯示屏幕,和全景圖像中的基準被攝物體之間的關(guān)系例子的示圖;圖30A、30B和30C是示意圖解說明按照本公開的第二實施例的成像設(shè)備的取向, 顯示在輸入/輸出面板上的顯示屏幕,和全景圖像中的基準被攝物體之間的關(guān)系例子的示圖;圖31A、31B和31C是示意圖解說明按照本公開的第二實施例的成像設(shè)備的取向, 顯示在輸入/輸出面板上的顯示屏幕,和全景圖像中的基準被攝物體之間的關(guān)系例子的示圖;圖32A、32B和32C是示意圖解說明按照本公開的第二實施例的成像設(shè)備的取向, 顯示在輸入/輸出面板上的顯示屏幕,和全景圖像中的基準被攝物體之間的關(guān)系例子的示圖;圖33A和3 是示意圖解說明按照本公開的第二實施例的成像設(shè)備的取向,和顯示在輸入/輸出面板上的顯示屏幕的例子的示圖;圖34A和34B是圖解說明按照本公開的第二實施例,顯示在輸入/輸出面板上的顯示屏幕例子的示圖35是圖解說明按照本公開的第二實施例的成像設(shè)備的成像控制處理的例子的流程圖;圖36A和36B是圖解說明按照本公開的第二實施例,顯示在輸入/輸出面板上的顯示屏幕例子的示圖;圖37A和37B是示意圖解說明在利用按照本公開的第一實施例和第二實施例的成像設(shè)備,生成全景圖像時的成像操作的示圖。
具體實施例方式下面說明實現(xiàn)本公開的方式(下面稱為實施例)。將按照下述順序進行說明。1.第一實施例(成像控制其中控制全景圖像的成像操作,以致使用戶期望的被攝物體位于全景圖像中的基準位置的例子)2.第二實施例(成像控制其中控制全景圖像的成像操作,以致通過在構(gòu)圖幫助圖像上設(shè)置代表基準被攝物體的標識,獲得用戶期望的構(gòu)思的例子)3.變形1.第一實施例成像設(shè)備的結(jié)構(gòu)例子圖1是圖解說明按照本公開的第一實施例的成像設(shè)備100的內(nèi)部結(jié)構(gòu)例子的方框圖。成像設(shè)備100包括鏡頭單元111,成像單元112,成像控制單元113,臨時存儲單元114, 取向檢測單元121,圖像設(shè)備取向控制單元122,圖像處理單元130,輸出控制單元140,顯示單元141和外部輸出單元142。另外,成像設(shè)備100包括操作接收單元151,輸入控制單元 152,UI (用戶接口)控制單元160,重放控制單元170和記錄介質(zhì)180。注意構(gòu)成成像設(shè)備 100的各個單元之間的交換是借助總線101進行的。另外,成像設(shè)備100可用能夠拍攝被攝物體從而生成多個圖像(圖像數(shù)據(jù)),和關(guān)于這些多個圖像進行各種成像處理的數(shù)字靜態(tài)照相機實現(xiàn)。鏡頭單元111由聚集來自被攝物體的光的多個鏡頭(變焦鏡頭,聚焦鏡頭等)構(gòu)成,經(jīng)這些鏡頭和光圈從被攝物體輸入的光被提供給成像單元112。成像單元112在成像控制單元113的控制下,轉(zhuǎn)換來自被攝物體的入射光,從而生成圖像(圖像數(shù)據(jù)),并把生成的圖像提供給成像控制單元113。具體地說,在成像裝置的成像面上形成經(jīng)鏡頭單元111輸入的被攝物體的光學圖像,成像裝置在這種狀態(tài)下進行成像操作,從而生成圖像(圖像數(shù)據(jù))。注意,例如CCD (電荷耦合器件)傳感器,CMOS (互補金屬氧化物半導體)傳感器等可用作成像裝置。成像控制單元113控制成像單元112的成像操作,并把成像單元112生成的圖像 (圖像數(shù)據(jù))經(jīng)臨時存儲單元114,提供給圖像處理單元130。臨時存儲單元114是臨時保存成像單元112生成的圖像(圖像數(shù)據(jù)),或者在用圖像處理單元130進行圖像處理時的圖像(圖像數(shù)據(jù))的圖像存儲器。例如,臨時存儲單元 114由DRAM (動態(tài)隨機存取存儲器)構(gòu)成。取向檢測單元121通過檢測成像設(shè)備100的加速度、運動、傾斜等等,檢測成像設(shè)備100的取向的變化,并把與檢測的取向變化相關(guān)的取向變化信息輸出給成像設(shè)備取向控制單元122。取向檢測單元121可利用作為現(xiàn)成組件的抖動校正用陀螺傳感器廉價地實現(xiàn)。另一方面,也可以采用專用陀螺傳感器。用這些陀螺傳感器檢測成像設(shè)備100的角速度,從而檢測成像設(shè)備100的取向的變化。注意可以做出其中利用除陀螺傳感器(例如,加速度傳感器)外的另一個傳感器,檢測成像設(shè)備100的加速度、運動、傾斜等,并根據(jù)該檢測結(jié)果檢測成像設(shè)備100的取向及其變化的安排。成像設(shè)備取向控制單元122控制取向檢測單元121,并把從取向檢測單元121輸出的取向信息輸出給圖像處理單元130和UI控制單元160等等。圖像處理單元130對成像單元112生成的圖像(圖像數(shù)據(jù))進行諸如編碼之類的圖像處理,并把經(jīng)過圖像處理的圖像(圖像數(shù)據(jù))作為圖像文件,保存在記錄介質(zhì)180中。 例如,圖像處理單元130進行關(guān)于成像單元112生成的圖像(圖像數(shù)據(jù))的顯示用圖像處理,并把經(jīng)過圖像處理的圖像輸出給輸出控制單元140,以顯示在顯示單元141上。另外,在設(shè)定了全景圖像成像模式的情況下,圖像處理單元130合成用成像單元112生成的多個圖像(圖像數(shù)據(jù)),從而生成全景圖像,并把該生成的全景圖像作為圖像文件保存在記錄介質(zhì) 180中。另外,在重放保存在記錄介質(zhì)180中的圖像文件時,圖像處理單元130進行經(jīng)臨時存儲單元114從重放控制單元170供給的圖像的圖像處理,比如解碼處理等等。輸出控制單元140進行與顯示單元141和外部輸出單元142相關(guān)的輸出控制。例如,輸出控制單元140把從圖像處理單元130輸出的圖像(例如,預覽圖像)顯示在顯示單元141上。另外,輸出控制單元140在UI控制單元160的控制下,把每個圖像(例如,菜單屏幕)顯示在顯示單元141上。另外,輸出控制單元140關(guān)于從圖像處理單元130輸出的圖像(例如,預覽圖像),合成在UI控制單元160控制之下的每個圖像(例如,操作幫助圖像),以便顯示在顯示單元141上。另外,輸出控制單元140在重放控制單元170的控制下, 把保存在記錄介質(zhì)180中的圖像文件顯示在顯示單元141上。顯示單元141是顯示從輸出控制單元140供給的各種圖像的顯示單元。顯示單元 141順序顯示成像單元112生成的圖像(所謂的監(jiān)視顯示)。另外,顯示單元141顯示與保存在記錄介質(zhì)180中的圖像文件對應(yīng)的圖像。注意,諸如有機EL(電致發(fā)光)面板之類的顯示面板可用作顯示單元141。另一方面,可以采用用戶能夠通過使他/她的手指接觸或接近顯示面而輸入操作的觸摸面板,如圖3A和;3B中所示。外部輸出單元142把從輸出控制單元140供給的各種信息輸出給外部裝置。操作接收單元151是接收用戶操作的操作輸入的操作接收單元,并把與接收的操作輸入相應(yīng)的信號輸出給輸入控制單元152。例如,就全景圖像成像模式來說,在成像設(shè)備 100上設(shè)置操作部件,比如用于指令生成全景圖像的成像操作的開始的快門按鈕210(示于圖3A和;3B中)等等。另外,操作接收單元151和顯示單元141可以與輸入/輸出面板200 一體構(gòu)成,如圖3A和;3B中所示。輸入控制單元152進行關(guān)于操作接收單元151接收的操作輸入的控制。UI控制單元160控制顯示單元141顯示用于執(zhí)行用戶預期的功能的各種圖像。例如,UI控制單元160控制顯示單元141顯示用于幫助各種菜單屏幕或全景圖像的成像操作的操作幫助圖像。重放控制單元170進行在播放保存在記錄介質(zhì)180中的圖像文件時的重放控制。 例如,重放控制單元170把保存在記錄介質(zhì)180中的圖像文件經(jīng)臨時存儲單元114,提供給圖像處理單元130,以進行諸如圖像解碼處理之類的圖像處理,并把經(jīng)過圖像處理的圖像顯示在顯示單元141上。另外,重放控制單元170控制所述顯示時的圖像重放順序或顯示方法。記錄介質(zhì)180是把從圖像處理單元130供給的圖像保存為圖像文件的記錄裝置。 另外,記錄介質(zhì)180在重放控制單元170的控制下,把保存的圖像文件提供給圖像處理單元130。例如,各種數(shù)據(jù),比如JPEG格式的圖像數(shù)據(jù)等被保存在記錄介質(zhì)180中。注意,記錄介質(zhì)180可內(nèi)置于成像設(shè)備100中,或者可安裝在成像設(shè)備100上/從成像設(shè)備100上取下。另外,各種記錄介質(zhì)可用作記錄介質(zhì)180,比如,半導體存儲器,光學記錄介質(zhì),磁盤, HDD (硬盤驅(qū)動器)等等。注意,可記錄DVD (數(shù)字通用光盤),可記錄⑶(光盤),藍光光盤 (注冊商標)等可用作光學記錄介質(zhì)。成像設(shè)備的功能結(jié)構(gòu)例子圖2是圖解說明按照本公開的第一實施例的成像設(shè)備100的功能結(jié)構(gòu)例子的方框圖。成像設(shè)備100包括成像單元112,臨時存儲單元114,取向檢測單元121,移動量檢測單元131和全景圖像生成單元132。另外,成像設(shè)備100包括顯示單元141,操作接收單元 151,記錄介質(zhì)180,控制單元190,顯示控制單元191和記錄控制單元192。注意,在圖2中, 在圖1中所示的各個單元中,只圖解說明了主要與全景圖像的成像時的圖像處理和顯示處理相關(guān)的部分,其它部分被省略。成像單元112在控制單元190的控制下,對被攝物體成像,從而生成圖像,并把生成的圖像提供給臨時存儲單元114。另外,在設(shè)定了全景圖像成像模式的情況下,成像單元 112按照時間先后順序,連續(xù)拍攝被攝物體,從而生成多個圖像,并把生成的圖像提供給臨時存儲單元114。臨時存儲單元114是保持成像單元112生成的圖像的圖像存儲器,并把保持的圖像提供給移動量檢測單元131和全景圖像生成單元132。取向檢測單元121檢測成像設(shè)備100的取向的變化,把與檢測的取向變化相關(guān)的取向變化信息輸出給控制單元190。例如,取向檢測單元121檢測成像設(shè)備100的取向的變化,成像設(shè)備100的取向隨著以成像設(shè)備100的近旁位置(例如,后方位置)為軸,成像設(shè)備100沿著特定方向的轉(zhuǎn)動而變化。移動量檢測單元131關(guān)于保持在臨時存儲單元114中的圖像,檢測時間軸的相鄰圖像之間的移動量和移動方向,并把檢測的移動量和移動方向輸出給全景圖像生成單元 132。例如,移動量檢測單元131進行構(gòu)成相鄰兩個圖像的像素之間的匹配處理(即,區(qū)分相同被攝物體的成像區(qū)域的匹配處理),以計算在圖像之間移動的像素的數(shù)目。借助該匹配處理,進行假定被攝物體基本保持靜止的處理。注意,在被攝物體中包含對象的情況下,檢測出與整個圖像的運動向量不同的運動向量,不過,利用與被視為檢出對象之外的這種對象對應(yīng)的運動向量進行處理。即,只檢測與隨同成像設(shè)備100的移動一起發(fā)生的整個圖像的移動對應(yīng)的運動向量(全局運動向量(GMV))。注意,移動量檢測單元131對應(yīng)于圖1中所示的圖像處理單元130。全景圖像生成單元132在控制單元190的控制下,利用保持在臨時存儲單元114 中的多個圖像,生成全景圖像,并把生成的全景圖像提供給顯示控制單元191和記錄控制單元192。例如,全景圖像生成單元132根據(jù)從控制單元190輸出的分析結(jié)果(成像設(shè)備 100的取向的變化量的分析結(jié)果),計算保存在臨時存儲單元114中的多個圖像中的每個圖像之中的待合成區(qū)域。全景圖像生成單元132從多個圖像中的每個圖像的待合成區(qū)域提取圖像,并合成提取的圖像,從而生成全景圖像。這種情況下,全景圖像生成單元132根據(jù)從移動量檢測單元131輸出的移動量和移動方向,重疊地合成所述提取的圖像,從而生成全景圖像。另外,全景圖像生成單元132順序把用于顯示由顯示成像單元112生成并保存在臨時存儲單元114中的圖像的圖像作為預覽圖像提供給顯示控制單元191。注意,全景圖像生成單元132對應(yīng)于圖1中所示的圖像處理單元130。操作接收單元151是接收用戶操作的操作輸入的操作單元,把與接收的操作輸入對應(yīng)的操作信號輸出給控制單元190。控制單元190根據(jù)來自操作接收單元151的操作信號,和來自取向檢測單元121 的取向變化信息,控制成像設(shè)備100的各個單元。例如,在操作接收單元151收到成像模式設(shè)定操作的情況下,控制單元190設(shè)定對應(yīng)于所述設(shè)定操作的成像模式。注意,就本公開的第一實施例來說,將舉例說明第一成像模式到第三成像模式(示于圖7A中)被設(shè)定為生成全景圖像的全景圖像成像模式的情況。另外,在操作接收單元151收到基準位置(示于圖 7B中)的設(shè)定操作的情況下,控制單元190設(shè)定與所述設(shè)定操作對應(yīng)的基準位置。另外,控制單元190根據(jù)來自操作接收單元151的操作信號,確定將位于全景圖像中的基準位置的被攝物體。具體地說,控制單元190把收到用戶的確定指令操作(例如,快門按鈕210的按下操作)時,已成為成像單元112的成像對象的被攝物體確定為將位于所述基準位置的被攝物體。例如,在設(shè)定了第一成像模式或第二成像模式的情況下,控制單元 190根據(jù)在開始全景圖像成像操作之前的用戶操作,確定將位于所述基準位置的被攝物體。 另外,在設(shè)定了第三成像模式的情況下,控制單元190根據(jù)在全景圖像成像操作期間的用戶操作,確定將位于所述基準位置的被攝物體。例如,在設(shè)定了第一成像模式的情況下,控制單元190把在以當收到將位于基準位置的被攝物體的確定指令操作時的成像設(shè)備100的取向作為基準開始成像操作的時候,成像設(shè)備100的旋轉(zhuǎn)角度確定為開始位置。另外,在設(shè)定了第一成像模式到第三成像模式之一的情況下,控制單元190把當收到所述確定指令操作時的成像設(shè)備100的取向作為基準結(jié)束成像操作的時候,成像設(shè)備100的旋轉(zhuǎn)角度作為終止位置。另外,控制單元190根據(jù)從取向檢測單元121輸出的取向變化信息,進行成像單元 112的成像控制,以致使確定為將位于全景圖像中的基準位置的被攝物體位于所述基準位置。具體地說,在設(shè)定了第一成像模式的情況下,控制單元190確定全景圖像成像操作的開始位置和終止位置,以致使確定的被攝物體位于所述基準位置。控制單元190隨后根據(jù)取向變化信息,判定成像設(shè)備100是否已到達開始位置或終止位置,在成像設(shè)備100到達開始位置時開始成像操作,而在成像設(shè)備100到達終止位置時結(jié)束成像操作。另外,在設(shè)定了第二成像模式的情況下,控制單元190根據(jù)用戶的指令開始全景圖像成像操作的操作,開始成像操作,并確定成像操作的終止位置,以致使確定的被攝物體位于所述基準位置??刂茊卧?90隨后根據(jù)取向變化信息,判定成像設(shè)備100是否已到達終止位置,并在成像設(shè)備100到達終止位置時,結(jié)束成像操作。另外,在設(shè)定了第三成像模式的情況下,控制單元190根據(jù)全景圖像成像操作的開始位置,和當確定將位于全景圖像中的基準位置的被攝物體時的成像設(shè)備100的取向, 確定全景圖像成像操作的終止位置。在這種情況下,確定成像操作的終止位置,以致使確定的被攝物體位于所述基準位置??刂茊卧?90隨后根據(jù)取向變化信息,判定成像設(shè)備100 是否已到達終止位置,并在成像設(shè)備100到達終止位置時,結(jié)束成像操作。另外,在收到確定將位于全景圖像中的基準位置的被攝物體的用戶操作的情況下,控制單元190進行在顯示單元141上顯示把成像設(shè)備100的取向改變成全景圖像成像操作的開始位置的操作幫助圖像的控制。另外,在成像設(shè)備100的取向變成所述開始位置之后,控制單元190進行在顯示單元141上顯示把成像設(shè)備100的取向改變成全景圖像成像操作的終止位置的操作幫助圖像的控制。另外,例如,控制單元190根據(jù)從取向檢測單元121輸出的取向變化信息,分析成像設(shè)備100的取向的變化量(移動方向,移動量等等),并把其分析結(jié)果輸出給全景圖像生成單元132和顯示控制單元191。另外,例如,在結(jié)束成像單元112的多個圖像的生成處理之后,控制單元190進行在顯示單元141上顯示全景圖像生成單元132生成的全景圖像的控制。注意,控制單元190是在發(fā)明內(nèi)容中說明的判定單元和控制單元的例子。顯示控制單元191在控制單元190的控制下,把全景圖像生成單元132生成的全景圖像顯示在顯示單元141上。例如,在收到確定將位于全景圖像中的基準位置的被攝物體的用戶操作的情況下,顯示控制單元191在顯示單元141上顯示把成像設(shè)備100的取向改變成全景圖像成像操作的開始位置的操作幫助圖像。另外,在成像設(shè)備100的取向被變成所述開始位置之后,顯示控制單元191在顯示單元141上顯示把成像設(shè)備100的取向改變成全景圖像成像操作的終止位置的操作幫助圖像。顯示單元141是顯示從顯示控制單元191供給的圖像的顯示單元。另外,各種菜單屏幕和各種圖像被顯示在顯示單元141上。記錄控制單元192在控制單元190的控制下,進行把全景圖像生成單元132生成的全景圖像記錄在記錄介質(zhì)180中的控制。記錄介質(zhì)180把全景圖像生成單元132生成的全景圖像保存為圖像文件(圖像內(nèi)容)。成像設(shè)備的外觀結(jié)構(gòu)例子圖3A和;3B是圖解說明按照本公開的第一實施例的成像設(shè)備100的外觀的透視圖。圖3A是圖解說明成像設(shè)備100的正面(即,設(shè)置有對著被攝物體的鏡頭的一面)的外觀的透視圖。另外,圖3B是圖解說明成像設(shè)備100的背面(即,設(shè)置有對著攝影者的輸入 /輸出面板200的一面)的外觀的透視圖。成像設(shè)備100包括鏡頭單元111,快門按鈕210和輸入/輸出面板200。成像設(shè)備 100是能夠拍攝被攝物體,從而生成圖像(圖像數(shù)據(jù)),并且所述生成的圖像能夠作為圖像內(nèi)容(靜止圖像內(nèi)容或運動圖像內(nèi)容)被記錄在記錄介質(zhì)180(示于圖1中)的成像設(shè)備。 注意成像設(shè)備100設(shè)置有諸如電源開關(guān),模式切換開關(guān),變焦按鈕之類的其它操作部件,不過這些其它操作部件的圖示和說明將被省略??扉T按鈕210是在把通過拍攝被攝物體而生成的圖像(圖像數(shù)據(jù))記錄成圖像內(nèi)容時,由用戶按下的按鈕。例如,在設(shè)定了記錄靜止圖像的靜止圖像成像模式的情況下,當半按下快門按鈕210時,進行實現(xiàn)自動聚焦的聚焦控制。另外,當全按下快門按鈕210時, 進行所述聚焦控制,并且關(guān)聯(lián)地把在全按下快門按鈕210時成像單元112拍攝的圖像記錄在記錄介質(zhì)180中。另外,將參考圖8A-2;3B和其它附圖詳細說明在設(shè)定全景圖像成像模式的情況下,快門按鈕210的按下操作。輸入/輸出面板200顯示各種圖像,還通過檢測輸入/輸出面板200上的接觸操作,接收來自用戶的操作輸入。輸入/輸出面板200例如用觸摸面板實現(xiàn)。注意,輸入/輸出面板200對應(yīng)于圖1和2中所示的顯示單元141和操作接收單元151。當設(shè)定全景圖像成像模式時的顯示屏幕例子圖4是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板200上的顯示屏幕例子的示圖。就圖4中所示的顯示屏幕300來說,顯示在左側(cè)的圖標(301-305)是主要在進行設(shè)定操作時使用的圖標,顯示在右側(cè)的圖標(306-309)是主要代表當前狀態(tài)等的圖標。菜單屏幕用轉(zhuǎn)變按鈕301是在轉(zhuǎn)變到菜單屏幕時按下的按鈕。具體地說,當按下菜單屏幕用轉(zhuǎn)變按鈕301時,在輸入/輸出面板200上顯示菜單屏幕。運動圖像成像模式用轉(zhuǎn)變按鈕302是在設(shè)定運動圖像成像模式時按壓的圖標。具體地說,當按壓運動圖像成像模式用轉(zhuǎn)變按鈕302時,設(shè)定運動圖像成像模式,從而可以進行運動圖像的成像操作(運動圖像的攝影)。擺動方向設(shè)定按鈕303是當在設(shè)定了全景圖像成像模式的情況下,設(shè)定擺動方向時按下的按鈕。另外,作為擺動方向設(shè)定按鈕303,顯示與設(shè)定的擺動方向?qū)?yīng)的標識。圖 4圖解說明設(shè)定了從左向右進行擺動操作的設(shè)置的情況。注意,在按下擺動方向設(shè)定按鈕 303的情況下,將顯示的擺動方向設(shè)定屏幕320將參考圖5A詳細說明。注意,就本公開的第一實施例來說,將說明以成像設(shè)備100的當前位置(成像設(shè)備100的近旁位置(例如,后方位置))作為軸,成像設(shè)備100沿著特定方向(例如,水平方向)的旋轉(zhuǎn)操作,作為擺動操作。另外,所述操作方向?qū)⒈环Q為擺動方向。圖像大小設(shè)定按鈕304是當在設(shè)定了全景圖像成像模式的情況下,設(shè)定擺動方向的圖像大小時按下的按鈕。就本公開的第一實施例來說,表示了其中設(shè)定標準(180° )和寬040° )作為圖像大小的例子。另外,顯示作為圖像大小設(shè)定按鈕304,與設(shè)定的圖像大小對應(yīng)的標識。圖4圖解說明設(shè)定了標準(STD)的情況。另外,在設(shè)定了全景圖像成像模式的情況下,只顯示擺動方向設(shè)定按鈕303和圖像大小設(shè)定按鈕304。注意在按下圖像大小設(shè)定按鈕時顯示的圖像大小設(shè)定屏幕330將參考圖5B詳細說明。曝光值設(shè)定按鈕305是在設(shè)定曝光值(EV值)時按下的按鈕。具體地說,當按下曝光值設(shè)定按鈕305時,顯示用于設(shè)定曝光值的設(shè)定屏幕。全景圖像可記錄數(shù)通知圖標306是代表置于成像設(shè)備100中的存儲器(例如,記錄介質(zhì)180)能夠記錄的全景圖像的數(shù)目的圖標。例如,作為全景圖像可記錄數(shù)通知圖標 306,顯示代表存儲器的標識,和指示可記錄的全景圖像的數(shù)目的數(shù)字“ 10”(位于代表存儲器的標記的右下部)。全景圖像大小通知圖標307是代表在設(shè)定全景圖像成像模式的情況下,沿著擺動方向的圖像大小的圖標。具體地說,顯示代表在按下圖像大小設(shè)定按鈕304之后設(shè)定的圖像大小的標識。設(shè)定模式通知圖標308是代表當前設(shè)定的模式的圖標。例如,顯示代表重放模式, 成像模式(靜止圖像成像模式,全景圖像成像模式和運動圖像成像模式)之一的標識。注意,圖4圖解說明在設(shè)定全景圖像成像模式情況下的標識,作為設(shè)定模式通知圖標308。
12
重放模式用轉(zhuǎn)變按鈕309是在改變成重放模式時按下的按鈕。具體地說,當按下重放模式用轉(zhuǎn)變按鈕309時,設(shè)定重放模式。聚焦框310是用于指定顯示在輸入/輸出面板200上的被攝物體中的要被聚焦的對象(聚焦對象)的邊框,以四個白色括弧的形式位于顯示屏幕300的中心附近。具體地說,在包含在聚焦框310的框內(nèi)的多個被攝物體中,一個或多個被攝物體被聚焦。全景成像動作操作幫助圖像311是向用戶通知擺動方向的操作幫助圖像。具體地說,在設(shè)定了全景圖像成像模式的情況下,顯示全景成像動作操作幫助圖像311,它由虛擬地位于全景圖像的攝影位置的5部照相機構(gòu)成。另外,全景成像動作操作幫助圖像311利用所述5倍照相機的顯示切換,通知在全景圖像成像模式下設(shè)定的擺動方向(在按下擺動方向設(shè)定按鈕303之后設(shè)定的擺動方向)。例如,設(shè)想設(shè)定了從左向右擺動成像設(shè)備100的設(shè)置的情況。在這種情況下,構(gòu)成全景成像動作操作幫助圖像311的5部照相機之一從左向右地被順序切換成特定的顏色。在5部照相機中的右端照相機被切換成特定顏色之后, 左端的照相機被切換成特定的顏色。之后,按照相同的方式繼續(xù)進行照相機變成特定顏色的切換顯示。圖4圖解說明中間的照相機被設(shè)定成特定顏色的狀態(tài)。注意,當執(zhí)行開始全景圖像成像操作的開始指令操作(快門按下操作)時,全景成像動作操作幫助圖像311消失。消息顯示區(qū)312是對于用戶顯示用于幫助操作的消息的區(qū)域。通知信息313是向用戶通知在設(shè)定全景圖像成像模式的情況下,可能未包含在全景圖像中的被攝物體部分的區(qū)域。具體地說,通知信息313被設(shè)定成整體淺黑,從而能夠把未包含在全景圖像中的被攝物體部分通知用戶。例如,在全景圖像成像模式下的擺動操作的初始狀態(tài)下,就與顯示屏幕300的左端相當?shù)谋粩z物體來說,其圖像未被生成,從而未包含在全景圖像中。于是,如圖4中所示,在全景圖像成像模式下的擺動操作的初始狀態(tài)下, 在顯示屏幕300的左端顯示通知信息313。另外,按照全景圖像成像模式下的擺動操作,通知信息313從左端移動到右端。這種情況下,通知信息313的寬度的大小隨所述移動而變化。當設(shè)定擺動方向和圖像大小時的設(shè)定屏幕例子圖5A和5B是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板200上的設(shè)定屏幕例子的示圖。圖5A圖解說明擺動方向設(shè)定屏幕320。就圖4中所示的顯示屏幕 300來說,擺動方向設(shè)定屏幕320是在按下擺動方向設(shè)定按鈕303之后,與顯示屏幕300重
疊顯示的屏幕。對于擺動方向設(shè)定屏幕320,設(shè)置擺動方向選擇按鈕321-324," X ”按鈕325和 “? ”按鈕 326。擺動方向選擇按鈕321-3M是在用附加在每個標識內(nèi)的箭頭指定的方向被選為擺動方向時按下的按鈕。例如,在設(shè)定從左向右進行擺動操作的情況下,按下擺動方向設(shè)定按鈕321。另外,在進行了用戶的選擇操作的情況下,附加表示這種意思的邊框327。“ X ”按鈕325是在消除擺動方向設(shè)定屏幕320時按下的按鈕,“? ”按鈕3 是在利用幫助功能時按下的按鈕。圖5B圖解說明圖像大小設(shè)定屏幕330。圖像大小設(shè)定屏幕330是就圖4中所示的顯示屏幕300來說,在按下圖像大小設(shè)定按鈕304之后,與顯示屏幕300重疊顯示的屏幕。
對于圖像設(shè)定屏幕330,設(shè)置圖像大小選擇按鈕331和332,“ X,,按鈕333和“ ?,, 按鈕334。圖像大小選擇按鈕331和332是在選擇用附加在各個標識中的字母指定的圖像大小時按下的按鈕。例如,在選擇標準(180° )的情況下,按下圖像大小選擇按鈕331,在選擇寬)的情況下,按下圖像大小選擇按鈕332。另外,在進行了用戶的選擇操作的情況下,附加表示這種意思的邊框335。注意在本例中,圖解說明用戶選擇兩種圖像大小之中的期望圖像大小的例子,不過用戶可選擇三種以上的圖像大小之中的期望圖像大小。另一方面,可用用戶的輸入操作(例如,圖像大小(角度.)的數(shù)值的輸入操作)設(shè)定圖像大小?!?X ”按鈕333是在消除圖像大小設(shè)定屏幕330時按下的按鈕,“? ”按鈕334是在使用幫助功能時按下的按鈕。 全景圖像的成像操作例子下面,說明利用成像設(shè)備100進行成像操作的情況。圖6A和6B是圖解說明當利用按照本公開的第一實施例的成像設(shè)備100生成全景圖像時的成像操作,和用所述成像操作生成的全景圖像之間的關(guān)系的示圖。圖6A圖解說明在利用成像設(shè)備100生成全景圖像的情況下,從上方觀察充當被攝物體的場所400時的頂視圖。場所400是包括山、建筑物、樹木、湖、牛的塑像401等的場所, 在圖6A中,為了簡化說明,簡略地圖示所述山、建筑物、樹木、湖、牛的塑像401等。另外,圖 6A圖解說明其中從左向右的擺動操作被設(shè)定為擺動方向,標準(180° )被設(shè)定為圖像大小的例子。另外,圖6A圖解說明其中用戶操作成像設(shè)備100生成全景圖像,以致牛的塑像401 的位置變成全景圖像的中心位置的例子。圖6B圖解說明用圖6A中所示的成像操作生成的全景圖像410。具體地說,全景圖像410是牛的塑像401位于中心位置的全景圖像。這樣,這設(shè)想在湖邊漫步的用戶404想要牛的塑像401位于中心位置的全景圖像的情況。在這種情況下,例如,用戶404必須在成像操作的開始位置402開始全景圖像成像操作,并在成像操作的終止位置403結(jié)束全景圖像成像操作。為了按照這種方式進行成像操作,用戶404必須環(huán)顧場所400的四周,識別開始位置402和終止位置403,然后開始成像操作。不過,假定用戶400難以環(huán)顧場所400的四周, 從而難以利用目視準確地識別開始位置402和終止位置403。另外,在難以準確地識別開始位置402和終止位置403的情況下,難以生成用戶404想要的全景圖像(牛的塑像401位于中心位置的全景圖像)。在這種情況下,用戶404必須選擇是在再次確認開始位置402和終止位置403之后,再次進行成像操作,還是用戶404滿意用戶未預期的全景圖像(即,牛的塑像401沒有位于中心位置的全景圖像)。于是,就本公開的第一實施例來說,將表示其中進行成像單元112的成像控制,以致使確定為將位于全景圖像中的基準位置的被攝物體的被攝物體位于所述基準位置的例子。成像條件的設(shè)定屏幕例子圖7A和7B是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板200上的設(shè)定屏幕例子的示圖。圖7A圖解說明全景圖像成像模式設(shè)定屏幕340。全景圖像成像模式設(shè)定屏幕340是在設(shè)定全景圖像成像模式的種類時,顯示在輸入/輸出面板200上的屏幕。例如,在進行記錄全景圖像的全景圖像成像模式的設(shè)定操作之后,立即顯示全景圖像成像模式設(shè)定屏幕340。對于全景圖像成像模式設(shè)定屏幕340,設(shè)置第一到第四成像模式設(shè)定按鈕341-344,確定按鈕345和返回按鈕346。第一到第四成像模式設(shè)定按鈕341-344是當設(shè)定全景圖像成像模式的種類時按下的按鈕。第一成像模式設(shè)定按鈕341是當設(shè)定第一成像模式時按下的按鈕。注意,第一成像模式將參考圖8A-14B詳細說明。第二成像模式設(shè)定按鈕342是當設(shè)定第二成像模式時按下的按鈕。注意,第二成像模式將參考圖16A-19B詳細說明。第三成像模式設(shè)定按鈕 343是當設(shè)定第三成像模式時按下的按鈕。注意,第三成像模式將參考圖20A-2;3B詳細說明。第四成像模式設(shè)定按鈕344是當設(shè)定第四成像模式時按下的按鈕。注意,第四成像模式將在本公開的第二實施例中詳細說明。確定按鈕345是在進行選擇第一到第四成像模式之一的按下操作時按下的按鈕, 從而確定所述選擇。另外,與利用確定按鈕345的按下操作確定的成像模式相關(guān)的信息(成像模式信息)被輸出給控制單元190,以便保存。返回按鈕346是在返回當前屏幕之前的顯示屏幕的情況下按下的按鈕。圖7B圖解說明基準位置設(shè)定屏幕350。基準位置設(shè)定屏幕350是當設(shè)定全景圖像中的基準位置時,顯示在輸入/輸出面板200上的屏幕。例如,對于圖7A中所示的全景圖像成像模式設(shè)定屏幕340,在按下確定按鈕350之后,立即顯示基準位置設(shè)定屏幕350。對于基準位置設(shè)定屏幕350,設(shè)置基準位置指定條351,指定位置352,確定按鈕353和返回按鈕 354?;鶞饰恢弥付l351是用于設(shè)定全景圖像中的基準位置,并與指定位置352重疊顯示的條。例如,利用基準位置指定條351,用戶把基準位置指定條351移動到期望的基準位置,從而能夠指定全景圖像中的基準位置。例如,在標準(180° )被設(shè)定成圖像大小的情況下,在基準位置指定條351的兩端之一顯示“-90° ”,在另一端顯示“90° ”。另外對于基準位置指定條351,按一定的間隔顯示“-60°,,、“-30°,,、“0°,,、“30°,,和“60° ”。這里, 基準位置意味全景圖像中,用戶意圖使期望的被攝物體位于的位置。例如,在水平方向被設(shè)定為擺動方向的情況下,全景圖像中的水平方向中的位置變成基準位置。另外,本例表示利用用戶的操作設(shè)定全景圖像中的基準位置的例子,不過,可以預先設(shè)定所述基準位置。例如,中心位置(即,0°的位置)可被設(shè)定為基準位置。確定按鈕353是在進行指定全景圖像中的基準位置的指定操作,然后確定所述指定時按下的按鈕。另外,與利用確定按鈕353的按下操作確定的基準位置相關(guān)的信息(基準位置信息)被輸出給控制單元190,以便保存。返回按鈕3M是在返回當前屏幕之前的顯示屏幕的情況下按下的按鈕。第一成像模式下的成像控制例子圖8A-14B是示意地圖解說明按照本公開的第一實施例的成像設(shè)備100的取向,和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。具體地說,在圖8A,9A,10A, 11A,12A,13A和14A中圖解說明了成像設(shè)備100的取向的轉(zhuǎn)變例子,在圖8B,9B,10B,11B, 12B,1 和14B中圖解說明了隨著成像設(shè)備100的取向的變化,顯示在輸入/輸出面板200 上的顯示屏幕的轉(zhuǎn)變例子。另外,圖8A-14B圖解說明在設(shè)定了第一成像模式,從左向右的擺動操作被設(shè)定為擺動方向,并且標準(180° )被設(shè)定為圖像大小的情況下的成像操作例子。另外,圖8A-14B圖解說明在中心位置(S卩,基準位置指定條351上的“0° ”位置)被設(shè)定為全景圖像中的基準位置的情況下的成像操作例子。圖8A簡化地圖解說明從上方觀察成像設(shè)備100和用雙手拿著成像設(shè)備100的用戶415的情況。在這種情況下,假定用戶415在查看顯示在輸入/輸出面板200上的被攝物體的時候,確認全景圖像中的基準位置(中心位置)。圖8B圖解說明在進行確定將位于全景圖像中的基準位置的被攝物體的確定操作之前,顯示的顯示屏幕300。顯示屏幕300和圖4中所示的顯示屏幕300相同,其中在消息顯示區(qū)312中顯示“在使鏡頭對準全景圖像中的基準位置時按下快門按鈕”。另外,就顯示屏幕300來說,以預覽圖像的形式顯示作為當前成像對象的被攝物體。另外,就本公開的第一實施例來說,表示其中利用快門按鈕210的按下操作,執(zhí)行全景圖像的成像操作的開始指令操作,和第一成像模式下的將位于基準位置的被攝物體的確定操作的例子。具體地說,在設(shè)定了第一成像模式的情況下,用戶415可通過確定將位于全景圖像中的基準位置的被攝物體,開始成像操作,而不必準確地識別全景圖像中的開始位置和終止位置。圖9A簡略地圖解說明在圖8A中所示狀態(tài)下,用戶415按下快門按鈕210的情況。 另外在這個例子中,假定設(shè)定的圖像大小為θ3(=180° ),從基準位置421到成像操作的開始位置422的角度為θ 1( = 90° ),從基準位置421到成像操作的終止位置423的角度為θ 2( = 90° )。注意Θ1和θ 2是按照基準位置確定的。例如,在中心位置被設(shè)定為基準位置的情況下,θ 1 = θ 3/2和θ 2 = θ 3/2。另外,設(shè)想標準(180° )已被設(shè)定為圖像大小,并且除中心位置外的位置被設(shè)定為基準位置(例如,基準位置指定條351中的“30° ” 位置)的情況。在這種情況下,θ 1 = Θ3Χ (2/3)和θ 2 = Θ3Χ (1/3)。例如,設(shè)想在圖8Α中所示的狀態(tài)下,用戶按下了快門按鈕210的情況。在這種情況下,在把從所述按壓時的位置420起的光軸方向(基準位置421的方向)作為基準的情況下,根據(jù)設(shè)定的圖像大小θ 3,確定成像操作的開始位置422和終止位置423。具體地說, 如圖9Α中所示,按下快門按鈕210時的位置420被視為旋轉(zhuǎn)軸,沿著與擺動方向相反的方向旋轉(zhuǎn)角度θ 1的位置被確定為成像操作的開始位置422。類似地,按下快門按鈕210時的位置420被視為旋轉(zhuǎn)軸,沿著擺動方向旋轉(zhuǎn)角度θ 2的位置被確定為成像操作的終止位置 423。注意在圖9Α中,用虛線指示用戶415和成像設(shè)備100。圖9Β圖解說明在進行確定全景圖像中的基準位置的確定操作時顯示的顯示屏幕 360。顯示屏幕360是其中就圖4中所示的顯示屏幕來說,消除了聚焦框310和全景成像動作操作幫助圖像311,另外顯示箭頭361的顯示屏幕。另外,在消息區(qū)362中顯示“沿著箭頭方向擺動成像設(shè)備到開始位置”。這樣,在按下快門按鈕210之后,顯示屏幕360顯示在輸入/輸出面板200上,從而用戶415能夠按照顯示屏幕360,容易地把成像設(shè)備100移動到開始位置422。另外,在用戶415開始擺動操作之后,顯示在輸入/輸出面板200上的顯示屏幕例子將在圖IOB等中圖解說明。圖IOA簡略地圖解說明在圖9Α中所示的狀態(tài)下,用戶415沿著與擺動方向4 相反的方向,移動成像設(shè)備100的情況。圖IOB圖解說明在用戶415沿著箭頭425方向移動成像設(shè)備100之后,顯示在輸入/輸出面板200上的擺動操作幫助屏幕370。注意在按下快門按鈕210之后,成像設(shè)備100的移動由控制單元190根據(jù)來自取向檢測單元121的取向變化信息確定。對于擺動操作幫助屏幕370,設(shè)置擺動操作幫助圖像顯示區(qū)371,箭頭373,和消息顯示區(qū)374。另外,對于擺動操作幫助屏幕370,設(shè)置聚焦通知圖標375,快門速度通知圖標 376,F(xiàn)值通知圖標377和閃光禁止圖標378。擺動操作幫助圖像顯示區(qū)371是向用戶通知與全景圖像成像操作相關(guān)的用戶操作(成像設(shè)備100的擺動操作)的條形圖。具體地說,借助擺動操作幫助圖像顯示區(qū)371, 顯示對于全景圖像成像模式的整個操作量的當前操作位置372。例如,對于擺動操作幫助圖像顯示區(qū)371,根據(jù)時間軸上的相鄰圖像之間的移動量和移動方向的檢測結(jié)果,控制單元 190計算當前操作量,從而根據(jù)該當前操作量改變其顯示狀態(tài)。作為移動量和移動方向,檢測與隨同成像設(shè)備100的移動一起發(fā)生的整個圖像的運動對應(yīng)的運動向量(全局運動向量 (GMV))。另外,根據(jù)取向檢測單元121檢測的角速度,控制單元190計算當前操作量。另一方面,控制單元190可利用移動量和移動方向的檢測結(jié)果,和取向檢測單元121檢測的角速度,計算當前操作量。這樣,通過按照這種方式顯示擺動操作幫助圖像顯示區(qū)371,用戶能夠容易地認識到他必須進行擺動操作多長時間。另外,在用戶415開始擺動操作之后,立即在擺動操作幫助圖像顯示區(qū)371中的中心位置閃爍地顯示操作位置372。另外,閃爍地顯示的操作位置372隨著用戶進行的成像設(shè)備100的擺動操作(沿著箭頭425方向的擺動操作)而沿著向左的方向前進。在成像設(shè)備 100借助用戶415的擺動操作到達開始位置422之前,閃爍地顯示操作位置372。按照這種方式閃爍地顯示操作位置372,從而通知用戶,該移動不是全景圖像成像操作期間的移動, 而是用于全景圖像成像操作的準備的移動。另外,在成像設(shè)備100到達開始位置422,并且執(zhí)行了用戶415的全景圖像成像操作的開始指令操作的情況下,操作位置372的顯示模式從閃爍顯示變成正常顯示(常亮)。按照這種方式改變操作位置372的顯示模式,從而,用戶能夠容易地識別當前狀態(tài)是在全景圖像成像操作的準備期間,還是在全景圖像成像操作期間。另外,對于擺動操作幫助圖像顯示區(qū)371中的中心位置,顯示代表基準位置的基準位置標志379。就本例來說,在擺動操作幫助圖像顯示區(qū)371上附加虛線,作為基準位置標志379。另外,就本例來說,設(shè)定的圖像大小為180°,中心位置被設(shè)定為基準位置,從而, 基準位置標志379被附加到擺動操作幫助圖像顯示區(qū)371中的中心位置。例如,設(shè)想設(shè)定了除中心位置之外的位置(例如,基準位置指定條351中的“30° ”位置)的情況。在這種情況下,在擺動操作幫助圖像顯示區(qū)371中向右的位置(在縱向方向的長度被視為1的情況下,離左端4/6( = (90° +30° )/180° )的位置),附加基準位置標志379。箭頭373是用于幫助與全景圖像成像操作(成像設(shè)備100的擺動操作)相關(guān)的用戶操作的箭頭。即,用戶沿著箭頭373指定的方向擺動成像設(shè)備100,從而能夠執(zhí)行全景圖像成像操作及其準備。消息顯示區(qū)374是顯示幫助與全景圖像成像操作相關(guān)的用戶操作(成像設(shè)備100 的擺動操作)的消息的區(qū)域。聚焦信息圖標375是向用戶通知位于聚焦框中的被攝物體是否清晰的圖標。具體地說,如果被攝物體清晰,那么使聚焦信息圖標375變成綠色,如果被攝物體不清晰,那么使所述綠色閃爍。
快門速度通知圖標376是向用戶通知當前設(shè)定的快門速度的圖標。例如,如圖IOB 中所示,在顯示“20”作為快門速度通知圖標376的情況下,這意味目前設(shè)定的快門速度為 “1/20”。F值通知圖標377是把當前設(shè)定的F值通知用戶的圖標。例如,如圖IOB中所示, 在顯示“F3. 5”作為F值通知圖標377的情況下,這意味目前設(shè)定的F值為“F3. 5”。閃光禁止圖標378是向用戶通知在當前設(shè)定的成像模式中,禁止使用閃光的圖標。具體地說,只有在當前設(shè)定的成像模式中,禁止使用閃光的情況下,才顯示閃光禁止圖標378,在當前設(shè)定的成像模式中,未禁止使用閃光的情況下,不顯示閃光禁止圖標378。例如,在設(shè)定了全景圖像成像模式的情況下,禁止使用閃光,因而顯示閃光禁止圖標378。圖IlA簡略地圖解說明用戶415把成像設(shè)備100移動到成像操作的開始位置422 的情況。圖IlB圖解說明在用戶415把成像設(shè)備100移動到成像操作的開始位置422的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕380。注意,控制單元190根據(jù)來自取向檢測單元121的取向變化信息,判定成像設(shè)備100是否已到達開始位置422。擺動操作幫助屏幕380和圖IOB中所示的擺動操作幫助屏幕370的不同之處在于擺動操作幫助圖像顯示區(qū)371中的操作位置372閃爍地顯示在左端,同時箭頭373面向相反的方向。另外,在消息顯示區(qū)374中顯示“按下快門按鈕,然后沿著箭頭方向擺動成像設(shè)備”,通知信息313顯示在擺動操作幫助屏幕380的左端。這樣,在成像設(shè)備100移動到成像操作的開始位置422的情況下,顯示大意是通過沿著至今的擺動方向的相反方向,擺動成像設(shè)備100,開始成像操作的消息。注意,就本例來說,作為向用戶通知成像設(shè)備100已到達開始位置433的方法,表示了利用擺動操作幫助屏幕380中的消息,箭頭等,通知用戶的例子,不過可以采用另一種通知方法。例如,可以采用在擺動操作幫助屏幕380上顯示彈出消息的通知方法,和在擺動操作幫助屏幕380上顯示成像設(shè)備100的相對位置(例如,圖IlA中所示的示意圖)的通知方法。另外,例如,可以采用按照音頻的通知方法(例如,按照系統(tǒng)聲音的通知)。就按照音頻的通知方法來說,例如,當成像設(shè)備100逼近開始位置422時,可以縮短音頻“嗶,嗶, 嗶”的間隔(例如,“嗶-嗶-嗶”)。在這種情況下,當?shù)竭_開始位置422時,可以采用通過輸出另一音頻(例如“到達開始位置! ”)的通知方法。這樣,在成像設(shè)備100被移動到成像操作的開始位置422,并且擺動操作幫助屏幕 380被顯示在輸入/輸出面板200上之后,當用戶415按下快門按鈕210時,開始全景圖像成像操作。另外,當開始全景圖像成像操作時,操作位置372從閃爍顯示變成常亮狀態(tài)。另夕卜,操作位置372隨成像設(shè)備100的移動而移動。注意,就本例來說,用戶415對快門按鈕210的按壓操作被當作全景圖像成像操作的開始條件,不過可以采用另一個開始條件。例如,檢測成像設(shè)備100沿著相反方向的移動可被當作所述開始條件。按照,當開始全景圖像成像操作時,操作位置372隨成像設(shè)備100的移動而移動。 該例子示于圖12A-i;3B中。圖12A和13A圖解說明在成像操作的開始位置422和成像操作的終止位置423之間移動的成像設(shè)備100的轉(zhuǎn)變。
圖12B和13B圖解說明當成像設(shè)備100在成像操作的開始位置422和成像操作的終止位置423之間移動時,顯示的擺動操作幫助圖像381和382。這樣,在成像設(shè)備100從成像操作的開始位置422開始成像操作之后,按照成像設(shè)備100的移動,顯示擺動操作幫助圖像381和382,直到成像設(shè)備100到達成像操作的終止位置423為止。另外,如果在所述移動的時候,成像設(shè)備100到達了相當于基準位置421的位置,那么在消息顯示區(qū)374中顯示諸如“當前被攝物體位于全景圖像的中心”之類的消息。圖14A簡略地圖解說明用戶415把成像設(shè)備100移動到成像操作的終止位置423 的情況。圖14B圖解說明在用戶415把成像設(shè)備100移動到成像操作的終止位置423時, 顯示在輸入/輸出面板200上的擺動操作幫助屏幕383。如圖14B中所示,在成像設(shè)備100 已移動到成像操作的終止位置的情況下,在消息顯示區(qū)374中顯示大意是成像操作已完成的消息。擺動操作幫助屏幕383與圖12B和13B中所示的擺動操作幫助屏幕381和382的不同之處在于擺動操作幫助圖像顯示區(qū)371中的操作位置372被顯示在右端,并且消除了箭頭373。另外,在消息顯示區(qū)374中顯示“全景圖像成像操作已完成”,并且通知信息313 被顯示在擺動操作幫助屏幕370中的右端。這樣,在成像設(shè)備100移動到成像操作的終止位置423的情況下,顯示大意是全景圖像成像操作已完成的消息。另外,全景圖像生成單元132利用所述成像操作生成的多個圖像,生成全景圖像。在完成全景圖像成像操作之后,記錄控制單元192把生成的全景圖像記錄在記錄介質(zhì)180中。另外,例如,在結(jié)束全景圖像成像操作以來過去一段時期之后,生成的全景圖像可被預覽顯示在輸入/輸出面板200上。這樣,在位于基準位置的被攝物體被作為基準的情況下,進行成像控制,從而能夠容易地生成用戶中意的全景圖像。注意在成像設(shè)備100從成像操作的開始位置422移動到成像操作的終止位置423 的時候,可能不能正確地進行用戶的擺動操作。這種情況下,可以做出顯示圖15中所示的擺動操作幫助屏幕385,從而提示用戶正確地進行擺動操作的安排。圖15是圖解說明按照本公開的第一實施例,顯示在輸入/輸出面板200上的擺動操作幫助屏幕的例子的示圖。圖15中所示的擺動操作幫助屏幕385是在當成像設(shè)備100 從成像操作的開始位置422移動到成像操作的終止位置423的時候,未正確地進行用戶的擺動操作的情況下,顯示在輸入/輸出面板200上的顯示屏幕。擺動操作幫助屏幕385與圖12A和13A中所示的擺動操作幫助屏幕381和382的不同之處在于顯示警告顯示386,和在消息顯示區(qū)374中顯示“正確并直進地進行擺動操作”。注意在用戶未正確進行擺動操作的情況下,可提示用戶在再次返回成像操作的開始位置422之后,開始全景圖像成像操作。在這種情況下,例如,在輸入/輸出面板200上顯示圖IOB和IlB中所示的擺動操作幫助屏幕370和380,從而使得能夠開始全景圖像成像操作。第二成像模式下的成像控制例子至此表示了其中預先設(shè)定圖像大小,根據(jù)將位于基準位置的被攝物體的確定操作計算成像操作的開始位置和終止位置,根據(jù)這些開始位置和終止位置進行全景圖像成像操
19作的例子。下面,將表示其中根據(jù)成像設(shè)備100從基準位置到成像操作的開始位置的移動范圍,計算成像操作的終止位置(圖像大小),并根據(jù)該終止位置進行全景圖像成像操作的例子。圖16A-19B是示意地圖解說明按照本公開的第一實施例的成像設(shè)備100的取向和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。具體地說,圖16A,17A,18A和 19A圖解說明成像設(shè)備100的取向的轉(zhuǎn)變例子,圖16B,17B, 18B和19B圖解說明將隨著成像設(shè)備100的取向的變化而顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子。另外,就圖 16A-19B來說,將表示其中設(shè)定了第二成像模式,進行了從左向右執(zhí)行擺動操作作為擺動方向的設(shè)定,并且把標準(180° )設(shè)定為圖像大小的成像操作例子。注意在設(shè)定了第二成像模式的情況下,根據(jù)成像設(shè)備100從基準位置到成像操作的開始位置的移動范圍,確定圖像大小,從而未預先設(shè)定圖像大小。另外,就圖16A-19B來說,將表示在中心位置(S卩,基準位置指定條351上的“0° ” 位置)被設(shè)定為全景圖像中的基準位置的情況下的成像操作例子。注意,圖16A-19B中所示的例子是已被部分修改的圖8A-14B中的例子,因而,將用相同的附圖標記表示與圖8A-14B 共有的部分,這些說明的一部分將被省略。首先,如圖8A中所示,雙手拿著成像設(shè)備100的用戶415在查看顯示在輸入/輸出面板200上的被攝物體的時候,確認將位于全景圖像中的基準位置(中心位置)的被攝物體。在這種情況下,如圖8B中所示,顯示屏幕300被顯示在輸入/輸出面板200上。另夕卜,就本公開的第一實施例來說,將表示其中利用快門按鈕210的按下操作,執(zhí)行全景圖像成像操作的開始指令操作,和在第二成像模式下,將位于基準位置的被攝物體的確定操作的例子。圖16A簡略地圖解說明在圖8A中所示的狀態(tài)下,用戶415按下快門按鈕210的情況。在這種情況下,從所述按下時的位置430沿著光軸方向的位置被確定為基準位置431。 另外,在設(shè)定了圖像大小的情況下,按照和第一成像模式相同的方式,根據(jù)所述圖像大小確定成像操作的開始位置和終止位置,不過為了便于描述,這里將省略它們的說明。圖16B圖解說明在進行確定將位于全景圖像中的基準位置的被攝物體的確定操作時,顯示的顯示屏幕390。顯示屏幕390大體上和圖9B中所示的顯示屏幕360相同,不過區(qū)別在于在消息顯示區(qū)362中顯示“沿著箭頭方向擺動成像設(shè)備,和在充當全景圖像的左端的位置按下快門按鈕”。這樣,在按下快門按鈕210之后,顯示屏幕390被顯示在輸入/ 輸出面板200上,從而用戶415能夠按照顯示屏幕390,容易地把成像設(shè)備100移動到充當全景圖像的左端的位置。另外,在用戶415開始擺動操作之后,顯示在輸入/輸出面板200 上的顯示屏幕將示于圖17B等中。圖17A簡略地圖解說明從圖16A中所示的狀態(tài),用戶415沿著擺動方向432的相反方向(箭頭433方向)移動成像設(shè)備100的情況。圖17B圖解說明在用戶415沿著箭頭433方向移動成像設(shè)備100之后,顯示在輸入/輸出面板200上的擺動操作幫助屏幕39L。動操作幫助屏幕391大體上和圖IOB中所示的擺動操作幫助屏幕370相同,不過區(qū)別在于在消息顯示區(qū)374中顯示“沿著箭頭方向擺動成像設(shè)備,和在充當全景圖像的左端的位置按下快門按鈕”。另外,在沒有設(shè)定圖像大小的情況下,根據(jù)虛擬的圖像大小(例如,180° ),確定成像操作的開始位置和終止位置。根
20據(jù)所述開始位置和終止位置,在擺動操作幫助圖像顯示區(qū)371中顯示當前的操作位置372。圖18A簡略地圖解說明用戶415把成像設(shè)備100移動到充當全景圖像的左端的位置(開始位置434)的情況?,F(xiàn)在,設(shè)想在圖18A中所示的狀態(tài)下,用戶415按下快門按鈕210。在這種情況下,根據(jù)所述按下時的位置(開始位置434),確定成像操作的終止位置 435。具體地說,從基準位置431到成像操作的開始位置434的角度將被作為θ 4。另外,例如,在從基準位置431到成像操作的終止位置435的角度被作為θ 5,中心位置已被設(shè)定為基準位置的情況下,Θ4 = θ 5,因而,角度Θ6( = 2Χ θ 4)被確定為圖像大小。另外,設(shè)想除中心位置之外的位置(例如,基準位置指定條351中的“30° ”位置)已被設(shè)定為基準位置。在這種情況下,角度Θ6(= Θ4Χ2-30。Χ2)被確定為圖像大小。這樣,在圖18Α中所示的狀態(tài)下用戶415按下快門按鈕210的情況下,根據(jù)所述按下時的位置(開始位置434),確定成像操作的終止位置435。注意在圖18Α中用虛線圖解說明用戶415和成像設(shè)備100。圖18Β圖解說明在用戶415把成像設(shè)備100移動到充當全景圖像的左端的位置 (開始位置434),并且按下快門按鈕210的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕392。擺動操作幫助屏幕392大體上與圖IlB中所示的擺動操作幫助屏幕380 相同,不過區(qū)別在于在消息顯示區(qū)374中顯示“已開始全景圖像成像操作,從而沿箭頭方向擺動成像設(shè)備”。這樣,在成像設(shè)備100已被移動到成像操作的開始位置,并且按下了快門按鈕210 的情況下,確定成像操作的終止位置。顯示大意是通過沿著至今的擺動方向的相反方向,擺動成像設(shè)備100,開始成像操作的消息。這樣,當成像設(shè)備100被移動到成像操作的開始位置434,并且用戶415按下快門按鈕210時,在輸入/輸出面板200上顯示擺動操作幫助屏幕392,并開始全景圖像成像操作。另外,當開始全景圖像成像操作時,操作位置372從閃爍顯示變成常亮狀態(tài)。另外,操作位置372隨成像設(shè)備100的移動而移動。注意,就本例來說,用戶415的快門按鈕210的按下操作將被作為全景圖像成像操作的開始條件,不過可以采用另一種開始條件。例如,可以采用檢測成像設(shè)備100沿著相反方向的移動作為開始條件。注意,成像設(shè)備100沿著相反方向的移動的檢測,由控制單元 190根據(jù)來自取向檢測單元121的取向變化信息確定。另外,在開始全景圖像成像操作之后的成像操作大體上與圖12Α-14Β中所示的例子相同,因而,這里將省略對它們的說明。注意,就圖18Α和18Β中所示的例子來說,表示了確定小于180°的圖像大小的例子,不過可按照用戶的操作,確定另一個圖像大小。在圖19Α和19Β中,表示其中確定等于或大于180°的圖像大小的例子。圖19Α簡略地圖解說明用戶415把成像設(shè)備100移動到充當全景圖像的左端的位置(開始位置436)的情況。注意,圖像大小θ 9的計算方法,終止位置437的確定方法等與圖18Α相同。圖19Β圖解說明在用戶415把成像設(shè)備100移動到充當全景圖像的左端的位置 (開始位置436)的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕393。這樣,利用在確定將位于基準位置的被攝物體之后,成像設(shè)備100的擺動操作能夠容易地生成具有用戶中意的圖像大小的全景圖像。注意,就第一成像模式和第二成像模式來說,在成像設(shè)備100到達成像操作的開始位置之前,確定將位于基準位置的被攝物體。不過,在從開始位置到終止位置的擺動操作內(nèi)的成像操作期間,可利用圖像處理調(diào)整將位于基準位置的被攝物體。例如,全景圖像生成單元132獲得并保存在確定將位于基準位置的被攝物體時的圖像(或其一部分),并進行在從開始位置到終止位置的擺動操作期間的每個圖像和所述保存圖像之間的匹配處理。根據(jù)保存圖像和擺動操作期間相當于基準位置和與基準位置鄰近的位置的圖像之間的匹配處理的結(jié)果,可以調(diào)整終止位置,以使確定的被攝物體位于基準位置。第三成像模式下的成像控制例子至此說明了其中在全景圖像成像操作之前,確定將位于基準位置的被攝物體的例子。下面,表示其中在開始成像操作之后,確定要位于基準位置的被攝物體,根據(jù)該確定操作計算成像操作的終止位置(圖像大小),并根據(jù)該終止位置進行全景圖像成像操作的例子。圖20A-2;3B是示意圖解說明按照本公開的第一實施例的成像設(shè)備100的取向和顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子的示圖。具體地說,圖20A,21A,22A 和23A圖解說明成像設(shè)備100的取向的轉(zhuǎn)變例子,圖20B,21B,22B和23B圖解說明隨著成像設(shè)備100的取向的變化,顯示在輸入/輸出面板200上的顯示屏幕的轉(zhuǎn)變例子。另外,圖 20A-23B圖解說明在設(shè)定了第三成像模式,設(shè)定了從左向右進行擺動操作,作為擺動方向的設(shè)定,和設(shè)定標準(180° )作為圖像大小的情況下的成像操作例子。注意,在設(shè)定了第三成像模式的情況下,根據(jù)在開始成像操作之后確定的基準位置,確定圖像大小,從而,不必預先設(shè)定圖像大小。另外,圖20A-23B圖解說明在中心位置(即,基準位置指定條351上的“0° ”位置)被設(shè)定為全景圖像中的基準位置的情況下的成像操作例子。注意,圖20A-23B中所示的例子是部分被修改的圖8A-14B中的例子,從而,將用相同的附圖標記表示與圖8A-14B共有的部分,這些說明的一部分將被省略。圖20A簡略地圖解說明從上方觀察成像設(shè)備100和用雙手拿著成像設(shè)備100的用戶415的情況。在這種情況下,假定用戶415在查看顯示在輸入/輸出面板200上的被攝物體時,確認全景圖像的左端的位置。圖20B圖解說明在全景圖像成像操作的開始指令操作之前顯示的顯示屏幕450。 顯示屏幕450與圖4中所示的顯示屏幕300相同,在消息顯示區(qū)312中顯示“在把鏡頭對準全景圖像中的左端位置時按下快門按鈕”。另外,充當成像對象的被攝物體由成像單元112 以預覽圖像的形式,顯示在顯示屏幕450上。另外,就本公開的第一實施例來說,表示其中利用快門按鈕210的按下操作,執(zhí)行全景圖像成像操作的開始指令操作,將位于第三成像模式下的基準位置的被攝物體的確定操作的例子。具體地說,在設(shè)定了第三成像模式的情況下,在開始全景圖像的成像操作之后,用戶415確定將位于全景圖像中的基準位置的被攝物體。從而,即使沒有準確地識別全景圖像中的終止位置,用戶也能夠進行成像操作。圖21A圖解說明在圖20A中所示的狀態(tài)下,用戶415按下快門按鈕210的情況。在這種情況下,從所述處理時的位置440沿著光軸方向的位置被確定為全景圖像成像操作的開始位置441。另外,在設(shè)定了圖像大小(例如,角度θ 10)的情況下,按照和第一成像模式的情況相同的方式,根據(jù)所述圖像大小確定成像操作的終止位置442。另外,在未設(shè)定圖像大小的情況下,根據(jù)虛擬的圖像大小(例如,180° ),確定成像操作的終止位置。圖21Β圖解說明在用戶415按下快門按鈕210的情況下,顯示在輸入/輸出面板 200上的擺動操作幫助屏幕451。擺動操作幫助屏幕451 —般與圖IlB中所示的擺動操作幫助屏幕380相同,不過具體的不同之處在于在消息顯示區(qū)374中顯示“已開始全景圖像成像操作,從而沿箭頭方向擺動成像設(shè)備,隨后在基準位置按下快門按鈕”。隨后根據(jù)開始位置441和終止位置442,顯示擺動操作幫助顯示區(qū)371中的當前操作位置372。圖22Α簡略地圖解說明利用快門按鈕210的按下,用戶確定了將位于基準位置的被攝物體的情況。這樣,當用戶415在圖22Α中所示的狀態(tài)下,按下快門按鈕210時,根據(jù)所述按下時的位置(基準位置444),確定成像操作的終止位置445。具體地說,從開始位置 441到基準位置444.的角度被視為θ 11。另外,例如,在從基準位置444到終止位置445 的角度被視為θ 12,并且中心位置已被設(shè)定為基準位置的情況下,θ 11 = θ 12,因而,角度 θ 13( = 2X θ 11)被確定為圖像大小。另外,設(shè)想除中心位置外的位置(例如,基準位置指定條351中的“30° ”位置)被設(shè)定為基準位置的情況。在這種情況下,角度θ 13( = θ 11X2-30° X 2)被確定為圖像大小。這樣,在圖22Α中所示狀態(tài)下,用戶415按下快門按鈕210的情況下,根據(jù)在所述按下時的位置(基準位置444),確定成像操作的終止位置445。注意,圖22Α中用虛線圖解說明用戶415和成像設(shè)備100。圖22Β圖解說明在用戶415通過按下快門按鈕210,確定將位于基準位置的被攝物體的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕452。擺動操作幫助屏幕452大體上與圖IlB中所示的擺動操作幫助屏幕380相同,不過區(qū)別在于在消息顯示區(qū) 374中顯示“已確定全景圖像中的基準位置。沿著箭頭方向擺動成像設(shè)備,直到發(fā)出成像操作結(jié)束指令為止”。這樣,在利用用戶415的按壓操作,確定要位于基準位置的被攝物體的情況下,成像操作的終止位置被確定,并顯示大意是通過擺動成像設(shè)備100 —直到成像操作的終止位置,繼續(xù)成像操作的消息。注意,就本例來說,用戶415對快門按鈕210的按下操作被作為要位于基準位置的被攝物體的確定方法,不過可以采用另一種確定方法(例如,采用另一個操作部件的確定方法)。到結(jié)束全景圖像成像操作之前的成像操作大體上與圖12Α-14Β中所示的例子相同,因而,這里將省略其說明。注意,就圖22Α中所示的例子來說,表示了其中確定較小的圖像大小(小于 180° )的例子,不過可以按照用戶的操作,確定另一個圖像大小。在圖23Α和23Β中,表示了其中確定較大的圖像大小(等于或大于180° )的例子。圖23Α簡略地圖解說明用戶415通過按下快門按鈕210,確定了將位于基準位置的被攝物體的情況。注意,圖像大小θ 16的計算方法,終止位置447的確定方法等與圖22Α 相同。圖2 圖解說明在用戶415通過按下快門按鈕210,確定了將位于基準位置的被攝物體的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕453。這樣,利用在確定要位于基準位置的被攝物體之后的成像設(shè)備100的擺動操作, 能夠容易地生成具有用戶中意的圖像大小的全景圖像。如上所述,按照本公開的第一實施例,在生成一定范圍內(nèi)的全景圖像的情況下,可以消除利用用戶的目視估計的構(gòu)圖決定。例如,通過確定要位于基準位置的被攝物體,可以進行全景圖像的生成,從而能夠防止為獲得期望的構(gòu)圖而試錯地重復攝影。即,按照本公開的第一實施例,能夠容易地生成用戶中意的全景圖像。注意,就本公開的第一實施例來說,表示了其中通過確定全景圖像成像操作的開始位置或終止位置進行成像操作的例子,不過可通過關(guān)于設(shè)定的基準位置動態(tài)地剪裁圖像數(shù)據(jù),進行成像控制。例如,就其中預先確定圖像大小的系統(tǒng),和其中成像范圍存在上限的系統(tǒng)來說,可通過對于設(shè)定的基準位置動態(tài)地剪裁圖像數(shù)據(jù)進行成像控制,以致生成全景圖像。在這種情況下,例如,在從全景圖像成像操作的開始位置起的累積圖像數(shù)據(jù)中,不使用在關(guān)于基準位置的成像范圍外的圖像數(shù)據(jù)。另外,設(shè)想其中在設(shè)定了第三成像操作的情況下,在用戶進行要位于基準位置的被攝物體的確定操作之前,圖像大小或成像范圍已達到上限的情況。在這種情況下,例如,可以選擇在此時結(jié)束成像操作,或者一邊丟棄超出成像范圍一半的圖像數(shù)據(jù),一邊繼續(xù)成像操作。成像設(shè)備的操作例子下面參考附圖,說明按照本公開的第一實施例的成像設(shè)備100的操作。第一成像模式下的操作例子圖M是圖解說明按照本公開的第一實施例的成像設(shè)備100的成像控制處理的處理過程的例子的流程圖。本例將說明在設(shè)定第一成像模式情況下的處理過程的例子。首先,控制單元190判定是否存在將位于基準位置的被攝物體的確定操作(步驟 S901),在未進行所述確定操作的情況下,繼續(xù)進行監(jiān)視。另一方面,在進行了所述確定操作的情況下(步驟S901),控制單元190根據(jù)所述確定操作時的位置(基準位置),確定全景圖像成像操作的開始位置和終止位置(步驟S902)。注意,步驟S901是確定過程的例子。隨后,顯示控制單元191在控制單元190的控制下,控制顯示單元141顯示指導屏幕(例如,圖9B中所示的顯示屏幕360,圖IOB中所示的擺動操作幫助屏幕370),一直到確定的所述開始位置(步驟S903)。注意,該指導屏幕將隨著成像設(shè)備100的取向的變化而被順序改變。隨后,取向檢測單元121檢測成像設(shè)備100的取向的變化(步驟S904),控制單元 190根據(jù)檢測的取向變化,判定是否正確地進行了擺動操作。如果未進行正確的擺動操作 (步驟S9(^),那么顯示控制單元191在控制單元190的控制下,顯示出錯屏幕(步驟S916), 并結(jié)束成像控制處理的操作。另一方面,在進行了正確的擺動操作的情況下(步驟S905), 控制單元190判定成像設(shè)備100是否已到達開始位置(步驟S906)。如果成像設(shè)備100未到達開始位置(步驟S906),那么處理返回步驟S903。另一方面,在成像設(shè)備100到達開始位置的情況下(步驟S906),顯示控制單元 191在控制單元190的控制下,控制顯示單元141顯示指示成像設(shè)備100已到達開始位置的顯示屏幕(步驟S907)。例如,該顯示屏幕是圖IlB中所示的擺動操作幫助屏幕380。之后,判定是否執(zhí)行了成像操作的開始指令操作(步驟S908),在未執(zhí)行成像操作的開始指令操作的情況下,顯示控制單元191繼續(xù)進行監(jiān)視。另一方面,在進行了成像操作的開始指令操作的情況下(步驟S908),顯示控制單元191在控制單元190的控制下,控制顯示單元141顯示一直到終止位置的指導屏幕(步驟S909)。注意,該指導屏幕例如是圖 12B中所示的擺動操作幫助屏幕381,將隨著成像設(shè)備100的取向的變化而被順序改變。之后,取向檢測單元121檢測成像設(shè)備100的取向的變化(步驟S910),然后控制單元190根據(jù)檢測的取向變化,判定是否進行了正確的擺動操作(步驟S911)。在未進行正確的擺動操作的情況下(步驟S911),處理進入步驟S916。另一方面,在進行了正確的擺動操作的情況下(步驟S911),成像單元112在控制單元190的控制下,進行生成全景圖像的圖像成像處理(步驟S912)。注意,步驟S904和S910是取向檢測過程的例子。另外,步驟 S912是控制過程的例子。之后,控制單元190判定成像設(shè)備100是否到達終止位置(步驟S913)。如果成像設(shè)備100未到達終止位置(步驟S913),那么處理返回步驟S909。另一方面,在成像設(shè)備100到達終止位置的情況下(步驟S913),顯示控制單元 191在控制單元190的控制下,顯示大意是成像操作已完成的顯示屏幕(步驟S914)。該顯示屏幕例如是圖14B中所示的擺動操作幫助屏幕383。之后,全景圖像生成單元132利用成像操作生成的多個圖像生成全景圖像,記錄控制單元192把生成的全景圖像記錄在記錄介質(zhì)180中(步驟S915)。第二成像模式下的操作例子圖25是圖解說明按照本公開的第一實施例的成像設(shè)備100的成像控制處理的處理過程的例子的流程圖。本例圖解說明在設(shè)定第二成像模式情況下的處理過程的例子。另夕卜,該處理過程是圖M的變形,因此,用相同的附圖標記表示與圖M共有的部分,并省略其說明。在進行了要位于基準位置的被攝物體的確定操作的情況下(步驟S901),控制單元190根據(jù)所述確定操作時的位置(基準位置),確定全景圖像成像操作的開始位置(步驟 S921)。另外,在進行了正確的擺動操作的情況下(步驟S905),控制單元190判定是否進行了全景圖像成像操作的開始指令操作(步驟S922)。如果未進行全景圖像成像操作的開始指令操作(步驟S922),那么處理返回步驟S903。另一方面,如果進行了全景圖像成像操作的開始指令操作(步驟S922),那么控制單元190判定根據(jù)所述開始指令操作時的位置,確定全景圖像成像操作的終止位置(步驟 S923)。第三成像模式下的操作例子圖沈是圖解說明按照本公開的第一實施例的成像設(shè)備100的成像控制處理的處理過程的例子的流程圖。本例圖解說明在設(shè)定第三成像模式情況下的處理過程的例子。另夕卜,該處理過程是圖M的的變形,因而,用相同的附圖標記表示與圖M共有的部分,并省略其說明。首先,控制單元190判定是否進行了全景圖像成像操作的開始指令操作(步驟 S931),如果未進行景圖像成像操作的開始指令操作,那么不斷進行監(jiān)視。另一方面,如果進行了全景圖像成像操作的開始指令操作(步驟S931),那么控制單元190根據(jù)在所述開始指令操作時的位置,確定全景圖像成像操作的終止位置(步驟S932)。另外,控制單元190判定是否進行了要位于基準位置的被攝物體的確定操作(步驟S933),如果未進行所述確定操作,那么處理進入步驟S911。另一方面,如果進行了所述確定操作(步驟S933),那么控制單元190根據(jù)在所述確定操作時的位置(基準位置),重新確定全景圖像成像操作的終止位置,然后處理進入步驟S911。2.第二實施例本公開的第一實施例表示了其中根據(jù)利用用戶操作確定要位于全景圖像中的基準位置的被攝物體的確定操作,進行成像控制的例子。不過,就整個全景圖像中的被攝物體的布局來說,可以假定用戶在查看整個全景圖像和被攝物體之間的相互關(guān)系的時候,確定所述布局。于是,本公開的第二實施例將表示其中在構(gòu)圖幫助圖像中設(shè)置代表基準被攝物體的標識,然后控制全景圖像成像操作,以致獲得用戶期望的構(gòu)圖的例子。注意,按照本公開的第二實施例的成像設(shè)備的結(jié)構(gòu)大體上與圖1和2中所示的例子相同。因而,用相同的附圖標記表示與本公開的第一實施例共有的部分,并省略其一部分的說明。圖2中所示的控制單元190根據(jù)來自操作接收單元151的操作信號,和來自取向檢測單元121的取向變化信息,控制成像設(shè)備100的各個單元。例如,在收到顯示構(gòu)圖幫助圖像(例如,圖27B中所示的構(gòu)圖幫助圖像顯示區(qū)601)的顯示指令操作的情況下,控制單元190控制顯示單元141顯示構(gòu)圖幫助圖像。所述構(gòu)圖幫助圖像是用于確定全景圖像的構(gòu)圖的圖像。另外,所述構(gòu)圖幫助圖像以進行全景圖像成像操作時成像設(shè)備100的移動方向(擺動方向)和構(gòu)圖幫助圖像中的縱向方向大體匹配的狀態(tài),被顯示在顯示單元141上。 另外,控制單元190在構(gòu)圖幫助圖像的縱向方向的移動方向的開始位置,設(shè)置人型圖標(例如,圖27B中所示的人型圖標60 ,并控制顯示單元141顯示所述人型圖標。所述人型圖標是代表在收到其顯示指令操作時,充當成像單元112的成像對象的被攝物體(基準被攝物體)在全景圖像中的位置的基準被攝物體標識。另外,控制單元190進行根據(jù)朝著移動方向(擺動方向)的相反方向前進的成像設(shè)備100的取向的變化,把構(gòu)圖幫助圖像中的人型圖標從開始位置移動到另一端部的控制。另外,例如,構(gòu)圖幫助圖像大體為矩形,其縱向方向的尺寸與在拍攝全景圖像時成像設(shè)備100沿著移動方向的移動范圍匹配。另外,控制單元190在與全景圖像的縱向方向的基準位置對應(yīng)的構(gòu)圖幫助圖像的位置,附加代表基準位置的基準位置標識(例如,圖27B中所示的基準位置標志604),并顯示構(gòu)圖幫助圖像。另外,在收到指令開始全景圖像成像操作的開始指令操作的情況下,控制單元190 以收到所述開始指令操作的位置作為全景圖像成像操作的開始位置,開始全景圖像成像操作。另外,控制單元190根據(jù)所述開始位置,確定全景圖像成像操作的終止位置。另外,在收到所述開始指令操作的情況下,控制單元190消除構(gòu)圖幫助圖像,并且一直到所述終止位置顯示用于改變成像設(shè)備100的取向的操作幫助圖像。顯示控制單元191在控制單元190的控制下,控制顯示單元141顯示圖像。當設(shè)定全景圖像成像模式時的顯示屏幕例子圖27A和27B是圖解說明按照本公開的第二實施例,顯示在輸入/輸出面板200 上的顯示屏幕例子的示圖。圖27A圖解說明在全景圖像成像操作的開始指令操作之前顯示的顯示屏幕315。顯示屏幕315和圖4中所示的顯示屏幕300相同,在消息顯示區(qū)316中顯示“在面對基準被攝物體的時候半按下快門按鈕,以鎖定AF”。另外,充當成像單元112的成像對象的被攝物體顯示在顯示屏幕315上。圖27B圖解說明擺動操作幫助屏幕600。擺動操作幫助屏幕600是當在顯示圖27A 中所示的顯示屏幕315的狀態(tài)下,半按下快門按鈕210時顯示的顯示屏幕,并且一直顯示到開始全景圖像成像操作為止。注意,本公開的第二實施例將表示其中利用快門按鈕210的半按下操作,執(zhí)行擺動操作幫助屏幕600的顯示指令操作,和利用快門按鈕210的全按下操作,執(zhí)行全景圖像成像操作的開始指令操作的例子。具體地說,就擺動操作幫助屏幕600來說,設(shè)置有構(gòu)圖幫助圖像顯示區(qū)601和消息顯示區(qū)605。注意,聚焦通知圖像375,快門速度通知圖像376,F(xiàn)值通知圖標377和閃光禁止圖標378與圖IOB等中所示的相同,因而用相同的附圖標記表示,并且這里省略其說明。構(gòu)圖幫助圖像顯示區(qū)601是在確定全景圖像中的基準被攝物體的位置時使用的條形顯示區(qū)。在成像設(shè)備100進行全景圖像成像操作時的移動方向(擺動方向)大體與構(gòu)圖幫助圖像的縱向方向匹配的狀態(tài)下,顯示構(gòu)圖幫助圖像顯示區(qū)601。這里,基準被攝物體是當在呈現(xiàn)顯示屏幕315的狀態(tài)下,半按下快門按鈕210時,顯示在顯示屏幕的中央的被攝物體,基準被攝物體的一個例子是圖28k中所示的牛的塑像401。另外,在構(gòu)圖幫助圖像顯示區(qū)601中顯示虛擬代表基準被攝物體所位于的全景圖像的位置的人型圖標602,所述基準被攝物體是利用開始成像操作前的用戶操作確定的。人型圖標602隨著成像設(shè)備100的取向的變化而在構(gòu)圖幫助圖像顯示區(qū)601中移動。具體地說,在設(shè)定了從左向右進行擺動操作的設(shè)置的情況下,當在呈現(xiàn)顯示屏幕 315的狀態(tài)下,半按下快門按鈕210時,人型圖標602位于構(gòu)圖幫助圖像顯示區(qū)601中的左端。人型圖標602然后隨著成像設(shè)備100的取向的變化(從右向左變化),在構(gòu)圖幫助圖像顯示區(qū)601中從左向右移動。另外,在構(gòu)圖幫助圖像顯示區(qū)601中顯示代表該移動方向的虛線箭頭603。在構(gòu)圖幫助圖像顯示區(qū)601中顯示代表全景圖像中的基準位置的基準位置標志 604。本例表示其中在構(gòu)圖幫助圖像顯示區(qū)601上附加虛線,作為基準位置標志604的例子。 注意,構(gòu)圖幫助圖像顯示區(qū)601中的基準位置標志604的布局與按照本公開的第一實施例的基準位置標志379(示于圖IOB等中)相同,因而,這里將省略其說明?,F(xiàn)在,說明構(gòu)圖幫助圖像顯示區(qū)601和人型圖標602之間的相對關(guān)系。構(gòu)圖幫助圖像顯示區(qū)601虛擬代表全景圖像的輪廓,人型圖標602虛擬代表位于所述全景圖像中的基準被攝物體的位置。具體地說,構(gòu)圖幫助圖像顯示區(qū)601對應(yīng)于全景圖像,人型圖標602 對應(yīng)于包括在全景圖像中的被攝物體。注意,除了移動方向不同之夕卜,人型圖標602在構(gòu)圖幫助圖像顯示區(qū)601中的移動 (與成像設(shè)備100的取向的變化相應(yīng)的移動)和按照本公開的第一實施例的操作位置372 相同。因而,這里將省略其說明。消息顯示區(qū)605是顯示為與全景圖像成像操作(成像設(shè)備100的擺動操作)相關(guān)的用戶操作提供幫助的消息的區(qū)域。第四成像模式下的成像控制例子圖^A和28B是示意地圖解說明按照本公開的第二實施例的成像設(shè)備100的取向
27和顯示在輸入/輸出面板200上的顯示屏幕的例子的示圖。另外,本公開的第二實施例將表示在設(shè)定了第四成像模式,設(shè)定了從左向右進行擺動操作作為擺動方向的設(shè)置的情況下的成像操作例子。另外,本公開的第二實施例將表示在中心位置(例如,基準位置指定條351 中的“0° ”位置)被設(shè)定為全景圖像中的基準位置情況下的成像操作例子。圖28A簡略地圖解說明從上方觀察成像設(shè)備100和用雙手拿著成像設(shè)備100的用戶415的情況。在這種情況下,假定用戶415在查看顯示在輸入/輸出面板200上的被攝物體的時候,確認全景圖像中的基準被攝物體(牛的塑像401)。圖^B圖解說明在執(zhí)行確定全景圖像中的基準被攝物體的位置(基準位置)的確定操作之前,顯示的顯示屏幕315。顯示屏幕315與圖27A中所示的顯示屏幕315相同。另夕卜,充當成像單元112的成像對象的被攝物體(牛的塑像401)被顯示成預覽圖像。另外, 就在圖28A中所示狀態(tài)下,用戶415執(zhí)行了快門按鈕210的半按下操作的情況來說,顯示圖 27B中所示的擺動操作幫助屏幕600。另外,關(guān)于成像設(shè)備100的取向的變化的轉(zhuǎn)變例子, 和在顯示擺動操作幫助屏幕600之后的顯示屏幕將將參考圖29A-32C詳細說明。圖^A_32C是示意地圖解說明按照本公開的第二實施例的成像設(shè)備100的取向, 顯示在輸入/輸出面板200上的顯示屏幕,和全景圖像中的基準被攝物體的關(guān)系例子的示圖。具體地說,圖^A,30A,31A和32A圖解說明在快門按鈕210的全按下操作時的成像設(shè)備100的取向例子。注意,在圖^A,30A,31A和32A中,用戶415和成像設(shè)備100用虛線表示。另外,圖^B,30B,31B和32B圖解說明緊接在快門按鈕210的全按下操作之前,按照成像設(shè)備100的取向顯示在輸入/輸出面板200上的擺動操作幫助屏幕600的例子。另外, 圖^C,30C,31C和32C圖解說明當在圖^A,30A,31A和32A中所示狀態(tài)下,進行快門按鈕 210的全按下操作時生成的全景圖像的例子。注意,圖^A-32C中所示的例子是其中修改了圖8A-14B的一部分的例子,因而,將用相同的附圖標記表示與圖8A-14B共有的部分,并省略其部分說明。圖29A-29C圖解說明在快門按鈕210的半按下操作之后,立即進行快門按鈕210 的全按下操作的情況(或者在不執(zhí)行快門按鈕210的半按下操作的情況下,進行全按下操作的情況)。例如,如圖28A中所示,雙手拿著成像設(shè)備100的用戶415在查看顯示在輸入/輸出面板200上的被攝物體的時候,確認全景圖像中的基準被攝物體(牛的塑像401)。這種情況下,如圖^B中所示,在輸入/輸出面板200上呈現(xiàn)顯示屏幕315。圖29A簡略地圖解說明在28A中所示的狀態(tài)下,用戶415執(zhí)行快門按鈕210的全按下操作的情況。這種情況下,從所述按下時的位置620沿著光軸方向的位置被確定為開始位置621。隨后根據(jù)開始位置621確定成像操作的終止位置622。具體地說,根據(jù)設(shè)定的圖像大小θ 21(= 180° ),從成像操作的開始位置621確定終止位置622。這樣,當用戶415進行了快門按鈕210的全按下操作的情況下,從所述按下時的位置(開始位置621),開始成像操作。因而,當用戶415在圖^A中所示狀態(tài)下,執(zhí)行了快門按鈕210的全按下操作時,生成其中基準被攝物體(牛的塑像401)位于左端的全景圖像 611(圖 29C)。圖^B圖解說明緊接在用戶415在圖29k中所示狀態(tài)下,執(zhí)行快門按鈕210的全按下操作之前,顯示在輸入/輸出面板200上的擺動操作幫助屏幕600。這種情況下,在快門按鈕210的半按下操作之后,立即進行所述全按下操作,因而,人型圖標602位于構(gòu)圖幫助圖像顯示區(qū)601的左端。另外,圖^C中所示的全景圖像611中的基準被攝物體(牛的塑像401)的布局大體上與構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體(牛的塑像401)的布局匹配。注意,圖29A-29C圖解說明其中在快門按鈕210的半按下操作之后,立即進行快門按鈕210的全按下操作的情況下的例子,不過,這種情況也適用于在改變成像設(shè)備100的取向之后,進行全按下操作的情況。這些例子示于圖30A-30C中。圖30A-30C圖解說明在快門按鈕210的半按下操作之后,當成像設(shè)備100的取向的變化量較小時,進行全按下操作的情況。圖30A簡略地圖解說明在相對于圖2名k中所示的狀態(tài),成像設(shè)備100的取向的變化量較小時,用戶415執(zhí)行快門按鈕210的全按下的情況。在這種情況下,從所述按下時的位置620沿著光軸方向的位置被確定為開始位置625。隨后根據(jù)開始位置625,確定成像操作的終止位置626。具體地說,根據(jù)設(shè)定的圖像大小Θ21( = 180° ),從成像操作的開始位置625,確定終止位置626。這樣,在用戶415執(zhí)行了快門按鈕210的全按下操作的情況下,從所述按下時的位置(開始位置625),開始成像操作。因而,當用戶415在圖30Α中所示狀態(tài)下,執(zhí)行快門按鈕210的全按下操作時,生成其中基準被攝物體(牛的塑像401)位于從構(gòu)圖幫助圖像顯示區(qū)601中的中心位置向左的位置的全景圖像612(示于圖30C)。圖30B圖解說明緊接在用戶415在圖30A中所示狀態(tài)下,執(zhí)行快門按鈕210的全按下操作之前,顯示在輸入/輸出面板200上的擺動操作幫助屏幕600。這種情況下,在快門按鈕210的半按下操作之后,成像設(shè)備100的取向的變化量較小時,進行全按下操作,因而,人型圖標602位于從構(gòu)圖幫助圖像顯示區(qū)601中的中心位置向左的位置。另外,圖30C中所示的全景圖像612中的基準被攝物體(牛的塑像401)的布局大體上與構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體(牛的塑像401)的布局匹配。另外,圖31A-32C圖解說明在快門按鈕210的半按下操作之后,當成像設(shè)備100的取向的變化量較大時,進行全按下操作的情況。注意,開始位置631和635及終止位置632 和636的確定方法,和在構(gòu)圖幫助圖像顯示區(qū)601中設(shè)置人型圖標602的方法與圖^A_30C 中的方法相同,因而,這里省略其說明。另外,圖31C中所示的全景圖像613中的基準被攝物體(牛的塑像401)的布局大體上與構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體(牛的塑像401)的布局匹配。類似地, 圖32C中所示的全景圖像614中的基準被攝物體(牛的塑像401)的布局大體上與構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體(牛的塑像401)的布局匹配。這里,如圖31B中所示,圖31A-31C中所示的例子圖解說明當人型圖標602位于構(gòu)圖幫助圖像顯示區(qū)601中的基準位置標志604時,執(zhí)行全按下操作的情況。這種情況下,如圖31C中所示,基準被攝物體(牛的塑像401)位于全景圖像613中的中心位置(基準位置)。從而,能夠容易地生成基準被攝物體(牛的塑像401)位于全景圖像613中的中心位置(基準位置)的全景圖像。注意可以做出其中當人型圖標602位于基準位置標志604時, 使人型圖標602閃爍,從而向用戶通知基準被攝物體位于全景圖像中的基準位置的時刻的安排。
這樣,用戶415可在確認構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體(牛的塑像 401)的位置的時候,在期望的時刻進行快門按鈕210的全按下操作。從而,可以使全景圖像中的基準被攝物體位于期望的位置,從而可以容易地生成用戶中意的全景圖像。注意,本例把用戶415進行的快門按鈕210的半按下操作作為擺動操作幫助屏幕 600的顯示條件,和把快門按鈕210的全按下操作作為成像操作的開始位置的確定條件,不過,可以采用另一種條件。例如,快門按鈕210的全按下操作可被用作擺動操作幫助屏幕 600的顯示條件,和成像操作的開始位置的確定條件。另外,例如,兩次按下快門按鈕210的操作(我們可稱為雙擊),或者專用按鈕的按下操作可被當作擺動操作幫助屏幕600的顯示條件。另外,在開始全景圖像成像操作之后的成像操作大體上與圖12A-14B中所示的例子相同,因而,這里省略其說明。使用基準被攝物體作為圖標的例子至此說明了其中在構(gòu)圖幫助圖像顯示區(qū)601中設(shè)置人型圖標602的例子,不過,代替人型圖標602,可以設(shè)置基準被攝物體的圖像。因而,圖33A-34B將表示其中在構(gòu)圖幫助圖像顯示區(qū)601中,設(shè)置基準被攝物體的圖像的例子。具體地說,圖2中所示的控制單元190執(zhí)行使在收到顯示構(gòu)圖幫助圖像的顯示指令操作時,充當成像單元112的成像對象的被攝物體的至少一部分的圖像,作為基準被攝物體標識位于構(gòu)圖幫助圖像中,并顯示所述至少一部分的圖像的控制。另外,控制單元190 執(zhí)行使在收到所述顯示指令操作時,充當成像單元112的成像對象的被攝物體的至少一部分的圖像,作為基準位置標識位于構(gòu)圖幫助圖像中,并顯示所述至少一部分的圖像的控制。 這種情況下,控制單元190執(zhí)行控制,以致把構(gòu)圖幫助圖像中的基準被攝物體標識(例如, 圖34B中所示的基準被攝物體圖像651),和基準位置標識(例如,圖34B中所示的基準被攝物體圖像65 顯示成不同的顯示模式。圖33A和3 是示意圖解說明按照本公開的第二實施例的成像設(shè)備100的取向, 和顯示在輸入/輸出面板200上的顯示屏幕的例子的示圖。注意,除了在圖^B中所示的顯示屏幕315上附加基準被攝物體圖像的提取框317之外,圖3 與圖28B相同。提取框317是在提取位于構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體的圖像時使用的邊框。例如,設(shè)想其中在顯示圖33B中所示的顯示屏幕315的情況下,執(zhí)行快門按鈕210 的半按下操作的情況。這種情況下,全景圖像生成單元132從成像單元112生成的圖像中, 提取包含在提取框317中的圖像(基準被攝物體圖像)。顯示控制單元191隨后控制輸入 /輸出面板200顯示擺動操作幫助屏幕600,使提取的圖像(基準被攝物體圖像)位于擺動操作幫助屏幕600中的構(gòu)圖幫助圖像顯示區(qū)601,并顯示所述提取的圖像。這種情況下,按照構(gòu)圖幫助圖像顯示區(qū)601的大小,縮小并顯示提取的圖像(基準被攝物體圖像)。圖34A 和34B中表示了該基準被攝物體圖像的顯示例子。注意,在構(gòu)圖幫助圖像顯示區(qū)601中設(shè)置和移動基準被攝物體圖像的方法和人型圖標602相同,因而,這里省略其說明。圖34A和34B是圖解說明按照本公開的第二實施例,顯示在輸入/輸出面板200 上的顯示屏幕例子的示圖。圖34A圖解說明其中就圖27B中所示的擺動操作幫助屏幕600來說,在構(gòu)圖幫助圖像顯示區(qū)601中設(shè)置和顯示基準被攝物體圖像651,代替人型圖標602的例子。這樣,使基準被攝物體圖像651位于構(gòu)圖幫助圖像顯示區(qū)601中,并被顯示,從而能夠容易地設(shè)想全景圖像上的實際基準被攝物體(牛的塑像401),因而能夠容易地進行構(gòu)圖的決定。圖34B圖解說明其中就圖34A中所示的擺動操作幫助屏幕600來說,在構(gòu)圖幫助圖像顯示區(qū)601中設(shè)置和顯示基準被攝物體圖像652,代替基準位置標志604的例子。注意,理想的是把基準被攝物體圖像652和基準被攝物體圖像651顯示成不同的顯示模式。例如,理想的是與基準被攝物體圖像651相比不太顯眼地顯示基準被攝物體652。例如,改變值α (代表透明度的數(shù)值),從而能夠低于基準被攝物體圖像651地顯示基準被攝物體圖像 652的透明度。注意圖34Β利用虛線圖解說明基準被攝物體圖像652,作為與基準被攝物體圖像651相比不太顯眼地顯示的例子。從而,基準被攝物體圖像651與構(gòu)圖幫助圖像顯示區(qū)601中的基準被攝物體圖像 652重疊的時刻變成使基準被攝物體位于全景圖像中的基準位置的時刻。因而,能夠以相對易于查看的方式進行使基準被攝物體位于全景圖像中的基準位置的操作。注意,本例表示了其中提取包含在具有特定大小的提取框317中的圖像,作為基準被攝物體圖像,并使該基準被攝物體圖像位于構(gòu)圖幫助圖像顯示區(qū)601中的例子。不過, 例如,可以做出其中對成像設(shè)備100設(shè)置面部檢測單元,單獨檢測和提取包含在具有特定大小的提取框317中的圖像的面部部分,并使該面部作為基準被攝物體圖像,位于構(gòu)圖幫助圖像顯示區(qū)601中的安排。注意,如果在具有特定大小的提取框317中包含有多個面部, 那么可以采用評價值較高的面部(例如,笑臉、尺寸較大的面部)。另一方面,可以做出其中對成像設(shè)備100設(shè)置檢測除面部之外的特定對象的檢測單元,并使利用所述檢測單元檢測和提取的特定對象(提取框317內(nèi)的特定對象)作為基準被攝物體圖像,位于構(gòu)圖幫助圖像顯示區(qū)601中的安排。成像設(shè)備的操作例子下面參考附圖,說明按照本公開的第二實施例的成像設(shè)備100的操作。第四成像模式下的操作例子圖35是圖解說明按照本公開的第二實施例的成像設(shè)備100的成像控制處理的處理過程的例子的流程圖。本例表示在設(shè)定第四成像模式情況下的處理過程的例子。另外, 該處理過程是圖M的變形,從而,用相同的附圖標記表示與圖M共有的部分,其說明被省略。首先,控制單元190判定是否執(zhí)行了構(gòu)圖幫助圖像的顯示指令操作(步驟S951), 如果未進行所述顯示指令操作,那么繼續(xù)進行監(jiān)視。另一方面,如果進行了所述顯示指令操作(步驟S51),那么控制單元190根據(jù)顯示指令操作時的位置,確定全景圖像成像操作的開始位置和終止位置(步驟S952)。注意,所述開始位置和終止位置是用于顯示構(gòu)圖幫助圖像的假想位置。之后,顯示控制單元191在控制單元190的控制下,控制顯示單元141顯示構(gòu)圖幫助圖像(例如,圖27Β中所示的擺動操作幫助屏幕600(構(gòu)圖幫助圖像顯示區(qū)601))(步驟 S953)。之后,取向檢測單元121檢測成像設(shè)備100的取向的變化(步驟S%4)。之后,控制單元190根據(jù)檢測的取向變化,移動構(gòu)圖幫助圖像中的基準被攝物體標識(例如,圖27B 中所示的人型圖標60 (步驟S955)。之后,控制單元190根據(jù)檢測的取向變化,判定是否
31執(zhí)行了正確的擺動操作(步驟S956)。如果未執(zhí)行正確的擺動操作(步驟S956),那么處理進入步驟S916)。另外,如果執(zhí)行了正確的擺動操作(步驟S956),那么判定是否執(zhí)行了成像操作的開始指令操作(步驟S957),如果未執(zhí)行成像操作的開始指令操作,那么處理返回步驟 S954。另一方面,如果執(zhí)行了成像操作的開始指令操作(步驟S957),那么控制單元190根據(jù)所述開始指令操作時的位置,確定全景圖像成像操作的終止位置(步驟S958)。當把垂直方向作為擺動方向時的顯示例子本公開的第一和第二實施例表示了其中通過沿著水平方向進行擺動操作生成全景圖像的例子。不過,如上所述,可通過沿著垂直方向進行擺動操作,生成全景圖像。于是, 圖36A和36B圖解說明在沿著垂直方向進行擺動操作的情況下,顯示在輸入/輸出面板200 上的顯示屏幕例子。圖36A和36B是圖解說明按照本公開的第一和第二實施例,顯示在輸入/輸出面板200上的顯示屏幕例子的示圖。圖36A圖解說明在設(shè)定了第一到第三成像模式之一的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕700。就擺動操作幫助屏幕700來說,設(shè)置有擺動操作幫助圖像顯示區(qū)701,箭頭703和消息顯示區(qū)704。注意除了各個單元的方向等不同之外,擺動操作幫助屏幕700和圖IOB中所示的擺動操作幫助屏幕370相同,因此,這里省略其說明。圖36B圖解說明在設(shè)定第四成像模式的情況下,顯示在輸入/輸出面板200上的擺動操作幫助屏幕710。就擺動操作幫助屏幕710來說,設(shè)置有擺動操作幫助圖像顯示區(qū) 711,和消息顯示區(qū)715。注意,除了各個單元的方向等不同之外,擺動操作幫助屏幕710和圖27B中所示的擺動操作幫助屏幕600相同,因此,這里省略其說明。3.變形全景圖像的成像操作的變形本公開的第一和第二實施例表示了其中通過用戶以成像設(shè)備100的位置為基準, 進行成像設(shè)備100的擺動操作,執(zhí)行全景圖像成像操作的例子。不過,例如,可設(shè)想通過在大體平行于被攝物體的直線上移動成像設(shè)備100,執(zhí)行全景圖像成像操作。于是,下面將說明其中通過在大體平行于被攝物體的直線上移動成像設(shè)備100,執(zhí)行全景圖像成像操作的例子。圖37A和37B是示意地圖解說明在利用按照本公開的第一實施例和第二實施例的成像設(shè)備100,生成全景圖像時的成像操作的示圖。圖37A示意地圖解說明關(guān)于通過以成像設(shè)備100的位置(用戶800的位置)作為旋轉(zhuǎn)中心,沿著水平方向(擺動方向801)旋轉(zhuǎn)成像設(shè)備100,生成全景圖像的成像操作,從上方觀察的狀態(tài)。另外,圖37A利用粗線示意地圖解說明作為全景圖像成像范圍802,由所述成像操作生成的全景圖像的成像范圍。注意圖 IOA中所示的例子與在本公開的第一和第二實施例中所示的例子相同,因而,這里將省略其說明。圖37B示意地圖解說明關(guān)于通過在大體平行于被攝物體的直線815上,移動成像設(shè)備100,生成全景圖像的成像操作,從上方觀察的狀態(tài)。圖37B中所示的成像操作是利用能夠勻速移動的諸如車輛之類的移動裝置,以與行進方向811正交的方向作為成像設(shè)備 100的光軸方向進行的全景圖像成像操作。例如,假設(shè)雙手拿著成像設(shè)備100的用戶810乘坐的車輛沿著行進方向811勻速或變速移動。另外,圖37B用粗線示意地圖解說明作為全景圖像成像范圍812,用所述成像操作生成的全景圖像的成像范圍。這樣,就圖37B中所示的例子來說,在直線815上順序改變成像設(shè)備100的位置, 因而,代替旋轉(zhuǎn)角度,采用直線上的移動距離作為成像設(shè)備100的取向的變化。另外,就全景圖像成像操作的開始位置和終止位置,同樣采用直線上的位置。另外,本公開的實施例表示了其中通過合成靜止圖像,生成全景圖像的例子,不過本公開的實施例適用于利用運動圖像成像操作生成的運動圖像,生成全景圖像的情況。另夕卜,就生成多視點全景圖像的情況來說,同樣可以應(yīng)用本公開的實施例。另外,本公開的實施例可適用于諸如具有成像功能的蜂窩電話機,具有成像功能的便攜式終端裝置之類的成像設(shè)備。注意,本公開的實施例舉例說明了實現(xiàn)本公開的例子,按照本公開的實施例的事項對應(yīng)于權(quán)利要求范圍中的本公開特有的事項。類似地,權(quán)利要求中的本公開特有的事項對應(yīng)于用相同名稱表示的按照本公開的實施例的事項。不過,本公開并不局限于這些實施例,可通過對實施例進行各種修改,實現(xiàn)本公開,而不脫離本公開的本質(zhì)。另外,在本公開的實施例中說明的處理步驟可被看作具有一系列步驟的方法,或者可被看作使計算機執(zhí)行所述一系列步驟的程序,乃至保存所述程序的記錄介質(zhì)。這種記錄介質(zhì)的例子包括CD (光盤),MD (小型光盤),DVD (數(shù)字通用光盤),存儲卡和藍光光盤 (注冊商標)等等。本領(lǐng)域的技術(shù)人員應(yīng)明白,根據(jù)設(shè)計要求和其它因素,可以產(chǎn)生各種修改、組合、 子組合和變更,只要它們在所附的權(quán)利要求或其等同物的范圍之內(nèi)。
權(quán)利要求
1.一種圖像處理設(shè)備,包括被配置成接收識別被攝物體的輸入的接口;被配置成捕捉用于生成全景圖像的圖像數(shù)據(jù)的成像單元;和被配置成根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置的處理器。
2.一種圖像處理設(shè)備,包括被配置成接收識別被攝物體的輸入的接口 ;和被配置成根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置的處理器。
3.按照權(quán)利要求2所述的圖像處理設(shè)備,還包括被配置成捕捉由處理器處理的多個圖像從而生成全景圖像的成像單元。
4.按照權(quán)利要求3所述的圖像處理設(shè)備,其中接口被配置成在捕捉多個圖像之前,接收選擇基準位置的輸入和識別被攝物體的輸入。
5.按照權(quán)利要求4所述的圖像處理設(shè)備,其中處理器被配置成根據(jù)基準位置和被攝物體,計算用于捕捉多個圖像的開始位置和終止位置。
6.按照權(quán)利要求5所述的圖像處理設(shè)備,還包括顯示器,其中處理器被配置成控制顯示器顯示指示處理器確定的開始位置的通知。
7.按照權(quán)利要求6所述的圖像處理設(shè)備,其中處理器被配置成控制顯示器顯示圖像處理設(shè)備的到達開始位置的擺動方向。
8.按照權(quán)利要求6所述的圖像處理設(shè)備,其中處理器被配置成控制顯示器顯示指示朝著開始位置移動的進展的狀態(tài)條。
9.按照權(quán)利要求6所述的圖像處理設(shè)備,其中處理器被配置成判定圖像處理設(shè)備是否已到達開始位置,當已到達開始位置時,控制顯示器顯示圖像處理設(shè)備已到達開始位置的通知。
10.按照權(quán)利要求5所述的圖像處理設(shè)備,還包括顯示器,其中在成像單元開始捕捉多個圖像之后,處理器控制顯示器顯示通知,所述通知指示圖像處理設(shè)備的到達終止位置的擺動方向。
11.按照權(quán)利要求10所述的圖像處理設(shè)備,其中處理器被配置成控制顯示器顯示狀態(tài)條,所述狀態(tài)條指示朝著終止位置移動的進展。
12.按照權(quán)利要求10所述的圖像處理設(shè)備,其中處理器被配置成判定圖像處理設(shè)備是否已到達終止位置,當已到達終止位置時,控制顯示器顯示圖像處理設(shè)備已到達終止位置的通知。
13.按照權(quán)利要求4所述的圖像處理設(shè)備,其中處理器被配置成根據(jù)選擇的基準位置和識別的被攝物體,計算用于捕捉多個圖像的開始位置。
14.按照權(quán)利要求13所述的圖像處理設(shè)備,其中在計算開始位置之后,接口接收指令成像單元捕捉多個圖像的輸入。
15.按照權(quán)利要求14所述的圖像處理設(shè)備,其中在收到指令成像單元捕捉多個圖像的輸入之后,處理器被配置成確定用于捕捉多個圖像的終止位置。
16.按照權(quán)利要求15所述的圖像處理設(shè)備,還包括顯示器,其中在成像單元開始捕捉多個圖像之后,處理器控制顯示器顯示通知,所述通知指示圖像處理設(shè)備的到達終止位置的擺動方向。
17.按照權(quán)利要求16所述的圖像處理設(shè)備,其中處理器被配置成控制顯示器顯示狀態(tài)條,所述狀態(tài)條指示朝著終止位置移動的進展。
18.按照權(quán)利要求16所述的圖像處理設(shè)備,其中處理器被配置成判定圖像處理設(shè)備是否已到達終止位置,當已到達終止位置時,控制顯示器顯示圖像處理設(shè)備已到達終止位置的通知。
19.按照權(quán)利要求3所述的圖像處理設(shè)備,其中接口被配置成接收指令成像單元捕捉多個圖像的輸入。
20.按照權(quán)利要求19所述的圖像處理設(shè)備,其中在收到指令成像單元捕捉多個圖像的輸入之后,處理器被配置成確定用于捕捉多個圖像的終止位置。
21.按照權(quán)利要求20所述的圖像處理設(shè)備,其中接口被配置成在成像單元已經(jīng)開始捕捉多個圖像之后,接收選擇全景圖像中的基準位置的輸入。
22.按照權(quán)利要求21所述的圖像處理設(shè)備,其中處理器被配置成根據(jù)選擇基準位置的輸入,確定用于捕捉多個圖像的新的終止位置。
23.按照權(quán)利要求22所述的圖像處理設(shè)備,還包括顯示器,其中處理器被配置成判定圖像處理設(shè)備是否已到達終止位置,當已到達終止位置時,控制顯示器顯示圖像處理設(shè)備已到達終止位置的通知。
24.按照權(quán)利要求19所述的圖像處理設(shè)備,還包括顯示器,其中處理器被配置成控制顯示器顯示構(gòu)圖幫助圖像,在所述構(gòu)圖幫助圖像中, 候選被攝物體被顯示在全景圖像的虛擬表示上。
25.按照權(quán)利要求M所述的圖像處理設(shè)備,其中處理器被配置成檢測圖像處理設(shè)備的取向的變化,并根據(jù)檢測的取向變化改變構(gòu)圖幫助圖像。
26.按照權(quán)利要求8-25中任一項所述的圖像處理設(shè)備,其中顯示指示朝著開始位置移動的進展的狀態(tài)條包括顯示操作位置并通過改變操作位置的顯示模式來指示全景圖像成像操作的階段。
27.按照權(quán)利要求9-25中任一項所述的圖像處理設(shè)備,其中所述通知具有下列形式至少之一文本、圖形和音頻。
28.—種由圖像處理設(shè)備執(zhí)行的圖像處理方法,所述方法包括在圖像處理設(shè)備的接口,接收識別被攝物體的輸入;在圖像處理設(shè)備的處理器,根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置。
全文摘要
本公開涉及成像設(shè)備,成像方法和程序。所述圖像處理設(shè)備包括接收識別被攝物體的輸入的接口,和根據(jù)捕捉的圖像數(shù)據(jù)生成全景圖像,以致使被攝物體位于全景圖像中的基準位置的處理器。
文檔編號G03B37/00GK102469242SQ20111033945
公開日2012年5月23日 申請日期2011年10月28日 優(yōu)先權(quán)日2010年11月11日
發(fā)明者后藤順一郎, 新井琢哉 申請人:索尼公司