專利名稱：電子設(shè)備、顯示控制方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及電子設(shè)備，具體而言涉及顯示地圖的電子設(shè)備和顯示控制方法，以及 使計算機執(zhí)行該方法的程序。
背景技術(shù)：
在相關(guān)技術(shù)中，存在一種能夠利用存儲在地圖數(shù)據(jù)庫等中的地圖數(shù)據(jù)來顯示各個 區(qū)域的地圖的電子設(shè)備。另外，已提出了顯示地圖并在地圖上顯示與各個位置有關(guān)的圖像 的電子設(shè)備。例如，已提出了這樣一種圖像處理設(shè)備，該設(shè)備顯示鳥瞰圖像，并通過將全景圖像 的一部分設(shè)在鳥瞰圖像中的全景圖像的拍攝地點上來顯示全景圖像(例如，參見日本未實 審專利申請公布No. 2007-110675 (圖32))。

發(fā)明內(nèi)容
根據(jù)上述相關(guān)技術(shù)，通過將全景圖像布置在鳥瞰圖像中的全景圖像的拍攝地點上 可以容易地獲知全景圖像的地理位置關(guān)系。這里，例如，當用戶利用圖像攝取設(shè)備執(zhí)行圖像攝取操作時，不僅位置關(guān)系、而且 圖像攝取方向也是很重要的因素。例如，即使當在同一位置執(zhí)行圖像攝取操作時，取決于圖 像攝取方向，對象看起來也可能非常不同，因此，獲知圖像攝取期間的圖像攝取位置和圖像 攝取方向是很重要的。另外，即使當在同一位置記錄的內(nèi)容被再現(xiàn)時，取決于圖像攝取方 向，對象看起來也可能非常不同，因此，獲知圖像攝取期間的圖像攝取位置和圖像攝取方向 是很重要的。希望容易地獲知地圖上圖像的圖像攝取位置和圖像攝取方向。根據(jù)本發(fā)明的一個實施例，提供了一種電子設(shè)備，包括基于攝取圖像的圖像攝取 期間的圖像攝取位置來獲取作為攝取圖像中包含的對象所在的方向的圖像攝取方向的圖 像攝取方向獲取單元；轉(zhuǎn)換包括圖像攝取位置的地圖，以使地圖上的所獲取的圖像攝取方 向與地圖被顯示的顯示平面上的特定方向相對應的轉(zhuǎn)換單元；以及使轉(zhuǎn)換后的地圖與攝取 圖像相關(guān)聯(lián)地顯示的顯示控制單元，還提供了一種顯示控制方法和用于使得計算機執(zhí)行該 方法的程序。因此，實現(xiàn)了以下技術(shù)方案獲取圖像攝取方向，轉(zhuǎn)換地圖以使包括攝取圖像 的圖像攝取期間的圖像攝取位置的地圖上的圖像攝取方向與特定方向相對應，并且與攝取 圖像相關(guān)聯(lián)地顯示轉(zhuǎn)換后的地圖。另外，根據(jù)本發(fā)明的實施例，該電子設(shè)備包括對于由攝取圖像形成的各內(nèi)容存儲 指示該內(nèi)容的代表性圖像的代表性圖像存儲單元；以及接收用于從存儲在代表性圖像存儲 單元中的代表性圖像當中選擇期望的代表性圖像的選擇操作的操作接收單元，并且轉(zhuǎn)換單 元可以對包括從存儲在代表性圖像存儲單元中的代表性圖像當中選擇的代表性圖像的圖 像攝取期間的圖像攝取位置的地圖執(zhí)行轉(zhuǎn)換，并且顯示控制單元可以使存儲在代表性圖像 存儲單元中的代表性圖像的視圖被顯示，并且使轉(zhuǎn)換后的地圖與從所顯示的代表性圖像當中選擇的代表性圖像相關(guān)聯(lián)地顯示。因此，實現(xiàn)了以下技術(shù)方案關(guān)于所選擇的代表性圖像 的地圖被轉(zhuǎn)換，并且與代表性圖像中的所選代表性圖像相關(guān)聯(lián)地顯示轉(zhuǎn)換后的圖像(它們 的視圖被顯示)。另外，根據(jù)本發(fā)明的實施例，當指示與所選擇的代表性圖像相對應的內(nèi)容的再現(xiàn) 時，轉(zhuǎn)換單元可以針對包括被指示再現(xiàn)的內(nèi)容的各個攝取圖像來執(zhí)行地圖轉(zhuǎn)換，并且對于 包括被指示再現(xiàn)的內(nèi)容的各個攝取圖像，顯示控制單元可以使轉(zhuǎn)換后的地圖與攝取圖像相 關(guān)聯(lián)地顯示。因此，實現(xiàn)了以下技術(shù)方案即使當與所選代表性圖像相對應的內(nèi)容被指示再 現(xiàn)時，針對包括被指示再現(xiàn)的內(nèi)容的各個攝取圖像來轉(zhuǎn)換地圖，并且對于包括被指示再現(xiàn) 的內(nèi)容的各個攝取圖像，與攝取圖像相關(guān)聯(lián)地顯示轉(zhuǎn)換后的地圖。另外，根據(jù)本發(fā)明的實施例，電子設(shè)備還包括生成攝取圖像的圖像攝取單元，并且 每當生成攝取圖像時，轉(zhuǎn)換單元都可以對包括所生成的攝取圖像的圖像攝取期間的圖像攝 取位置的地圖執(zhí)行轉(zhuǎn)換，并且每當生成攝取圖像時，顯示控制單元都可以使轉(zhuǎn)換后的地圖 與各個所生成的攝取圖像相關(guān)聯(lián)地顯示。因此，實現(xiàn)了以下技術(shù)方案每當生成攝取圖像 時，都對所生成的攝取圖像轉(zhuǎn)換地圖，并且每當生成攝取圖像時，都與所生成的攝取圖像相 關(guān)聯(lián)地顯示轉(zhuǎn)換后的地圖。
另外，根據(jù)本發(fā)明的實施例，電子設(shè)備還包括存儲由攝取圖像形成的運動圖像內(nèi) 容的內(nèi)容存儲單元，并且當指示運動圖像內(nèi)容的再現(xiàn)時，轉(zhuǎn)換單元可以針對包括被指示再 現(xiàn)的運動圖像內(nèi)容的各個攝取圖像執(zhí)行地圖轉(zhuǎn)換，并且顯示控制單元可以針對包括運動圖 像內(nèi)容的各個攝取圖像使轉(zhuǎn)換后的地圖與攝取圖像相關(guān)聯(lián)地顯示。因此，實現(xiàn)了以下技術(shù) 方案即使當運動圖像內(nèi)容被指示再現(xiàn)時，針對包括被指示再現(xiàn)的運動圖像內(nèi)容的各個攝 取圖像來轉(zhuǎn)換地圖，并且對于包括運動圖像內(nèi)容的各個攝取圖像，與攝取圖像相關(guān)聯(lián)地顯 示轉(zhuǎn)換后的地圖。另外，根據(jù)本發(fā)明的實施例，轉(zhuǎn)換單元可以通過以下方式來轉(zhuǎn)換地圖以圖像攝取 位置為旋轉(zhuǎn)中心旋轉(zhuǎn)地圖，從而使所獲取的圖像攝取方向和特定方向在地圖上彼此對應。 因此，實現(xiàn)了以下技術(shù)方案通過以攝取圖像位置為旋轉(zhuǎn)中心旋轉(zhuǎn)地圖來轉(zhuǎn)換地圖，從而使 得地圖上的圖像攝取方向和特定方向彼此對應。另外，根據(jù)本發(fā)明的實施例，地圖可以是三維地圖，其是通過將包括圖像攝取位置 的地圖上的三維空間投影到平面上而由三維攝取圖像形成的，轉(zhuǎn)換單元可以轉(zhuǎn)換三維地圖 以使三維地圖上的所獲取的圖像攝取方向與三維地圖被顯示的顯示平面上的特定方向彼 此對應，并且顯示控制單元可以使轉(zhuǎn)換后的三維地圖與攝取圖像相關(guān)聯(lián)地顯示。因此，實現(xiàn) 了以下技術(shù)方案三維地圖被轉(zhuǎn)換以使三維地圖上的圖像攝取方向和特定方向彼此對應， 并且與攝取圖像相關(guān)聯(lián)地顯示轉(zhuǎn)換后的三維地圖。另外，根據(jù)本發(fā)明的實施例，顯示控制單元可以使地圖以被疊加在攝取圖像上的 方式被顯示。因此，實現(xiàn)了以下技術(shù)方案地圖以被疊加在攝取圖像上的方式被顯示。另外，根據(jù)本發(fā)明的實施例，圖像攝取方向獲取單元可以基于圖像攝取位置來獲 取存在于攝取圖像的中心位置的對象的方向作為圖像攝取方向。因此，實現(xiàn)了以下技術(shù)方 案基于圖像攝取位置獲取存在于攝取圖像的中心位置的對象的方向作為圖像攝取方向。另外，根據(jù)本發(fā)明的實施例，電子設(shè)備還包括獲取圖像攝取期間的視角信息和深 度信息的視角和深度信息獲取單元，并且顯示控制單元可以使圖像攝取范圍中的攝取圖像以被疊加在地圖上的圖像攝取位置上的方式被顯示，該圖像攝取范圍指示由所獲取的視角 信息和深度信息指定的圖像攝取范圍。因此，實現(xiàn)了以下技術(shù)方案獲取圖像攝取期間的視 角信息和深度信息，并且圖像攝取范圍中的攝取圖像能夠以被疊加在地圖上的圖像攝取位 置上的方式被顯示，該圖像攝取范圍指示由所獲取的視角信息和深度信息指定的圖像攝取 范圍。根據(jù)本發(fā)明，可以表現(xiàn)出以下良好效果可以很容易獲知地圖上圖像的圖像攝取 位置和圖像攝取方向。


圖1是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的內(nèi)部組成例子的框圖；圖2是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的功能組成例子的框圖；圖3是示意性地圖示根據(jù)本發(fā)明第一實施例的內(nèi)容管理信息存儲單元的存儲內(nèi) 容的示意圖；圖4A和4B是示意性地圖示根據(jù)本發(fā)明第一實施例存儲在地圖數(shù)據(jù)存儲單元中的 地圖數(shù)據(jù)的一部分和在與地圖數(shù)據(jù)相對應的區(qū)域中的圖像攝取操作的示意圖；圖5A和5B是示意性地圖示根據(jù)本發(fā)明第一實施例計算用在地圖數(shù)據(jù)轉(zhuǎn)換單元對 地圖數(shù)據(jù)的轉(zhuǎn)換處理中的旋轉(zhuǎn)角的方法的示意圖；圖6A和6B是示意性地圖示根據(jù)本發(fā)明第一實施例來自存儲在地圖數(shù)據(jù)存儲單元 中的地圖數(shù)據(jù)的顯示目標區(qū)的示意圖；圖7A和7B是示意性地圖示根據(jù)本發(fā)明第一實施例創(chuàng)建疊加在與經(jīng)地圖數(shù)據(jù)轉(zhuǎn)換 單元轉(zhuǎn)換的地圖數(shù)據(jù)相對應的地圖上的圖像攝取狀態(tài)確認圖像的方法的示意圖；圖8A和8B是圖示根據(jù)本發(fā)明第一實施例顯示攝取圖像和顯示在顯示單元中的地 圖的例子的示意圖；圖9A和9B是圖示根據(jù)本發(fā)明第一實施例顯示存儲在地圖數(shù)據(jù)存儲單元中的地圖 數(shù)據(jù)的一部分以及顯示在顯示單元中的攝取圖像和地圖的例子的示意圖；圖10是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的功能組成例子的框圖；圖11A和11B是圖示根據(jù)本發(fā)明第一實施例顯示在顯示單元中示出的內(nèi)容選擇畫 面的例子的示意圖；圖12A和12B是圖示根據(jù)本發(fā)明第一實施例顯示在顯示單元中示出的內(nèi)容選擇畫 面的例子的示意圖；圖13A和13B是圖示根據(jù)本發(fā)明第一實施例顯示單元中的重放內(nèi)容的例子的示意 圖；圖14是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的地圖顯示控制處理的過程 的流程圖；圖15是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的地圖顯示控制處理的過程 中的地圖數(shù)據(jù)轉(zhuǎn)換處理的流程圖；圖16是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的地圖顯示控制處理的過程 的流程圖；圖17是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的地圖顯示控制處理的過程的流程圖；圖18是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備的地圖顯示控制處理的過程 中的內(nèi)容再現(xiàn)處理的流程圖；圖19是圖示根據(jù)本發(fā)明第二實施例的圖像攝取設(shè)備的內(nèi)部組成例子的框圖；
圖20是圖示根據(jù)本發(fā)明第二實施例的圖像攝取設(shè)備的功能組成例子的框圖；圖21A和21B是圖示根據(jù)本發(fā)明第二實施例圖像攝取設(shè)備的圖像攝取操作和在該 狀態(tài)下顯示的三維地圖的示意圖；以及圖22A和22B是圖示根據(jù)本發(fā)明第二實施例圖像攝取設(shè)備的圖像攝取操作和在該 狀態(tài)下顯示的三維地圖的示意圖。
具體實施例方式下文中將描述本發(fā)明的實施例。將按照下面示出的順序提供描述。1.第一實施例(地圖顯示控制顯示地圖以使圖像攝取期間的圖像攝取方向與顯 示平面上的特定方向彼此對應的例子)2.第二實施例(地圖顯示控制顯示三維地圖以使圖像攝取期間的圖像攝取方向 與顯示平面上的特定方向彼此對應的例子)第一實施例圖像攝取設(shè)備的組成例子圖1是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的內(nèi)部組成例子的框圖。 圖像攝取設(shè)備100設(shè)有相機模塊110、全球定位系統(tǒng)(GPS)模塊120、方位傳感器130和系統(tǒng) 控制單元140。另外，圖像攝取設(shè)備100還設(shè)有操作單元150、記錄單元160、顯示單元170 和音頻輸出單元180。圖像攝取設(shè)備100例如通過攝取對象的圖像來生成圖像數(shù)據(jù)，并且是 利用諸如將圖像數(shù)據(jù)記錄為內(nèi)容的數(shù)字靜態(tài)相機或數(shù)字視頻相機(例如，集成有相機的記 錄器)之類的圖像攝取設(shè)備來實現(xiàn)的。相機模塊110通過攝取對象的圖像來生成攝取圖像(圖像數(shù)據(jù))，并將所生成的攝 取圖像輸出到系統(tǒng)控制單元140。具體而言，相機模塊110設(shè)有光學單元、成像器件和信號 處理單元。在相機模塊110中，經(jīng)過光學單元入射的對象的光學圖像在成像器件的成像平 面上形成圖像，成像器件在該狀態(tài)下執(zhí)行圖像攝取操作，信號處理單元對成像信號執(zhí)行信 號處理，從而生成攝取圖像。另外，所生成的攝取圖像被順序輸出到系統(tǒng)控制單元140。此 夕卜，相機模塊110計算在生成攝取圖像時的視角信息和深度信息，并將視角信息和深度信 息輸出到系統(tǒng)控制單元140。這里，視角信息是指示所生成的攝取圖像的視角的值，并且例 如是基于在攝取圖像的生成期間在成像器件上的圖像攝取范圍(區(qū)域)和焦長來計算的。 另外，深度信息數(shù)據(jù)(所謂的深度地圖數(shù)據(jù))指示從圖像攝取位置(例如，成像器件的位 置)到攝取圖像中所包括的對象的距離(對象的距離)。深度信息可以針對形成攝取圖像 的每個像素計算，并且可以僅僅針對與最接近焦點的對象相對應的每個像素計算。例如，作 為計算深度信息的方法，可以使用飛行時間(TOF)法或者諸如模糊(距散焦的深度)量分 析之類的方法。這里，TOF法是基于從發(fā)射自光源的光在對象上被反射時直至到達傳感器 的光的延時和光速來計算與目標對象間的距離的方法。GPS模塊120基于由GPS信號接收天線(未示出)接收的GPS信號來計算攝取圖像位置信息，并將計算出的圖像攝取位置信息輸出到系統(tǒng)控制單元140。在計算出的圖像攝 取位置信息中，包括了與經(jīng)度、緯度和高度的位置有關(guān)的每項數(shù)據(jù)。另外，在本發(fā)明的第一 實施例中，示出了使用基于GPS信號計算出的圖像攝取位置信息的例子，但是也可以使用 在獲取圖像攝取位置信息的另一方法中獲取的圖像攝取位置信息。例如，可以通過存在無 線局域網(wǎng)(LAN)的環(huán)境使用接入點信息來繪制圖像攝取位置信息。方位傳感器130是利用地磁學測量地球上的方位的傳感器，并將測得的方位輸出 到系統(tǒng)控制單元140。例如，方位傳感器130是由具有彼此正交的2根軸(例如χ軸和y 軸)的線圈和設(shè)在其中心部分中的磁阻(MR)元件形成的磁傳感器。MR元件是檢測地磁力 的元件，并且其阻值根據(jù)磁力的大小而改變，并且MR元件的阻值變化被2軸的線圈劃分為 2個方向的分量(例如，χ軸和y軸分量)，然后基于這2個方向的分量中地磁力的比例來 計算方位。這里，在本發(fā)明的第一實施例中，方位傳感器130測量圖像攝取設(shè)備100的圖像 攝取方向(例如，圖4B中所示的箭頭412的方向)的方位。圖像攝取方向是從圖像攝取位 置(例如，圖像攝取設(shè)備100所在的位置)到相機模塊110所生成的攝取圖像中包括的對 象所在的位置的方向，并且該方向可以例如是物側(cè)上的光軸方向。另外，例如，圖像攝取方 向可以是基于 圖像攝取位置的攝取圖像內(nèi)的中心位置處所存在的對象的方向。此外，在本 發(fā)明的第一實施例中，示出了利用方位傳感器130來獲取圖像攝取方向的例子，但是也可 以使用由獲取圖像攝取方向的另一方法獲取的圖像攝取方向。例如，可以使用基于GPS信 號測得的方位。系統(tǒng)控制單元140執(zhí)行圖像攝取設(shè)備100整體的控制。例如，系統(tǒng)控制單元140 根據(jù)操作單元150所接收的來自用戶的操作輸入來執(zhí)行控制。另外，系統(tǒng)控制單元140控 制顯示在顯示單元170等中的內(nèi)容選擇畫面的顯示，并且控制向記錄單元160記錄或者從 記錄單元160讀取攝取圖像的操作，等等。此外，系統(tǒng)控制單元140控制顯示單元170顯示 由相機模塊110生成的攝取圖像和在監(jiān)視模式被設(shè)定時或者運動圖像的記錄期間與圖像 攝取位置有關(guān)的地圖。這里，監(jiān)視模式是用于例如在圖像攝取設(shè)備100待命用于圖像記錄 時實時地在顯示單元170中顯示從相機模塊110送來的攝取圖像的圖像攝取模式。操作單元150是接收來自用戶的操作輸入的操作輸入單元，并將根據(jù)所接收的操 作輸入的信號輸出到系統(tǒng)控制單元140。記錄單元160基于系統(tǒng)控制單元140的控制將由相機模塊110生成的攝取圖像記 錄為靜止圖像內(nèi)容或運動圖像內(nèi)容。另外，記錄單元160基于系統(tǒng)控制單元140的控制將 所記錄的靜止圖像內(nèi)容和運動圖像內(nèi)容提供給系統(tǒng)控制單元140。而且，記錄單元160容納 用于在顯示單元170中顯示地圖的地圖數(shù)據(jù)。此外，記錄單元160容納用于管理靜止圖像 內(nèi)容或運動圖像內(nèi)容的內(nèi)容管理信息。另外，可以將記錄介質(zhì)(例如閃存等)用作記錄單 元160。而且，記錄單元160可以內(nèi)置在圖像攝取設(shè)備100中，并且可以可分離地安裝在圖 像攝取設(shè)備100中。顯示單元170是用于基于系統(tǒng)控制單元140的控制顯示各種圖像的顯示單元。例 如，顯示單元170顯示由相機模塊110生成的攝取圖像、從記錄單元160讀出的靜止圖像內(nèi) 容或運動圖像內(nèi)容、要提供給用戶的內(nèi)容選擇畫面，等等。顯示單元170可以使用例如液晶 顯示器(LCD)或有機電致發(fā)光器件(有機EL)。音頻輸出單元180基于系統(tǒng)控制單元140的控制輸出各種音頻信息。音頻輸出單元180可以例如由揚聲器實現(xiàn)。圖2是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的功能組成例子的框圖。 圖像攝取設(shè)備100設(shè)有地圖數(shù)據(jù)存儲單元200、圖像攝取單元211、圖像攝取位置信息獲取 單元212、圖像攝取方向信息獲取單元213、相機信息獲取單元214和地圖數(shù)據(jù)獲取單元 220。另外，圖像攝取設(shè)備100設(shè)有地圖數(shù)據(jù)轉(zhuǎn)換單元230、圖像攝取范圍計算單元240、顯 示控制單元250、顯示單元260、操作接收單元270、記錄控制單元280、內(nèi)容存儲單元290和 內(nèi)容管理信息存儲單元300。地圖數(shù)據(jù)存儲單元200存儲用于在顯示單元260中顯示地圖的地圖數(shù)據(jù)，并將所 存儲的地圖數(shù)據(jù)提供給地圖數(shù)據(jù)獲取單元220。例如，存儲在地圖數(shù)據(jù)存儲單元200中的地 圖數(shù)據(jù)是由經(jīng)度和緯度標定的數(shù)據(jù)，并且以預定的經(jīng)度寬度和緯度寬度為單位被劃分為多 個區(qū)域。另外，地圖數(shù)據(jù)存儲單元200對應于圖1中所示的記錄單元160。圖像攝取單元211通過攝取對象的圖像來生成攝取圖像，并將所生成的攝取圖像 輸出到顯示控制單元250和記錄控制單元280。另外，圖像攝取單元211對應于圖1中所示 的相機模塊110。圖像攝取位置信息獲取單元212獲取與圖像攝取位置有關(guān)的圖像攝取位置信息， 并將所獲取的圖像攝取位置信息輸出到地圖數(shù)據(jù)獲取單元220、地圖數(shù)據(jù)轉(zhuǎn)換單元230和 記錄控制單元280。另外，圖像攝取位置信息獲取單元212對應于圖1中所示的GPS模塊 120。圖像攝取方向信息獲取單元213獲取與圖像攝取方向有關(guān)的圖像攝取方向信息， 并將所獲取的圖像攝取方向信息輸出到地圖數(shù)據(jù)轉(zhuǎn)換單元230和記錄控制單元280。另外， 圖像攝取方向信息獲取單元213對應于圖1中所示的方位傳感器130。而且，圖像攝取方向 信息獲取單元213是本發(fā)明的權(quán)利要求中所述的圖像攝取方向獲取單元的例子。相機信息獲取單元214獲取在生成攝取圖像時的視角信息和深度信息，并將所獲 取的視角信息和深度信息輸出到圖像攝取范圍計算單元240和記錄控制單元280。另外，相 機信息獲取單元214對應于圖1中所示的相機模塊110。相機信息獲取單元214是本發(fā)明 的權(quán)利要求中所述的視角深度信息獲取單元的例子。地圖數(shù)據(jù)獲取單元220基于從圖像攝取位置信息獲取單元212輸出的圖像攝取位 置信息來從地圖數(shù)據(jù)存儲單元200獲取地圖數(shù)據(jù)，并將所獲取的地圖數(shù)據(jù)輸出到地圖數(shù)據(jù) 轉(zhuǎn)換單元230。另外，地圖數(shù)據(jù)獲取單元220對應于圖1中所示的系統(tǒng)控制單元140。
地圖數(shù)據(jù)轉(zhuǎn)換單元230基于從圖像攝取方向信息獲取單元213輸出的圖像攝取方 向信息來轉(zhuǎn)換從地圖數(shù)據(jù)獲取單元220輸出的地圖數(shù)據(jù)，并將轉(zhuǎn)換后的地圖數(shù)據(jù)輸出到顯 示控制單元250。具體而言，地圖數(shù)據(jù)轉(zhuǎn)換單元230轉(zhuǎn)換地圖數(shù)據(jù)以使得在與從地圖數(shù)據(jù)獲 取單元220輸出的地圖數(shù)據(jù)相對應的地圖中的圖像攝取方向與顯示單元260中的特定方向 相對應。例如，地圖數(shù)據(jù)轉(zhuǎn)換單元230以由從圖像攝取位置信息獲取單元212輸出的圖像 攝取位置信息指定的圖像攝取位置作為基準位置，并且對從地圖數(shù)據(jù)獲取單元220輸出的 地圖數(shù)據(jù)執(zhí)行旋轉(zhuǎn)處理。在這種情況下，地圖數(shù)據(jù)轉(zhuǎn)換單元230對地圖數(shù)據(jù)執(zhí)行旋轉(zhuǎn)處理， 其旋轉(zhuǎn)角由從圖像攝取方向信息獲取單元213輸出的圖像攝取方向信息指定。這里，特定 方向例如可以是在用于顯示與存儲在內(nèi)容存儲單元290中的內(nèi)容相對應的圖像的顯示平 面中、圖像的垂直方向上的向上方向。另外，將參考圖5A、5B、6A和6B詳細描述地圖數(shù)據(jù)的
9轉(zhuǎn)換。而且，地圖數(shù)據(jù)轉(zhuǎn)換單元230對應于圖1中所示的系統(tǒng)控制單元140。另外，地圖數(shù) 據(jù)轉(zhuǎn)換單元230是本發(fā)明的權(quán)利要求中所述的轉(zhuǎn)換單元的例子。圖像攝取范圍計算單元240基于從相機信息獲取單元214輸出的視角信息和深度 信息來計算用于創(chuàng)建圖像攝取狀態(tài)確認圖像(圖7B中所示)的圖像攝取范圍，并將計算出 的圖像攝取范圍輸出到顯示控制單元250。將參考圖7A和7B詳細描述圖像攝取范圍的計 算。另外，圖像攝取范圍計算單元240對應于圖1中所示的系統(tǒng)控制單元140。顯示控制單元250使顯示單元260顯示從圖像攝取單元211輸出的攝取圖像和與 從地圖數(shù)據(jù)轉(zhuǎn)換單元230輸出的轉(zhuǎn)換后的地圖數(shù)據(jù)相對應的地圖。另外，顯示控制單元250 使顯示單元260以疊加方式在地圖上顯示與從圖像攝取范圍計算單元240輸出的圖像攝取 范圍相對應的圖像攝取狀態(tài)確認圖像。此外，顯示控制單元250使顯示單元以根據(jù)來自操 作接收單元270的操作輸入而改變的地圖大小來顯示圖像。將參考圖8A、8B、9A和9B詳細 描述這種顯示的例子。另外，顯示控制單元250對應于圖1中所示的系統(tǒng)控制單元140。顯示單元260是用于基于顯示控制單元250的控制顯示各種圖像的顯示單元。顯 示單元260對應于圖1中所示的顯示單元170。
操作接收單元270是用于接收來自用戶的操作輸入的操作接收單元，并將根據(jù)所 接收的操作輸入的操作內(nèi)容輸出到顯示控制單元250或記錄控制單元280。例如，操作接 收單元270在接收到指示監(jiān)視模式設(shè)置的操作時將操作內(nèi)容輸出到顯示控制單元250。另 夕卜，操作接收單元270例如在接收到指示運動圖像記錄的操作時將操作內(nèi)容輸出到顯示控 制單元250和記錄控制單元280。此外，操作接收單元270例如在接收到指示靜止圖像記錄 的操作(換句話說，快門操作)時將操作內(nèi)容輸出到記錄控制單元280。另外，操作接收單 元270對應于圖1中所示的操作單元150。記錄控制單元280使內(nèi)容存儲單元290將從圖像攝取單元211輸出的攝取圖像 記錄為靜止圖像內(nèi)容或運動圖像內(nèi)容。另外，記錄控制單元280使內(nèi)容管理信息存儲單元 300通過將從圖像攝取位置信息獲取單元212、圖像攝取方向信息獲取單元213和相機信息 獲取單元214輸出的各條信息與靜止圖像內(nèi)容和運動圖像內(nèi)容相關(guān)聯(lián)來記錄這些信息。例 如，當操作接收單元270接收到指示運動圖像記錄的操作時，記錄控制單元280使內(nèi)容存儲 單元290將從圖像攝取單元211輸出的攝取圖像記錄為運動圖像內(nèi)容。在記錄時，記錄控 制單元280使得內(nèi)容管理信息存儲單元300針對包括運動圖像內(nèi)容的每一幀記錄各條信息 (圖像攝取位置信息、圖像攝取方向信息、視角信息和深度信息)。當運動圖像被記錄時，可 對于每一幀記錄各條信息，并且可以使得內(nèi)容管理信息存儲單元300按每個均勻間隔(例 如，針對每個圖片組(GOP))記錄各條信息。此外，例如當操作接收單元270接收到指示靜 止圖像記錄的操作時，記錄控制單元280使得內(nèi)容存儲單元290將從圖像攝取單元211輸 出的攝取圖像記錄為靜止圖像內(nèi)容。在記錄時，記錄控制單元280使得內(nèi)容管理信息存儲 單元300針對靜止圖像內(nèi)容記錄各條信息(圖像攝取位置信息、圖像攝取方向信息、視角信 息和深度信息)。另外，記錄控制單元280對應于圖1中所示的系統(tǒng)控制單元140。內(nèi)容存儲單元290基于記錄控制單元280的控制將從圖像攝取單元211輸出的攝 取圖像記錄為靜止圖像內(nèi)容或運動圖像內(nèi)容。另外，內(nèi)容存儲單元290對應于圖1中所示 的記錄單元160。內(nèi)容管理信息存儲單元300基于記錄控制單元280的控制通過將從圖像攝取位置信息獲取單元212、圖像攝取方向信息獲取單元213和相機信息獲取單元214輸出的各條信 息與攝取圖像相關(guān)聯(lián)來記錄這些信息。此外，內(nèi)容管理信息存儲單元300對應于圖1中所 示的記錄單元160。另外，內(nèi)容管理信息存儲單元300是本發(fā)明的權(quán)利要求中所述的代表性 圖像存儲單元的例子。圖3是示意性地圖示根據(jù)本發(fā)明第一實施例的內(nèi)容管理信息存儲單元300的存儲 內(nèi)容的示意圖。內(nèi)容管理信息存儲單元300通過對內(nèi)容的類型進行分類(運動圖像內(nèi)容和 靜止圖像內(nèi)容)來存儲元數(shù)據(jù)340。具體而言，在“運動圖像內(nèi)容”的內(nèi)容類型310的字段 中，彼此關(guān)聯(lián)地存儲了內(nèi)容標識信息320、圖像標識信息330和元數(shù)據(jù)340。另外，在“靜止 圖像內(nèi)容”的內(nèi)容類型310的字段中，彼此關(guān)聯(lián)地存儲了內(nèi)容標識信息320和元數(shù)據(jù)340。內(nèi)容標識信息320是用于標識每項內(nèi)容的信息，例如，其中容納了“#1”和“#2”作 為與運動圖像內(nèi)容有關(guān)的內(nèi)容標識信息。另外，其中容納了“#100”、“#200”和“#300”作為 與靜止圖像內(nèi)容有關(guān)的內(nèi)容標識信息。圖像標識信息330是用于標識包括運動圖像內(nèi)容的每個攝取圖像(幀)的信息，例如，針對包括與“#1”的內(nèi)容標識信息320相對應的運動圖像內(nèi)容的每個攝取圖像容納了 “#11”、“#12”和“#13”。另外，在圖像標識信息330中，僅針對其信息被容納在元數(shù)據(jù)340 中的攝取圖像容納標識信息。元數(shù)據(jù)340是與每個攝取圖像有關(guān)的元數(shù)據(jù)，并且圖像攝取位置信息341、圖像攝 取方向信息342、深度信息343、視角信息344、索引圖像345和代表性圖像信息346被容納 作為元數(shù)據(jù)。另外，在圖3中，在圖像攝取位置信息341、圖像攝取方向信息342、深度信息 343和視角信息344中容納的信息被省略，并且在索引圖像345中容納的索引圖像以矩形形 狀被簡化。圖像攝取位置信息341是包括當相應圖像被攝取時的圖像攝取位置(例如，緯度 和經(jīng)度)的信息，并且容納了由圖像攝取位置信息獲取單元212獲取的圖像攝取位置信息。圖像攝取方向信息342是包括當相應圖像被攝取時的圖像攝取方向(例如，當圖 像攝取位置是基準位置時的方位)的信息，并且容納了由圖像攝取方向信息獲取單元213 獲取的圖像攝取方向信息。深度信息343是為相應的攝取圖像計算出的深度信息，并且容納了由相機信息獲 取單元214獲取的深度信息。視角信息344是為相應的攝取圖像計算出的視角信息，并且容納了由相機信息獲 取單元214獲取的視角信息。索引圖像345是當選擇相應內(nèi)容時使用的索引圖像(代表性圖像)，并且例如容納 了相應攝取圖像的縮略圖像?？s略圖像例如是由記錄控制單元280生成的。代表性圖像信息346是用于在包括相應運動圖像內(nèi)容的各個攝取圖像中指定被 確定為代表性圖像的攝取圖像的信息。在圖3中，在包括運動圖像內(nèi)容的各個攝取圖像中， 被確定為代表性圖像的攝取圖像的字段被賦予“1”，而其他攝取圖像的字段被賦予“0”。這 里，在運動圖像內(nèi)容的情況下，僅僅針對被賦予“1”的所確定的代表性圖像和多個攝取圖 像，在索引圖像345中容納有索引圖像。作為確定代表性圖像的方法，例如可以使用這樣一 種方法當在記錄運動圖像內(nèi)容的操作開始之后首先接收到GPS信號時的攝取圖像被確定 為代表性圖像。例如，在包括與“#1”的內(nèi)容標識信息320相對應的運動圖像內(nèi)容的各個攝取圖像中，與“#11”的圖像標識信息330相對應的攝取圖像被確定為代表性圖像，并且針對 該攝取圖像在索引圖像345中容納了索引圖像。另外，上述確定代表性圖像的方法是一個 例子，并且可以使用通過根據(jù)某一規(guī)則從運動圖像內(nèi)容中選擇一個圖像來確定代表性圖像 的方法。例如，可以使用將運動圖像內(nèi)容的開頭圖像確定為代表性圖像的方法。此外，在該例子中，示出了在內(nèi)容管理信息存儲單元中存儲元數(shù)據(jù)的例子，但是例 如，元數(shù)據(jù)可被存儲在每個內(nèi)容文件中。地圖的顯示控制的例子圖4A和4B是示意性地圖示根據(jù)本發(fā)明第一實施例被存儲在地圖數(shù)據(jù)存儲單元 200中的地圖數(shù)據(jù)的一部分和在與地圖數(shù)據(jù)相對應的區(qū)域中的圖像攝取操作的示意圖。圖 4A中所示的地圖400是示出與存儲在地圖數(shù)據(jù)存儲單元200中的地圖數(shù)據(jù)的一部分相對應 的區(qū)域的地圖。另外，在圖4A和4B中，向上的方向假定為北方。而且，假定在對應于地圖 400的區(qū)域中例如有AA車站、〇〇車站、XX車站、 公園、 大學、□□高中和▽▽ 旅館。圖4B示意性地示出了當用戶利用圖像攝取設(shè)備100在與圖4A所示的地圖400相 對應的區(qū)域410中執(zhí)行圖像攝取操作時的情況。例如，在區(qū)域410中的圖像攝取位置411 上，用戶在圖像攝取設(shè)備100的圖像攝取方向412被指示朝向“〇〇車站”的狀態(tài)下執(zhí)行圖 像攝取操作(換句話說，攝取作為主要對象的“〇〇車站”的圖像)。圖5A和5B是示意性地圖示根據(jù)本發(fā)明的第一實施例計算用在地圖數(shù)據(jù)轉(zhuǎn)換單元 230的地圖數(shù)據(jù)的轉(zhuǎn)換處理中的旋轉(zhuǎn)角的方法的示意圖。圖5A示出了在圖4B所示的區(qū)域410中由北方方向413和圖像攝取方向412形成 的角度0 1。圖5B示出了圖5A所示的圖像攝取設(shè)備100、圖像攝取位置411、圖像攝取方向 412和北方方向413，以及在虛線圓圈414內(nèi)由圖像攝取方向412和北方方向413形成的角 度9 1。另外，在圓圈414的外周中，示出了在圖像攝取位置411被假定為基準位置的情況 下的方位(北、南、東和西)。而且，在本發(fā)明的第一實施例中，示出了以下例子地圖數(shù)據(jù) 轉(zhuǎn)換單元230利用當北方方向413為0度時由圖像攝取方向412和北方方向413形成的角 度e 1作為旋轉(zhuǎn)角來執(zhí)行地圖數(shù)據(jù)的轉(zhuǎn)換處理。角度e 1的值是由地圖數(shù)據(jù)轉(zhuǎn)換單元230 基于圖像攝取方向信息獲取單元213獲取的圖像攝取方向信息來計算的。圖6A和6B是示意性地圖示根據(jù)本發(fā)明第一實施例來自存儲在地圖數(shù)據(jù)存儲單元 200中的地圖數(shù)據(jù)的作為顯示目標的區(qū)域(顯示目標區(qū))的示意圖。圖6A示出了地圖400 中的虛線矩形420，其中圖像攝取位置411是虛線矩形420的中心。矩形420的大小假定與 顯示目標區(qū)的大小相同。另外，穿過矩形420的中心位置(圖像攝取位置411)并且與南北 方向平行的線段是線段415。圖6B示出了粗虛線的矩形421，它是通過以圖像攝取位置411為中心、將矩形420 旋轉(zhuǎn)角度ei而形成的。當在圖4B所示的狀態(tài)下利用圖像攝取設(shè)備100執(zhí)行圖像攝取操 作時，矩形421中包括的區(qū)域(存在〇〇車站、□□高中和▽▽旅館的區(qū)域)是地圖400中 的顯示目標區(qū)。這里，矩形421的長邊與圖像攝取方向412正交。另外，在本發(fā)明的第一實 施例中，矩形421中包括的區(qū)域被顯示為使得與指示圖像攝取方向412的箭頭的尖端形成 接觸的長邊位于顯示單元260中的顯示畫面的上側(cè)。圖8B中示出了顯示的例子。圖7A和7B是示意性地圖示根據(jù)本發(fā)明第一實施例創(chuàng)建被疊加在與經(jīng)地圖數(shù)據(jù)轉(zhuǎn)換單元230轉(zhuǎn)換的地圖數(shù)據(jù)相對應的地圖上的圖像攝取狀態(tài)確認圖像的方法的示意圖。圖 7A中所示的區(qū)域410與圖5A中所示的區(qū)域410相同。在該例子中，在圖7A所示的圖像攝 取操作中，圖像攝取范圍計算單元240假定基于由相機信息獲取單元214獲取的視角信息 和深度信息來計算視角0 11和深度值dll。另外，視角0 11對應于由圖像攝取單元211生 成的攝取圖像的視角，并且深度值dll可以通過將由深度信息指定的值(到對象的距離) 乘以某一值來計算得到。圖7B示出了基于由圖像攝取范圍計算單元240計算出的視角0 11和深度值dll 而創(chuàng)建的圖像攝取狀態(tài)確認圖像430。圖像攝取狀態(tài)確認圖像430是通過以圖形形式顯示 圖像攝取范圍而表示的操作支持圖像，并且被以重疊方式顯示在地圖上。圖像攝取狀態(tài)確 認圖像430是由圖像攝取位置圖像431和圖像攝取范圍圖像432形成的。圖像攝取位置圖像431是圓形的圖像，其指示地圖上圖像攝取設(shè)備100的圖像攝 取位置。圖像攝取范圍圖像432是等腰三角形的圖像，其指示地圖上圖像攝取設(shè)備100的 圖像攝取范圍，并且其頂角被包括在圖像攝取位置圖像431中。另外，在圖像攝取范圍圖 像432中，頂角是視角0 11，并且從底邊到圖像攝取位置圖像431的距離是深度值dll。因 此，用戶可以很容易通過等腰三角形獲知與由相機信息獲取單元214獲取的視角信息和深 度信息相對應的圖像攝取范圍的概況。此外，例如當用戶操作地圖以放大或縮小時，可以使 圖像攝取狀態(tài)確認圖像430的圖像攝取范圍圖像432的大小根據(jù)放大或縮小的需要而放大 或縮小。圖8A和8B是圖示根據(jù)本發(fā)明第一實施例顯示攝取圖像和顯示在顯示單元260中 的地圖的例子的示意圖。圖8A示出了由圖像攝取單元211生成的攝取圖像450。攝取圖 像450是在圖4B所示的圖像攝取操作的狀態(tài)下由圖像攝取單元211生成的攝取圖像。換 句話說，在圖4B所示的例子中，圖像攝取操作是以“〇〇車站”作為主要對象執(zhí)行的，并且 因此“〇〇車站”的車站建筑物被包括在攝取圖像450中。圖8B示出了在圖8A所示的攝取圖像450上設(shè)有地圖顯示區(qū)460的圖像451。例 如，在地圖顯示區(qū)460中，顯示了與當執(zhí)行圖4B所示的圖像攝取操作時指定的顯示目標區(qū) (包括在圖6B所示的矩形421中的區(qū)域)相對應的地圖。另外，在顯示在地圖顯示區(qū)460 中的地圖上，以重疊方式顯示了圖像攝取狀態(tài)確認圖像430和地圖符號461。圖像攝取狀態(tài)確認圖像430是通過圖7B所示的方法創(chuàng)建的圖像攝取狀態(tài)確認圖 像。圖像攝取狀態(tài)確認圖像430被顯示為使得例如圖像攝取位置圖像431被布置在地圖顯 示區(qū)460的中心位置處，并且圖像攝取范圍圖像432的底邊被放置在顯示單元260中垂直 方向的上側(cè)。地圖符號461是指示北、南、東和西的地圖符號，并且根據(jù)北、南、東和西方向被布 置在地圖顯示區(qū)460中顯示的地圖上。在圖8B所示的例子中，從“▽▽旅館”到“〇〇車站” 的方向是北方，從而根據(jù)該方向來布置符號。因此，通過根據(jù)圖像攝取方向旋轉(zhuǎn)所顯示的地 圖，可以很容易識別方向。此外，在圖8B所示的顯示例子中，示出了這樣的例子其中地圖顯示區(qū)460被顯示 在圖像451的右下部，但是地圖顯示區(qū)460也可以顯示在圖像451的其他部分中。另外，地 圖顯示區(qū)460的顯示位置可以通過用戶的手動操作改變。
這里，將描述創(chuàng)建圖8B中所示的圖像451的方法。例如，攝取圖像450是在圖4B 所示的圖像攝取操作的狀態(tài)下由圖像攝取單元211生成的。另外，在該狀態(tài)下，基于從圖像 攝取位置信息獲取單元212輸出的圖像攝取位置信息來指定圖像攝取設(shè)備100所在的圖像 攝取位置411。此外，地圖數(shù)據(jù)獲取單元220基于由圖像攝取位置411指定的經(jīng)度和緯度來 從地圖數(shù)據(jù)存儲單元200獲取地圖數(shù)據(jù)，并將該數(shù)據(jù)輸出到地圖數(shù)據(jù)轉(zhuǎn)換單元230。作為獲 取目標的地圖數(shù)據(jù)例如是至少包括以矩形形狀(例如，圖6B中所示的矩形420和421)的 顯示目標區(qū)的對角線為直徑的圓形區(qū)域的地圖數(shù)據(jù)。隨后，地圖數(shù)據(jù)轉(zhuǎn)換單元230基于從圖像攝取位置信息獲取單元212輸出的圖 像攝取位置信息和從圖像攝取方向信息獲取單元213輸出的圖像攝取方向信息來轉(zhuǎn)換從 地圖數(shù)據(jù)獲取單元220輸出的地圖數(shù)據(jù)。然后，轉(zhuǎn)換后的地圖數(shù)據(jù)被輸出到顯示控制單元 250。作為轉(zhuǎn)換地圖數(shù)據(jù)的方法，例如可以使用仿射變換，該仿射變換利用2維坐標上的3x3 矩陣(仿射矩陣)來轉(zhuǎn)換2點的位置。具體而言，地圖數(shù)據(jù)轉(zhuǎn)換單元230以由圖像攝取位 置411指定的經(jīng)度和緯度作為旋轉(zhuǎn)基準，并對從地圖數(shù)據(jù)獲取單元220輸出的地圖數(shù)據(jù)的 每個值執(zhí)行仿射變換。在仿射變換中，執(zhí)行以下轉(zhuǎn)換將與從地圖數(shù)據(jù)獲取單元220輸出 的地圖數(shù)據(jù)相對應的地圖旋轉(zhuǎn)θ 1度。經(jīng)仿射變換轉(zhuǎn)換的地圖數(shù)據(jù)被輸出到顯示控制單元 250。該例子描述了從地圖數(shù)據(jù)獲取單元220輸出的地圖數(shù)據(jù)被轉(zhuǎn)換并且與轉(zhuǎn)換后的地圖 數(shù)據(jù)相對應的地圖被用作顯示目標區(qū)的情況。然而，例如，可以利用繪圖緩沖器來繪制與從 地圖數(shù)據(jù)獲取單元220輸出的地圖數(shù)據(jù)相對應的地圖，并且可以從繪制的地圖中取出并使 用顯示目標區(qū)。例如，設(shè)置在利用繪圖緩沖器繪制的地圖中的取出框(具有與顯示目標區(qū) 相同大小的框)，將取出框旋轉(zhuǎn)θ 1度，從而在旋轉(zhuǎn)后的取出框中包含的地圖可以用作顯示 目標區(qū)。 隨后，顯示控制單元250在攝取圖像450中的地圖顯示區(qū)460內(nèi)繪制與從地圖數(shù) 據(jù)轉(zhuǎn)換單元230輸出的轉(zhuǎn)換后的地圖數(shù)據(jù)相對應的地圖，并在顯示單元260中顯示繪有地 圖的圖像451。在這種情況下，顯示控制單元250顯示地圖，使得由圖像攝取位置411指定 的經(jīng)度和緯度是地圖顯示區(qū)460的中心位置。另外，顯示控制單元250使得圖像攝取狀態(tài) 確認圖像430和地圖符號461通過以重疊方式繪制而被顯示在地圖顯示區(qū)460中所繪制的 地圖上。例如，當監(jiān)視模式被設(shè)定時或者在運動圖像記錄期間，顯示設(shè)有地圖顯示區(qū)的攝 取圖像。另外，攝取圖像可以根據(jù)來自操作接收單元270的操作指令而被顯示。此外，根據(jù) 來自操作接收單元270的操作指令，顯示在地圖顯示區(qū)460中的地圖可以被放大或縮小以 及在期望方向上移動。這樣，通過顯示地圖以使得在圖像攝取設(shè)備100的圖像攝取方向上的物側(cè)是顯示 單元260的顯示平面中的上側(cè)，利用圖像攝取設(shè)備100執(zhí)行圖像攝取操作的用戶可以很容 易獲知地圖上的當前圖像攝取方向。上面描述了圖像攝取狀態(tài)確認圖像430和地圖符號461被以重疊方式顯示在攝取 圖像內(nèi)的地圖顯示區(qū)中的情況，但是，例如，也可以以重疊方式顯示存在于作為顯示目標的 地圖上的指示地標等的圖像。圖9Α和9Β是圖示根據(jù)本發(fā)明第一實施例顯示存儲在地圖數(shù)據(jù)存儲單元200中的 地圖數(shù)據(jù)的一部分以及顯示在顯示單元260中的攝取圖像和地圖的例子的示意圖。圖9Α示出了地圖470，其中向圖4A所示的地圖400添加了地標471。另外，地標是用作特有標志 或象征的建筑物等，例如東京塔、京都塔等等。與地標有關(guān)的疊加數(shù)據(jù)例如與地圖數(shù)據(jù)一同 以與位置相關(guān)聯(lián)的方式存儲在地圖數(shù)據(jù)存儲單元200中。圖9B示出了顯示在顯示單元260的地圖顯示區(qū)481中與地標圖像482重疊的圖 像480的例子。另外，圖像480與圖8B所示的圖像451相同，除了以重疊方式顯示地標圖 像482以外。為此，相同的部分被賦予相同的標號，并且將不重復其描述。地標圖像482是以圖形形式顯示地標的特征的圖像，例如，當?shù)貥?71是諸如京都 塔之類的建筑物時，地標的外觀被以圖形形式顯示為圖9B所示的圖像。例如，顯示控制單元250在與從地圖數(shù)據(jù)轉(zhuǎn)換單元230輸出的轉(zhuǎn)換后的地圖數(shù)據(jù) 相對應的地圖上繪制地標圖像482，并且繪有地標圖像482的圖像480被顯示在顯示單元 260中。此外，僅僅與包括在由圖像攝取范圍計算單元240計算出的圖像攝取范圍中的地標 有關(guān)的地標圖像可被顯示在地圖上。另外，包括 在圖像攝取范圍 中的地標和不包括在圖像 攝取范圍中的地標可以以不同的顯示形式被顯示在地圖上，從而可以區(qū)分各個地標圖像。這樣，通過在地圖上顯示地標圖像且其顯示位置對應于也以重疊方式顯示圖像的 位置，用戶可以很容易識別出在當前圖像攝取范圍內(nèi)或者圖像攝取范圍周邊是否有地標。 因此，通過在地標附近將地標作為拍攝對象，可以防止喪失最佳的拍攝機會。上面示出了當監(jiān)視模式被設(shè)定時或者在運動圖像記錄期間(換句話說，在用戶利 用圖像攝取設(shè)備100執(zhí)行圖像攝取操作的狀態(tài)下)以重疊方式在通過圖像攝取操作生成的 攝取圖像上顯示地圖的例子。下文中，將示出當通過圖像攝取操作記錄的內(nèi)容被再現(xiàn)時、利 用存儲在內(nèi)容管理信息存儲單元300中的元數(shù)據(jù)340(圖3中所示)以重疊方式在與內(nèi)容 相對應的圖像上顯示地圖的例子。圖像攝取設(shè)備的功能組成的例子圖10是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的功能組成例子的框圖。 圖10中所示的例子是與圖像攝取設(shè)備100的再現(xiàn)有關(guān)的功能組成的例子，并且是圖2中所 示的功能組成的修改例。為此，與圖2中所示的功能組成共同的部分被賦予相同的標號，并 且將不重復其描述，而將主要描述與圖2中所示的功能組成不同的部分。圖像攝取設(shè)備100 設(shè)有地圖數(shù)據(jù)存儲單元200、地圖數(shù)據(jù)獲取單元220、地圖數(shù)據(jù)轉(zhuǎn)換單元230和圖像攝取范 圍計算單元240。另外，圖像攝取設(shè)備100還設(shè)有顯示控制單元250、顯示單元260、操作接 收單元270、內(nèi)容存儲單元290、內(nèi)容管理信息存儲單元300和數(shù)據(jù)獲取單元350。地圖數(shù)據(jù)獲取單元220基于從數(shù)據(jù)獲取單元350輸出的圖像攝取位置信息來從地 圖數(shù)據(jù)存儲單元200獲取地圖數(shù)據(jù)，并將所獲取的地圖數(shù)據(jù)輸出到地圖數(shù)據(jù)轉(zhuǎn)換單元230。地圖數(shù)據(jù)轉(zhuǎn)換單元230基于從數(shù)據(jù)獲取單元350輸出的圖像攝取位置信息和圖像 攝取方向信息來轉(zhuǎn)換從地圖數(shù)據(jù)獲取單元220輸出的地圖數(shù)據(jù)，并將轉(zhuǎn)換后的地圖數(shù)據(jù)輸 出到顯示控制單元250。圖像攝取范圍計算單元240基于從數(shù)據(jù)獲取單元350輸出的視角信息和深度信息 來計算圖像攝取范圍，并將計算出的圖像攝取范圍輸出到顯示控制單元250。數(shù)據(jù)獲取單元350根據(jù)從操作接收單元270接收的操作輸入來獲取存儲在內(nèi)容存 儲單元290或內(nèi)容管理信息存儲單元300中的數(shù)據(jù)，并將所獲取的數(shù)據(jù)提供給各個單元。具體而言，當操作接收單元270接收到指示顯示內(nèi)容選擇畫面的操作時，數(shù)據(jù)獲取單元350順序獲取內(nèi)容管理信息存儲單元300的索引圖像345(圖3中所示)并輸出到 顯示控制單元250。然后，顯示控制單元250使顯示單元260顯示包括用于選擇內(nèi)容的索引 圖像的視圖的內(nèi)容選擇畫面(圖11A、11B、12A和12B中所示)。另外，當操作接收單元270接收到內(nèi)容選擇畫面中的選擇操作時，數(shù)據(jù)獲取單元 350獲取與所選的索引圖像相關(guān)聯(lián)地存儲在內(nèi)容管理信息存儲單元300中的元數(shù)據(jù)340 (圖 3中所示)。此外，數(shù)據(jù)獲取單元350將所獲取的元數(shù)據(jù)中的圖像攝取位置信息輸出到地 圖數(shù)據(jù)獲取單元220，將圖像攝取位置信息和圖像攝取方向信息輸出到地圖數(shù)據(jù)轉(zhuǎn)換單元 230，并將深度信息和視角信息輸出到圖像攝取范圍計算單元240。顯示控制單元250基于 從地圖數(shù)據(jù)轉(zhuǎn)換單元230輸出的地圖數(shù)據(jù)和從圖像攝取范圍計算單元240輸出的圖像攝取 范圍來使得內(nèi)容選擇畫面中的地圖顯示區(qū)顯示疊加了圖像攝取狀態(tài)確認圖像和地圖符號 的地圖。另外，當操作接收單元270接收到指示再現(xiàn)內(nèi)容選擇畫面中所選的內(nèi)容的操作 時，數(shù)據(jù)獲取單元350從內(nèi)容存儲單元290獲取與選中狀態(tài)的索引圖像相對應的內(nèi)容。另 夕卜，數(shù)據(jù)獲取單元350獲取與所獲取的內(nèi)容相關(guān)聯(lián)地存儲在內(nèi)容管理信息存儲單元300中 的元數(shù)據(jù)340。而且，數(shù)據(jù)獲取單元350將所獲取的元數(shù)據(jù)中的圖像攝取位置信息輸出到地 圖數(shù)據(jù)獲取單元220，將圖像攝取位置信息和圖像攝取方向信息輸出到地圖數(shù)據(jù)轉(zhuǎn)換單元 230，并將深度信息和視角信息輸出到圖像攝取范圍計算單元240。另外，數(shù)據(jù)獲取單元350 將所獲取的內(nèi)容輸出到顯示控制單元250。顯示控制單元250使得順序顯示從數(shù)據(jù)獲取單 元350輸出的內(nèi)容。另外，顯示控制單元250基于從地圖數(shù)據(jù)轉(zhuǎn)換單元230輸出的地圖數(shù) 據(jù)和從圖像攝取范圍計 算單元240輸出的圖像攝取范圍來使得疊加有圖像攝取狀態(tài)確認 圖像和地圖符號的地圖與內(nèi)容一同顯示。此外，將參考圖IlA至13B詳細描述這種顯示例 子。另外，數(shù)據(jù)獲取單元350對應于圖1中所示的系統(tǒng)控制單元140。地圖的顯示控制的例子圖11A、11B、12A和12B是圖示根據(jù)本發(fā)明第一實施例被顯示在顯示單元260中的 內(nèi)容選擇畫面的顯示例子的示意圖。圖IlA示出了用于當存儲在內(nèi)容存儲單元290中的內(nèi)容被再現(xiàn)時選擇作為再現(xiàn)目 標的內(nèi)容的內(nèi)容選擇畫面500。內(nèi)容選擇畫面500設(shè)有用于顯示用來選擇內(nèi)容的索引圖像 的索引圖像顯示區(qū)510。在索引圖像顯示區(qū)510中，顯示了存儲在內(nèi)容管理信息存儲單元 300的索引圖像345中的索引圖像511和513。另外，基于操作接收單元270的操作輸入， 通過在上下方向上移動滾動條514，顯示在索引圖像顯示區(qū)510中的索引圖像被在上下方 向上移動，從而可以顯示其他索引圖像。圖IlB示出了當操作接收單元270接收到用于選擇圖IlA所示的內(nèi)容選擇畫面 500上的索引圖像511的選擇操作時的顯示例(內(nèi)容選擇畫面501)。在圖IlB所示的內(nèi)容 選擇畫面501中，處于選中狀態(tài)的索引圖像511以粗框示出。這樣，與內(nèi)容選擇畫面501上 處于選中狀態(tài)的索引圖像511相對應的地圖被顯示在地圖顯示區(qū)520中。顯示在地圖顯示 區(qū)520中的地圖以及疊加在地圖上的圖像攝取狀態(tài)確認圖像430和地圖符號461與圖8B 中所示的相同，因此將不重復其描述。這樣，在圖像攝取期間圖像攝取方向上的對象被顯示在顯示單元260的顯示平面 的上側(cè)、與內(nèi)容選擇畫面上處于選中狀態(tài)的索引圖像相對應的地圖上，從而用戶可以很容易獲知圖像攝取期間的圖像攝取方向。因此，可以很容易獲知內(nèi)容被記錄時的位置和該時 刻的圖像攝取方向，從而用戶可以很容易獲取用于在內(nèi)容被選擇時進行地理判斷的信息。圖IlA和IlB示出了在索引圖像顯示區(qū)520中僅顯示索引圖像的例子。然而，可 以假定所存儲的內(nèi)容不與用于顯示地圖的元數(shù)據(jù)相關(guān)聯(lián)的情況。因此，下面將示出這樣一 個例子，其中索引圖像被顯示以便可以很容易獲知與元數(shù)據(jù)相關(guān)聯(lián)存儲的內(nèi)容。圖12A示出了與關(guān)聯(lián)到用于顯示地圖的元數(shù)據(jù)的內(nèi)容相對應的索引圖像被附上 指示該事實的字符“地圖”的顯示例子。例如，在圖12A所示的索引圖像顯示區(qū)530中，與索 引圖像531和533相對應的內(nèi)容假定與用于顯示地圖的元數(shù)據(jù)相關(guān)聯(lián)地存儲。另一方面， 與索引圖像532相對應的內(nèi)容假定不與用于顯示地圖的元數(shù)據(jù)相關(guān)聯(lián)地存儲。在這種情況 下，如圖12A所示，索引圖像531和533被顯示為重疊有字符“地圖”，而索引圖像532的顯 示則沒有字符“地圖”。因此，可以很容易獲知內(nèi)容是否與用于顯示地圖的元數(shù)據(jù)相關(guān)聯(lián)地 存儲的情況。另外，圖IlB示出了其中圖像攝取狀態(tài)確認圖像和地圖符號彼此疊加的地圖被顯 示在內(nèi)容選擇畫面501中的例子。然而，例如，相應內(nèi)容可以與其中圖像攝取狀態(tài)確認圖像 和地圖符號彼此疊加的地圖一同顯示。
圖12B示出了在圖IlB所示的地圖顯示區(qū)520的位置處設(shè)有內(nèi)容顯示區(qū)540的顯 示例子。內(nèi)容顯示區(qū)540顯示有與內(nèi)容相對應的圖像(放大的索引圖像或者包括內(nèi)容的圖 像)，并且在圖像上設(shè)有地圖顯示區(qū)541。此外，顯示在內(nèi)容顯示區(qū)540中的圖像和地圖與 圖8B中所示的相同，除了圖像451的大小以外。利用上述顯示，可以很容易獲知再現(xiàn)期間 的顯示形式。圖13A和13B是圖示根據(jù)本發(fā)明第一實施例顯示單元260中的重放內(nèi)容的例子的 示意圖。圖13A和13B示出了當圖像攝取設(shè)備100在圖4B所示的狀態(tài)下被搖向右側(cè)時記 錄的運動圖像內(nèi)容被再現(xiàn)時圖像的轉(zhuǎn)變。另外，圖13A中所示的圖像600與圖8B中所示的 圖像451相同。例如，當圖像攝取設(shè)備100在圖4B所示的狀態(tài)下被搖向右側(cè)時，攝取圖像中包括 的“〇〇車站”的車站建筑物601在攝取圖像內(nèi)向搖動方向相反的一側(cè)移動，如圖13A和13B 所示。另外，即使當執(zhí)行這種搖攝操作時，與圖像攝取操作的狀態(tài)相對應的元數(shù)據(jù)(圖像攝 取位置信息、圖像攝取方向信息、深度信息和視角信息)也可以被順序記錄在內(nèi)容管理信 息存儲單元300中。為此，例如，當在執(zhí)行搖攝操作時再現(xiàn)所記錄的運動圖像內(nèi)容時，基于 與圖像攝取操作的狀態(tài)相對應的元數(shù)據(jù)來顯示地圖。因此，例如，當再現(xiàn)在執(zhí)行從圖13A所 示的狀態(tài)到圖13B所示的狀態(tài)的搖攝操作時所記錄的運動圖像內(nèi)容時，根據(jù)搖攝操作而經(jīng) 歷旋轉(zhuǎn)處理的地圖被顯示在地圖顯示區(qū)630中。另外，在地圖顯示區(qū)630中的地圖上，顯示 了根據(jù)旋轉(zhuǎn)處理而旋轉(zhuǎn)的地圖符號632，并且顯示了圖像攝取狀態(tài)確認圖像631。這樣，根 據(jù)與再現(xiàn)中的內(nèi)容相對應的圖像的圖像攝取操作的狀態(tài)，顯示在地圖顯示區(qū)中的地圖、圖 像攝取狀態(tài)確認圖像和地圖符號被順序改變并被顯示。這里，假定例如當一邊頻繁移動一邊記錄運動圖像內(nèi)容時，用于顯示地圖的元數(shù) 據(jù)(圖像攝取位置信息、圖像攝取方向信息、深度信息和視角信息)被以均勻間隔順序記錄 在內(nèi)容管理信息存儲單元300中。當運動圖像內(nèi)容被再現(xiàn)時，假定地圖的角度等被頻繁改 變(如果地圖基于元數(shù)據(jù)被順序旋轉(zhuǎn)并顯示的話)。如果如上所述地圖的角度等被頻繁改變，則用戶可能難以讀懂地圖。因此，例如，當與元數(shù)據(jù)相對應的旋轉(zhuǎn)角不超過閾值時，不對 地圖執(zhí)行旋轉(zhuǎn)處理，而是僅當旋轉(zhuǎn)角超過閾值時，才可以執(zhí)行旋轉(zhuǎn)處理。另外，假定當不與用于轉(zhuǎn)換地圖的元數(shù)據(jù)(圖像攝取方向信息)相關(guān)聯(lián)的內(nèi)容被 再現(xiàn)時，其他元數(shù)據(jù)(圖像攝取位置信息、深度信息和視角信息)與該內(nèi)容相關(guān)聯(lián)。例如， 在這種內(nèi)容的再現(xiàn)期間，可以在地圖上顯示圖像攝取狀態(tài)確認圖像或地標圖像。圖像攝取設(shè)備的操作例子接下來，將參考附圖描述根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的操作。圖14是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的地圖顯示控制處理的 過程的流程圖。在該例子中，將描述當用于記錄靜止圖像的監(jiān)視模式被設(shè)定時、以重疊方式 在攝取圖像上顯示地圖的例子。另外，地圖的比例假定是根據(jù)用戶的操作指定的。
首先，圖像攝取單元211生成攝取圖像(步驟S901)。隨后，圖像攝取位置信息獲 取單元212獲取圖像攝取位置信息(步驟S902)，并且圖像攝取方向信息獲取單元213獲取 圖像攝取方向信息(步驟S903)。另外，步驟S903是本發(fā)明的權(quán)利要求中所述的圖像攝取 方向獲取處理的例子。隨后，執(zhí)行地圖數(shù)據(jù)轉(zhuǎn)換處理(步驟S920)。另外，步驟S920是本 發(fā)明的權(quán)利要求中所述的轉(zhuǎn)換處理的例子。將參考圖15詳細描述地圖數(shù)據(jù)轉(zhuǎn)換處理。隨 后，顯示控制單元250基于經(jīng)地圖數(shù)據(jù)轉(zhuǎn)換處理轉(zhuǎn)換后的地圖數(shù)據(jù)來繪制與地圖數(shù)據(jù)相對 應的地圖(步驟S904)。在這種情況下，地圖符號(例如，圖8B中所示的地圖符號461)被 繪制在地圖上。隨后，相機信息獲取單元214獲取視角信息和深度信息(步驟S905)，并且圖像攝 取范圍計算單元240基于所獲取的視角信息和深度信息來計算圖像攝取范圍(步驟S906)。隨后，顯示控制單元250基于計算出的圖像攝取范圍以重疊方式在地圖上繪制圖 像攝取狀態(tài)確認圖像(步驟S907)。接下來，顯示控制單元250使顯示單元260顯示疊加有 圖像攝取狀態(tài)確認圖像的地圖和攝取圖像(步驟S908)。另外，步驟S908是本發(fā)明的權(quán)利 要求中所述的顯示控制處理的例子。隨后，判斷是否執(zhí)行了按下快門按鈕的操作(步驟S909)。當執(zhí)行了按下快門按鈕 的操作(步驟S909)時，記錄控制單元280使得內(nèi)容存儲單元290將所生成的攝取圖像記 錄為靜止圖像內(nèi)容(步驟S910)。接下來，記錄控制單元280使得內(nèi)容管理信息存儲單元 300將所獲取的圖像攝取位置信息、圖像攝取方向信息、視角信息和深度信息記錄為靜止圖 像內(nèi)容的元數(shù)據(jù)(步驟S911)。另一方面，當沒有執(zhí)行按下快門按鈕的操作(步驟S909) 時，處理前進到步驟S912。隨后，判斷是否執(zhí)行了用于指示結(jié)束操作(監(jiān)視模式)的指令的操作(步驟 S912)，并且當執(zhí)行了用于指示結(jié)束操作的指令的操作時，地圖顯示控制處理的操作結(jié)束。 另一方面，當沒有執(zhí)行用于指示結(jié)束操作的指令的操作(步驟S912)時，處理返回到步驟 S901。圖15是圖示在根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的地圖顯示控制處理 的過程中、地圖數(shù)據(jù)轉(zhuǎn)換處理(圖14中所示的步驟S920的過程)的流程圖。首先，地圖數(shù)據(jù)獲取單元220基于由圖像攝取位置信息獲取單元212獲取的圖像 攝取位置信息來從地圖數(shù)據(jù)存儲單元200獲取地圖數(shù)據(jù)(步驟S921)。隨后，地圖數(shù)據(jù)轉(zhuǎn)換 單元230基于由圖像攝取方向信息獲取單元213獲取的圖像攝取方向信息來計算北方方向和圖像攝取方向之間的角度(步驟S922)。接下來，地圖數(shù)據(jù)轉(zhuǎn)換單元230通過使從地圖數(shù) 據(jù)存儲單元200獲取的地圖數(shù)據(jù)經(jīng)受基于計算出的角度的旋轉(zhuǎn)處理來執(zhí)行地圖數(shù)據(jù)的轉(zhuǎn) 換(步驟S923)。圖16是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的地圖顯示控制處理的 過程的流程圖。該例子是圖14中所示的地圖顯示控制處理的修改例，并且是在運動圖像的 記錄期間以重疊方式在攝取圖像上顯示地圖的例子。為此，與圖14所示的過程中相同的部 分被賦予相同的標號，并且將不重復其描述。由于在運動圖像的記錄期間執(zhí)行該過程，因此記錄控制單元280使得內(nèi)容存儲單 元290將所生成的攝取圖像(幀)順序記錄為運動圖像內(nèi)容(步驟S910)。另外，記錄控制 單元280使內(nèi)容管理信息存儲單元300將所獲取的圖像攝取位置信息、圖像攝取方向信息、 視角信息和深度信息記錄為攝取圖像的元數(shù)據(jù)(步驟S911)。可以為每一幀執(zhí)行元數(shù)據(jù)記 錄，并且是按預定間隔執(zhí)行的。另外，當執(zhí)行了用于指示結(jié)束操作(運動圖像記錄)的指令的操作(步驟S912) 時，記錄控制單元280從在運動圖像記錄期間其元數(shù)據(jù)被記錄在內(nèi)容管理信息存儲單元 300中的攝取圖像中確定代表性圖像(步驟S913)。另外，記錄控制單元280將代表性圖像 的確定結(jié)果記錄在被確定為代表性圖像的攝取圖像的代表性圖像信息346(圖3中所示) 中(步驟S913)。圖17是圖示根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的地圖顯示控制處理的 過程的流程圖。該例子是圖14中所示的地圖顯示控制處理的修改例，并且是在內(nèi)容選擇畫 面中顯示地圖和索引圖像的例子(圖11A、11B、12A和12B中所示)。為此，與圖14所示的 過程中相同的部分被賦予相同的標號，并且將不重復其描述。首先，顯示控制單元250獲取存儲在內(nèi)容管理信息存儲單元300中的索引圖像，并 在內(nèi)容選擇畫面上顯示索引圖像的視圖(步驟S931)。內(nèi)容選擇畫面例如是通過用戶操作 顯示的。隨后，判斷是否接收到用于選擇顯示在內(nèi)容選擇畫面上的索引圖像的選擇操作 (步驟S932)。當沒有接收到用于選擇索引圖像的選擇操作(步驟S932)時，處理前進到步 驟S935。另一方面，當接收到用于選擇索引圖像的選擇操作(步驟S932)時，數(shù)據(jù)獲取單元 350獲取與所選的索引圖像相關(guān)聯(lián)地存儲在內(nèi)容管理信息存儲單元300中的元數(shù)據(jù)(步驟 S933)。另外，步驟S933是本發(fā)明的權(quán)利要求中所述的圖像攝取方向獲取處理的例子。隨后，基于所獲取的元數(shù)據(jù)(圖像攝取位置信息和圖像攝取方向信息)執(zhí)行地圖 數(shù)據(jù)轉(zhuǎn)換處理(步驟S920)。接下來，利用所獲取的元數(shù)據(jù)(視角信息和深度信息)以重疊 方式在地圖上繪制圖像攝取狀態(tài)確認圖像(步驟S904、906和907)。隨后，顯示控制單元 250使顯示單元260顯示疊加有圖像攝取狀態(tài)確認圖像的地圖(步驟S934)。例如，疊加有 圖像攝取狀態(tài)確認圖像的地圖被顯示在內(nèi)容選擇畫面上的地圖顯示區(qū)520 (圖11B中所示) 中。另外，步驟S934是本發(fā)明的權(quán)利要求中所述的顯示控制處理的例子。隨后，判斷是否執(zhí)行了指示再現(xiàn)內(nèi)容的操作(步驟S935)，并且當執(zhí)行了指示再 現(xiàn)內(nèi)容的操作時，對與處于選中狀態(tài)的索引圖像相對應的內(nèi)容執(zhí)行內(nèi)容再現(xiàn)處理(步驟 S940)。將參考圖18詳細描述內(nèi)容再現(xiàn)處理。另一方面，當沒有執(zhí)行指示再現(xiàn)內(nèi)容的操作 (步驟S935)時，判斷是否執(zhí)行了指示結(jié)束內(nèi)容選擇畫面的顯示的操作(步驟S936)。當執(zhí)行了指示結(jié)束內(nèi)容選擇畫面的顯示的操作(步驟S936)時，地圖顯示控制處理的操作結(jié)束。 另一方面，當沒有執(zhí)行指示結(jié)束內(nèi)容選擇畫面的顯示的操作(步驟S936)時，處理返回到步 驟 S931。圖18是圖示在根據(jù)本發(fā)明第一實施例的圖像攝取設(shè)備100的地圖顯示控制處理 的過程中、內(nèi)容再現(xiàn)處理(圖17中所示的步驟S940的過程)的流程圖。該例子是圖14中 所示的地圖顯示控制處理的修改例，并且是在與被指示再現(xiàn)的內(nèi)容相對應的圖像上以重疊 方式顯示地圖的例子。為此，與圖14所示的過程中相同的部分被賦予相同的標號，并且將 不重復其描述。 首先，數(shù)據(jù)獲取單元350從內(nèi)容存儲單元290獲取被指示再現(xiàn)的內(nèi)容(步驟
5941)，并且獲取與該內(nèi)容相關(guān)聯(lián)地存儲在內(nèi)容管理信息存儲單元300中的元數(shù)據(jù)(步驟
5942)。另外，步驟S942是本發(fā)明的權(quán)利要求中所述的圖像攝取方向獲取處理的例子。隨后，基于所獲取的元數(shù)據(jù)(圖像攝取位置信息和圖像攝取方向信息)執(zhí)行地圖 數(shù)據(jù)轉(zhuǎn)換處理(步驟S920)。接下來，利用所獲取的元數(shù)據(jù)(視角信息和深度信息)以重 疊方式在地圖上繪制圖像攝取狀態(tài)確認圖像(步驟S904、906和907)。隨后，顯示控制單 元250使得顯示單元260顯示疊加有圖像攝取狀態(tài)確認圖像的地圖以及與所獲取的內(nèi)容相 對應的圖像(步驟S943)。這里，例如當被指示再現(xiàn)的內(nèi)容是運動圖像內(nèi)容時，對于包括運 動圖像內(nèi)容的每一幀順序執(zhí)行地圖數(shù)據(jù)轉(zhuǎn)換處理、地圖上圖像攝取狀態(tài)確認圖像的繪制處 理，等等。另外，例如當被指示再現(xiàn)的內(nèi)容是靜止圖像內(nèi)容時，僅對一項靜止圖像內(nèi)容執(zhí)行 一次地圖數(shù)據(jù)轉(zhuǎn)換處理、地圖上圖像攝取狀態(tài)確認圖像的繪制處理，等等。另外，步驟S943 是本發(fā)明的權(quán)利要求中所述的顯示控制處理的例子。隨后，判斷是否執(zhí)行了指示結(jié)束內(nèi)容再現(xiàn)的操作(步驟S944)，并且當執(zhí)行了指示 結(jié)束內(nèi)容再現(xiàn)的操作時，內(nèi)容再現(xiàn)處理的操作結(jié)束。另一方面，當沒有執(zhí)行指示結(jié)束內(nèi)容再 現(xiàn)的操作(步驟S944)時，處理返回到步驟S920。第二實施例本發(fā)明的第一實施例描述了以平面形式顯示地圖(2維地圖)的例子。然而，例如， 即使當顯示具有三維圖像的地圖(三維地圖)時，本發(fā)明的第一實施例也可以適用。三維 地圖是地圖上的三維空間被投影在平面上并被顯示的地圖。下面將參考附圖詳細描述顯示 三維地圖的例子。圖像攝取設(shè)備的組成的例子圖19是圖示根據(jù)本發(fā)明第二實施例的圖像攝取設(shè)備700的內(nèi)部組成例子的框圖。 這里，圖像攝取設(shè)備700是圖1中所示的圖像攝取設(shè)備100的修改例，與圖像攝取設(shè)備100 共同的部分被賦予相同的標號并且將不重復其描述，而是主要對與圖像攝取設(shè)備100的不 同部分給出對設(shè)備的描述。圖像攝取設(shè)備700設(shè)有陀螺傳感器710。陀螺傳感器710是檢測圍繞彼此正交的3個軸的角速度的角速度傳感器，并將檢 測到的角速度輸出到系統(tǒng)控制單元140。圖20是圖示根據(jù)本發(fā)明第二實施例的圖像攝取設(shè)備700的功能組成例子的框圖。 這里，圖像攝取設(shè)備700是圖2中所示的圖像攝取設(shè)備100的修改例，因此，與圖像攝取設(shè) 備100共同的部分被賦予相同的標號并且將不重復其描述，而是主要描述與圖像攝取設(shè)備 100的不同部分。圖像攝取設(shè)備700設(shè)有三維地圖數(shù)據(jù)存儲單元720、圖像攝取姿態(tài)信息獲取單元730、地圖數(shù)據(jù)轉(zhuǎn)換單元740和內(nèi)容管理信息存儲單元750。這里，圖像攝取設(shè)備700 與本發(fā)明的第一實施例的不同之處在于該設(shè)備顯示三維地圖而不是顯示二維地圖，并且在 三維地圖的垂直方向上的顯示方位基于圖像攝取姿態(tài)信息(例如，因傾斜操作在垂直方向 上的移動量)而改變。因此，下面將主要描述與本發(fā)明第一實施例的不同點并且將不重復 與第一實施例的共同點。
三維地圖數(shù)據(jù)存儲單元720存儲用于在顯示單元260中顯示三維地圖的三維地圖 數(shù)據(jù)，并將所存儲的三維地圖數(shù)據(jù)提供給地圖數(shù)據(jù)獲取單元220。另外，三維地圖數(shù)據(jù)存儲 單元720對應于圖19中所示的記錄單元160。圖像攝取姿態(tài)信息獲取單元730獲取與在圖像攝取設(shè)備700的圖像攝取操作的狀 態(tài)下的姿態(tài)有關(guān)的圖像攝取姿態(tài)信息，并將所獲取的圖像攝取姿態(tài)信息輸出到地圖數(shù)據(jù)轉(zhuǎn) 換單元740和記錄控制單元280。圖像攝取姿態(tài)信息是基于陀螺傳感器710檢測的角速度 計算出的旋轉(zhuǎn)角，并且例如是當使用圖像攝取設(shè)備700執(zhí)行圖像攝取操作的用戶處于旋轉(zhuǎn) 中心時俯仰軸的旋轉(zhuǎn)角。另外，圖像攝取姿態(tài)信息獲取單元730對應于圖19中所示的陀螺 傳感器710。地圖數(shù)據(jù)轉(zhuǎn)換單元740基于從圖像攝取方向信息獲取單元213輸出的圖像攝取方 向信息和從圖像攝取姿態(tài)信息獲取單元730輸出的圖像攝取姿態(tài)信息來轉(zhuǎn)換從地圖數(shù)據(jù) 獲取單元220輸出的三維地圖數(shù)據(jù)。另外，地圖數(shù)據(jù)轉(zhuǎn)換單元740將轉(zhuǎn)換后的三維地圖數(shù) 據(jù)輸出到顯示控制單元250。而且，與三維地圖數(shù)據(jù)相對應的三維地圖中的高度是利用由圖 像攝取位置信息獲取單元212獲取的圖像攝取位置信息中包含的高度來指定的。另外，將 參考圖21A、21B、22A和22B詳細描述三維地圖數(shù)據(jù)的轉(zhuǎn)換。內(nèi)容管理信息存儲單元750基于記錄控制單元280的控制與攝取圖像相關(guān)聯(lián)地記 錄從圖像攝取姿態(tài)信息獲取單元730輸出的圖像攝取姿態(tài)信息。此外，以與本發(fā)明第一實 施例相同的方式，與攝取圖像相關(guān)聯(lián)地記錄從圖像攝取位置信息獲取單元212、圖像攝取方 向信息獲取單元213和相機信息獲取單元214輸出的各條信息。換句話說，圖像攝取姿態(tài) 信息被額外記錄為圖3中所示的元數(shù)據(jù)340。另外，內(nèi)容管理信息存儲單元750對應于圖 19中所示的記錄單元160。地圖的顯示控制的例子圖21A、21B、22A和22B是圖示根據(jù)本發(fā)明的第二實施例圖像攝取設(shè)備700的圖像 攝取操作的狀態(tài)以及在該狀態(tài)下顯示的三維地圖的示意圖。圖21A和22A以簡化方式示出 了由建筑物群810所在的區(qū)域800上的圖像攝取設(shè)備700攝取建筑物群810周圍的圖像的 狀態(tài)。這里，建筑物群810假定是由在東西方向上成一行的3棟建筑物形成的。另外，在圖 21A中，假定在以下狀態(tài)中執(zhí)行圖像攝取操作圖像攝取設(shè)備700的圖像攝取方向是東北方 向并且圖像攝取設(shè)備700的圖像攝取方向是向上仰視區(qū)域800上的建筑物群810的屋頂?shù)?方向。另外，在圖22A中，假定在以下狀態(tài)中執(zhí)行圖像攝取操作圖像攝取設(shè)備700的圖像 攝取方向是東北方向并且圖像攝取設(shè)備700的圖像攝取方向是向下俯視區(qū)域800上的建筑 物群810的屋頂?shù)姆较?。圖21B示出了當在圖21A所示的狀態(tài)下執(zhí)行圖像攝取設(shè)備700的圖像攝取操作時 顯示在顯示單元260中的三維地圖820。圖22B示出了當在圖22A所示的狀態(tài)下執(zhí)行圖像 攝取設(shè)備700的圖像攝取操作時顯示在顯示單元260中的三維地圖830。地圖數(shù)據(jù)轉(zhuǎn)換單元740轉(zhuǎn)換三維地圖數(shù)據(jù)以使得與從地圖數(shù)據(jù)獲取單元220輸出的三維地圖數(shù)據(jù)相對應的 三維地圖中的圖像攝取方向和顯示單元260中的特定方向彼此對應。利用該轉(zhuǎn)換，地圖數(shù) 據(jù)轉(zhuǎn)換單元740以圖像攝取位置作為基準位置、根據(jù)由從圖像攝取姿態(tài)信息獲取單元730 輸出的圖像攝取姿態(tài)信息指定的旋轉(zhuǎn)角來轉(zhuǎn)換三維地圖數(shù)據(jù)。例如，當在圖21A所示的狀 態(tài)下執(zhí)行圖像攝取設(shè)備700的圖像攝取操作時，數(shù)據(jù)被轉(zhuǎn)換為以如圖21B所示的向上仰視 建筑物群810的屋頂?shù)姆绞斤@示三維地圖。另外，當在圖22A所示的狀態(tài)下執(zhí)行圖像攝取 設(shè)備700的圖像攝取操作時，數(shù)據(jù)被轉(zhuǎn)換為以如圖22B所示的向下俯視建筑物群810的屋 頂?shù)姆绞斤@示三維地圖。另外，以與本發(fā)明的第一實施例相同的方式，與圖21B和22B中所 示的三維地圖一同顯示與三維地圖有關(guān)的攝取圖像。這樣，根據(jù)垂直方向上圖像攝取設(shè)備700的移動，三維地圖被修正并顯示。另外， 以與本發(fā)明的第一實施例相同的方式，攝取圖像和三維地圖被顯示在顯示單元260中以使 得三維地圖中的圖像攝取方向和顯示單元260中的特定方向彼此對應。另外，圖像攝取狀 態(tài)確認圖像821和831以及地圖符號822和832以與本發(fā)明的第一實施例相同的方式被繪 制在三維地圖上。此外，該例子示出了顯示與二維地圖相同的圖像攝取狀態(tài)確認圖像的情 況，但是例如，指示三維圖像攝取范圍的圖像可以被顯示為圖像攝取狀態(tài)確認圖像。另外， 該例子僅描述當內(nèi)容被記錄時的顯示控制，但是該顯示控制也可以相同方式應用于當記錄 的內(nèi)容被再現(xiàn)時的情況。
如上所述，根據(jù)本發(fā)明的實施例，可以與攝取圖像相關(guān)聯(lián)地顯示包括在圖像攝取 期間的圖像攝取位置的地圖，因此，可以很容易獲知所顯示的攝取圖像的地理位置的關(guān)系。 當?shù)貓D被顯示時，可以將地圖的攝取期間的圖像攝取方向設(shè)定為垂直方向上顯示單元的上 側(cè)，因此，可以直觀地獲知建筑物等相對于用于執(zhí)行實際圖像攝取操作的方向的位置關(guān)系。 例如，當在圖像攝取期間地圖的北方被顯示為垂直方向上顯示單元的上側(cè)時，有必要在知 道地圖上圖像攝取設(shè)備的取向的同時檢查地圖，但是根據(jù)本發(fā)明的實施例，不需要知道圖 像攝取設(shè)備的取向。另外，在內(nèi)容再現(xiàn)期間，可以以相同的方式與包括圖像攝取期間的圖像攝取位置 的地圖相關(guān)聯(lián)地顯示內(nèi)容或索引圖像，因此，可以很容易獲知所顯示的圖像的地理位置的 關(guān)系。此外，地圖的圖像攝取期間的圖像攝取方向可以被顯示為垂直方向上顯示單元的上 側(cè)，因此，可以在再現(xiàn)內(nèi)容的同時直觀地獲知建筑物等相對于用于執(zhí)行實際圖像攝取操作 的方向的位置關(guān)系。另外，由于圖像攝取狀態(tài)確認圖像可以被顯示在地圖上，因此可以很容易在地圖 上檢查圖像攝取期間的圖像攝取范圍。換句話說，不僅可以直觀地獲知建筑物等相對于用 于執(zhí)行實際圖像攝取操作的方向的位置關(guān)系，還可以獲知圖像攝取范圍。另外，當圖像和與該圖像有關(guān)的三維地圖被顯示時，以相同的方式，三維地圖的圖 像攝取期間的圖像攝取方向可以被顯示為垂直方向上顯示單元的上側(cè)。因此，可以直觀地 獲知三維建筑物等相對于用于執(zhí)行實際圖像攝取操作的方向的位置關(guān)系。另外，本發(fā)明的實施例可以應用于能夠顯示地圖的電子設(shè)備，例如具有圖像攝取 功能的移動電話、個人計算機、車載導航系統(tǒng)等等。另外，本發(fā)明的實施例還可以應用于能 夠通過將內(nèi)容和與之相關(guān)的地圖輸出到其他顯示單元來在其他顯示單元上顯示內(nèi)容和與 之相關(guān)的地圖的電子設(shè)備。
此外，本發(fā)明的實施例是用于實現(xiàn)本發(fā)明的例子，并且該實施例與上述本發(fā)明的 權(quán)利要求中的各個具體技術(shù)方案有對應關(guān)系。然而，本發(fā)明并不限于上述實施例，并且可以 在不脫離本發(fā)明的精神的范圍內(nèi)做出各種修改。另外，在本發(fā)明的實施例中描述的過程可以理解為具有該一系列過程的方法，也 可理解為用于使計算機執(zhí)行一系列過程的程序和用于存儲該程序的記錄介質(zhì)。作為這種 記錄介質(zhì)，例如可以使用致密盤(CD)、迷你盤(MD)、數(shù)字多功能盤(DVD)、存儲卡、藍光光盤 (Blu-ray Disc，注冊商標)等。本申請包含與2009年4月21日向日本專利局提交的日本在先專利申請JP 2009-102525中公開的內(nèi)容有關(guān)的主題，上述申請的全部內(nèi)容通過引用而結(jié)合于此。本領(lǐng)域技術(shù)人員應當理解，取決于設(shè)計需求和其他因素可以發(fā)生各種修改、組合、子組合和變更，只要這些修改、組合、子組合和變更在權(quán)利要求或其等同物的范圍內(nèi)。
權(quán)利要求
一種電子設(shè)備，包括圖像攝取方向獲取單元，該圖像攝取方向獲取單元基于攝取圖像的圖像攝取期間的圖像攝取位置來獲取圖像攝取方向，該圖像攝取方向是所述攝取圖像中包含的對象所在的方向；轉(zhuǎn)換單元，該轉(zhuǎn)換單元轉(zhuǎn)換包括所述圖像攝取位置的地圖，以使所述地圖上的所獲取的圖像攝取方向與顯示所述地圖的顯示平面上的特定方向相對應；以及顯示控制單元，該顯示控制單元使轉(zhuǎn)換后的地圖與所述攝取圖像相關(guān)聯(lián)地顯示。
2.如權(quán)利要求1所述的電子設(shè)備，還包括代表性圖像存儲單元，該代表性圖像存儲單元對于由所述攝取圖像形成的各項內(nèi)容存 儲指示該內(nèi)容的代表性圖像；和操作接收單元，該操作接收單元接收用于從存儲在所述代表性圖像存儲單元中的代表 性圖像當中選擇期望的代表性圖像的選擇操作；其中所述轉(zhuǎn)換單元對包括從存儲在所述代表性圖像存儲單元中的代表性圖像當中選 擇的代表性圖像的圖像攝取期間的圖像攝取位置的地圖執(zhí)行轉(zhuǎn)換；并且其中所述顯示控制單元使存儲在所述代表性圖像存儲單元中的代表性圖像的視圖被 顯示，并且使轉(zhuǎn)換后的地圖與從所顯示的代表性圖像當中選擇的代表性圖像相關(guān)聯(lián)地顯示。
3.如權(quán)利要求2所述的電子設(shè)備，其中當指示與所選擇的代表性圖像相對應的內(nèi)容的再現(xiàn)時，所述轉(zhuǎn)換單元針對包括被指示 再現(xiàn)的內(nèi)容的各個攝取圖像來執(zhí)行地圖轉(zhuǎn)換；并且對于包括被指示再現(xiàn)的內(nèi)容的各個攝取圖像，所述顯示控制單元使轉(zhuǎn)換后的地圖與攝 取圖像相關(guān)聯(lián)地顯示。
4.如權(quán)利要求1所述的電子設(shè)備，還包括圖像攝取單元，該圖像攝取單元生成所述攝取圖像；其中，每當生成所述攝取圖像，所述轉(zhuǎn)換單元都對包括各個所生成的攝取圖像的圖像 攝取期間的圖像攝取位置的地圖執(zhí)行轉(zhuǎn)換；并且其中，每當生成所述攝取圖像，所述顯示控制單元都使轉(zhuǎn)換后的地圖與各個所生成的 攝取圖像相關(guān)聯(lián)地顯示。
5.如權(quán)利要求1所述的電子設(shè)備，還包括內(nèi)容存儲單元，該內(nèi)容存儲單元存儲所述攝取圖像中包括的運動圖像內(nèi)容； 其中當指示所述運動圖像內(nèi)容的再現(xiàn)時，所述轉(zhuǎn)換單元針對包括被指示再現(xiàn)的運動圖 像內(nèi)容的各個攝取圖像執(zhí)行地圖轉(zhuǎn)換；并且其中對于包括所述運動圖像內(nèi)容的各個攝取圖像，所述顯示控制單元使轉(zhuǎn)換后的地圖 與攝取圖像相關(guān)聯(lián)地顯示。
6.如權(quán)利要求1所述的電子設(shè)備，其中所述轉(zhuǎn)換單元通過以下方式來轉(zhuǎn)換所述地圖 取所述圖像攝取位置為旋轉(zhuǎn)中心來旋轉(zhuǎn)所述地圖，從而使得所獲取的圖像攝取方向和所述 特定方向在所述地圖上彼此對應。
7.如權(quán)利要求1所述的電子設(shè)備，其中所述地圖是三維地圖，該三維地圖是通過將包括所述圖像攝取位置的地圖上的三維空間投影到平面上而由三維攝取圖像形成的；所述轉(zhuǎn)換單元轉(zhuǎn)換所述三維地圖以使所述三維地圖上的所獲取的圖像攝取方向與顯 示所述三維地圖的顯示平面上的特定方向彼此對應；并且所述顯示控制單元使轉(zhuǎn)換后的三維地圖與所述攝取圖像相關(guān)聯(lián)地顯示。
8.如權(quán)利要求1所述的電子設(shè)備，其中所述顯示控制單元使所述地圖以疊加在所述攝 取圖像上的方式被顯示。
9.如權(quán)利要求1所述的電子設(shè)備，其中所述圖像攝取方向獲取單元基于所述圖像攝取 位置來獲取存在于所述攝取圖像的中心位置的對象的方向作為圖像攝取方向。
10.如權(quán)利要求1所述的電子設(shè)備，還包括視角和深度信息獲取單元，所述視角和深度信息獲取單元獲取圖像攝取期間的視角信 息和深度信息；其中所述顯示控制單元使得圖像攝取范圍內(nèi)的攝取圖像以疊加在所述地圖的圖像攝 取位置上的方式被顯示，所述圖像攝取范圍指示由所獲取的視角信息和深度信息指定的圖 像攝取范圍。
11.一種顯示控制方法，包括以下步驟基于攝取圖像的圖像攝取期間的圖像攝取位置來獲取圖像攝取方向，該圖像攝取方向 是所述攝取圖像中包含的對象所在的方向；轉(zhuǎn)換包括所述圖像攝取位置的地圖，以使所述地圖上的所獲取的圖像攝取方向與顯示 所述地圖的顯示平面上的特定方向相對應；以及使轉(zhuǎn)換后的地圖與所述攝取圖像相關(guān)聯(lián)地顯示。
12.—種使計算機執(zhí)行包括以下步驟的過程的程序基于攝取圖像的圖像攝取期間的圖像攝取位置來獲取圖像攝取方向，該圖像攝取方向 是所述攝取圖像中包含的對象所在的方向；轉(zhuǎn)換包括所述圖像攝取位置的地圖，以使所述地圖上所獲取的圖像攝取方向與顯示所 述地圖的顯示平面上的特定方向相對應；以及使轉(zhuǎn)換后的地圖與所述攝取圖像相關(guān)聯(lián)地顯示。
全文摘要
本發(fā)明公開了電子設(shè)備、顯示控制方法和程序。該電子設(shè)備包括基于攝取圖像的圖像攝取期間的圖像攝取位置來獲取作為攝取圖像中包含的對象所在的方向的圖像攝取方向的圖像攝取方向獲取單元；轉(zhuǎn)換包括圖像攝取位置的地圖、以使地圖上的所獲取的圖像攝取方向與顯示地圖的顯示平面上的特定方向相對應的轉(zhuǎn)換單元；以及使轉(zhuǎn)換后的地圖與攝取圖像相關(guān)聯(lián)地顯示的顯示控制單元。
文檔編號G06T17/05GK101872469SQ20101016406
公開日2010年10月27日 申請日期2010年4月12日 優(yōu)先權(quán)日2009年4月21日
發(fā)明者山路義生, 有留憲一郎, 桑原立, 藤本榮介 申請人:索尼公司