專利名稱：成像設(shè)備和成像設(shè)備中的顯示控制方法
技術(shù)領(lǐng)域：
本發(fā)明涉及成像設(shè)備及其顯示控制方法，并且更具體地，涉及在外殼上具有多個
顯示面板的成像設(shè)備上顯示圖像或數(shù)據(jù)的操作。
背景技術(shù)：
近來，諸如數(shù)碼相機(jī)或數(shù)字?jǐn)z像機(jī)的成像設(shè)備已普及，并且許多成像設(shè)備配有由 例如液晶面板構(gòu)成的顯示面板。 例如，日本未審專利申請公開No. 2007-158799公開了一種成像設(shè)備，其中在相機(jī) 外殼上提供了相對大的顯示面板，以便在拍攝期間監(jiān)視顯示面板上的對象(subject)圖像 并在回放期間回放所拍攝的圖像。

發(fā)明內(nèi)容
本發(fā)明提出了在其外殼上配有兩個顯示面板的新穎的成像設(shè)備。 也就是說，成像裝置不僅配有類似于現(xiàn)有技術(shù)的在設(shè)備外殼上安裝的用來在對著
用戶(拍照者)的方向上顯示圖像或數(shù)據(jù)的顯示面板，還配有在設(shè)備外殼的前側(cè)(對象側(cè))
上安裝的用來在對著對象的方向上顯示圖像或數(shù)據(jù)的另一顯示面板。 當(dāng)按這樣的方式提供兩個顯示面板時，適當(dāng)期望的是，根據(jù)與拍攝有關(guān)的操作狀 態(tài)或條件，在各個顯示面板上顯示圖像或數(shù)據(jù)。即，期望的是，實現(xiàn)能夠顯示對用戶有用的 圖像和數(shù)據(jù)并防止非必要功耗的顯示操作。 因而，適當(dāng)期望的是，在具有兩個顯示面板的成像設(shè)備上顯示圖像或數(shù)據(jù)。
根據(jù)本發(fā)明的一個實施例，一種成像設(shè)備包括第一顯示面板，其被安裝在設(shè)備外 殼上，以便在向著用戶的方向上顯示圖像或數(shù)據(jù)；第二顯示面板，其被安裝在設(shè)備外殼上， 以便在向著對象的方向上顯示圖像或數(shù)據(jù)；成像處理器，其對來自對象方向的入射光進(jìn)行 光電轉(zhuǎn)換以獲得圖像信號；人檢測器，其檢測在對象方向上是否有人存在；以及控制器，其 使得在第一顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)，并至少根據(jù)人 檢測器的檢測結(jié)果，控制在第二顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或 數(shù)據(jù)的操作。 根據(jù)本發(fā)明的另一實施例，一種成像設(shè)備包括成像處理器，其對通過透鏡系統(tǒng)進(jìn) 入的入射光進(jìn)行光電轉(zhuǎn)換以獲得圖像信號；第一顯示面板，其被布置在入射光入射的設(shè)備 外殼的表面上；第二顯示面板，其被布置在與第一顯示面板相對的表面上；人檢測器，其檢 測在對象方向是是否有人存在；以及控制器，其使得在第一顯示面板上顯示基于成像處理 器獲得的圖像信號的圖像或數(shù)據(jù)，并至少根據(jù)人檢測器的檢測結(jié)果，控制在第二顯示面板 上顯示基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。 當(dāng)人檢測器檢測到人的存在時，控制器可進(jìn)行控制使得在第二顯示面板上顯示基 于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)。 此外，當(dāng)人檢測器未檢測到人的存在時，控制器可進(jìn)行控制使得不在第二顯示面板上顯示圖像或數(shù)據(jù)。 可替換地，當(dāng)人檢測器未檢測到人的存在時，控制器可進(jìn)行控制使得在第二顯示 面板上以與正常顯示操作相比的低亮度狀態(tài)顯示基于成像處理器獲得的圖像信號的圖像 或數(shù)據(jù)。 可替換地，根據(jù)本發(fā)明實施例的成像設(shè)備還可包括圖像數(shù)據(jù)讀取器，其讀取在記
錄介質(zhì)上記錄的圖像數(shù)據(jù)，并且當(dāng)人檢測器未檢測到人的存在時，控制器可進(jìn)行控制使得
在第二顯示面板上顯示基于圖像數(shù)據(jù)讀取器讀取的圖像數(shù)據(jù)的圖像或數(shù)據(jù)。 此外，控制器可根據(jù)人檢測器的檢測結(jié)果和關(guān)于成像設(shè)備的操作的用戶選擇的設(shè)
置，控制在第二顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。 另外，控制器可根據(jù)人檢測器的檢測結(jié)果和成像設(shè)備內(nèi)部檢測的內(nèi)部檢測信息，
控制在第二顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。 另外，控制器可根據(jù)人檢測器的檢測結(jié)果和通過分析成像處理器獲得的圖像信息
而獲得的圖像分析信息，控制在第二顯示面板上顯示基于成像處理器獲得的圖像信號的圖
像或數(shù)據(jù)的操作。 另外，人檢測器可通過對成像處理器獲得的圖像信息進(jìn)行圖像分析，檢測在對象 方向上是否有人存在。 在此情況下，人檢測器可以基于對成像處理器獲得的圖像信號的圖像分析的結(jié)
果，通過確定圖像信號中是否包括作為對象的人臉，進(jìn)行人檢測。 可替換地，人檢測器可由檢測對象方向上人的存在的鄰近傳感器構(gòu)成。 此外，根據(jù)本發(fā)明實施例的成像設(shè)備還可包括圖像數(shù)據(jù)讀取器，其讀取在記錄介
質(zhì)上記錄的圖像數(shù)據(jù)，并且控制器可使得在第一顯示面板上顯示基于圖像數(shù)據(jù)讀取器讀取
的圖像數(shù)據(jù)的圖像或數(shù)據(jù)，并可以至少根據(jù)人檢測器的檢測結(jié)果，控制在第二顯示面板上
顯示基于圖像數(shù)據(jù)讀取器讀取的圖像數(shù)據(jù)的圖像或數(shù)據(jù)的操作。 此外，當(dāng)在第一顯示面板上顯示基于圖像數(shù)據(jù)讀取器讀取的多個圖像數(shù)據(jù)的圖像 或數(shù)據(jù)時，控制器可使得在第二顯示面板上顯示基于從正在第一顯示面板上顯示的多個圖 像數(shù)據(jù)中選擇的圖像數(shù)據(jù)的圖像或數(shù)據(jù)。 根據(jù)本發(fā)明的再一實施例，一種成像設(shè)備中的顯示控制方法包括步驟檢測在對 象方向上是否有人存在；在被安裝在設(shè)備外殼上以便在用戶方向上顯示圖像或數(shù)據(jù)的第一 顯示面板上，顯示基于通過對來自對象方向的入射光進(jìn)行光電轉(zhuǎn)換而獲得的圖像信號的圖 像或數(shù)據(jù)；以及至少根據(jù)人檢測步驟中的檢測結(jié)果，控制在被安裝在設(shè)備外殼上以便在對 象方向上顯式圖像或數(shù)據(jù)的第二顯示面板上顯示基于圖像信號的圖像或數(shù)據(jù)的操作。
根據(jù)本發(fā)明的再一實施例，一種成像設(shè)備中的顯示控制方法包括步驟檢測在對 象方向上是否有人存在；在被安裝在設(shè)備外殼的入射光入射的表面上的第一顯示面板上， 顯示基于通過對經(jīng)過透鏡系統(tǒng)進(jìn)入的入射光進(jìn)行光電轉(zhuǎn)換而獲得的圖像信號的圖像或數(shù) 據(jù)；以及至少根據(jù)人檢測步驟中的檢測結(jié)果，控制在被安裝在與第一顯示面板相對的表面 上的第二顯示面板上顯示基于圖像信號的圖像或數(shù)據(jù)的操作。 也就是說，根據(jù)本發(fā)明的實施例，根據(jù)對象方向上是否有人存在，在第二顯示面板 上進(jìn)行必要的顯示操作。 例如，在靜態(tài)圖像拍攝期間的監(jiān)視時段中(即，在抓住良好的快門時機(jī)(timing)以捕捉靜態(tài)圖像時)，成像設(shè)備的用戶(即，用成像設(shè)備拍攝靜態(tài)圖像的照相者)監(jiān)視第一 顯示面板上的對象圖像。監(jiān)視圖像是圖像傳感器在該時段中獲得的圖像信號，并且是對象 場景的實時影像，也被稱為直通圖像(through image)。以此方式，照相者監(jiān)視要捕捉的對 象圖像并在期望的時刻進(jìn)行釋放操作(快門操作)。所述操作與一般成像設(shè)備的操作相同。
可優(yōu)選的是，在監(jiān)視時段中，在第二顯示面板上顯式基于圖像信號的圖像或數(shù)據(jù)， 即作為直通圖像的監(jiān)視圖像。例如，如果對象是人，則該人能夠從第二顯示面板上顯示的圖 像或數(shù)據(jù)確認(rèn)要拍攝的他/她的表情(look)或姿態(tài)。 然而，僅僅當(dāng)人存在于對象側(cè)上時，這樣的附加顯示才有用。例如，當(dāng)照相者正對 沒有任何人的風(fēng)景進(jìn)行成像時，沒有人監(jiān)視第二顯示面板的顯示。因而，在這種情形下，在 第二顯示面板上顯示監(jiān)視圖像是沒有用的。因而，合適的是，關(guān)閉第二顯示面板以防止非必 要的功耗。 例如，通過根據(jù)情形適當(dāng)控制第二顯示面板的顯示操作，可以使用兩個顯示面板 顯示有用或有意思的圖像或數(shù)據(jù)，同時，即使在提供兩個顯示面板時，也防止非必要的功 耗。 根據(jù)本發(fā)明的實施例，顯示設(shè)備配有可從用戶和對象兩側(cè)觀看的兩個顯示面板， 由此能夠根據(jù)與拍攝有關(guān)的操作狀態(tài)或條件，在各個顯示面板上顯示合適的圖像或數(shù)據(jù)。 特別是，根據(jù)人在對象側(cè)上的存在情況，控制第二顯示面板的顯示操作。因而，可以提供能 夠顯示有用或特別有意思的圖像并防止非必要顯示操作的新穎有用的成像設(shè)備。


圖1A和圖IB是示出根據(jù)本發(fā)明實施例的成像設(shè)備的外部視圖的示意圖；
圖2是示出根據(jù)實施例的成像設(shè)備的框圖； 圖3是示出根據(jù)實施例的成像設(shè)備的操作狀態(tài)轉(zhuǎn)變(transition)的示意圖； 圖4A至圖4C是示出根據(jù)實施例的成像設(shè)備的圖像顯示例子的示意圖； 圖5A至圖5C是示出根據(jù)實施例的成像設(shè)備的圖像顯示例子的示意圖； 圖6A和圖6B是示出根據(jù)實施例基于人識別的前顯示面板的顯示控制例子的流程
圖； 圖7是示出根據(jù)實施例基于人識別的前顯示面板的顯示控制例子的流程圖；
圖8是示出根據(jù)實施例基于人識別的前顯示面板的顯示控制例子的流程圖；
圖9是示出根據(jù)實施例基于人識別和用戶設(shè)置的前顯示面板的顯示控制例子的 流程圖； 圖IO是示出根據(jù)實施例的前顯示面板的顯示控制例子的流程圖，其中考慮了自 拍模式； 圖11是示出根據(jù)實施例基于人識別和相機(jī)檢測信息的前顯示面板的顯示控制例 子的流程圖； 圖12是示出根據(jù)實施例基于人識別和圖像分析結(jié)果的前顯示面板的顯示控制例 子的流程圖； 圖13是示出根據(jù)實施例的前顯示面板的顯示控制例子的流程圖，其中考慮了微 笑(smile)快門模式；以及
圖14是示出根據(jù)實施例在回放期間的前顯示面板的顯示控制例子的流圖。
具體實施例方式
下文中，將按以下順序描述本發(fā)明的優(yōu)選實施例 1.成像設(shè)備的配置； 2.操作狀態(tài)轉(zhuǎn)變； 3.兩顯示面板的屏幕顯示例子； 4.監(jiān)視期間前顯示面板的顯示控制； 4-1.基于人識別的示例處理； 4-2.基于人識別和用戶設(shè)置的示例處理； 4-3.基于人識別和內(nèi)部檢查信息的示例處理； 4-4.基于人識別和其他圖像分析信息的示例處理； 5.回放期間前顯示面板的顯示控制；以及 6.變型 1.成像設(shè)備的配置 將參照圖IA和圖IB以及圖2，描述根據(jù)本發(fā)明實施例的成像設(shè)備(如數(shù)碼相機(jī)) 的配置。 圖1A和圖1B分別示出了從后表面?zhèn)?用戶側(cè))和前表面?zhèn)?對象側(cè))看到的根 據(jù)本實施例的成像設(shè)備1的外部視圖。 成像設(shè)備1具有在其前表面上安裝的成像透鏡20、閃光發(fā)光器15等。 此外，分別在其外殼的頂部表面或其后表面上的位置處安裝用戶操作的控件。例
如，控件包括釋放鈕5a、模式盤5b、 W/T(變焦，zoom)鈕5c、各種控制鈕5d和箭頭鈕5e。 模式盤5b用于例如選擇拍攝模式。控制鈕5d使得用戶能夠顯示菜單、進(jìn)入回放
模式、或調(diào)整曝光值。 箭頭鈕5e用于各種操作，例如包括選擇/確定在顯示面板6上顯示的操作菜單項 目。 成像設(shè)備1配有主顯示面板6M和前顯示面板6F，主顯示面板6M安裝在后表面?zhèn)?上，并由液晶面板或有機(jī)EL(電致發(fā)光)面板配置，如圖1A所示，前顯示面板6F安裝在前 表面?zhèn)壬?，并由液晶面板或有機(jī)EL面板配置，如圖1B所示。也就是說，主顯示面板6M和前 顯示面板6F被安裝在外殼上相互對著的表面(相對表面)上。 主顯示面板6M和前顯示面板6F例如配有相同的屏幕尺寸，并且被提供為分別占 據(jù)外殼的后表面和前表面上的相對大的面積。 主顯示面板6M基本被配置為在監(jiān)視時段(即，在拍攝模式期間在捕捉好的快門定 時時)顯示對象的監(jiān)視圖像(直通圖像，a through image)，使得用戶能監(jiān)視要拍攝的對象 場景。此外，在回放模式下，主顯示面板6M根據(jù)用戶操作顯示回放圖像或縮略圖像。
另一方面，前顯示面板6F向著對象側(cè)顯示圖像或數(shù)據(jù)。如下文將描述的，前顯示 面板6F也被配置為顯示監(jiān)視圖像等，使得存在于對象側(cè)上的人能監(jiān)視所顯示的圖像或數(shù) 據(jù)。 將參照圖2描述成像設(shè)備1的示例配置。
如圖2所示，成像設(shè)備1包括成像系統(tǒng)2、控制系統(tǒng)3、相機(jī)DSP(數(shù)字信號處理 器)4、操作單元5、主顯示面板6M、前顯示面板6F、顯示控制器7、外部接口 8、 SDRAM(同步 動態(tài)隨機(jī)存取存儲器)9以及介質(zhì)接口 10。 成像系統(tǒng)2是執(zhí)行成像操作的部分，包括透鏡機(jī)構(gòu)21、光圈/ND過濾器機(jī)構(gòu)22、圖 像傳感器23、模擬信號處理器24、 A/D轉(zhuǎn)換器25、透鏡驅(qū)動單元26、透鏡位置檢測器27、定 時生成電路28、模糊檢測器13、發(fā)光驅(qū)動單元14、閃光(flash)發(fā)光器15、透鏡驅(qū)動器17、 光圈/ND驅(qū)動器18和圖像傳感器驅(qū)動器19。 來自對象的入射光通過透鏡機(jī)構(gòu)21和光圈/ND過濾器機(jī)構(gòu)22傳入圖像傳感器 23。 透鏡機(jī)構(gòu)21是如圖1B所示的成像透鏡20的內(nèi)部組件，包括多個光學(xué)透鏡組，例 如，蓋透鏡(cover lens)、聚焦透鏡和變焦透鏡。通過在光軸方向上移送(convey)聚焦透 鏡或變焦透鏡的移送系統(tǒng)來配置透鏡驅(qū)動單元26。從透鏡驅(qū)動器17向透鏡驅(qū)動單元26提 供驅(qū)動功率，以移送聚焦透鏡或變焦透鏡。后面描述的CPU(中央處理單元)31控制透鏡驅(qū) 動器17以執(zhí)行聚焦或變焦控制。 光圈/ND過濾器機(jī)構(gòu)22包括光圈機(jī)構(gòu)和ND過濾器機(jī)構(gòu)，其被插入透鏡光學(xué)系統(tǒng) 中，以減弱(調(diào)整)入射光強(qiáng)度，由此進(jìn)行光強(qiáng)度調(diào)整。 光圈/ND驅(qū)動器18通過開/關(guān)光圈機(jī)構(gòu)，調(diào)節(jié)入射光強(qiáng)度。此外，光圈/ND驅(qū)動 器18通過將ND過濾器插入到位于入射光的光軸上，選擇性地調(diào)節(jié)入射光強(qiáng)度。CPU 31控 制光圈/ND驅(qū)動器18驅(qū)動光圈機(jī)構(gòu)或ND過濾器，由此進(jìn)行入射光強(qiáng)度控制(曝光調(diào)整控 制)。 來自對象的光通量(light flux)經(jīng)過透鏡機(jī)構(gòu)21和光圈/ND過濾器機(jī)構(gòu)22，以 作為對象圖像成像在圖像傳感器23上。 圖像傳感器23對成像的對象圖像進(jìn)行光電轉(zhuǎn)換，以輸出對應(yīng)于對象圖像的圖像 信號。 圖像傳感器23具有矩形成像區(qū)域，其由多個像素構(gòu)成，并逐像素地向模擬信號 處理器24順序輸出圖像信號(其是模擬信號，對應(yīng)于每個像素中存儲的電荷)。例如，由 CCD(電荷耦合器件)傳感器陣列、CMOS(互補(bǔ)金屬氧化物半導(dǎo)體)傳感器陣列等配置圖像 傳感器23。 模擬信號處理器24合并了 CDS (correlated double sampling,相關(guān)雙采樣)電 路、AGC(自動增益控制)電路等，并對從圖像傳感器23輸入的圖像信號進(jìn)行預(yù)訂模擬信號 處理。 A/D轉(zhuǎn)換器25將模擬信號處理器24處理的模擬信號轉(zhuǎn)換為數(shù)字信號，并將數(shù)字信 號提供給相機(jī)DSP 4。 定時生成電路28由CPU 31控制，并控制圖像傳感器23、模擬信號處理器24和A/ D轉(zhuǎn)換器25的操作定時。 也就是說，定時生成電路28經(jīng)由圖像傳感器驅(qū)動器19，向圖像傳感器23提供用于 控制圖像傳感器23的成像定時的各種定時信號，例如，曝光/電荷讀出定時信號、電子快門 定時信號、傳輸(transfer)時鐘和幀率同步信號。此外，定時生成電路28向模擬信號處理 器24提供各種定時信號，使得模擬信號處理器24與來自圖像傳感器23的圖像信號的傳輸同步地進(jìn)行上述處理。 CPU 31能夠通過控制定時生成電路28生成的各個定時信號，改變圖像的幀率，并
控制電子快門(具體地，幀中的可變曝光信號)。此外，CPU 31能夠例如通過使得定時生成
電路28向模擬信號處理器24提供增益控制信號，對圖像信號進(jìn)行可變增益控制。 模糊檢測器13檢測手抖動的量和成像設(shè)備1自身的移動量。模糊檢測器13例如
由加速度傳感器或振動傳感器構(gòu)成，并向CPU 31提供檢測信息，作為模糊量。 閃光發(fā)光器15由發(fā)光驅(qū)動單元14驅(qū)動。CPU 31能夠根據(jù)用戶操作等，通過向發(fā)
光驅(qū)動單元14傳送閃光啟動(activation)命令，在預(yù)定的定時啟動閃光發(fā)光器15。 相機(jī)DSP 4對從成像系統(tǒng)2的A/D轉(zhuǎn)換器25輸入的圖像信號進(jìn)行各種數(shù)字信號處理。 例如，如圖所示，相機(jī)DSP 4包括圖像信號處理器41、壓縮/解壓縮處理器42、 SDRAM控制器43和圖像分析器44，它們的處理功能通過相機(jī)DSP4的內(nèi)部硬件和軟件來實 現(xiàn)。 圖像信號處理器41處理向其輸入的圖像信號。例如，圖像信號處理器41進(jìn)行的 處理包括自動聚焦(auto focus，AF)處理和自動光闌(auto iris， AE)處理(它們是基于 圖像信號控制成像系統(tǒng)2的驅(qū)動的計算處理)，以及自動白平衡(AWB)處理(它是對輸入的 圖像信號的處理)。 對于自動聚焦處理，圖像信號處理器41檢測輸入圖像信號的對比度，并向CPU 31
傳送檢測信息。作為自動聚焦控制方法的各種控制方法為公眾所知。在所謂對比度AF方
法中，強(qiáng)制移動聚焦透鏡以檢測各時間點上圖像信號的對比度，由此確定產(chǎn)生最佳對比度
的聚焦透鏡的位置。也就是說，CPU31在拍攝前監(jiān)視圖像信號處理器41檢測的對比度值，
同時控制聚焦透鏡的移動，使得使用最佳對比度位置作為最佳聚焦位置。 作為拍攝期間的聚焦控制方法，可執(zhí)行所謂擺動(wobbling)AF檢測方法。CPU 31
在拍攝期間監(jiān)視圖像信號處理器41檢測的對比度值，同時細(xì)微地不斷前后移動聚焦透鏡。
盡管聚焦透鏡的最佳位置隨著對象的狀況而改變，但通過檢測對比度同時細(xì)微地前后移動
聚焦透鏡，可以根據(jù)對象的改變來確定聚焦控制方向上的改變。以此方式，可執(zhí)行跟蹤對象
狀況的自動聚焦。 可以對透鏡驅(qū)動單元26的移送機(jī)構(gòu)的每個移送位置分配地址，使得可通過移送 位置地址來確定透鏡位置。 透鏡位置檢測器27讀取作為聚焦透鏡的當(dāng)前透鏡位置的地址，以計算到聚焦對 象(focused subject)的距離，并向CPU 31提供所計算的距離，作為距離信息。以此方式， CPU 31能夠確定對于正聚焦的主對象的距離。 作為相機(jī)DSP 4的圖像信號處理器41執(zhí)行的自動光闌處理，例如，計算對象亮度。 例如，計算并向CPU 31提供輸入圖像信號的平均亮度，作為對象亮度信息，即曝光值信息。 可使用計算平均亮度的各種方法。例如，可計算一幀圖像數(shù)據(jù)的全部像素的亮度信號值的 平均值，或?qū)D像的中央?yún)^(qū)域加權(quán)的亮度信號值的平均值。 基于曝光值信息，CPU 31進(jìn)行自動曝光控制。也就是說，CPU 31通過控制光圈機(jī) 構(gòu)、ND過濾器或圖像傳感器23中的電子快門以及控制模擬信號處理器24使用的增益，進(jìn) 行曝光調(diào)整。
9
相機(jī)DSP 4的圖像信號處理器41不僅進(jìn)行自動聚焦處理和自動光闌處理所使用 的信號生成處理，還進(jìn)行圖像信號的處理，例如，自動白平衡、Y校正、邊緣增強(qiáng)和手抖動模 糊校正。 相機(jī)DSP 4的壓縮/解壓縮處理器42對圖像信號進(jìn)行壓縮處理，或?qū)嚎s圖像數(shù) 據(jù)進(jìn)行解壓縮處理。例如，根據(jù)JPEG(聯(lián)合圖形專家組)或MPEG(移動畫面專家組)標(biāo)準(zhǔn) 進(jìn)行壓縮/解壓縮處理。 SDRAM控制器43向/從SDRAM 9寫入/讀取數(shù)據(jù)。SDRAM 9例如用于臨時存儲從 成像系統(tǒng)2輸入的圖像信號、保護(hù)在圖像信號處理器41或壓縮/解壓縮處理器42的處理 期間使用的存儲或工作區(qū)域，并存儲由圖像分析器44獲得的信息。SDRAM控制器43向/從 SDRAM 9寫入/讀取這樣的數(shù)據(jù)。 圖像分析器44對圖像信號處理器41處理的圖像數(shù)據(jù)進(jìn)行圖像分析，例如，由此進(jìn) 行各種圖像識別操作。 在本實施例中，圖像分析器44進(jìn)行處理以識別對象圖像中包括的人或人臉。此 外，當(dāng)識別出人臉時，圖像分析器44可進(jìn)行用于識別臉的朝向或視線方向的處理。另外，圖 像分析器44可檢測可由圖像分析識別的各種類型的信息，如環(huán)境光條件或?qū)ο笙鄬τ诔?像設(shè)備1的移動量。 控制系統(tǒng)3包括CPU 31、 RAM 32、閃爍ROM 33、時鐘電路34?？刂葡到y(tǒng)3的每個 部分，相機(jī)DSP 4，成像系統(tǒng)2的每個部分、顯示控制器7、外部接口8以及介質(zhì)接口 10經(jīng)由 系統(tǒng)總線連接，以便能夠相互傳送圖像數(shù)據(jù)或控制信息。 CPU 31控制成像設(shè)備1的整體操作。也就是說，CPU 31基于內(nèi)部ROM等中存儲的 程序和經(jīng)由操作單元5的用戶操作輸入，進(jìn)行各種計算操作并與各個部分交換控制信號， 由此各個部分執(zhí)行必要的操作。具體地，CPU 31進(jìn)行主顯示面板6M的顯示控制，以及用于 控制前顯示面板6F的顯示操作的下述控制處理。 RAM(隨機(jī)存取存儲器)32臨時存儲由相機(jī)DSP 4處理的圖像信號(每幀的圖像數(shù) 據(jù))，或存儲CPU 31處理期間生成的信息。 閃爍ROM 33用于將圖像數(shù)據(jù)存儲為圖像(其由用戶成像為靜態(tài)圖像或影像)或 存儲有必要按非易失性方式存儲的其他信息。閃爍ROM 33可存儲成像設(shè)備1的控制軟件 程序或相機(jī)設(shè)置數(shù)據(jù)。 時鐘電路34對當(dāng)前日期和時間信息進(jìn)行計時(以yyyy/mm/dd hh/mm/ss的格 式)。 操作單元5由圖1中所示的各種控件5a至5e以及生成與用戶已經(jīng)進(jìn)行的操作相 對應(yīng)的信號的信號生成器構(gòu)成。將從各種控件獲得的用戶操作信息從操作單元5傳送到 CPU 31。 除了控件之外，操作單元5還可被配置為支持觸摸面板操作。例如，可在主顯示面
板6M上安裝觸摸傳感器，使得用戶能在屏幕顯示上經(jīng)由觸摸操作而輸入其操作。 顯示控制器7基于CPU 31的控制，在主顯示面板6M和前顯示面板6F上進(jìn)行必要
的顯示操作。 主顯示面板6M的顯示操作是在主顯示面板6M上顯示監(jiān)視圖像(直通圖像)、從記 錄介質(zhì)90或閃爍ROM讀取的回放圖像、控制菜單、各種圖標(biāo)以及時間的操作。
10
此外，前顯示面板6F的顯示操作是在前顯示面板6F上顯示監(jiān)視圖像和回放圖像 的操作。 介質(zhì)接口 10基于CPU 31的控制，進(jìn)行數(shù)據(jù)從/向成像設(shè)備1中設(shè)置的諸如存儲 卡(卡形可移除存儲器)的記錄介質(zhì)90的讀取/寫入。例如，介質(zhì)接口 10進(jìn)行在記錄介 質(zhì)90上記錄作為拍攝結(jié)果而獲得的靜態(tài)圖像數(shù)據(jù)或影像(movie)數(shù)據(jù)的操作。此外，在回 放模式下，介質(zhì)接口 10進(jìn)行從記錄介質(zhì)90讀取圖像數(shù)據(jù)的操作。 盡管可移除存儲卡被例示為記錄介質(zhì)90，但可使用能夠記錄作為拍攝結(jié)果而獲得 的靜態(tài)圖像數(shù)據(jù)或影像數(shù)據(jù)的其他類型的記錄介質(zhì)。例如，可使用可移除盤介質(zhì)，如光盤， 并且可在其上安裝HDD(硬盤驅(qū)動器)以進(jìn)行記錄。 外部接口 8根據(jù)信號格式，如USB (通用串行總線)，經(jīng)由預(yù)定線纜向/從外部裝置 傳送/接收各種數(shù)據(jù)。信號格式不限于USB格式，還可以使用兼容諸如IEEE(電子和電氣 工程師協(xié)會)1394等的其他格式的外部接口 。 此外，外部接口 8可配置為替代有線傳輸方法支持紅外傳輸、近距無線通信和其 他無線通信方法。 成像設(shè)備1能夠經(jīng)由外部接口 8向/從個人計算機(jī)和其他各種設(shè)備傳送/接收數(shù) 據(jù)。例如，成像設(shè)備l能夠向外部設(shè)備傳送圖像數(shù)據(jù)。 圖2示出了鄰近傳感器50。鄰近傳感器50是被配置為檢測人是否存在于成像設(shè)
備l的前側(cè)(對象側(cè))上的傳感器。例如，熱電傳感器可用作鄰近傳感器50。 如上所述，當(dāng)通過圖像分析器44的圖像分析進(jìn)行人檢測時，可不提供鄰近傳感器
50，并且可替換地，圖像分析的人檢測和鄰近傳感器50的檢測可一起進(jìn)行。 2.操作狀態(tài)轉(zhuǎn)變 將參照圖3描述根據(jù)本實施例的成像設(shè)備1的操作狀態(tài)轉(zhuǎn)變。這里所使用的操作 狀態(tài)具體是指從主顯示面板6M上顯示的內(nèi)容的角度看的操作狀態(tài)。 根據(jù)用戶操作等，成像設(shè)備1的操作狀態(tài)在監(jiān)視時段、記錄時段、預(yù)覽時段和回放 時段之間轉(zhuǎn)變。盡管實踐中存在其他操作狀態(tài)，如成像設(shè)備與外部裝置通信的時段，但為了 簡化描述，將省略這樣的操作狀態(tài)。 例如，成像設(shè)備1在開機(jī)時開始監(jiān)視操作。然而，例如，如果用戶在關(guān)機(jī)狀態(tài)下已 經(jīng)選擇了回放模式，則成像設(shè)備1可在開機(jī)時進(jìn)入回放操作狀態(tài)。 監(jiān)視時段是由成像系統(tǒng)2對圖像進(jìn)行成像的操作時段。當(dāng)用戶用成像設(shè)備1進(jìn)行 靜態(tài)圖像拍攝時，成像設(shè)備1通常先進(jìn)行監(jiān)視操作。 在監(jiān)視時段中，在主顯示面板6M上顯示對象圖像(直通圖像)。 也就是說，CPU 31使得成像系統(tǒng)2和相機(jī)DSP 4在監(jiān)視時段中執(zhí)行各自必要的操
作。然后，例如，將從相機(jī)DSP 4提供的每幀的圖像數(shù)據(jù)讀取到RAM 32中。每幀的圖像數(shù)
據(jù)被傳遞到顯示控制器7，使得主顯示面板6M顯示監(jiān)視圖像。如下文將描述的，可在前顯示
面板6F上顯示監(jiān)視圖像。 在監(jiān)視時段中，用戶在監(jiān)視主顯示面板6M上的監(jiān)視圖像的同時，選擇對象或捕捉 快門定時。 當(dāng)用戶在監(jiān)視時段中按下釋放鈕5a，即操作快門時，操作狀態(tài)轉(zhuǎn)變?yōu)橛涗洉r段。
CPU 31進(jìn)行將在釋放定時捕捉的一幀圖像數(shù)據(jù)存儲為靜態(tài)圖像數(shù)據(jù)的處理。也就是說，CPU 31將在相應(yīng)定時捕捉的圖像數(shù)據(jù)傳送到介質(zhì)接口 10，以記錄在記錄介質(zhì)90上。
此外，響應(yīng)于快門釋放，可在閃爍ROM 33上而不是在記錄介質(zhì)90上記錄圖像數(shù) 據(jù)。盡管通常在記錄介質(zhì)90上記錄圖像數(shù)據(jù)，但如果其上沒有安裝記錄介質(zhì)90，則可在閃 爍ROM 33上記錄圖像數(shù)據(jù)。 從用戶角度來看，該記錄時段是在快門釋放之后緊接著發(fā)生的非常短的時段，在 此期間，例如，在主顯示面板6M上不顯示圖像或數(shù)據(jù)。 在響應(yīng)于快門釋放進(jìn)行記錄操作之后緊接著的預(yù)定時段，操作狀態(tài)轉(zhuǎn)變?yōu)轭A(yù)覽時 段。預(yù)覽時段是在主顯示面板6M上顯示先前記錄操作所記錄的圖像的時段。S卩，該時段允 許用戶在拍攝之后緊接著檢查所拍攝的靜態(tài)圖像。 預(yù)覽時段持續(xù)兩秒或數(shù)秒，并且CPU 31在該時段期間控制主顯示面板6M顯示所 記錄的靜態(tài)圖像。 當(dāng)經(jīng)過了對預(yù)覽時段設(shè)置的預(yù)定時段時，操作狀態(tài)返回到監(jiān)視狀態(tài)，其中CPU 31 進(jìn)行對應(yīng)于監(jiān)視時段的控制。 也就是說，通過監(jiān)視時段、記錄時段和預(yù)覽時段中這樣的操作，完成用于拍攝靜態(tài) 圖像的一系列操作。 成像設(shè)備1還能夠拍攝影像(movie)，并且在影像拍攝的情況下，記錄時段從影像 拍攝的開始持續(xù)到結(jié)束。此外，不提供預(yù)覽時段。 當(dāng)用戶進(jìn)行指示回放操作的操作時，操作狀態(tài)轉(zhuǎn)變?yōu)榛胤挪僮鳡顟B(tài)(回放時段)。
在回放時段中，進(jìn)行回放在記錄介質(zhì)90或閃爍R0M 33上通過拍攝記錄的圖像等 的操作。 CPU 31根據(jù)用戶操作讀取在記錄介質(zhì)90或閃爍ROM 33上記錄的圖像，并控制顯 示控制器7在主顯示面板6M上顯示縮略圖像或單個回放圖像。可在前顯示面板6F上顯示 回放圖像。 3.兩顯示面板的屏幕顯示例子 將參照圖4A至圖4C和圖5A至圖5C，描述根據(jù)本實施例由成像設(shè)備1在主顯示面 板6M和前顯示面板6F上進(jìn)行的示例屏幕顯示。 圖4A至圖4C和圖5A示出了在監(jiān)視時段中進(jìn)行的屏幕顯示的例子。 圖4A示出了在主顯示面板6M上顯示監(jiān)視圖像(直通圖像)而在前顯示面板6F
上不顯示圖像的狀態(tài)。 圖4B示出了在主顯示面板6M上顯示監(jiān)視圖像并在前顯示面板6F上顯示同一監(jiān) 視圖像的狀態(tài)。 圖4C示出了在主顯示面板6M上顯示監(jiān)視圖像而在前顯示面板6F上顯示不同圖 像(例如，回放圖像)的狀態(tài)?；胤艌D像可以是先前記錄在記錄介質(zhì)90或閃爍R0M 33中 的圖像，或者可以是預(yù)先在成像設(shè)備l中存儲的圖像。例如，該例子示出了如下狀態(tài)，其中， 將在監(jiān)視圖像不顯示在前顯示面板6F上時顯示的圖像數(shù)據(jù)被存儲在閃爍ROM 33等中，作 為預(yù)設(shè)圖像數(shù)據(jù)，并且該預(yù)設(shè)圖像數(shù)據(jù)被讀取和顯示。此外，所顯示的數(shù)據(jù)不限于所記錄的 圖像，而文本數(shù)據(jù)、動畫數(shù)據(jù)、計算機(jī)圖形數(shù)據(jù)等可以被記錄在記錄介質(zhì)90或閃爍R0M 33 上并顯示。也就是說，回放數(shù)據(jù)包括所有可顯示的數(shù)據(jù)。 圖5A示出了在主顯示面板6M上不顯示圖像而在前顯示面板6F上顯示監(jiān)視圖像的例子。 盡管這些例子可被當(dāng)作在監(jiān)視時段中主顯示面板6M和前顯示面板6F的顯示狀態(tài) 例子，但是所顯示的內(nèi)容由CPU 31根據(jù)監(jiān)視時段期間的對象條件、成像設(shè)備1的操作條件、 拍攝模式等來控制。 圖5B和圖5C示出了在回放時段中進(jìn)行的屏幕顯示的例子。 圖5B示出了按縮略視圖在主顯示面板6M上顯示回放圖像，而在前顯示面板6F上 顯示用光標(biāo)K在縮略圖像中選擇的回放圖像的狀態(tài)。 圖5C示出了在主顯示面板6M上顯示單個回放圖像而在前顯示面板6F上顯示同 一回放圖像的狀態(tài)。 這些例子可被當(dāng)作在回放時段中主顯示面板6M和前顯示面板6F的顯示狀態(tài)例 子。此外，可配置其他例子。 例如，可考慮如下例子，其中，在主顯示面板6M上顯示回放圖像，而在前顯示面板 6F上顯示預(yù)設(shè)圖像。 此外，可考慮如下例子，其中，在主顯示面板6M上縮略圖像的列表，而在前顯示面 板6F上順序顯示(幻燈片形式)回放圖像。 盡管圖4A至圖4C和圖5A至圖5C中示出了顯示例子，但在面對進(jìn)行拍攝和回放 操作的用戶的主顯示面板6M上的顯示基本如下所述進(jìn)行。 首先，在監(jiān)視時段中顯示監(jiān)視圖像。此外，在預(yù)覽時段中，將已經(jīng)記錄的圖像顯示 預(yù)定時段。 在回放時段中，根據(jù)用戶操作顯示縮略圖像或回放圖像。 CPU 31進(jìn)行控制，使得根據(jù)操作狀態(tài)或用戶操作，在主顯示面板6M上顯示這樣的 圖像。 另一方面，對于前顯示面板6F， CPU 31進(jìn)行顯示控制，使得顯示對前顯示面板6F
的觀看者有用或有趣的圖像或數(shù)據(jù)，或者取消非必要的顯示操作。 下面將描述前顯示面板6F上的各種顯示控制例子。 4.前顯示面板在監(jiān)視期間的顯示控制 4-1.基于人識別的示例處理 圖6A示出了 CPU 31在監(jiān)視時段中在前顯示面板6F上執(zhí)行的示例顯示控制。
如上所述，在監(jiān)視時段中，在主顯示面板6M上顯示由成像系統(tǒng)2和相機(jī)DSP 4的 處理獲得的監(jiān)視圖像。也就是說，在監(jiān)視時段中，CPU 31進(jìn)行顯示控制，使得在主顯示面板 6M上顯示從相機(jī)DSP 4提供的圖像數(shù)據(jù)，作為直通圖像。 此時，為了進(jìn)行前顯示面板6F上的顯示控制，CPU 31與主顯示面板6M的顯示控 制并行地進(jìn)行圖6A中所示的處理。 首先，在步驟F101， CPU 31檢查圖像分析器44的圖像分析結(jié)果。圖像分析器44 對成像系統(tǒng)2在監(jiān)視時段中成像的并由相機(jī)DSP 4接收的圖像數(shù)據(jù)進(jìn)行圖像分析。例如，圖 像分析器44對圖像信號處理器41處理的每幀或間斷提取的幀的圖像數(shù)據(jù)進(jìn)行圖像分析。 然后，圖像分析器44確定在正被分析的圖像數(shù)據(jù)中是否包括可被識別為人的圖像。S卩，確 定在圖像中是否包括可被識別為人的輪廓。確定結(jié)果被提供給CPU 31。在步驟F101，作為 確定的結(jié)果，CPU 31檢查是否識別出人的存在。
當(dāng)根據(jù)圖像分析的結(jié)果，識別出人的存在時，流程從步驟F102前進(jìn)到步驟F103， 并且CPU 31使得前顯示面板6F顯示監(jiān)視圖像。也就是說，CPU31指示顯示控制器7在前 顯示面板6F上顯示正在主顯示面板6M上顯示的相同的監(jiān)視圖像。 在此情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4B所示的狀 態(tài)。 另一方面，當(dāng)作為步驟FIOI中圖像分析的結(jié)果，未檢測到人時，流程從F102前進(jìn) 到步驟F104，并且CPU 31關(guān)閉前顯示面板6F的顯示。 在此情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4A所示的狀 態(tài)。 CPU 31在監(jiān)視時段中重復(fù)執(zhí)行圖6A所示的處理。 例如，監(jiān)視時段在操作狀態(tài)響應(yīng)于快門釋放而轉(zhuǎn)變?yōu)橛涗洸僮鲿r、在操作狀態(tài)響 應(yīng)于按下回放鈕而轉(zhuǎn)變?yōu)榛胤挪僮鲿r、或者在用戶關(guān)閉成像設(shè)備1時結(jié)束。CPU 31重復(fù)執(zhí) 行圖6A所示的處理，直到監(jiān)視時段響應(yīng)于這樣的動作而結(jié)束。 因而，當(dāng)用戶在監(jiān)視時段期間將成像設(shè)備l朝向某人而使得該人變?yōu)閷ο髸r，如 圖4B所示，在前顯示面板6F上顯示監(jiān)視圖像。另一方面，當(dāng)用戶針對沒有任何人的對象場 景，如風(fēng)景時，如圖4A所示，前顯示面板6F關(guān)閉。此外，當(dāng)在圖4A的狀態(tài)下再次檢測出人 作為對象時，在前顯示面板6F上顯示包括人的監(jiān)視圖像。 S卩，根據(jù)該處理例子，當(dāng)作為被監(jiān)視的對象的人存在于前側(cè)時，在前顯示面板6F 上顯示監(jiān)視圖像，而當(dāng)不包括人作為對象時，前顯示面板6F關(guān)閉。 當(dāng)人是對象時，該作為對象的人能看到前顯示面板6F。因而，用戶能從用戶正被拍 攝的監(jiān)視圖像確認(rèn)他/她的表情或姿勢。因而，用戶能有效地利用前顯示面板6F的顯示， 例如，自己確認(rèn)是否希望該表情作為照片。 另一方面，如果人未作為對象存在，則可確定沒有人在觀看前顯示面板6F。因而， 通過關(guān)閉前顯示面板6F的顯示(例如，僅僅關(guān)閉前顯示面板6F)，可以實現(xiàn)功耗的降低。也 就是說，消除了沒人在看的非必要顯示。 盡管在步驟FIOI中，基于圖像分析確定人是否作為對象存在于前側(cè)，但在步驟 F101中可執(zhí)行檢查(check)圖2所示的鄰近傳感器50的檢測結(jié)果的處理。此外，在步驟 F101中可檢查圖像分析結(jié)果和鄰近傳感器50的檢測結(jié)果這兩者。 此外，盡管在下述圖7至圖14的處理例子中，基于通過圖像分析的臉檢測來確定 人在前側(cè)的存在，但使用鄰近傳感器50的變型同樣可應(yīng)用于圖7至圖14的情況。
盡管圖6A所示的處理基于人檢測來控制前顯示面板6F的顯示操作，但也可執(zhí)行 "臉"檢測，作為人檢測。 例如，圖像分析器44確定在圖像數(shù)據(jù)中是否存在可被識別為臉或臉部元素(如眼 睛、鼻或嘴)的輪廓，由此確定圖像數(shù)據(jù)中是否包括作為對象的人的"臉"。
圖6B中示出了這樣的情況下CPU 31的處理。 在步驟FIOI中，CPU 31檢查圖像分析器44的圖像分析結(jié)果，以確定是否存在 "臉"。當(dāng)檢測到"臉"時，流程從步驟F102A前進(jìn)到步驟F103，并且CPU 31使得前顯示面板 6F顯示監(jiān)視圖像。另一方面，當(dāng)未檢測到"臉"時，流程從步驟F102A前進(jìn)到步驟F104，并 且CPU 31關(guān)閉前顯示面板6F。
如上所述，可基于臉檢測而不是人的整個身體的檢測，來檢測人在前側(cè)的存在。
圖7示出了另一處理例子，其中即使在前側(cè)沒有人時，也不關(guān)閉前顯示面板6F。
步驟F101和F102中的操作與圖6A所示的相同。 當(dāng)確定作為對象的人在前側(cè)存在時，流程前進(jìn)到步驟F103A，并且CPU31指示顯示 控制器7在前顯示面板6F上以高亮度狀態(tài)顯示監(jiān)視圖像。 當(dāng)確定沒有人在前側(cè)存在作為對象時，流程前進(jìn)到步驟F104A，并且CPU 31指示 顯示控制器7在前顯示面板6F上以低亮度狀態(tài)顯示監(jiān)視圖像。 也就是說，當(dāng)存在能看到前顯示面板6F的人時，前顯示面板6F的顯示亮度增加，
使得人能容易地看到監(jiān)視圖像。另一方面，當(dāng)確定在前側(cè)沒有人存在時，顯示亮度減少，由
此實現(xiàn)功耗降低。例如，當(dāng)使用自發(fā)光元件(如有機(jī)EL面板)的顯示裝置被用作前顯示面
板6F時，減少的顯示亮度能有效地降低功耗。 接著，將描述圖8所示的處理例子。 步驟F101和F102中的操作與圖6A所示的相同。 當(dāng)確定作為對象的人在前側(cè)存在時，流程前進(jìn)到步驟F103，并且CPU 31指示顯示 控制器7在前顯示面板6F上顯示監(jiān)視圖像。 當(dāng)確定沒有人在前側(cè)存在作為對象時，流程前進(jìn)到步驟F105，并且CPU31進(jìn)行讀 取在記錄介質(zhì)90等上記錄的圖像數(shù)據(jù)或預(yù)設(shè)圖像數(shù)據(jù)的處理。例如，CPU 31指示介質(zhì)接 口 10回放來自記錄介質(zhì)90的圖像數(shù)據(jù)(已記錄的圖像數(shù)據(jù)等)?？商鎿Q地，CPU 31進(jìn)行 從閃爍ROM 33讀取預(yù)設(shè)圖像數(shù)據(jù)或已記錄的圖像數(shù)據(jù)的處理。然后，CPU 31指示顯示控 制器7在前顯示面板6F上顯示所讀取的圖像數(shù)據(jù)。也就是說，類似于圖4C所示的例子，在 前顯示面板6F上顯示不同于監(jiān)視圖像的圖像。 在此情況下，當(dāng)人作為對象存在時，類似于圖4B所示的例子，該人可監(jiān)視他/她正 被記錄的圖像。 另一方面，當(dāng)不存在作為對象的人時，類似于圖4C所示的例子，在前顯示面板6F 上顯示與對象無關(guān)的圖像。在許多情況下，即使在沒有人作為對象存在時，也會有人在附 近。對于在附近的那些人，前顯示面板6F上的顯示可被當(dāng)作成像設(shè)備1的有趣外部設(shè)計。
此外，在此情況下，通過允許用戶選擇要在前顯示面板6F上顯示的圖像，用戶能 自由地自己設(shè)置成像設(shè)備l的外觀，由此拓寬相機(jī)使用的樂趣。 在圖7和圖8所示的處理例子的情況下，可將人識別執(zhí)行為圖6B中描述的臉識 別。 此外，從記錄介質(zhì)90讀取的用于顯示的圖像數(shù)據(jù)可以是文本數(shù)據(jù)或動畫數(shù)據(jù)。
4-2.基于人識別和用戶設(shè)置的示例處理 盡管圖6至圖8示出了基于人在前側(cè)存在的識別結(jié)果來控制前顯示面板6F的顯 示狀態(tài)的例子，但在此段落中，將描述除了人識別之外，還考慮成像設(shè)備1上的用戶設(shè)置狀 態(tài)來進(jìn)行前顯示面板6F的顯示控制的例子。 用戶設(shè)置是指用戶選擇的設(shè)置狀態(tài)，如拍攝模式設(shè)置、閃光設(shè)置或變焦位置設(shè)置。
圖9示出了在監(jiān)視時段中CPU 31在前顯示面板6F上執(zhí)行的示例顯示控制。
在監(jiān)視時段中，在主顯示面板6M上顯示由成像系統(tǒng)2和相機(jī)DSP 4的處理獲得的 監(jiān)視圖像。CPU 31與圖9所示的處理并行地進(jìn)行顯示控制，使得從相機(jī)DSP 4提供的圖像數(shù)據(jù)作為直通圖像在主顯示面板6M上顯示。 此時，為了對前顯示面板6F進(jìn)行顯示控制，CPU 31進(jìn)行圖9所示的處理。
在步驟F201中，CPU 31檢查圖像分析器44的圖像分析結(jié)果。在此例中，類似于圖6B的情況，圖像分析器44對在監(jiān)視時段中由程序系統(tǒng)2記錄的并由相機(jī)DSP 4接收的圖像數(shù)據(jù)進(jìn)行圖像分析，由此確定圖像數(shù)據(jù)中是否包括作為對象的人的臉。在步驟F201中，作為圖像分析器44的圖像分析結(jié)果，CPU 31檢查是否識別出人臉的存在。
當(dāng)作為圖像分析結(jié)果識別出人臉的存在時，流程從步驟F202前進(jìn)到步驟F203，并且CPU 31基于目前用戶設(shè)置狀態(tài)是否適合于在前顯示面板6F上顯示監(jiān)視圖像而分支(branch)其處理。 當(dāng)確定用戶設(shè)置適合于在前顯示面板6F上顯示監(jiān)視圖像時，流程前進(jìn)到步驟F204，并且CPU 31使得前顯示面板6F顯示監(jiān)視圖像。也就是說，CPU 31指示顯示控制器7在前顯示面板6F上顯示正在主顯示面板6M上顯示的相同的監(jiān)視圖像。在此情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4B所示的狀態(tài)。 另一方面，當(dāng)在步驟F201中從圖像分析的結(jié)果確定在對象圖像中不包括人臉時，流程從步驟F202前進(jìn)到步驟F205，并且CPU 31關(guān)閉前顯示面板6F的顯示。
此外，當(dāng)在步驟F203中確定用戶設(shè)置不適合于在前顯示面板6F上顯示監(jiān)視圖像時，流程前進(jìn)到步驟F205，并且CPU 31關(guān)閉前顯示面板6F的顯示。 在這樣的情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4A所示的狀態(tài)。 CPU 31在監(jiān)視時段中重復(fù)執(zhí)行圖9所示的處理。 因而，在監(jiān)視時段中，用戶移動成像設(shè)備l，使得對象圖像中包括人臉，并且當(dāng)用戶設(shè)置狀態(tài)在此時處于預(yù)定狀態(tài)時，如圖4B所示，在前顯示面板6F上顯示監(jiān)視圖像。
另一方面，即使當(dāng)用戶針對沒有任何人的對象場景(如風(fēng)景)或人臉是對象時，如果用戶設(shè)置狀態(tài)不處于預(yù)定狀態(tài)，則如圖4A所示關(guān)閉前顯示面板6F。 S卩，根據(jù)該處理例子，當(dāng)在前側(cè)存在作為被監(jiān)視的對象的人的臉時，以及當(dāng)根據(jù)用戶設(shè)置狀態(tài)，認(rèn)為該對象人能夠合適地觀看前顯示面板6F時，在前顯示面板6F上顯示監(jiān)視圖像。另一方面，當(dāng)人臉未被包括為對象，或認(rèn)為對象人不能合適地觀看前顯示面板6F時，關(guān)閉前顯示面板6F。 如上所述，用戶設(shè)置包括拍攝模式設(shè)置、閃光設(shè)置和變焦位置設(shè)置。將對于每種用戶設(shè)置描述圖9所示的處理的應(yīng)用。 拍攝模式是用戶選擇使得可按各種情形適當(dāng)進(jìn)行拍攝的模式，包括夜景模式、夜景人像模式、人像模式、風(fēng)景模式、柔和快照模式、雪天模式、海灘模式、快速快門模式、高靈敏度模式和微笑快門模式。 對于每個拍攝模式，預(yù)設(shè)了合適的設(shè)置，如快門速度、曝光值、圖像信號的信號增益，以及如邊緣增強(qiáng)或色彩處理的信號處理的設(shè)置，并且用戶可通過例如操作圖1中所示的模式盤5b，選擇拍攝模式。 夜景模式是允許用戶利用適合于拍攝夜景的設(shè)置進(jìn)行拍攝的拍攝模式。 夜景人像模式是允許用戶利用能夠以夜景為背景拍攝人的清晰圖像(包括人的
表情)的設(shè)置進(jìn)行拍攝的拍攝模式。
人像模式是允許用戶利用適合于拍攝人的圖像的設(shè)置進(jìn)行拍攝的拍攝模式。 風(fēng)景模式是允許用戶利用適合于拍攝風(fēng)景的設(shè)置進(jìn)行拍攝的拍攝模式。 柔和快照模式是允許用戶利用使得能夠拍攝具有更柔和更明亮的印象的人的皮
膚紋理的圖像的設(shè)置進(jìn)行拍攝的拍攝模式。 快速快門模式是允許用戶利用適合于拍攝移動對象的設(shè)置進(jìn)行拍攝的拍攝模式。
高靈敏度模式是允許用戶在自然氛圍下拍攝黑場景而不使用閃光燈的拍攝模式。
微笑快門模式是當(dāng)在對象人的臉上檢測到微笑時自動釋放快門的拍攝模式。
將假設(shè)，在這些拍攝模式中，例如，CPU 31在步驟F203中確定適合于在前顯示面板6F上進(jìn)行顯示的拍攝模式是夜景人像模式、人像模式、柔和快照模式和微笑快門模式。
這些拍攝模式是當(dāng)拍攝人的圖像時被選擇的，因此最有可能將人包括為對象。也就是說，很可能能看到前顯示面板6F的人作為對象存在。 因而，當(dāng)在步驟F203中確定拍攝模式是夜景人像模式、人像模式、柔和快照模式和微笑快門模式中的任何一種時，在步驟F204中，CPU 31使得前顯示面板6F顯示監(jiān)視圖像。 在選擇其他拍攝模式，即夜景模式、風(fēng)景模式、快速快門模式和高靈敏度模式的情況下，可認(rèn)為用戶想要拍攝除了人之外的對象的圖像，或者前顯示面板6F的可視性較差。
例如，選擇夜景模式和風(fēng)景模式拍攝風(fēng)景，因此可認(rèn)為對象圖像中沒有人存在，或者如果存在，則人不是圖像中的主要對象。此外，在夜景模式和高靈敏度模式下，即使有人在前側(cè)并且在前顯示面板6F上顯示監(jiān)視圖像，在拍攝黑暗場景時獲得的監(jiān)視圖像也只對于前側(cè)的人提供較差的可視性。 另外，快速快門模式下的物體將會是移動對象。例如，即使人是對象，人也將處于這樣的狀況下，例如進(jìn)行體育比賽或舞蹈，因而將不能平靜地觀看前顯示面板6F。
S卩，在這樣的拍攝模式下，可認(rèn)為沒有人存在于前側(cè)，或者如果存在，人也不能以好的可視性來觀看前顯示面板6F，或者未在觀看前顯示面板6F。 因而，當(dāng)拍攝模式是夜景模式、風(fēng)景模式、快速快門模式和高靈敏度模式中的任何一個時，即使在步驟F202中檢測到人臉，流程也前進(jìn)到步驟F205，并且CPU 31關(guān)閉前顯示面板6F。 上述拍攝模式是例子，除了這些拍攝模式之外，可提供其他拍攝模式。例如，可提供適合于拍攝微光(twilight)場景的微光模式、適合于植物或昆蟲的近距離拍攝的微距模式、適合于拍攝焰火的焰火模式、適合于水下拍攝的水下模式。此外，可提供允許用戶利用能夠表達(dá)滑雪坡道或雪景的真實色彩的設(shè)置進(jìn)行拍攝的雪天模式，以及允許用戶利用能夠?qū)；蛱炜盏乃{(lán)色清楚成像的設(shè)置進(jìn)行拍攝的海灘模式。 在這樣的情況下，可根據(jù)人的存在、前顯示面板6F上所顯示內(nèi)容的可視性以及對象側(cè)的人的狀況，預(yù)設(shè)在步驟F203中將如何處理各個拍攝模式(確定每個拍攝模式是否屬于進(jìn)行前顯示面板6F的顯示的預(yù)定拍攝模式)。
在用戶設(shè)置中，可按以上方式處理拍攝模式設(shè)置。 在用戶設(shè)置中，可按以下方式處理閃光設(shè)置。閃光設(shè)置是用戶選擇是(閃光開)否(閃光關(guān))進(jìn)行閃光，或者是否自動開啟/關(guān)閉(閃光自動)的設(shè)置。
當(dāng)用戶選擇了閃光開設(shè)置時，周圍通常較暗。
在黑暗條件下，監(jiān)視時段中監(jiān)視圖像的亮度較低，因此認(rèn)為前顯示面板6F的顯示的可視性較差。 因而，當(dāng)閃光設(shè)置被設(shè)為"閃光開"時，流程前進(jìn)到步驟F205， CPU 31關(guān)閉前顯示面板6F。 在用戶設(shè)置中，可按以下方式處理變焦位置設(shè)置。變焦位置設(shè)置是用戶通過操作圖1所示的W/T鈕5c選擇的變焦位置的設(shè)置。 例如，即使當(dāng)人是對象時，當(dāng)變焦位置與預(yù)定比例相比過于接近T側(cè)(遠(yuǎn)距拍攝)時，可認(rèn)為對象人遠(yuǎn)離成像設(shè)備1。在此情況下，位于如此遠(yuǎn)距離的此人將不能合適地觀看前顯示面板6F上的顯示。 因而，當(dāng)在步驟F203中確定用戶選擇的變焦位置是預(yù)定遠(yuǎn)距拍攝或更遠(yuǎn)時，流程前進(jìn)到步驟F205， CPU 31關(guān)閉前顯示面板6F的顯示。 在圖9的步驟F203中，CPU 31基于用戶設(shè)置進(jìn)行上述確定，由此可以進(jìn)行適合于前顯示面板6F的顯示控制。 S卩，根據(jù)圖9所示的處理，當(dāng)檢測到臉并且用戶設(shè)置是預(yù)定狀態(tài)時，在步驟F204中，在前顯示面板6F上顯示監(jiān)視圖像。換言之，當(dāng)人是對象并且認(rèn)為人能夠合適地觀看監(jiān)視圖像時，在前顯示面板6F上顯示監(jiān)視圖像。 因而，對象人能從顯示該人正在被拍攝的監(jiān)視圖像的前顯示面板6F確認(rèn)他/她的表情或姿態(tài)。 另一方面，當(dāng)人未作為對象存在，或者如果存在但認(rèn)為不必在前顯示面板6F上顯示監(jiān)視圖像時，關(guān)閉前顯示面板6F的顯示(例如，僅僅關(guān)閉前顯示面板6F)。通過這樣做，可以更合適地實現(xiàn)功耗降低。 可基于部分或全部的上述用戶設(shè)置拍攝模式設(shè)置、閃光設(shè)置和變焦位置設(shè)置來進(jìn)行步驟F203的上述確定。 作為用戶設(shè)置，除了上述設(shè)置之外，可考慮其他設(shè)置，如靈敏度設(shè)置、曝光設(shè)置、手抖動模糊校正開/關(guān)設(shè)置或特殊拍攝設(shè)置。對于每種設(shè)置，可確定對象人是否被認(rèn)為能夠合適地觀看前顯示面板6F的顯示，并且可在步驟F203的確定上反映該確定結(jié)果。
圖IO示出了另一處理例子。圖IO示出了對應(yīng)于以下情況的處理，其中，允許用戶選擇自拍模式作為上述拍攝模式之一。自拍模式是用戶在成像設(shè)備1的前面拍攝他/她的圖像的拍攝模式。 圖10中的步驟F201至F205中的操作與圖9所示的步驟F201至F205的相同。當(dāng)拍攝模式被設(shè)置為自拍模式時，流程從步驟F203前進(jìn)到步驟F204，而不考慮其他用戶設(shè)置，并且CPU 31進(jìn)行步驟F204的操作。 當(dāng)拍攝模式被設(shè)置為不同于自拍模式的其他模式時，進(jìn)行與圖9相同的處理。
當(dāng)拍攝模式被設(shè)置為自拍模式時，在步驟F204中，CPU 31進(jìn)行在前顯示面板6F上顯示監(jiān)視圖像的顯示控制，然后流程從步驟F210前進(jìn)到步驟F211，并且CPU 31關(guān)閉主顯示面板6M的顯示。 也就是說，當(dāng)選擇自拍模式作為用戶設(shè)置時，前顯示面板6F和主顯示面板6M的顯示狀態(tài)對應(yīng)于如圖5A所示的狀態(tài)。 在自拍模式的情況下，用戶在成像設(shè)備1的前面進(jìn)行拍攝，因此不能看到主顯示面板6M。因而，在前顯示面板6F上顯示監(jiān)視圖像，使得用戶能從前顯示面板6F監(jiān)視對象。 此外，關(guān)閉主顯示面板6M，由此實現(xiàn)功耗降低。 圖9和圖10所示的處理可以進(jìn)行修改，使得在步驟F205中不是關(guān)閉前顯示面板 6F的顯示，而是可以如參照圖7所述以低亮度狀態(tài)顯示圖像，或者可如參照圖8所述顯示回 放圖像或預(yù)設(shè)圖像。 4-3.基于人識別和內(nèi)部檢測信息的示例處理 接著，將描述以下例子，其中，除了人識別之外，基于由成像設(shè)備1內(nèi)部檢測到的 相機(jī)檢測信息(內(nèi)部檢測信息)進(jìn)行前顯示面板6F的顯示控制。 這里所使用的相機(jī)檢測信息是指成像設(shè)備1的內(nèi)部傳感器檢測到的信息或者伴 隨成像設(shè)備1的操作控制CPU 31可以識別出的信息。例如，相機(jī)檢測信息可以是環(huán)境光強(qiáng) 度信息(其用于控制閃光或曝光)、變焦位置信息、聚焦信息或手抖動模糊檢測信息。
圖11示出了 CPU 31在監(jiān)視時段中對前顯示面板6F執(zhí)行的示例顯示控制。
在監(jiān)視時段中，與在主顯示面板6M上顯示從相機(jī)DSP 4提供的圖像數(shù)據(jù)作為直通 圖像的顯示控制并行地，CPU 31進(jìn)行圖11所示的處理，以便對前顯示面板6F進(jìn)行顯示控 制。 在步驟F301中，CPU 31檢查圖像分析器44的圖像分析結(jié)果。在此例中，圖像分 析器44對成像系統(tǒng)2在監(jiān)視時段中記錄的并且由相機(jī)DSP 4接收的圖像數(shù)據(jù)進(jìn)行圖像分 析，由此確定圖像數(shù)據(jù)中是否包括作為對象的人的臉。 在步驟F301中，作為圖像分析器44的圖像分析結(jié)果，CPU 31檢查是否識別出人 臉的存在。 當(dāng)作為圖像分析結(jié)果識別出人臉的存在時，流程從步驟F302前進(jìn)到步驟F303，并 且CPU 31檢查預(yù)定相機(jī)檢測信息，并基于相機(jī)檢測信息是否適合于在前顯示面板6F上顯 示監(jiān)視圖像而分支其處理。 當(dāng)從相機(jī)檢測信息確定目前的狀態(tài)適合于在前顯示面板6F上顯示監(jiān)視圖像時， 流程前進(jìn)到步驟F304，并且CPU 31使得前顯示面板6F顯示監(jiān)視圖像。也就是說，CPU 31指 示顯示控制器7在前顯示面板6F上顯示與正在主顯示面板6M上顯示的相同的監(jiān)視圖像。 在此情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4B所示的狀態(tài)。
另一方面，當(dāng)在步驟F301中從圖像分析的結(jié)果確定在對象圖像中不包括人臉時， 流程前進(jìn)到步驟F305，并且CPU 31關(guān)閉前顯示面板6F的顯示。 此外，當(dāng)在步驟F303中從相機(jī)檢測信息確定目前的狀態(tài)不適合于在前顯示面板 6F上顯示監(jiān)視圖像時，流程前進(jìn)到步驟F305，并且CPU 31關(guān)閉前顯示面板6F的顯示。
在這樣的情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4A所示的 狀態(tài)。 CPU 31在監(jiān)視時段中重復(fù)執(zhí)行圖9所示的處理。 因而，在監(jiān)視時段中，用戶移動成像設(shè)備l，使得對象圖像中包括人臉，并且當(dāng)通過 相機(jī)檢測信息識別出的狀態(tài)在此時處于預(yù)定狀態(tài)時，如圖4B所示，在前顯示面板6F上顯示 監(jiān)視圖像。 另一方面，即使當(dāng)用戶針對沒有任何人的對象場景(如風(fēng)景)或人臉是對象時，如 果通過相機(jī)檢測信息識別出的狀態(tài)不處于預(yù)定狀態(tài)，則如圖4A所示關(guān)閉前顯示面板6F。
S卩，根據(jù)該處理例子，當(dāng)在前側(cè)存在作為被監(jiān)視的對象的人臉時，以及當(dāng)根據(jù)相機(jī) 檢測信息，認(rèn)為對象人能夠合適地觀看前顯示面板6F時，在前顯示面板6F上顯示監(jiān)視圖 像。另一方面，當(dāng)不包括作為對象的人臉，或認(rèn)為對象人不能合適地觀看前顯示面板6F時， 關(guān)閉前顯示面板6F。 例如，相機(jī)檢測信息是如上所述的環(huán)境光強(qiáng)度檢測信息、變焦位置信息、對象距離 信息、聚焦信息和手抖動模糊檢測信息。按以下方式進(jìn)行基于相機(jī)檢測信息的步驟F303的 確定。 可從圖像數(shù)據(jù)的平均亮度值，或通過對屏幕圖像的部分區(qū)域加權(quán)而獲得的平均加 權(quán)亮度值，來檢測環(huán)境光強(qiáng)度。這些值通常用于自動曝光控制或在自動閃光設(shè)置的情況下 用于閃光照明控制。例如，由相機(jī)DSP 4的圖像信號處理器41計算這些亮度值，并且CPU 31可獲得這樣的信息。 盡管圖2中未示出，但可提供環(huán)境光強(qiáng)度傳感器等，以直接檢測環(huán)境光強(qiáng)度。
如果這些方法檢測到的環(huán)境光強(qiáng)度較低，則可認(rèn)為圖像的亮度低，由此，即使在前 顯示面板6F上顯示監(jiān)視圖像，也不能獲得良好的可視性。此外，如果環(huán)境光強(qiáng)度水平過高， 如在所謂逆光(co皿terlight)狀態(tài)下，則可認(rèn)為用戶不能合適地觀看前顯示面板6F上的 監(jiān)視圖像。 因而，即使檢測到臉，如果確定環(huán)境光強(qiáng)度低于預(yù)定水平或者對應(yīng)于逆光狀態(tài)，則 CPU 31也確定不適合在前顯示面板6F上顯示監(jiān)視圖像。然后，流程從步驟F303前進(jìn)到步 驟F305， CPU 31關(guān)閉前顯示面板6F的顯示。 對于變焦位置信息，CPU 31可通過根據(jù)用戶操作控制變焦透鏡，來檢測變焦位置。 此外，即使人是對象，當(dāng)變焦位置與預(yù)定比例相比過于接近T側(cè)(遠(yuǎn)距拍攝)時，可認(rèn)為對 象人遠(yuǎn)離成像設(shè)備1。也就是說，在此情況下，可認(rèn)為該對象人不能合適地觀看前顯示面板 6F上的顯示。 因而，當(dāng)在步驟F303中確定變焦位置是處于預(yù)定遠(yuǎn)距拍攝(tel印hoto)位置或更 遠(yuǎn)時，流程前進(jìn)到步驟F305， CPU 31關(guān)閉前顯示面板6F的顯示。 對象距離信息是關(guān)于從成像設(shè)備1到對象的距離的信息，例如，CPU 31可通過使 用如上所述來自透鏡位置檢測器27的信息來獲得對象距離信息。 例如，即使當(dāng)人是對象時，如果從對象距離信息確定對象人遠(yuǎn)離成像設(shè)備l，則可 認(rèn)為位于該對象人不能合適地觀看前顯示面板6F上的顯示。 因而，當(dāng)在步驟F303中根據(jù)對象距離信息確定對象處于預(yù)定距離或更遠(yuǎn)時，流程 前進(jìn)到步驟F305， CPU 31關(guān)閉前顯示面板6F的顯示。 聚焦信息是用于圖像信號處理器41中的自動聚焦處理的聚焦確定信息。
當(dāng)不在聚焦?fàn)顟B(tài)(focused state)下時，CPU 31確定不能顯示監(jiān)視圖像。然后， 流程從步驟F303前進(jìn)到步驟F305， CPU 31可以關(guān)閉前顯示面板6F的顯示。也就是說，僅 僅在聚焦?fàn)顟B(tài)下才在前顯示面板6F上顯示監(jiān)視圖像。 模糊檢測信息是手抖動模糊或成像設(shè)備1的移動的檢測信息。例如，CPU31可以 獲得作為來自模糊檢測器13的信息的模糊檢測信息。 當(dāng)手抖動模糊過大，或者用戶正在跟蹤移動對象從而成像設(shè)備1在移動時，用戶 可能不能合適地觀看前顯示面板6F上的監(jiān)視圖像。因而，當(dāng)在步驟F303中從模糊檢測信息確定模糊或成像設(shè)備l的移動過大時，流程可前進(jìn)到步驟F305，并且CPU 31可關(guān)閉前顯 示面板6F的顯示。 在圖11的步驟F303中，CPU 31基于相機(jī)檢測信息進(jìn)行上述確定，由此可以進(jìn)行 適合于前顯示面板6F的顯示控制。 S卩，根據(jù)圖11所示的處理，當(dāng)檢測到臉并且相機(jī)檢測信息是預(yù)定狀態(tài)時，即當(dāng)人 是對象并且認(rèn)為人能夠合適地觀看監(jiān)視圖像時，在前顯示面板6F上顯示監(jiān)視圖像。
因而，對象人能從顯示該人正在被拍攝的監(jiān)視圖像的前顯示面板6F確認(rèn)他/她的 表情或姿態(tài)。 另一方面，當(dāng)不存在作為對象的人，或者如果存在但認(rèn)為不必在前顯示面板6F上 顯示監(jiān)視圖像時，關(guān)閉前顯示面板6F的顯示。通過這樣做，可以更合適地實現(xiàn)功耗降低。
圖11中示出的處理例子可以修改，使得不在步驟F305中關(guān)閉前顯示面板6F的顯 示，而是可以如參照圖7所述以低亮度狀態(tài)顯示圖像，或者可如參照圖8所述顯示回放圖像 或預(yù)設(shè)圖像。 4-4.基于人識別和其他圖像分析信息的示例處理 接著，將描述以下例子，其中，除了人識別之外，基于由作為圖像分析器44進(jìn)行圖 像分析的結(jié)果而獲得的各種分析結(jié)果信息進(jìn)行前顯示面板6F的顯示控制。
根據(jù)圖像分析器44的圖像分析處理，除了人識別和臉識別之外，可獲得各種圖像 識別結(jié)果。例如，可獲得關(guān)于環(huán)境光強(qiáng)度的確定信息。此外，可通過進(jìn)行幀間運(yùn)動檢測或分 析每像素的模糊量，檢測成像設(shè)備1相對于對象的移動量。 作為在檢測臉圖像時進(jìn)行的圖像識別處理，作為分析結(jié)果可獲得屏幕圖像中臉的 大小(臉部分占據(jù)一幀圖像的百分比)、臉的朝向或目光方向。 在此例中，將描述通過這樣的方法獲得的各種圖像分析結(jié)果用于顯示控制的情 況。 圖12示出了 CPU 31在監(jiān)視時段中對前顯示面板6F執(zhí)行的示例顯示控制。
在監(jiān)視時段中，與在主顯示面板6M上顯示監(jiān)視圖像的顯示控制并行地，CPU 31進(jìn) 行圖12所示的處理，以便對前顯示面板6F進(jìn)行顯示控制。 在步驟F401中，CPU 31檢查圖像分析器44的圖像分析結(jié)果。在此例中，圖像分 析器44對成像系統(tǒng)2在監(jiān)視時段中記錄的并且由相機(jī)DSP 4接收的圖像數(shù)據(jù)進(jìn)行圖像分 析，由此確定圖像數(shù)據(jù)中是否包括人臉作為對象。 在此例中，圖像分析器44不僅進(jìn)行臉檢測的處理，還進(jìn)行如上所述的各種圖像識 別處理。 在步驟F401中，CPU 31檢查圖像分析器44的各種圖像分析結(jié)果。 然后，作為圖像分析結(jié)果之一，CPU 31在步驟F402中確定是否檢測到人臉的存
在，并且如果檢測到存在，則流程前進(jìn)到步驟F403。 在步驟F403中，CPU 31檢查另一圖像分析結(jié)果，并基于圖像分析結(jié)果是否適合于 在前顯示面板6F上顯示監(jiān)視圖像而分支其處理。 S卩，當(dāng)從各種圖像分析結(jié)果確定目前的狀態(tài)適合于在前顯示面板6F上顯示監(jiān)視 圖像時，流程前進(jìn)到步驟F404，并且CPU 31使得前顯示面板6F顯示監(jiān)視圖像。也就是說， CPU 31指示顯示控制器7在前顯示面板6F上顯示與正在主顯示面板6M上顯示的相同的監(jiān)視圖像。在此情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4B所示的狀 態(tài)。 另一方面，當(dāng)在步驟F401中從圖像分析的結(jié)果確定在對象圖像中不包括人臉時， 流程前進(jìn)到步驟F405，并且CPU 31關(guān)閉前顯示面板6F的顯示。 即使當(dāng)檢測到人臉時，如果在步驟F403中從另一分析結(jié)果確定目前的狀態(tài)不適 合于在前顯示面板6F上顯示監(jiān)視圖像，則流程前進(jìn)到步驟F405，并且CPU 31關(guān)閉前顯示面 板6F的顯示。 在此情況下，主顯示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于圖4A所示的狀 態(tài)。 CPU 31在監(jiān)視時段中重復(fù)執(zhí)行圖9所示的處理。 因而，在監(jiān)視時段中，用戶移動成像設(shè)備l，使得對象圖像中包括人臉，并且當(dāng)各種 圖像分析結(jié)果識別出的狀態(tài)在此時處于預(yù)定狀態(tài)時，如圖4B所示，在前顯示面板6F上顯示 監(jiān)視圖像。 另一方面，即使當(dāng)用戶針對沒有任何人的對象場景(如風(fēng)景)或人臉是對象時，如 果各種圖像分析結(jié)果識別出的狀態(tài)不處于預(yù)定狀態(tài)，則如圖4A所示關(guān)閉前顯示面板6F。
下面將描述與臉的存在之外的圖像分析結(jié)果對應(yīng)的步驟F403的處理例子。
作為圖像分析結(jié)果，可檢測環(huán)境光強(qiáng)度。如上面結(jié)合相機(jī)檢測信息描述的，當(dāng)環(huán)境 光強(qiáng)度較低或尤其高(如在所謂逆光狀態(tài)下)，可認(rèn)為用戶不能合適地觀看前顯示面板6F 上的監(jiān)視圖像。 因而，即使檢測到臉，如果確定環(huán)境光強(qiáng)度低于預(yù)定水平或者對應(yīng)于逆光狀態(tài)，則 CPU 31也確定不適合在前顯示面板6F上顯示監(jiān)視圖像。流程前進(jìn)到步驟F405，CPU 31關(guān) 閉前顯示面板6F的顯示。 此外，作為圖像分析結(jié)果，可檢測成像設(shè)備1相對于對象的移動量。也就是說，可 考慮成像設(shè)備l自身正在抖動或移動(用戶在移動成像設(shè)備1)的情況、對象在移動的情 況、或者成像設(shè)備1和對象兩者均在移動的情況。 在這樣的情況下，如果移動量過大，則可認(rèn)為當(dāng)有人作為對象存在時，該人將不可 能觀看前顯示面板6F。 因而，當(dāng)在步驟F403中確定成像設(shè)備l相對于對象的移動量較大時，流程前進(jìn)到 步驟F405，并且CPU 31可關(guān)閉前顯示面板6F的顯示。 根據(jù)圖像分析結(jié)果，不僅可以檢測臉，還可檢測臉的大小(臉部分在屏幕圖像中 的百分比)。 盡管臉大小隨著變焦位置而改變，預(yù)定變焦位置處的臉大小充當(dāng)用于確定從成像 設(shè)備1到對象人的距離的指示之一。 例如，如果變焦位置位于寬廣(wide)位置，則當(dāng)臉被記錄得較小時，可認(rèn)為人在 遠(yuǎn)距離處。 因而，在步驟F403中，CPU 31考慮變焦位置基于臉大小而確定對象人的距離。當(dāng) 確定人在遠(yuǎn)到不能觀看前顯示面板6F上顯示的內(nèi)容的距離時，在步驟F405中，CPU 31可 關(guān)閉前顯示面板6F的顯示。 此外，作為圖像分析結(jié)果，可識別臉的朝向或目光方向。
當(dāng)臉不朝向圖像的前側(cè)或者目光方向不在向前的方向上時，對象人將不能觀看成 像設(shè)備1 。即，可確認(rèn)人未在觀看前顯示面板6F。 因而，CPU 31在步驟F403中檢查臉的朝向或目光方向。當(dāng)確定人未在觀看前顯 示面板6F上所顯示的內(nèi)容時，在步驟F405中，CPU 31可關(guān)閉前顯示面板6F的顯示。
在圖12的步驟F403中，CPU 31基于圖像分析結(jié)果進(jìn)行上述確定，由此可以進(jìn)行 適合于前顯示面板6F的顯示控制。 S卩，根據(jù)圖12所示的處理，當(dāng)檢測到臉并且根據(jù)其他圖像分析結(jié)果確定目前的狀 態(tài)是預(yù)定狀態(tài)時，即當(dāng)人是對象并且認(rèn)為人能夠合適地觀看(或看到)監(jiān)視圖像時，在前顯 示面板6F上顯示監(jiān)視圖像。 因而，對象人能從顯示該人正在被拍攝的監(jiān)視圖像的前顯示面板6F確認(rèn)他/她的 表情或姿態(tài)。 另一方面，當(dāng)不存在作為對象的人，或者如果存在但認(rèn)為不必在前顯示面板6F上 顯示監(jiān)視圖像時，關(guān)閉前顯示面板6F的顯示。通過這樣做，可以更合適地實現(xiàn)功耗降低。
圖12中示出的處理例子可以修改，使得不在步驟F405中關(guān)閉前顯示面板6F的顯 示，而是可以如參照圖7所述以低亮度狀態(tài)顯示圖像，或者可如參照圖8所述顯示回放圖像 或預(yù)設(shè)圖像。 圖13示出了圖12所示處理例子的修改，其可在拍攝模式被設(shè)置為微笑快門模式 時應(yīng)用。 圖13的步驟F401至F405中的操作與圖12所示相同。盡管圖12未描述用戶的 釋放操作(其觸發(fā)至拍攝時段的轉(zhuǎn)變)，但圖13中包括了轉(zhuǎn)變到拍攝時段的處理。
作為圖像分析的結(jié)果，除了臉檢測和上述各種檢測外，還可檢測對象人的表情。
因而，當(dāng)響應(yīng)于對象人的存在或其他分析結(jié)果而在前顯示面板6F上顯示監(jiān)視圖 像時，在步驟F410中，CPU 31檢查對象人表情的確定結(jié)果。 當(dāng)通過表情確定作為圖像分析結(jié)果檢測到笑臉時，流程自動前進(jìn)到步驟F412，并 且CPU 31進(jìn)行釋放操作，即記錄此時的圖像數(shù)據(jù)。 當(dāng)用戶手動進(jìn)行釋放操作時，流程從步驟F411前進(jìn)到步驟F412，并且進(jìn)行釋放處理。 通過在前顯示面板6F上顯示監(jiān)視圖像并進(jìn)行微笑快門模式下的處理，對象人能 夠在前顯示面板6F上監(jiān)視他/她的表情的同時，記錄他/她帶笑臉的圖像。
5.前顯示面板在回放期間的顯示控制 盡管上文已經(jīng)描述了在監(jiān)視時段中前顯示面板6F的控制處理例子，下面將描述 在回放時段中前顯示面板的示例顯示控制。 如結(jié)合圖3所述，當(dāng)用戶進(jìn)行指示回放操作的操作時，操作狀態(tài)轉(zhuǎn)變至回放操作 狀態(tài)(回放時段)。在回放時段中，進(jìn)行回放在記錄介質(zhì)90或閃爍R0M 33上記錄的圖像的 操作。 CPU 31根據(jù)用戶操作讀取記錄介質(zhì)90或閃爍ROM 33上記錄的圖像，并控制顯示
控制器7在主顯示面板6M上顯示縮略圖像或單個回放圖像。 此時，對于前顯示面板6F， CPU 31執(zhí)行圖14中所示的處理。 SP，在回放時段中，在步驟F501中，CPU 31檢查圖像分析器44的圖像分析結(jié)果。
盡管通常成像系統(tǒng)2和相機(jī)DSP 4在回放時段中不必進(jìn)行成像處理，但在進(jìn)行此 例的處理的情況下，將假設(shè)成像系統(tǒng)2和相機(jī)DSP 4進(jìn)行成像處理。此外，圖像分析器44 對于由成像系統(tǒng)2記錄并由相機(jī)DSP 4接收的圖像數(shù)據(jù)進(jìn)行圖像分析，由此確定在對象方 向上是否有人存在。 在步驟F501中，CPU 31檢查圖像分析器44的圖像分析結(jié)果，并且當(dāng)檢測到人臉 的存在時，流程從步驟F502前進(jìn)到步驟F503。 在此情況下，CPU 31基于主顯示面板6M上目前的回放顯示狀態(tài)，分支其處理。也 就是說，基于在主顯示面板6M上以縮略視圖顯示回放圖像，還是在主顯示面板6M上顯示單 個圖像，分支處理。 當(dāng)目前正在主顯示面板6M上顯示單個回放圖像時，流程前進(jìn)到步驟F504，并且 CPU 31指示顯示控制器7在前顯示面板6F上顯示相同的回放圖像數(shù)據(jù)。在此情況下，主顯 示面板6M和前顯示面板6F的顯示狀態(tài)對應(yīng)于如圖5C所示的狀態(tài)。 另一方面，目前正在主顯示面板6M上顯示縮略圖像的列表，CPU 31使得流程前進(jìn) 到步驟F505。在此情況下，CPU 31指示顯示控制器7在前顯示面板6F上顯示用光標(biāo)K在 縮略列表視圖上選擇的回放圖像數(shù)據(jù)。在此情況下，主顯示面板6M和前顯示面板6F的顯 示狀態(tài)對應(yīng)于如圖5B所示的狀態(tài)。 當(dāng)在回放期間，在步驟F502中未檢測到人臉存在時，流程從步驟F502前進(jìn)到步驟 F506，并且CPU 31關(guān)閉前顯示面板6F。 通過執(zhí)行這樣的處理，位于前側(cè)的人能夠在前顯示面板6F上看到相同的回放圖
像。因而，成像設(shè)備1的用戶和位于前側(cè)的人能享受到相同的回放圖像。 此外，當(dāng)如圖5B所示在主顯示面板6M上顯示縮略圖像的列表時，成像設(shè)備1的用
戶可移動光標(biāo)K，使得位于前側(cè)的人能在前顯示面板6F上看到所選的回放圖像。 另外，當(dāng)沒有人在前側(cè)時，可以通過關(guān)閉前顯示面板6F，實現(xiàn)功耗降低。 圖14中示出的處理例子可以修改，使得不在步驟F506中關(guān)閉前顯示面板6F的顯
示，而是可以如參照圖7所述以低亮度狀態(tài)顯示圖像，或者可顯示特殊回放圖像或預(yù)設(shè)圖像。 6.變型 盡管已經(jīng)描述了根據(jù)實施例和變型的各種處理例子，但還可考慮其他多種變型， 作為本發(fā)明的實施例。 盡管在圖9至圖14中示出的處理例子中，基于通過圖像分析獲得的臉檢測結(jié)果， 確定在前側(cè)是否存在能夠觀看前顯示面板6F的人，但可基于人檢測(圖像中人身體的檢 測)而不是臉檢測來進(jìn)行確定。此外，可基于鄰近傳感器50的檢測結(jié)果來進(jìn)行確定。
此外，當(dāng)沒有人在前側(cè)存在，或者如果存在，但認(rèn)為該人不能觀看或未在觀看前顯 示面板6F時，用戶可選擇是否將關(guān)閉前顯示面板6F，是否將以低亮度狀態(tài)顯示圖像，以及 是否將顯示回放圖像或預(yù)設(shè)圖像。 已經(jīng)關(guān)于以下例子描述了上述實施例在通過臉識別等檢測到人的存在的情況 下，基于用戶設(shè)置狀態(tài)和相機(jī)檢測信息(內(nèi)部檢測信息)，或者結(jié)合其他圖像分析結(jié)果，進(jìn) 行前顯示面板6F的顯示控制。可進(jìn)一步組合該信息。 例如，可考慮如下例子，其中，基于人檢測結(jié)果、用戶設(shè)置狀態(tài)和相機(jī)檢測信息，進(jìn)行前顯示面板6F的顯示控制。 此外，可考慮如下例子，其中，基于人檢測結(jié)果、用戶設(shè)置狀態(tài)和通過不同于人識 別的處理獲得的圖像分析結(jié)果，進(jìn)行前顯示面板6F的顯示控制。 此外，可考慮如下例子，其中，基于人檢測結(jié)果、相機(jī)檢測信息和通過不同于人識 別的處理獲得的圖像分析結(jié)果，進(jìn)行前顯示面板6F的顯示控制。 此外，可考慮如下例子，其中，基于人檢測結(jié)果、用戶設(shè)置狀態(tài)、相機(jī)檢測信息和通
過不同于人識別的處理獲得的圖像分析結(jié)果，進(jìn)行前顯示面板6F的顯示控制。 盡管已經(jīng)關(guān)于靜態(tài)圖像拍攝描述本實施例，但本發(fā)明可應(yīng)用于影像拍攝。 在影像拍攝的情況下，監(jiān)視時段對應(yīng)于拍攝之前的待機(jī)(standby)時段。此外，記
錄時段對應(yīng)于從記錄開始到結(jié)束的影像記錄時段。 因而，在待機(jī)時段或記錄時段中，可基于人檢測結(jié)果、用戶設(shè)置狀態(tài)和相機(jī)檢測信 息，或者結(jié)合其他圖像分析結(jié)果，進(jìn)行前顯示面板6F的影像顯示控制。 在本實施例中，盡管通常稱為數(shù)碼相機(jī)的設(shè)備被例示為成像設(shè)備l，但本發(fā)明可應(yīng) 用于各種設(shè)備，如攝像機(jī)，或具有成像能力的蜂窩電話和PDA(個人數(shù)字助手)。
本申請包含關(guān)于在2008年11月5日向日本特許廳提交的日本優(yōu)先權(quán)專利申請JP 2008-284292中公開的主題，其全部內(nèi)容通過引用合并于此。 本領(lǐng)域技術(shù)人員應(yīng)理解，根據(jù)設(shè)計需求和其他因素，可進(jìn)行各種修改、組合、子組 合和替換，只要它們在所附權(quán)利要求及其等價物的范圍內(nèi)即可。
權(quán)利要求
一種成像設(shè)備，包括第一顯示面板，其被安裝在設(shè)備外殼上，以便在向著用戶的方向上顯示圖像或數(shù)據(jù)；第二顯示面板，其被安裝在設(shè)備外殼上，以便在向著對象的方向上顯示圖像或數(shù)據(jù)；成像處理器，其對來自對象方向的入射光進(jìn)行光電轉(zhuǎn)換以獲得圖像信號；人檢測器，其檢測在對象方向上是否有人存在；以及控制器，其允許在第一顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)，并至少根據(jù)所述人檢測器的檢測結(jié)果，控制在第二顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。
2. 根據(jù)權(quán)利要求l的成像設(shè)備，其中，當(dāng)所述人檢測器檢測到人的存在時，所述控制器 進(jìn)行控制使得在所述第二顯示面板上顯示所述基于成像處理器獲得的圖像信號的圖像或 數(shù)據(jù)。
3. 根據(jù)權(quán)利要求2的成像設(shè)備，其中，當(dāng)所述人檢測器未檢測到人的存在時，所述控制 器進(jìn)行控制使得不在所述第二顯示面板上顯示圖像或數(shù)據(jù)。
4. 根據(jù)權(quán)利要求2的成像設(shè)備，其中，當(dāng)所述人檢測器未檢測到人的存在時，所述控制 器進(jìn)行控制使得在所述第二顯示面板上以與正常顯示操作相比的低亮度狀態(tài)顯示所述基 于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)。
5. 根據(jù)權(quán)利要求2的成像設(shè)備，還包括圖像數(shù)據(jù)讀取器，其讀取在記錄介質(zhì)上記錄的 圖像數(shù)據(jù)，其中當(dāng)所述人檢測器未檢測到人的存在時，所述控制器進(jìn)行控制使得在所述第二顯示 面板上顯示基于所述圖像數(shù)據(jù)讀取器讀取的圖像數(shù)據(jù)的圖像或數(shù)據(jù)。
6. 根據(jù)權(quán)利要求l的成像設(shè)備，其中，所述控制器根據(jù)所述人檢測器的檢測結(jié)果和關(guān) 于所述成像設(shè)備的操作的用戶選擇的設(shè)置，控制在所述第二顯示面板上顯示所述基于成像 處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。
7. 根據(jù)權(quán)利要求1的成像設(shè)備，其中，所述控制器根據(jù)所述人檢測器的檢測結(jié)果和由 所述成像設(shè)備內(nèi)部地檢測的內(nèi)部檢測信息，控制在所述第二顯示面板上顯示所述基于成像 處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。
8. 根據(jù)權(quán)利要求l的成像設(shè)備，其中，所述控制器根據(jù)所述人檢測器的檢測結(jié)果和通 過分析所述成像處理器獲得的圖像信息而獲得的圖像分析信息，控制在所述第二顯示面板 上顯示所述基于成像處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。
9. 根據(jù)權(quán)利要求l的成像設(shè)備，其中，所述人檢測器通過對所述成像處理器獲得的圖 像信號進(jìn)行圖像分析，檢測在對象方向上是否有人存在。
10. 根據(jù)權(quán)利要求9的成像設(shè)備，其中所述人檢測器通過基于對所述成像處理器獲得的圖像信號的圖像分析的結(jié)果而確定圖像信號中是否包括作為對象的人的臉，來進(jìn)行人檢
11. 根據(jù)權(quán)利要求l的成像設(shè)備，其中，所述人檢測器由檢測在對象方向上人的存在的 鄰近傳感器構(gòu)成。
12. 根據(jù)權(quán)利要求l的成像設(shè)備，還包括圖像數(shù)據(jù)讀取器，其讀取在記錄介質(zhì)上記錄的 圖像數(shù)據(jù)，其中所述控制器允許在所述第一顯示面板上顯示基于圖像數(shù)據(jù)讀取器讀取的圖像數(shù)據(jù)的圖像或數(shù)據(jù)，并至少根據(jù)所述人檢測器的檢測結(jié)果，控制在所述第二顯示面板上顯示 所述基于圖像數(shù)據(jù)讀取器讀取的圖像數(shù)據(jù)的圖像或數(shù)據(jù)的操作。
13. 根據(jù)權(quán)利要求12的成像設(shè)備，其中當(dāng)在所述第一顯示面板上顯示基于圖像數(shù)據(jù)讀 取器讀取的多個圖像數(shù)據(jù)的圖像或數(shù)據(jù)時，所述控制器允許在所述第二顯示面板上顯示基 于從正在所述第一顯示面板上顯示的多個圖像數(shù)據(jù)中選擇的圖像數(shù)據(jù)的圖像或數(shù)據(jù)。
14. 一種成像設(shè)備，包括成像處理器，其對通過透鏡系統(tǒng)進(jìn)入的入射光進(jìn)行光電轉(zhuǎn)換以獲得圖像信號； 第一顯示面板，其被布置在設(shè)備外殼的所述入射光入射的表面上； 第二顯示面板，其被布置在與所述第一顯示面板相對的表面上； 人檢測器，其檢測在對象方向是是否有人存在；以及控制器，其允許在所述第一顯示面板上顯示基于成像處理器獲得的圖像信號的圖像或 數(shù)據(jù)，并至少根據(jù)所述人檢測器的檢測結(jié)果，控制在所述第二顯示面板上顯示基于成像處 理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。
15. —種成像設(shè)備中的顯示控制方法，包括步驟 檢測在對象方向上是否有人存在；允許在被安裝在設(shè)備外殼上以便在用戶方向上顯示圖像或數(shù)據(jù)的第一顯示面板上，顯 示基于通過對來自所述對象方向的入射光進(jìn)行光電轉(zhuǎn)換而獲得的圖像信號的圖像或數(shù)據(jù)； 以及至少根據(jù)人檢測步驟中的檢測結(jié)果，控制在被安裝在所述設(shè)備外殼上以便在對象方向 上顯示圖像或數(shù)據(jù)的第二顯示面板上顯示基于所述圖像信號的圖像或數(shù)據(jù)的操作。
16. —種成像設(shè)備中的顯示控制方法，包括步驟 檢測在對象方向上是否有人存在；允許在被安裝在設(shè)備外殼的入射光入射的表面上的第一顯示面板上，顯示基于通過對 經(jīng)過透鏡系統(tǒng)進(jìn)入的入射光進(jìn)行光電轉(zhuǎn)換而獲得的圖像信號的圖像或數(shù)據(jù)；以及至少根據(jù)人檢測步驟中的檢測結(jié)果，控制在被安裝在與所述第一顯示面板相對的表面 上的第二顯示面板上顯示基于所述圖像信號的圖像或數(shù)據(jù)的操作。
全文摘要
一種成像設(shè)備，包括第一顯示面板，其被安裝在設(shè)備外殼上，以便在向著用戶的方向上顯示圖像或數(shù)據(jù)；第二顯示面板，其被安裝在設(shè)備外殼上，以便在向著對象的方向上顯示圖像或數(shù)據(jù)；成像處理器，其對來自對象方向的入射光進(jìn)行光電轉(zhuǎn)換以獲得圖像信號；人檢測器，其檢測在對象方向上是否有人存在；以及控制器，其使得在第一顯示面板上顯示基于由成像處理器獲得的圖像信號的圖像或數(shù)據(jù)，并至少根據(jù)人檢測器的檢測結(jié)果，控制在第二顯示面板上顯示基于由成像處理器獲得的圖像信號的圖像或數(shù)據(jù)的操作。
文檔編號H04N5/225GK101742101SQ20091021185
公開日2010年6月16日 申請日期2009年11月5日 優(yōu)先權(quán)日2008年11月5日
發(fā)明者丸川和幸, 田中獎, 秋田實穗 申請人:索尼株式會社