專利名稱：電視電話功能的拍攝圖像處理切換裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及具有電視電話功能的便攜終端，特別涉及拍攝圖像處理切換 裝置，其對(duì)通過(guò)便攜終端的攝像頭拍攝的拍攝圖像的圖像處理進(jìn)行控制。
背景技術(shù)：
近年來(lái)，在移動(dòng)電話等便攜終端中附加了很多功能。在其代表性的功能 中有電視電話功能。
具有電視電話功能的便攜終端，以用戶手持便攜終端靠近臉部面對(duì)使用 的方式為前提，設(shè)計(jì)了電視電話功能(例如攝像頭等光學(xué)系統(tǒng))。
這種情況下，為了以適當(dāng)?shù)拇笮?duì)靠近的臉部進(jìn)行拍攝，使用具有例如視場(chǎng)角為40度以上的標(biāo)準(zhǔn)或廣角的光學(xué)系統(tǒng)的攝像頭。因此，如果在便攜終 端與臉部(拍攝對(duì)象)之間的距離較遠(yuǎn)的情況下進(jìn)行拍攝，大部分情況下就 會(huì)導(dǎo)致映入拍攝畫面中的人物的臉部比例較小。
因此，雖然在手持便攜終端使用的情況下，畫面中人物的臉部比例適當(dāng)， 但是在將便攜終端放在桌子上等位置進(jìn)行通話的情況下，會(huì)導(dǎo)致映入拍攝畫 面的人物的臉部比例較小，難以判斷表情。
另外，在便攜終端的電視電話功能中，進(jìn)行以下的圖像處理，B卩，消除 由手抖動(dòng)引起的畫面晃動(dòng)的處理，以及剪切利用人物位置識(shí)別或臉部位置識(shí) 別的技術(shù)識(shí)別出的畫面內(nèi)的臉部，并將其放大發(fā)送給對(duì)象終端的處理等的圖 像處理。通常，由于進(jìn)行圖像處理需要較高的處理能力，因而導(dǎo)致消耗功率 增大。
在專利文獻(xiàn)l中，公開了一種電視會(huì)議終端的畫面顯示控制裝置，其可 靠地進(jìn)行人物檢測(cè)，并且即使在人物移動(dòng)的情況下也能夠進(jìn)行容易看清的畫 面顯示，從而適當(dāng)?shù)仫@示人物圖像。
在專利文獻(xiàn)2中公開了一種攝像裝置，其能夠充分確保剪切位置精度， 并且具有高級(jí)的手抖動(dòng)修正功能。
專利文獻(xiàn)3公開了一種便攜信息終端裝置，其具備在發(fā)生手晃動(dòng)等情況時(shí)防止圖像抖動(dòng)的功能，以及為了使用戶識(shí)別拍攝角度的不恰當(dāng)而將顯示 切換為對(duì)象物的拍攝圖像的功能。
專利文獻(xiàn)l: JP特開平10-051755號(hào)公報(bào)
專利文獻(xiàn)2: JP特開平11-266391號(hào)公報(bào)
專利文獻(xiàn)3: JP特開2000-156849號(hào)公報(bào)

發(fā)明內(nèi)容
鑒于上述問(wèn)題，本發(fā)明目的在于提供一種電視電話功能的拍攝圖像處理 切換裝置，其能夠根據(jù)便攜終端的狀態(tài)，僅提供最佳的功能，從而降低消耗功率。
為了實(shí)現(xiàn)上述目的，本發(fā)明的拍攝圖像處理切換裝置，用于具有電視電話功能的便攜終端中，其特征在于，具有圖像剪切單元，其用于進(jìn)行圖像 剪切處理，該圖像剪切處理是指，在上述便攜終端具有的攝像頭所得到的拍 攝圖像中對(duì)拍攝對(duì)象進(jìn)行識(shí)別，剪切包含該識(shí)別出的拍攝對(duì)象的規(guī)定范圍，并向使用上述電視電話功能進(jìn)行通信的通信對(duì)象發(fā)送的處理；手持狀態(tài)檢測(cè)單元，其在使用上述電視電話功能進(jìn)行通信時(shí)，檢測(cè)上述便攜終端處于手持狀態(tài)；切換單元，其在上述便攜終端處于手持狀態(tài)時(shí)，使上述圖像剪切單元 停止圖像剪切處理，在上述便攜終端處于非手持狀態(tài)時(shí)，使上述圖像剪切單 元執(zhí)行圖像剪切處理。
根據(jù)本發(fā)明，切換單元，在通過(guò)手持檢測(cè)單元檢測(cè)出的便攜終端的狀態(tài) 為手持狀態(tài)時(shí)，停止圖像剪切單元的圖像剪切處理；在非手持狀態(tài)時(shí)，通過(guò) 圖像剪切單元進(jìn)行圖像剪切處理。由此，僅在便攜終端需要進(jìn)行圖像剪切處 理的情況下，進(jìn)行圖像剪切處理。另外，圖像剪切單元識(shí)別的拍攝對(duì)象是指 例如人物的臉。
即，能夠根據(jù)便攜終端的狀態(tài)，僅提供最佳的功能。另外，根據(jù)便攜終 端的狀態(tài)停止不需要的功能，因此能夠降低消耗功率。
如上所述，根據(jù)本發(fā)明能夠提供根據(jù)便攜終端的狀態(tài)僅提供最佳的功 能，從而降低消耗功率的電視電話功能的拍攝圖像處理切換裝置。


圖l是表示本發(fā)明的原理的圖。
圖2是表示本發(fā)明實(shí)施例的實(shí)現(xiàn)拍攝圖像切換裝置的便攜終端的主要部分的結(jié)構(gòu)圖。
圖3是表示本發(fā)明實(shí)施例的便攜終端的處理的流程圖。
圖4是說(shuō)明本發(fā)明實(shí)施例的便攜終端的狀態(tài)和各狀態(tài)中的拍攝圖像的圖。
具體實(shí)施例方式
下面，參照?qǐng)D1 圖，4對(duì)本發(fā)明的實(shí)施方式進(jìn)行說(shuō)明。
圖l是表示本發(fā)明的原理的圖。
圖1所示的拍攝圖像處理切換裝置10，至少具備圖像剪切單元ll，其從通過(guò)具有電視電話功能的便攜終端(以下稱為"便攜終端")中的攝像頭 拍攝而獲得的拍攝圖像，剪切包含人物臉部的規(guī)定范圍并向通信對(duì)象發(fā)送；手持狀態(tài)檢測(cè)單元12，其檢測(cè)用戶手持便攜終端的狀態(tài)(以下稱為"手持狀態(tài)")；切換單元13，其根據(jù)手持狀態(tài)檢測(cè)單元12所檢測(cè)出的便攜終端的狀態(tài)，切換圖像剪切單元11的有效/無(wú)效。
切換單元13，在手持狀態(tài)檢測(cè)單元12檢測(cè)出的便攜終端的狀態(tài)為手持狀態(tài)的情況下，使圖像剪切單元11的圖像剪切處理停止。另外，剪切單元 13，在手持狀態(tài)檢測(cè)單元12檢測(cè)出的便攜終端的狀態(tài)為非手持狀態(tài)的情況下，使圖像剪切單元ll執(zhí)行圖像剪切處理。
在圖1所示的拍攝圖像處理切換裝置10中，還具備檢測(cè)便攜終端的手抖動(dòng)并修正拍攝圖像的手抖動(dòng)防止單元14。
另外，切換單元13，在手持狀態(tài)檢測(cè)單元12檢測(cè)出的便攜終端的狀態(tài)為手持狀態(tài)的情況下，使手抖動(dòng)防止單元14對(duì)拍攝圖像執(zhí)行手抖動(dòng)修正處 理。另外，切換單元13，在手持狀態(tài)檢測(cè)單元12檢測(cè)出的便攜終端的狀態(tài)為非手持狀態(tài)的情況下，使手抖動(dòng)防止單元14對(duì)拍攝圖像所進(jìn)行的手抖動(dòng)修 正處理停止。
圖2表示本發(fā)明實(shí)施例的實(shí)現(xiàn)拍攝圖像處理切換裝置10的便攜終端20的主要部分的結(jié)構(gòu)。
圖2所示的便攜終端20，至少具備:拍攝被攝體攝像頭(或者CCD(Charge Coupled Devices)等攝像元件)21;驅(qū)動(dòng)攝像頭21的驅(qū)動(dòng)器22;檢測(cè)便攜 終端20的手抖動(dòng)的加速度傳感器23;驅(qū)動(dòng)加速度傳感器23的驅(qū)動(dòng)器24;臉 識(shí)別處理部25，其從攝像頭21生成的拍攝圖像中識(shí)別人物的臉；臉剪切處 理部26，其從拍攝圖像中剪切包含由臉識(shí)別處理部25識(shí)別出的人物臉部的 規(guī)定范圍；手抖動(dòng)防止處理部27，其基于手抖動(dòng)量修正拍攝圖像的手抖動(dòng)； 切換控制部28，其根據(jù)便攜終端20的狀態(tài)切換對(duì)拍攝圖像進(jìn)行的圖像處理 (臉剪切處理/手抖動(dòng)防止處理)；編碼器29，其按照規(guī)定的協(xié)議對(duì)經(jīng)過(guò)臉剪 切處理或手抖動(dòng)修正處理后的拍攝圖像進(jìn)行編碼；電視電話控制部30，其通 過(guò)解碼器對(duì)經(jīng)過(guò)編碼的拍攝圖像的數(shù)據(jù)(以下稱為"顯示圖像")進(jìn)行解碼， 在便攜終端20上進(jìn)行顯示，并且經(jīng)由數(shù)據(jù)通信部31將顯示圖像和語(yǔ)音數(shù)據(jù) 發(fā)送給通信對(duì)象；數(shù)據(jù)通信部31，其將顯示圖像和語(yǔ)音數(shù)據(jù)發(fā)送給通信對(duì)象。
另外，雖然沒(méi)有圖示，但是便攜終端20當(dāng)然具備CPU (Central Processing Unit)和非易失性/易失性的存儲(chǔ)器(例如RAM和EEPROM)。
另外，通過(guò)CPU執(zhí)行存儲(chǔ)在存儲(chǔ)器中的程序指令，從而實(shí)現(xiàn)圖2所示的 驅(qū)動(dòng)器22、驅(qū)動(dòng)器24、臉識(shí)別處理部25、臉剪切處理部26、手抖動(dòng)防止處 理部27、切換控制部28、編碼器29、電視電話控制部30等。
攝像頭21生成的拍攝圖像，被輸入到臉識(shí)別處理部25和手抖動(dòng)防止處 理部27中。當(dāng)拍攝圖像被輸入到臉識(shí)別處理部25后，臉識(shí)別處理部25從拍 攝圖像所記錄的圖像中識(shí)別人物的臉。然后，臉剪切處理部26從拍攝圖像中 抽出含有識(shí)別出的人物臉部的規(guī)定范圍(例如能夠獲得半身像的范圍)。
因此，即使在人物的臉相對(duì)于拍攝圖像整體的比例較小的情況下，臉識(shí) 別處理部25和臉剪切處理部26將拍攝圖像轉(zhuǎn)換為例如半身像圖像，從而也 能夠清楚識(shí)別被拍攝人物的表情。
另一方面，當(dāng)拍攝圖像被輸入到手抖動(dòng)防止處理部27后，手抖動(dòng)防止處 理部27根據(jù)加速度傳感器23的傳感器值計(jì)算出手抖動(dòng)量，并修正拍攝圖像。 因此，經(jīng)過(guò)修正的拍攝圖像消除了由便攜終端20的手抖動(dòng)而引起的被攝體像 的抖動(dòng)。
這里，切換控制部28根據(jù)由加速度傳感器23得到的加速度，檢測(cè)(判 斷)便攜終端20的狀態(tài)(手持狀態(tài)/非手持狀態(tài))。然后，切換控制部28根據(jù)便攜終端20的狀態(tài)，在以下處理之間進(jìn)行排他性的切換控制，即，通過(guò)臉
識(shí)別處理部25和臉剪切處理部26進(jìn)行的圖像剪切處理，以及通過(guò)手抖動(dòng)防 止處理部27迸行的手抖動(dòng)防止處理。
即，在便攜終端20為非手持狀態(tài)的情況下，使手抖動(dòng)防止處理部27的 手抖動(dòng)防止處理停止，通過(guò)臉識(shí)別處理部25和臉剪切處理部26開始進(jìn)行圖 像剪切處理。然后，將實(shí)施了圖像剪切處理的拍攝圖像輸出到編碼器29中。
另外，在便攜終端20為手持狀態(tài)的情況下，停止通過(guò)臉識(shí)別處理部25 和臉剪切處理部26進(jìn)行的圖像剪切處理，通過(guò)手抖動(dòng)防止處理部27開始進(jìn) 行手抖動(dòng)防止處理。然后，將實(shí)施了手抖動(dòng)防止處理的拍攝圖像輸出到編碼 器29中。
在編碼器29中，根據(jù)需要，將所輸入的拍攝圖像變換為符合MPEG-4 (Moving Picture Experts Group phase 4 ) 以及 ITU-T ( international Telecommunication Union Telecommunication Standardization Sector:國(guó)際電信
聯(lián)盟電信標(biāo)準(zhǔn)化部門)標(biāo)準(zhǔn)的數(shù)據(jù)。
電視電話控制部30，將編碼后的數(shù)據(jù)經(jīng)由數(shù)據(jù)通信部31發(fā)送給通信對(duì) 象。另外，根據(jù)需要，將該編碼后的數(shù)據(jù)向解碼器33輸出，并在未圖示的便 攜終端的顯示部上顯示拍攝圖像。
在以上所述的結(jié)構(gòu)中，圖1所示的圖像剪切單元11，通過(guò)臉識(shí)別處理部 25和臉剪切處理部26來(lái)實(shí)現(xiàn)；手持狀態(tài)檢測(cè)單元12和切換單元13，通過(guò)加 速度傳感器23、驅(qū)動(dòng)器24和切換控制部28來(lái)實(shí)現(xiàn)。另外，手抖動(dòng)防止單元 14，通過(guò)加速度傳感器23、驅(qū)動(dòng)器24和手抖動(dòng)防止處理部27來(lái)實(shí)現(xiàn)。
下面，參照?qǐng)D3和圖4，對(duì)上述便攜終端20的具體處理進(jìn)行說(shuō)明。圖3 是表示本發(fā)明實(shí)施例的便攜終端20的處理的流程圖。
在歩驟S301中，切換控制部28根據(jù)加速度傳感器23的加速度值，判斷 便攜終端20的狀態(tài)(是否為手持狀態(tài))。例如，預(yù)先將規(guī)定的加速度值設(shè)為 閾值，當(dāng)加速度傳感器23檢測(cè)出的加速度為閾值以下時(shí)，判斷便攜終端20 為手持狀態(tài)，而在加速度為閾值以上時(shí)，判斷便攜終端20為非手持狀態(tài)。然 后，切換控制部28將處理轉(zhuǎn)入步驟S302。
在步驟S302中，切換控制部28，在步驟S301中的檢測(cè)結(jié)果為手持狀態(tài) 的情況下，將處理轉(zhuǎn)入步驟S303，在步驟S301中的檢測(cè)結(jié)果為非手持狀態(tài)的情況下，將處理轉(zhuǎn)入步驟S305。
另外，本實(shí)施例的切換控制部28具有在判斷便攜終端20的狀態(tài)時(shí)所
使用的判斷處理模式，以及在選擇對(duì)拍攝圖像進(jìn)行的圖像處理時(shí)所使用的圖
像處理模式。
判斷處理模式包括以下3個(gè)模式表示便攜終端20為手持狀態(tài)的手持模 式；表示盡管檢測(cè)出便攜終端20略有抖動(dòng)而仍為手持狀態(tài)的準(zhǔn)手持模式；表 示便攜終端20為固定狀態(tài)的固定模式。
另外，圖像處理模式包括以下2個(gè)模式根據(jù)判斷處理模式的各模式，
表示判斷便攜終端20為手持狀態(tài)的手持模式；根據(jù)判斷處理模式的各模式， 表示判斷便攜終端20為非手持狀態(tài)(固定狀態(tài))的固定模式。
這些判斷處理模式和圖像處理模式，存儲(chǔ)在便攜終端20所具備的存儲(chǔ)器 等中。另外，CPU根據(jù)需要參照或者進(jìn)行模式的寫入。
在步驟S303中，切換控制部28將判斷模式切換為手持模式。然后，將 處理轉(zhuǎn)入步驟S304。在步驟S304中，切換控制部28將圖像處理模式切換為 手持模式。
另一方面，在步驟S305中，在當(dāng)前的判斷處理模式為手持模式的情況下， 切換控制部28將處理轉(zhuǎn)入歩驟S306，記錄時(shí)刻，并且將判斷處理模式轉(zhuǎn)入
準(zhǔn)手持模式。
另外，在歩驟S305中，在當(dāng)前的判斷處理模式為非手持模式的情況下， 切換控制部28將處理轉(zhuǎn)入步驟S307。另外，在當(dāng)前的判斷處理模式為固定 模式的情況下，切換控制部28將處理轉(zhuǎn)入步驟S308，保持當(dāng)前的判斷模式
(不進(jìn)行變更)。
在步驟S309中，切換控制部28檢査準(zhǔn)手持模式是否保持了一定時(shí)間。 并且，在準(zhǔn)手持模式的狀態(tài)未經(jīng)過(guò)一定時(shí)間的情況下，將處理轉(zhuǎn)入步驟S310， 保持當(dāng)前的判斷模式(不進(jìn)行變更)。
另外，在步驟S309中，在準(zhǔn)手持模式的狀態(tài)經(jīng)過(guò)了一定時(shí)間的情況下， 切換控制部28將處理轉(zhuǎn)入步驟S311，將判斷模式變更為固定模式。然后， 在步驟S312中，切換控制部28將圖像模式切換為固定模式。
在通過(guò)以上的步驟S301 S312的處理確定圖像處理模式后，切換控制 部28將處理轉(zhuǎn)入步驟S313。并且，對(duì)通過(guò)步驟S301 S312的處理確定的圖像處理模式進(jìn)行檢査。下面，進(jìn)行與圖像處理模式相對(duì)應(yīng)的處理。
在步驟S313中，切換控制部28檢査圖像處理模式。然后，在圖像處理 模式為手持模式的情況下，將處理轉(zhuǎn)入步驟S314。另外，在圖像處理模式為 固定模式的情況下，將處理轉(zhuǎn)入步驟S316。
在步驟S314中，手抖動(dòng)防止處理部27，從加速度傳感器23取得傳感器 值(加速度值)。然后，根據(jù)該傳感器值算出手抖動(dòng)量。另外，本實(shí)施例中 的手抖動(dòng)量使用如下的值，即，根據(jù)傳感器值計(jì)算出攝像元件(例如，攝像 頭21的CCD)上的縱向和橫向上的移動(dòng)距離，將這些移動(dòng)距離轉(zhuǎn)換為像素 數(shù)而得到的值。
在結(jié)束手抖動(dòng)量的計(jì)算后，手抖動(dòng)防止處理部27將處理轉(zhuǎn)入步驟S315。
在步驟S315中，手抖動(dòng)防止處理部27，基于在步驟S314中計(jì)算出的手 抖動(dòng)量進(jìn)行拍攝圖像的修正。在本實(shí)施例中，例如，剪切以從拍攝圖像的中 心沿縱向或橫向只偏移了相當(dāng)于手抖動(dòng)量的距離的位置為中心的規(guī)定范圍， 生成新的拍攝圖像(手抖動(dòng)修正后的拍攝圖像)。另外，可以根據(jù)需要對(duì)新 的拍攝圖像進(jìn)行放大/縮小。
另一方面，在步驟S316中，臉識(shí)別處理部25，對(duì)拍攝圖像中所拍攝到 的人物的臉進(jìn)行識(shí)別，計(jì)算臉的位置和尺寸。本實(shí)施例的臉識(shí)別處理，例如， 可以在抽出亮度較高的部分并確定人物的眼的位置(臉的位置)之后，根據(jù) 眼的間隔確定臉的尺寸，也可以在對(duì)拍攝圖像實(shí)施了輪廓強(qiáng)調(diào)的處理后，通 過(guò)與預(yù)先準(zhǔn)備的多個(gè)臉的形狀(輪廓)分別進(jìn)行比較，確定人物的臉。 在臉識(shí)別處理結(jié)束后，臉識(shí)別處理部25將處理轉(zhuǎn)入步驟S317。 在步驟S317中，臉剪切處理部26，根據(jù)在步驟S316中所確定的臉的位 置，計(jì)算出形成半身像的圖像范圍，剪切該圖像而生成新的拍攝圖像(剪切 了人物臉部的拍攝圖像)。另外，可以根據(jù)需要對(duì)新的拍攝圖像進(jìn)行放大/ 縮小。
實(shí)施了上述的手抖動(dòng)修正處理或者圖像剪切處理的拍攝圖像，經(jīng)由編碼 器29被發(fā)送到電視電話控制部30。然后，處理轉(zhuǎn)入步驟S318。
在步驟S318中，電視電話控制部30，將通過(guò)步驟S314 S315實(shí)施了手 抖動(dòng)修正處理或者通過(guò)步驟S316 S317實(shí)施了圖像剪切處理的拍攝圖像作 為自畫像數(shù)據(jù)，經(jīng)由數(shù)據(jù)通信部31發(fā)送給通信對(duì)象。
圖4是說(shuō)明本發(fā)明實(shí)施例的便攜終端20的狀態(tài)和各狀態(tài)中的拍攝圖像的圖。
在圖4中，(a)表示手持模式時(shí)的情況，(b)表示此時(shí)的拍攝圖像， (c)表示手抖動(dòng)修正處理后的拍攝圖像；(d)表示固定模式時(shí)的情況，(e) 表示此時(shí)的拍攝圖像，(f)表示圖像剪切處理后的拍攝圖像。
手持模式時(shí)的情況(a)，表示了圖3所示的圖像處理模式為手持模式時(shí) 的情況。即，表示如下情況用戶40 (或者被攝體40，以下根據(jù)需要稱為用 戶40或者被攝體40)手持便攜終端20，將便攜終端20與自己的臉保持一定 距離，進(jìn)行使用電視電話功能的通信。
拍攝圖像(b)，表示了在圖像處理模式為手持模式時(shí)所拍攝的拍攝圖像 (手抖動(dòng)修正處理前的拍攝圖像)的例子。該拍攝圖像(b)由于是在用戶手 持便攜終端20的狀態(tài)(手持狀態(tài))下拍攝的，因此在拍攝圖像中產(chǎn)生了手抖 動(dòng)42 (顯示在被攝體40的輪廓部上的粗線)。
通過(guò)手抖動(dòng)防止處理部27對(duì)該拍攝圖像(b)實(shí)施手抖動(dòng)修正處理，從 而能夠得到拍攝圖像(c)。該拍攝圖像(c)為手抖動(dòng)修正處理后的拍攝圖 像，表示經(jīng)由編碼器29、電視電話控制部30和數(shù)據(jù)通信部31被發(fā)送給通信 對(duì)象的拍攝圖像。該拍攝圖像(c)消除了在被攝體40的輪廓部上產(chǎn)生的手 抖動(dòng)42。
固定模式時(shí)的情況(d)，表示了圖3所示的圖像處理模式為固定模式時(shí)
的情況。S卩，表示了如下情況將便攜終端20固定在桌子之上等位置，使便
攜終端20與自己的臉保持一定距離，進(jìn)行使用電視電話功能的通信。此時(shí)， 便攜終端20與被攝體40之間的距離，比圖像處理模式為手持模式時(shí)大。
拍攝圖像(e)，表示在圖像處理模式為固定模式時(shí)所拍攝的拍攝圖像(圖 像剪切處理前的拍攝圖像)的例子。該拍攝圖像(e)，與圖像處理模式為手 持模式時(shí)(手持狀態(tài))相比，由于便攜終端20與被攝體40之間的距離大， 因此被攝體40的臉相對(duì)于拍攝圖像整體的比例小。
通過(guò)臉識(shí)別處理部25和臉剪切處理部26對(duì)該拍攝圖像(e)實(shí)施圖像剪 切處理，從而能夠獲得拍攝圖像(f)。該拍攝圖像(f)為圖像剪切處理后 的拍攝圖像，表示經(jīng)由編碼器29、電視電話控制部30和數(shù)據(jù)通信部31發(fā)送 給通信對(duì)象的拍攝圖像。該拍攝圖像(f)為拍攝到拍攝圖像(e)中的被攝
體40的半身像。
如上所述，本實(shí)施例的拍攝圖像處理切換裝置1O，通過(guò)切換控制部28， 根據(jù)加速度傳感器23的傳感器值，檢測(cè)便攜終端20的狀態(tài)。
然后，在便攜終端20為手持狀態(tài)的情況下，對(duì)通過(guò)攝像頭21所拍攝的 拍攝圖像，通過(guò)手抖動(dòng)防止處理部27開始進(jìn)行手抖動(dòng)修正處理，并且停止通過(guò)臉識(shí)別處理部25和臉剪切處理部26進(jìn)行的圖像剪切處理。
另外，在便攜終端20為非手持狀態(tài)的情況下，對(duì)通過(guò)攝像頭21所拍攝 的拍攝圖像，通過(guò)臉識(shí)別處理部25和臉剪切處理部26開始進(jìn)行圖像剪切處 理，并且停止通過(guò)手抖動(dòng)防止處理部27進(jìn)行的手抖動(dòng)修正處理。
這樣，切換控制部28根據(jù)便攜終端20的狀態(tài)進(jìn)行控制，以便僅執(zhí)行必 要的功能，從而具有降低消耗功率的效果。
另外，由于不必同時(shí)進(jìn)行手抖動(dòng)修正處理和圖像剪切處理等對(duì)便攜終端 而言負(fù)荷較大的處理，因此與現(xiàn)有技術(shù)相比，即使在使用處理能力較低的CPU 的情況下，也能夠根據(jù)便攜終端20的狀況，提供最適合的電視電話功能。另 外，通過(guò)使用處理能力較低的CPU，能夠以較低的成本，根據(jù)便攜終端20 的狀況，提供最佳的電視電話功能。
另外，將因只進(jìn)行便攜終端的各狀態(tài)所需要的圖像處理而產(chǎn)生的富余的 處理能力，分配給手抖動(dòng)修正處理，從而也能夠改善手持狀態(tài)時(shí)的拍攝圖像的畫質(zhì)。
另外，對(duì)于本實(shí)施例的便攜終端20，以具有電視電話功能的便攜電話為 例進(jìn)行了說(shuō)明，但是對(duì)于其他的具有電視電話功能的便攜終端，當(dāng)然也能夠獲得同樣的效果。
在以上的說(shuō)明中，在本實(shí)施例中將加速度傳感器23用作手持狀態(tài)檢測(cè)單 元12，但是不限于此。例如，也可以使用電容式傳感器或者通電傳感器等， 檢測(cè)便攜終端20的手持狀態(tài)。
權(quán)利要求
1.一種電視電話功能的拍攝圖像處理切換裝置，用于具有電視電話功能的便攜終端中，其特征在于，具有圖像剪切單元，其用于進(jìn)行圖像剪切處理，該圖像剪切處理是指，在上述便攜終端具有的攝像頭所得到的拍攝圖像中對(duì)拍攝對(duì)象進(jìn)行識(shí)別，剪切包含該識(shí)別出的拍攝對(duì)象的規(guī)定范圍，并向使用上述電視電話功能進(jìn)行通信的通信對(duì)象發(fā)送的處理；手持狀態(tài)檢測(cè)單元，其在使用上述電視電話功能進(jìn)行通信時(shí)，檢測(cè)上述便攜終端處于手持狀態(tài)；切換單元，其在上述便攜終端處于手持狀態(tài)時(shí)，使上述圖像剪切單元停止圖像剪切處理，在上述便攜終端處于非手持狀態(tài)時(shí)，使上述圖像剪切單元執(zhí)行圖像剪切處理。
2. 如權(quán)利要求l所述的電視電話功能的拍攝圖像處理切換裝置，其特征 在于，還具有手抖動(dòng)防止單元，該手抖動(dòng)防止單元檢測(cè)上述便攜終端的手抖動(dòng) 引起的手抖動(dòng)量，根據(jù)該手抖動(dòng)量來(lái)對(duì)上述拍攝圖像進(jìn)行手抖動(dòng)修正，上述切換單元在上述便攜終端處于手持狀態(tài)時(shí)，使上述手抖動(dòng)防止單元 執(zhí)行手抖動(dòng)修正，在該便攜終端處于非手持狀態(tài)時(shí)，使上述手抖動(dòng)防止單元 停止進(jìn)行手抖動(dòng)修正。
3. 如權(quán)利要求l所述的電視電話功能的拍攝圖像處理切換裝置，其特征 在于，上述切換單元具有由3種模式構(gòu)成的判斷模式，該3種模式分別為手持 模式、準(zhǔn)手持模式和固定模式，在處于固定模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于手持狀態(tài)時(shí)，轉(zhuǎn) 入到手持模式，并使上述圖像剪切單元停止圖像剪切處理，在處于手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于非手持狀態(tài)時(shí)， 轉(zhuǎn)入到準(zhǔn)手持模式，在處于準(zhǔn)手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端只在規(guī)定時(shí)間內(nèi)處 于非手持狀態(tài)時(shí)，轉(zhuǎn)入到固定模式，并使上述圖像剪切單元執(zhí)行圖像剪切處 理。
4. 如權(quán)利要求l所述的電視電話功能的拍攝圖像處理切換裝置，其特征 在于，還具有手抖動(dòng)防止單元，該手抖動(dòng)防止單元檢測(cè)上述便攜終端的手抖動(dòng) 引起的手抖動(dòng)量，根據(jù)該手抖動(dòng)量來(lái)對(duì)上述拍攝圖像進(jìn)行手抖動(dòng)修正，上述切換單元具有由3種模式構(gòu)成的判斷模式，該3種模式分別為手持 模式、準(zhǔn)手持模式和固定模式，在處于固定模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于手持狀態(tài)時(shí)，轉(zhuǎn) 入到手持模式，并使上述手抖動(dòng)防止單元執(zhí)行手抖動(dòng)修正，在處于手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于非手持狀態(tài)時(shí)， 轉(zhuǎn)入到準(zhǔn)手持模式，在處于準(zhǔn)手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端只在規(guī)定時(shí)間內(nèi)處 于保持手持狀態(tài)時(shí)，轉(zhuǎn)入到固定模式，并使上述手抖動(dòng)防止單元停止進(jìn)行手 抖動(dòng)修正。
5. 如權(quán)利要求l所述的電視電話功能的拍攝圖像處理切換裝置，其特征 在于，上述手持檢測(cè)單元使用加速度傳感器、電容式傳感器和通電傳感器中的任意一種。
6. —種電視電話功能的拍攝圖像處理切換方法，用于具有電視電話功能 的便攜終端中，其特征在于，在使用上述電視電話功能進(jìn)行通信時(shí)，檢測(cè)上述便攜終端處于手持狀態(tài)， 在上述便攜終端處于手持狀態(tài)時(shí)，停止圖像剪切處理，該圖像剪切處理 是指，在上述便攜終端具有的攝像頭所得到的拍攝圖像中對(duì)拍攝對(duì)象進(jìn)行識(shí) 別，剪切包含該識(shí)別出的拍攝對(duì)象的規(guī)定范圍，并向使用上述電視電話功能 進(jìn)行通信的通信對(duì)象發(fā)送的處理，在上述便攜終端處于非手持狀態(tài)時(shí)，執(zhí)行上述圖像剪切處理。
7. 如權(quán)利要求6所述的電視電話功能的拍攝圖像處理切換方法，其特征 在于，在上述便攜終端處于手持狀態(tài)時(shí)，執(zhí)行手抖動(dòng)防止處理，該手抖動(dòng)防止 處理是指，檢測(cè)上述便攜終端的手抖動(dòng)引起的手抖動(dòng)量，根據(jù)該手抖動(dòng)量對(duì) 上述拍攝圖像進(jìn)行手抖動(dòng)修正的處理，在上述便攜終端處于非手持狀態(tài)時(shí)，停止通過(guò)上述手抖動(dòng)防止處理進(jìn)行的手抖動(dòng)修正。
8. 如權(quán)利要求6所述的電視電話功能的拍攝圖像處理切換方法，其特征在于，具有由3種模式構(gòu)成的判斷模式，該3種模式分別為手持模式、準(zhǔn)手持 模式和固定模式，在處于固定模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于手持狀態(tài)時(shí)，轉(zhuǎn) 入到手持模式，并停止通過(guò)上述圖像剪切處理進(jìn)行的圖像剪切處理，在處于手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于非手持狀態(tài)時(shí)， 轉(zhuǎn)入到準(zhǔn)手持模式，在處于準(zhǔn)手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端只在規(guī)定時(shí)間內(nèi)處 于非手持狀態(tài)時(shí)，轉(zhuǎn)入到固定模式，并通過(guò)上述圖像剪切處理執(zhí)行圖像剪切 處理。
9. 如權(quán)利要求6所述的電視電話功能的拍攝圖像處理切換方法，其特征 在于，具有由3種模式構(gòu)成的判斷模式，該3種模式分別為手持模式、準(zhǔn)手持 模式和固定模式，在處于固定模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于手持狀態(tài)時(shí)，轉(zhuǎn) 入到手持模式，并執(zhí)行手抖動(dòng)防止處理，該手抖動(dòng)防止處理是指，檢測(cè)上述 便攜終端的手抖動(dòng)引起的手抖動(dòng)量，根據(jù)該手抖動(dòng)量對(duì)上述拍攝圖像進(jìn)行手 抖動(dòng)修正的處理，在處于手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端處于非手持狀態(tài)時(shí)， 轉(zhuǎn)入到準(zhǔn)手持模式，在處于準(zhǔn)手持模式的情況下，當(dāng)檢測(cè)出上述便攜終端只在規(guī)定時(shí)間內(nèi)處 于手持狀態(tài)時(shí)，轉(zhuǎn)入到固定模式，并停止通過(guò)上述手抖動(dòng)防止處理進(jìn)行的手抖動(dòng)修正。
10. —種便攜終端，是具有電視電話功能的便攜終端，其特征在于，具有攝像頭，用于拍攝該電視電話功能所需的圖像；圖像剪切單元，其用于進(jìn)行圖像剪切處理，該圖像剪切處理是指，在該 攝像頭所得到的拍攝圖像中對(duì)拍攝對(duì)象進(jìn)行識(shí)別，剪切包含該識(shí)別出的拍攝對(duì)象的規(guī)定范圍，并向使用上述電視電話功能進(jìn)行通信的通信對(duì)象發(fā)送的處 理；手持狀態(tài)檢測(cè)單元，其在使用上述電視電話功能進(jìn)行通信時(shí)，檢測(cè)上述 便攜終端處于手持狀態(tài)，切換單元，其在上述便攜終端處于手持狀態(tài)時(shí)，使上述圖像剪切單元停 止圖像剪切處理，在上述便攜終端處于非手持狀態(tài)時(shí)，使上述圖像剪切單元 執(zhí)行圖像剪切處理。
全文摘要
本發(fā)明提供電視電話功能的拍攝圖像處理切換裝置，其根據(jù)便攜終端的狀態(tài)，僅提供最佳的功能，從而降低消耗功率。該電視電話功能的拍攝圖像處理切換裝置至少具備圖像剪切單元(11)，其從便攜終端的攝像頭拍攝的拍攝圖像剪切包含拍攝對(duì)象的規(guī)定范圍；手持狀態(tài)檢測(cè)單元(12)，其檢測(cè)手持狀態(tài)；切換單元(13)，其根據(jù)手持狀態(tài)檢測(cè)單元(12)檢測(cè)出的便攜終端的狀態(tài)，切換圖像剪切單元(11)的有效/無(wú)效。
文檔編號(hào)H04N7/14GK101346990SQ20058005243
公開日2009年1月14日 申請(qǐng)日期2005年12月28日 優(yōu)先權(quán)日2005年12月28日
發(fā)明者植木隆 申請(qǐng)人:富士通株式會(huì)社