在配備有雙相機的便攜式終端中合成圖像的設(shè)備和方法
【專利摘要】提供一種在配備有雙相機的便攜式終端中合成圖像的設(shè)備和方法。所述方法包括:選擇圖像合成模式;執(zhí)行前置相機和后置相機同時或順序的拍攝;通過前置相機和后置相機獲得第一圖像和第二圖像;從第一圖像和第二圖像中的一個檢測對象圖像;通過將對象圖像合成到第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像來產(chǎn)生合成圖像。
【專利說明】在配備有雙相機的便攜式終端中合成圖像的設(shè)備和方法
【技術(shù)領(lǐng)域】
[0001]本公開涉及一種配備有雙相機的便攜式終端的圖像合成設(shè)備和方法。更具體地,本公開涉及一種用于將通過前置相機和后置相機獲得的相機的前面和后面的圖像合成,并自動地顯示與合成圖像有關(guān)的效果的設(shè)備和方法。
【背景技術(shù)】
[0002]現(xiàn)有技術(shù)的便攜式相機和現(xiàn)有技術(shù)的具有相機的便攜式終端被配備有雙相機,所述雙相機配置有前置相機和后置相機,這些相機被分別安裝在便攜式終端的前面和后面。一般來說,配備有雙相機的便攜式終端通過獨立地分別選擇前置相機和后置相機來拍攝前面的被攝體(subject)或拍攝后面的被攝體。
[0003]例如,現(xiàn)有技術(shù)的雙相機便攜式終端可分別拍攝不同的圖像,并可分別存儲并管理拍攝的圖像。因此,現(xiàn)有技術(shù)的雙相機便攜式終端會無法在拍攝時同時拍攝、存儲并合成用戶所需的前面圖像和后面圖像兩者。因此,為此,會使用在通過順序地操作兩個相機來拍攝圖像之后,通過后校正(post-correction)來合成或組合圖像的方法。相似地,由于當在一個屏幕上表示圖像時圖像被重疊,所以還需要諸如手動布置圖像的操作的用戶操作。
[0004]此外,在合成圖像時,當需要對合成圖像進行改變時,對用戶而言手動地修改、改變或編輯圖像是不便的。
[0005]因此,需要一種用于將通過前置相機和后置相機獲得的相機的前面和后面的圖像合成,并自動地顯示與合成圖像有關(guān)的效果的設(shè)備和方法
[0006]提供以上信息作為背景信息,僅用于幫助理解本公開。至于以上任何內(nèi)容是否可適用于針對本公開的現(xiàn)有技術(shù),尚未作出確定且未作出斷言。
【發(fā)明內(nèi)容】
[0007]本公開的多個方面在于至少解決以上提到的問題和/或缺點,并在于至少提供以下的優(yōu)點。因此,本公開的一方面在于提供一種配備有雙相機的便攜式終端的圖像合成設(shè)備和方法,其中,所述設(shè)備和方法能夠?qū)⑼ㄟ^前置相機和后置相機獲得的相機的前面圖像和后面圖像合成,并應(yīng)用與合成圖像有關(guān)的效果。
[0008]根據(jù)本公開的一方面,提供一種用于在配備有雙相機的便攜式終端中合成圖像的方法。所述方法包括:選擇圖像合成模式;執(zhí)行前置相機和后置相機的同時或順序拍攝;通過前置相機和后置相機獲得第一圖像和第二圖像;從第一圖像和第二圖像中的一個圖像檢測對象圖像;通過將對象圖像合成到第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像來產(chǎn)生合成圖像。
[0009]根據(jù)本公開的另一方面,提供一種用于在配備有雙相機的便攜式終端中合成圖像的設(shè)備。所述設(shè)備包括:第一相機,被配置為被安裝在便攜式終端的后側(cè)并獲得第一圖像;第二相機,被配置為被安裝在便攜式終端的前側(cè)并獲得第二圖像;控制器,被配置為從第一圖像和第二圖像中的一個圖像檢測對象圖像,并通過將對象圖像合成到第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像來產(chǎn)生合成圖像;顯示單元,被配置為顯示合成圖像。
[0010]從以下結(jié)合附圖公開本公開的各種實施例的詳細描述中,對于本領(lǐng)域技術(shù)人員而言本公開的其它方面、優(yōu)點和顯著特征將變得清楚。
【專利附圖】
【附圖說明】
[0011]從以下結(jié)合附圖進行的描述中,本公開的特定實施例的以上和其它方面、特征以及優(yōu)點將更加清楚,其中:
[0012]圖1示出根據(jù)本公開的實施例的配備有雙相機的便攜式終端的配置;
[0013]圖2是示出根據(jù)本公開的實施例的用于在配備有雙相機的便攜式終端中合成圖像的方法的流程圖;
[0014]圖3、圖4、圖5A、圖5B和圖5C示出根據(jù)本公開的實施例的配備有雙相機的便攜式終端中的圖像合成;
[0015]圖6和圖7示出根據(jù)本公開的實施例的合成圖像的使用。
[0016]貫穿附圖,相同的標號被用于表不相同的兀件。
【具體實施方式】
[0017]提供以下參照附圖的描述以幫助全面理解由權(quán)利要求和它們的等同物所限定的本公開的各種實施例。所述描述包括各種特定細節(jié)以幫助所述理解,但這些特定細節(jié)僅被認為是示例性的。因此,本領(lǐng)域普通技術(shù)人員將理解:在不脫離本公開的范圍和精神的情況下,可對描述于此的各種實施例做出各種改變和修改。此外,為了清楚和簡潔,可省略公知功能和結(jié)構(gòu)的描述。
[0018]在以下的描述和權(quán)利要求書中使用的術(shù)語和詞語不限于書面含義,而僅被發(fā)明人用來使本公開能夠被清晰且一致地理解。因此,對本領(lǐng)域的技術(shù)人員應(yīng)清楚的是:提供本公開的各種實施例的以下描述僅用于示意目的而并非為了限制由權(quán)利要求及其等同物限定的本公開的目的。
[0019]將理解:除非上下文清楚地另有指示,否則單數(shù)形式包括復(fù)數(shù)指代。因此,例如,參照“組件表面”包括參照一個或多個這樣的表面。
[0020]通過術(shù)語“基本上”,意味著記載的特點、參數(shù)或值不需要被精確地實現(xiàn),而可存在偏差或變化(包括:例如,公差、測量誤差、測量精度限制和本領(lǐng)域技術(shù)人員已知的其它因素),這些偏差或變化的量不妨礙所述特點意圖提供的效果。
[0021]在本公開的實施例中,便攜式終端可被應(yīng)用到所有的信息通信裝置和多媒體裝置(諸如,平板個人計算機(PC)、移動通信終端、移動電話、個人數(shù)字助理(PDA)、智能電話、國際移動電信2000 (IMT-2000)終端、碼分多址(CDMA)終端、寬帶碼分多址(WCDMA)終端、全球移動通信系統(tǒng)(GSM)終端、通用分組無線業(yè)務(wù)(GPRS)終端、增強型數(shù)據(jù)GSM環(huán)境(EDGE)終端、通用移動電信服務(wù)(UMTS)終端、數(shù)字廣播終端、自動柜員機(ATM)等)以及與其相應(yīng)的應(yīng)用。
[0022]在本公開的實施例中,配備有雙相機的便攜式終端通過同時操作前置相機和后置相機來獲得多個圖像,并將獲得的圖像顯示為背景圖像和用戶圖像。例如,便攜式終端可通過前置相機獲得用戶圖像,并可通過后置相機獲得背景圖像,這可通過用戶的相機選擇進行改變。
[0023]此外,當請求雙模式下的拍攝時,配備有雙相機的便攜式終端可通過同時操作前置相機和后置相機來進行拍攝,或可通過根據(jù)設(shè)置順序來順序地操作前置相機和后置相機以進行拍攝,并可通過將拍攝的用戶圖像和背景圖像合成來產(chǎn)生一個靜止圖像。這里,雙模式可被稱作用于將用戶圖像和背景圖像合成的圖像合成模式。
[0024]此外,配備有雙相機的便攜式終端可編輯或改變通過前置相機獲得的用戶圖像和通過后置相機獲得的背景圖像。例如,圖像的編輯可包括用戶圖像大小的改變、在背景圖像中位置的改變和/或顯示的用戶圖像的類型的改變,也就是說,在合成時的風格改變。此時,可在雙相機進行操作的時間點執(zhí)行編輯用戶圖像的處理,或可編輯被拍攝為雙鏡頭的圖像。
[0025]圖1示出根據(jù)本公開的實施例的配備有雙相機的便攜式終端的配置。
[0026]參照圖1,配備有雙相機的便攜式終端可被配置為包括第一相機單元140、第二相機單元150、圖像處理單元160、控制器100、顯示單元120、輸入單元130、位置測量單元190、無線通信單元170、數(shù)據(jù)處理單元180、音頻處理單元111、鍵輸入單元113和存儲單元115。
[0027]第一相機單元140和第二相機單元150可分別是指安裝在便攜式終端中的前置相機和后置相機。第一相機單元140和第二相機單元150可在控制器100的控制下獨立操作或同時操作。此外,在控制器100的控制下,第一相機單元140和第二相機單元150可拍攝靜止圖像或視頻。
[0028]第一相機單元140可通過拍攝位于便攜式終端的前面的背景、對象、人等來獲得前面圖像,并第二相機單元150可通過拍攝位于便攜式終端的后面的背景、對象、人等來獲得后面圖像。
[0029]在本公開的實施例中,假定通過第一相機單元140獲得拍攝者的圖像(即,用戶圖像),通過第二相機單元150獲得背景圖像??筛鶕?jù)設(shè)計者或用戶的意圖來實現(xiàn)相反的情況。
[0030]圖像處理單元160可執(zhí)行產(chǎn)生屏幕數(shù)據(jù)的功能以顯示從第一相機單元140和第二相機單元150輸出的圖像信號。圖像處理單元160可針對每一幀為單位來處理從第一相機單元140和第二相機單元150輸出的圖像信號,并可將幀圖像數(shù)據(jù)輸出到顯示單元120。此夕卜,圖像處理單元160包括圖像編碼解碼器,通過設(shè)置的方法來壓縮顯示在顯示單元120上的幀圖像數(shù)據(jù),或可執(zhí)行將壓縮的幀圖像數(shù)據(jù)恢復(fù)到它的原始幀圖像數(shù)據(jù)的功能。這里,圖像編碼解碼器可以是聯(lián)合圖像專家組(JPEG)編碼解碼器、運動圖像專家組4 (MPEG4)編解碼器、小波編解碼器等。圖像處理單元160可包括同屏顯示(ODS, On Screen Display)功能,并可根據(jù)由控制器100控制顯示的屏幕大小來輸出同屏顯示數(shù)據(jù)。
[0031]輸入單元130可從用戶接收圖像合成模式,可接收用于改變并變換用戶圖像或背景圖像的命令,并可接收用于執(zhí)行與用戶圖像或背景圖像有關(guān)的效果的命令。
[0032]顯示單元120可包括觸摸面板和顯示面板。觸摸面板可被放置在顯示面板上。觸摸面板可響應(yīng)于與觸摸面板相應(yīng)的用戶手勢來產(chǎn)生模擬信號(例如,觸摸事件),并可通過執(zhí)行模數(shù)轉(zhuǎn)換將模擬信號傳送到控制器100。
[0033]控制器100可從傳送的觸摸事件檢測用戶手勢。控制器100可響應(yīng)于檢測的用戶手勢來控制與本公開有關(guān)的功能。用戶手勢可被分成觸摸和觸摸手勢。[0034]其后,觸摸手勢可包括輕擊、拖動、輕彈等。例如,觸摸是指接觸觸摸屏的狀態(tài),觸摸手勢是指從觸摸屏上的觸摸開始(touch-on)事件直到離開觸摸屏的觸摸結(jié)束(touch-off)事件的觸摸的改變。
[0035]觸摸面板可以是復(fù)合觸摸面板,該復(fù)合觸摸面板包括檢測手部姿勢的手觸摸面板和檢測筆寫姿勢的筆觸摸面板。這里,手觸摸面板可被配置為電容型。手觸摸面板可被配置為電阻型、紅外線型、超聲波型等。
[0036]此外,手觸摸面板不僅可產(chǎn)生由用戶手部姿勢引起的事件,而且可產(chǎn)生由其它對象(例如,可引起電容改變的導(dǎo)電材料對象)引起的事件。筆觸摸面板可被配置為電磁感應(yīng)型。因此,筆觸摸面板可產(chǎn)生由被設(shè)計為用來形成磁場的觸摸手寫筆引起的觸摸事件。
[0037]顯示面板可在控制器100的控制下通過將從控制器100接收的圖像數(shù)據(jù)轉(zhuǎn)換為模擬信號來顯示所述圖像數(shù)據(jù)。例如,顯示面板可顯示各種屏幕(圖片),例如,鎖定屏幕、主屏幕、環(huán)境設(shè)置屏幕、應(yīng)用(簡稱App)處理屏幕和鍵盤等。
[0038]更具體地,本公開的顯示面板可顯示通過第一相機單元140獲得的用戶圖像,或可顯示通過第二相機單元150獲得的背景圖像,并可顯示用戶圖像和背景圖像被合成且特定效果被應(yīng)用的圖像。用戶圖像、背景圖像和合成圖像可同時被顯示,或被顯示在不同屏幕上。
[0039]無線通信單元170可執(zhí)行與基站或其它裝置的通信功能。無線通信單元170可以是射頻(RF)通信單元,該射頻(RF)通信單元配置有執(zhí)行發(fā)送信號的頻率上變換和功率放大的發(fā)送單元和執(zhí)行接收信號的低噪聲放大和頻率下變換的接收單元。此外,無線通信單元170可被配備有調(diào)制單元和解調(diào)單元。這里,調(diào)制單元可對發(fā)送信號進行調(diào)制并將其傳送到發(fā)送單元,解調(diào)單元可對通過接收單元接收的信號進行解調(diào)。在這種情況下,調(diào)制單元和解調(diào)單元可以是長期演進(LTE)單元、WCDMA單元、GSM單元、WIFI單元、無線寬帶(WIBRO)等。無線通信單元170可通過訪問公共無線通信網(wǎng)絡(luò)和/或互聯(lián)網(wǎng)絡(luò)來在終端裝置和相應(yīng)網(wǎng)絡(luò)之間執(zhí)行無線通信功能。此外,無線通信單元170可被配備有可與LTE基站通信的LTE通信單元和WIFI通信單元。
[0040]更具體地,根據(jù)本公開的實施例的無線通信單元170可被用于發(fā)送或接收由控制器100合成了用戶圖像和背景圖像且有關(guān)特定效果被應(yīng)用的合成圖像。
[0041]音頻處理單元111可通過結(jié)合到揚聲器(SPK)和麥克風(MIC)來執(zhí)行輸入和輸出用于語音識別、語音記錄、數(shù)字記錄、呼叫功能等的音頻信號的功能。
[0042]首頻處理單兀111可從控制器100接收首頻彳目號,并可在對接收的首頻彳目號執(zhí)燈數(shù)模(D/A)轉(zhuǎn)換和放大之后將其輸出到SPK。音頻處理單元111可在對從MIC接收的音頻信號執(zhí)行模數(shù)(A/D)轉(zhuǎn)換之后將接收的音頻信號提供給控制器100。
[0043]鍵輸入單元113可包括用于接收數(shù)字信息或字符信息和用于設(shè)置各種功能的多個鍵(按鈕)。這些鍵可包括菜單獲取鍵、屏幕開/關(guān)鍵、電源開/關(guān)鍵、音量控制鍵等。
[0044]鍵輸入單元113產(chǎn)生與便攜式終端裝置的用戶設(shè)置和功能控制有關(guān)的鍵事件,并將鍵事件傳送給控制器100。
[0045]鍵事件可包括電源開/關(guān)事件、音量控制事件、屏幕開/關(guān)事件等??刂破?00可響應(yīng)于這樣的鍵事件來控制以上配置。同時,鍵輸入單元113的鍵(按鈕)可被稱作硬鍵,顯示在顯示單元120上的鍵(按鈕)可被稱作軟鍵。[0046]存儲單元115是控制單元100的輔助存儲單元,并可包括盤、隨機存取存儲器(RAM)、只讀存儲器(ROM)、閃存等。存儲單元115可在控制器100的控制下存儲從便攜式終端裝置產(chǎn)生的數(shù)據(jù),或通過無線通信單元170或外部裝置接口單元(未示出)從外部裝置(例如,服務(wù)器、桌上型PC、平板PC等)接收的數(shù)據(jù)。
[0047]存儲單元115可存儲用于便攜式終端裝置的操作的引導(dǎo)程序和操作系統(tǒng)(OS)。
[0048]存儲單元115可包括嵌入式應(yīng)用和第三方應(yīng)用。嵌入式應(yīng)用是指安裝在便攜式終端裝置上的應(yīng)用。例如,嵌入式應(yīng)用可以是瀏覽器、電子郵件和即時信使等。第三方應(yīng)用非常多樣化,并且是指如下所述從線上市場下載以安裝在便攜式終端裝置上的應(yīng)用。第三方應(yīng)用可以被免費安裝和控制。當便攜式終端裝置開啟時,首先,引導(dǎo)程序被加載到控制器100的主存儲器裝置(例如,RAM)。這樣的引導(dǎo)程序?qū)⒉僮飨到y(tǒng)加載到主存儲器裝置,使得便攜式終端可進行操作。此外,操作系統(tǒng)將應(yīng)用加載到主存儲器裝置并處理所述應(yīng)用。
[0049]更具體地,根據(jù)本公開的實施例的存儲單元115可存儲以下項中的至少一個:通過第一相機單元140獲得的用戶圖像、通過第二相機單元150獲得的背景圖像、由控制器100合成了用戶圖像和背景圖像的圖像和與用戶圖像和背景圖像有關(guān)的存儲的效果被應(yīng)用的合成圖像。
[0050]此外,存儲單元115可存儲第一效果和第二效果中的至少一個,其中,第一效果被預(yù)先與用戶圖像和背景圖像相關(guān)聯(lián)地映射,第二效果被預(yù)先與基于拍攝的位置信息和基于拍攝的時間信息中的至少一個相關(guān)聯(lián)地映射。
[0051]第一效果和第二效果可以是以下處理中的一個:添加表情符號、文字、數(shù)字、符號、圖片、語音和聽覺數(shù)據(jù)中的至少一個的處理、或者變換或編輯合成圖像的形狀、形式和顏色中的至少一個的處理。
[0052]位置測量單元190可被安裝以設(shè)置基于拍攝的位置,并可被配置有超聲波位置測量系統(tǒng)或全球定位系統(tǒng)(GPS)。
[0053]由位置測量單元190測量的基于拍攝的位置信息與由控制器100存儲的用戶的活動半徑比較,從而可確定基于拍攝的位置是否在用戶的活動半徑內(nèi)。
[0054]此外,控制器100可測量基于拍攝的時間,并可確定基于拍攝的時間是否與用戶存儲的日程相應(yīng)。
[0055]控制器100可控制便攜式終端的整體操作和便攜式終端的內(nèi)部配置之間的信號流,可執(zhí)行數(shù)據(jù)處理功能,并可控制從電池到配置的供電。控制器100可包括存儲應(yīng)用程序和操作系統(tǒng)的主存儲器裝置、暫時地存儲將被寫入到存儲單元115的數(shù)據(jù)和暫時地存儲從存儲單元115讀取的數(shù)據(jù)的高速緩存存儲器、中央處理單元(CPU)、圖形處理單元(GPU)等。這里,操作系統(tǒng)可充當硬件和程序之間的接口,并管理計算機資源(諸如,CPU、GPU、主存儲器裝置、輔助存儲器裝置等)。
[0056]例如,操作系統(tǒng)操作便攜式終端裝置,可確定任務(wù)的順序,并可控制CPU計算和GPU計算。此外,操作系統(tǒng)可執(zhí)行應(yīng)用程序的功能、存儲并管理數(shù)據(jù)和文件的功能。
[0057]同時,如上所述,CPU是可執(zhí)行數(shù)據(jù)的計算和比較以及命令語言的解譯和處理的計算機系統(tǒng)的基本控制單元。GPU是可代表CPU執(zhí)行與圖形有關(guān)的數(shù)據(jù)的計算和比較以及命令語言的解釋和處理的圖形控制單元。CPU和GPU可被集成在一個封裝中,其中,兩個或更多個獨立核(例如,四核)被分別形成為單個集成電路。此外,CPU和GPU可被集成到一個芯片(即,片上系統(tǒng)(SoC))。此外,CPU和GPU可被封裝為多層。同時,包括CPU和GPU的配置可被稱作應(yīng)用處理器(AP)。
[0058]更具體地,根據(jù)本公開的控制器100可識別對象、人、背景等,這些可被包括在通過第一相機單元140獲得的第一圖像和通過第二相機單元150獲得的第二圖像中。相似地,控制器100可裁剪出從第一圖像和第二圖像中的一個圖像檢測的人的圖像或特定對象,并將裁剪出的對象或人與從另一圖像識別的背景合成。裁剪出的圖像可被設(shè)置為用戶的整個身體、半個身體、人臉區(qū)域等。
[0059]例如,控制器100可裁剪出包括在第一圖像中的拍攝者圖像,并粘貼到第二圖像的背景區(qū)域,并可將由不同相機獲得的圖像合成。
[0060]當裁剪出的圖像被顯示為在背景圖像的某部分上的覆蓋圖時,或當用戶在輕擊裁剪出的圖像的狀態(tài)下執(zhí)行拖動移動或執(zhí)行拖放交互時,控制器100可通過根據(jù)用戶的觸摸移動裁剪出的圖像來改變背景圖像被合成的位置。
[0061]這里,控制器100可將以下區(qū)域中的至少一個區(qū)域檢測為背景圖像:在第一圖像或第二圖像中相似顏色被廣泛分布的區(qū)域、圖案以特定間隔被重復(fù)的區(qū)域和人被排除在外的區(qū)域。此外,當檢測的被攝體與存儲的地標相同時,控制器100可將此圖像檢測為背景圖像。
[0062]此外,控制器100可通過使用檢測與體熱相應(yīng)的長紅外光的紅外線傳感器或體熱探測裝置來檢測被攝體中的人的圖像。例如,控制器100可根據(jù)用戶圖像上觸摸的數(shù)量來確定用戶圖像的數(shù)量,當觸摸的數(shù)量超出特定數(shù)量(例如,設(shè)置的用戶圖像的數(shù)量)時,然后,控制器100可通過將用戶圖像改變?yōu)榻M圖像來設(shè)置用戶圖像。
[0063]此外,控制器100可確定獲得的第一圖像和獲得的第二圖像中的至少一個是否與存儲的圖像相同。當獲得的第一圖像和獲得的第二圖像中的至少一個與存儲的圖像相同時,控制器100可提取被映射到相應(yīng)圖像的第一效果,并可將第一效果應(yīng)用到合成圖像。
[0064]存儲的圖像可以是以下項中的至少一個:地標、由用戶預(yù)先設(shè)置并存儲的特定對象、由用戶預(yù)先設(shè)置并存儲的特定人等。
[0065]第一效果可以是以下處理中的至少一個:將指示與第一圖像或第二圖像有關(guān)的信息的文字、數(shù)字、符號、圖片、語音、聽覺數(shù)據(jù)和表情符號等中的至少一個添加到合成圖像的處理、或者變換或編輯合成的第一圖像或第二圖像的形狀、形式和顏色等中的至少一個的處理。
[0066]此外,控制器100可檢測基于拍攝的位置信息和基于拍攝的時間信息中的至少一個,可提取被映射到檢測的位置信息和時間信息中的至少一個的第二效果,并可將第二效果應(yīng)用到合成圖像。
[0067]例如,控制器100可確定收集的位置是否在用戶的存儲的活動半徑內(nèi),并確定收集的時間是否與用戶的存儲的日程相應(yīng),相應(yīng)地,可提取第二效果。
[0068]例如,控制器100可自動地將與以下項中的至少一個有關(guān)的信息作為第二效果輸出到合成圖像:被映射到檢測的基于拍攝的位置信息或基于拍攝的時間信息中的至少一個的旅行、商務(wù)旅行、住宅、公司、學(xué)校、學(xué)院、通勤、往返學(xué)校、工作、學(xué)習(xí)、運動、休閑、約會、會議等。
[0069]第二效果是指示與檢測的基于拍攝的位置信息和基于拍攝的時間信息中的至少一個有關(guān)的信息的數(shù)據(jù),并可被輸出為以下至少一種類型:表情符號、文字、符號、數(shù)字、圖片、語音、聽覺數(shù)據(jù)等。
[0070]此外,控制器100可根據(jù)檢測的人的圖像和背景圖像向用戶推薦將被映射到合成圖像的效果。
[0071]推薦的效果可以是以下處理中的至少一個:根據(jù)人的圖像和背景圖像變換或編輯合成圖像的形狀、形式和顏色的處理、將指示與人的圖像和背景圖像有關(guān)的信息的文字、數(shù)字、符號、圖片、情感、語音和聽覺數(shù)據(jù)等中的至少一個添加到合成圖像的處理。
[0072]圖2是示出根據(jù)本公開的實施例的用于在配備有雙相機的便攜式終端中合成圖像的方法的流程圖。
[0073]參照圖2,在操作210,控制器100可通過從用戶接收用于處理圖像合成模式的選擇的命令來處理圖像合成模式的選擇。此時,在操作215,當圖像合成模式?jīng)]有被選擇時,前置相機或后置相機中的一個相機被處理,這作為一般相機操作以執(zhí)行相應(yīng)的功能。
[0074]當在操作210選擇了圖像合成模式時,在操作217,控制器100同時或順序地操作便攜式終端的前置相機和后置相機。
[0075]在操作217之后,在操作219,控制器100可通過前置相機獲得第一圖像,并可通過
后置相機獲得第二圖像。
[0076]例如,通過前置相機獲得的第一圖像可以是為了拍攝拍攝者自己的目的而獲得的用戶圖像,通過后置相機獲得的第二圖像可以是為了拍攝背景和環(huán)境的目的而獲得的背景圖像。
[0077]在操作219之后,控制器100可在操作220解析第一圖像和第二圖像,并可檢測包括在圖像中的對象、人和背景。這里,控制器100可將以下區(qū)域中的至少一個檢測為背景圖像:第一圖像或第二圖像的相似顏色被廣泛分布的區(qū)域、圖案以特定間隔被重復(fù)的區(qū)域和排除人所在區(qū)域的區(qū)域。相似地,當檢測的被攝體與存儲的地標相同時,控制器100可將被攝體的圖像檢測為背景圖像。此外,控制器100可通過使用檢測與體熱相應(yīng)的長紅外線的紅外線傳感器或體熱探測裝置在被攝體之中檢測人或動物。
[0078]在操作220之后,控制器100可在操作230裁剪出從第一圖像或第二圖像檢測的對象、動物和人的圖像中的至少一個,并可將裁剪出的圖像與從另一圖像識別的背景合成。例如,控制器100可通過裁剪出包括在第一圖像中的拍攝者圖像并將拍攝者圖像粘貼到第二圖像的背景來合成由不同相機獲得的圖像。
[0079]在操作230之后,控制器100可在操作240確定合成圖像的拍攝者圖像或背景圖像是否與存儲的圖像相同。
[0080]存儲的圖像可以是由用戶通過使用便攜式終端中的第一相機單元140或第二相機單元150預(yù)先拍攝并存儲的圖像,并且所述圖像可通過由用戶設(shè)置特定效果來存儲。此夕卜,存儲的圖像可以是主地標連同特定效果被便攜式終端的設(shè)計者存儲為默認項的圖像。
[0081]在操作240,當合成圖像的拍攝者圖像或背景圖像與存儲的圖像相同時,控制器100可在操作250將預(yù)先被映射到相應(yīng)圖像的第一效果應(yīng)用到合成圖像。另一方面,當合成圖像的拍攝者圖像或背景圖像與存儲的圖像不相同時,處理移到操作260。
[0082]第一效果可以是以下處理中的至少一個:將指示與用戶圖像或背景圖像有關(guān)的信息的文字、數(shù)字、符號、圖片、語音、聽覺數(shù)據(jù)、表情符號等中的至少一個添加到合成圖像的處理、變換或編輯合成的第一圖像或第二圖像的形狀、形式和顏色等中的至少一個的處理。
[0083]在操作250之后,控制器100可在操作260檢測基于拍攝的位置信息和基于拍攝的時間信息中的至少一個,并可在操作270將檢測的信息與預(yù)先存儲的信息進行比較。例如,控制器100可確定檢測的位置是否在用戶的存儲的活動半徑內(nèi)以及收集的時間是否與用戶的存儲的日程相應(yīng)。
[0084]這里,可通過使用配置在便攜式終端內(nèi)的GPS來檢測基于拍攝的位置信息。
[0085]在操作270,當檢測的基于拍攝的位置信息在存儲的活動半徑內(nèi),或者檢測的基于拍攝的時間信息與存儲的日程相應(yīng)時,控制器100可在操作280提取被映射到相應(yīng)的基于拍攝的位置信息或基于拍攝的時間信息的第二效果,并可將其應(yīng)用到合成圖像。
[0086]例如,控制器100可自動地將與以下項中的至少一個有關(guān)的信息作為第二效果輸出到合成圖像:被映射到檢測的基于拍攝的位置信息或基于拍攝的時間信息中的至少一個的旅行、商務(wù)旅行、住宅、公司、學(xué)校、學(xué)院、通勤、往返學(xué)校、工作、學(xué)習(xí)、運動、休閑、約會、會議等。
[0087]第二效果是指示與檢測的基于拍攝的位置信息和基于拍攝的時間信息中的至少一個有關(guān)的信息的數(shù)據(jù),并可被輸出為以下至少一種類型:表情符號、文字、符號、數(shù)字、圖片、語音、聽覺數(shù)據(jù)等。
[0088]在操作280之后,控制器100可在操作290確定是否將由用戶通過彈出窗口來存儲合成圖像,當從用戶產(chǎn)生存儲請求時,可將合成圖像存儲在存儲單元115,并可終止圖像合成模式。
[0089]可選地,當沒有接收到合成圖像存儲請求時,在操作295,控制器100可詢問是否重拍,并可根據(jù)用戶相應(yīng)于重拍詢問的響應(yīng)來通過前置相機和后置相機來進行同時或順序的拍攝,或可終止圖像合成模式。在圖像合成模式的處理終止時,第一相機單元140和第二相機單元150的操作也被終止。
[0090]圖3、圖4、圖5A、圖5B和圖5C示出根據(jù)本公開的實施例的配備有雙相機的便攜式終端中的圖像合成。
[0091]參照圖3、圖4、圖5A、圖5B和圖5C,當操作便攜式終端中的相機時,控制器100在預(yù)覽屏幕的邊緣顯示相機按鈕410和雙模式按鈕415。這里,相機按鈕410是用于選擇用于拍攝被顯示為主屏幕的圖像的相機的按鈕,雙模式按鈕415是用于選擇圖像合成模式的開或關(guān)的按鈕。
[0092]此外,在預(yù)覽屏幕中,控制器100可顯示拍攝靜止圖像的靜止圖像按鈕420、可設(shè)置相機的拍攝模式的模式按鈕423和拍攝視頻的視頻按鈕425。當操作相機時,假定控制器100操作后置相機并執(zhí)行雙模式關(guān)閉模式,也就是說,將圖像合成模式關(guān)閉模式作為默認項。
[0093]此外,假定相機按鈕410和雙模式按鈕415被操作為切換(toggle)型。在以下描述中,假定前置相機拍攝拍攝者圖像(即,用戶圖像),后置相機拍攝背景圖像。
[0094]在如圖3顯示的狀態(tài)下,當用戶觸摸雙模式按鈕415時,控制器100可檢測到圖像合成模式的處理被請求,可將雙模式按鈕415顯示為雙模式開啟并可操作后置相機。
[0095]相似地,當用戶通過在驅(qū)動相機的時間點使用雙模式按鈕415來選擇雙模式開啟時,控制器100可同時操作前置相機和后置相機。[0096]在下文中,控制器100可通過如圖3中示出的前置相機來獲得用戶圖像,并可通過如圖4中示出的后置相機來獲得背景圖像300。此外,如圖5A中所示,例如,控制器100可通過裁剪出除了用戶圖像的背景之外的用戶圖像,并將裁剪出的對象圖像200與背景圖像300合成來產(chǎn)生合成圖像500。此時,可將裁剪出的對象圖像200調(diào)整大小以顯示為背景圖像300的設(shè)置的位置或由用戶選擇的位置上的覆蓋圖。
[0097]更具體地,控制器100可確定裁剪出的對象圖像200是否與存儲的圖像相同。如果裁剪出的對象圖像200與存儲的圖像相同,則控制器100可將預(yù)先被映射到相應(yīng)圖像的第一效果應(yīng)用到合成圖像500。
[0098]例如,當從前置相機獲得的用戶圖像與預(yù)先存儲在便攜式終端中的用戶圖像相同時,作為預(yù)先被映射到用戶圖像的第一效果,可設(shè)置以郵票的形式對用戶圖像進行處理。
[0099]根據(jù)預(yù)先被映射并存儲的用戶圖像,處理用戶圖像的方法可不同。
[0100]更具體地,如圖5A中所示,控制器100可根據(jù)檢測的對象圖像200將對象圖像200變換為郵票形狀,并可將其合成到背景圖像300。此外,控制器100可處理與在圖5A中檢測的對象圖像不同的對象圖像220、240以變換為如圖5B中示出的漫畫類型,或可進行處理以變換為圖5C中示出的位圖類型,使得合成圖像500可根據(jù)照片的目的或內(nèi)容被處理。
[0101]相似地,控制器100可確定背景圖像300是否與存儲的圖像相同。如果背景圖像300與存儲的圖像相同,則控制器100可將預(yù)先被映射到相應(yīng)圖像的第一效果應(yīng)用到合成圖像500。
[0102]例如,當由后置相機獲得的背景圖像300與預(yù)先存儲在便攜式終端中的地標或預(yù)先由用戶存儲的背景圖像相同時,與背景圖像的位置有關(guān)的信息數(shù)據(jù)可作為預(yù)先被映射到存儲的相應(yīng)背景圖像的第一效果被輸出到合成圖像500。
[0103]當倫敦的塔橋作為地標被存儲在便攜式終端時,當通過后置相機獲得的背景圖像300被確定為塔橋時,文字數(shù)據(jù)(諸如,“塔橋”351)可被輸出到如圖5A、圖5B和圖5C中示出的合成圖像500的一些部分。
[0104]此外,控制器100可檢測基于拍攝的位置信息,并可確定檢測的基于拍攝的位置是否在用戶的存儲的活動半徑內(nèi)。例如,當檢測的基于拍攝的位置超出用戶的存儲的活動半徑時,控制器100可認為這種情況為旅行或長途商務(wù)旅行。當當前拍攝的預(yù)覽圖像被檢測為已存檔時,控制器100可認為這種情況為旅行,并輸出指示旅行的數(shù)據(jù)到合成圖像500。
[0105]相似地,當檢測的基于拍攝的位置超出用戶的存儲的活動半徑時,當前拍攝的預(yù)覽圖像被檢測為房間,并且,當被攝體(諸如,桌子、屏幕、投影儀等)被檢測到時,則被認為是商務(wù)旅行狀態(tài),指示商務(wù)旅行的數(shù)據(jù)可被輸出到合成圖像500。
[0106]參照圖5A、圖5B和圖5C,控制器100提取文字數(shù)據(jù)“旅行”,并組合與倫敦的塔橋有關(guān)的信息以將與標題“在倫敦旅行”352有關(guān)的數(shù)據(jù)輸出到合成圖像500,其中,倫敦的塔橋是通過使用地標進行背景圖像300比較的結(jié)果。
[0107]雖然沒有示出,但是控制器100可檢測基于拍攝的時間信息,并可確定檢測的基于拍攝的時間信息是否與用戶的存儲的日程相應(yīng)。此外,當檢測的基于拍攝的時間與用戶的存儲的日程相應(yīng)時,控制器100可將指示與基于拍攝的時間相應(yīng)的日程的信息數(shù)據(jù)輸出到合成圖像500。例如,當基于拍攝的時間被檢測為下午6點,并且在下午6點到下午7點之間的時間間隔被預(yù)先存儲為下班時間時,指示下班的數(shù)據(jù)可被輸出到合成圖像500。
[0108]圖6和圖7示出根據(jù)本公開的實施例的合成圖像的使用。
[0109]參照圖6,通過如上所述的方法產(chǎn)生的合成圖像可被存儲,并可被應(yīng)用為通過移動即時信使的聊天窗口中的表情符號600。
[0110]雖然沒有示出,但是除了移動即時信使之外,可通過將表情符號600附到電子郵件和電子文檔來使用表情符號600。
[0111]參照圖7,示出在將通過上述方法產(chǎn)生的合成圖像上傳到社交網(wǎng)絡(luò)服務(wù)(SNS)時使用合成圖像的示例。參照圖7,根據(jù)本公開的實施例的具有雙相機的圖像合成裝置可在上傳到SNS時自動地產(chǎn)生被映射到用戶圖像和背景圖像中的至少一個的信息數(shù)據(jù)作為標題,并可自動地顯示合成圖像,而不需要單獨地輸入與合成圖像有關(guān)的標題。
[0112]例如,當用戶將存儲的如圖5A、圖5B和圖5C中所示的合成圖像500上傳到SNS時,控制器100可提取被預(yù)先與檢測的背景圖像300相關(guān)聯(lián)地映射的與塔橋有關(guān)的信息,并可將圖像的標題連同合成圖像500 —起自動地更新為“來自塔橋”。
[0113]根據(jù)實施例的本公開可通過在具有雙相機的便攜式終端中同時或順序地操作雙相機來獲得在雙相機中拍攝的用戶圖像和背景圖像兩者。此外,確定獲得的用戶圖像和背景圖像中的至少一個是否與存儲的圖像相同,因此,預(yù)先被映射到相同的相應(yīng)圖像的第一效果被應(yīng)用到合成圖像,使得與圖像有關(guān)的信息可被自動地輸出。
[0114]此外,本公開可檢測基于拍攝的位置信息和基于拍攝的時間信息,確定基于拍攝的位置是否包括在用戶的活動半徑內(nèi),或確定是否存在與基于拍攝的時間相應(yīng)的存儲的日程,相應(yīng)地,可自動地將與用戶的當前活動半徑或日程有關(guān)的信息輸出到合成圖像。
[0115]此外,本公開使得能夠在拍攝和共享時通過前置相機和后置相機同時拍攝來顯示拍攝者自己的肖像、背景環(huán)境,使得可產(chǎn)生識別標識,同時,可向前面照片和后面照片提供不同的效果。
[0116]雖然已經(jīng)參照本公開的各種實施例示出并描述了本公開,但是本領(lǐng)域技術(shù)人員將理解:在不脫離由權(quán)利要求及其等同物限定的本公開的精神和范圍的情況下,可對其做出形式和細節(jié)上的各種改變。
【權(quán)利要求】
1.一種用于在配備有雙相機的便攜式終端上處理圖像的方法,所述方法包括: 選擇圖像合成模式; 執(zhí)行前置相機和后置相機的同時或順序拍攝; 通過前置相機和后置相機獲得第一圖像和第二圖像; 從第一圖像和第二圖像中的一個圖像檢測對象圖像; 通過將對象圖像合成到第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像來產(chǎn)生合成圖像。
2.如權(quán)利要求1所述的方法,其中,通過合成對象圖像來產(chǎn)生合成圖像的步驟包括:將對象圖像作為覆蓋圖顯示到第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像, 其中,對象圖像包括對象和人中的至少一個。
3.如權(quán)利要求1所述的方法,還包括: 檢測第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像的背景圖像, 其中,檢測背景圖像的步驟包括: 將以下區(qū)域中的至 少一個識別為背景圖像:相似顏色被廣泛分布的區(qū)域、圖案以特定間隔被重復(fù)的區(qū)域和人被排除在外的區(qū)域。
4.如權(quán)利要求1所述的方法,還包括: 確定獲得的第一圖像和第二圖像中的至少一個圖像是否與存儲的圖像相同; 作為確定的結(jié)果,當獲得的第一圖像和第二圖像中的所述至少一個圖像與存儲的圖像相同時,提取被映射到相應(yīng)圖像的第一效果; 在合成圖像上顯示第一效果。
5.如權(quán)利要求1所述的方法,還包括: 檢測基于拍攝的位置信息和基于拍攝的時間信息中的至少一個; 提取預(yù)先被映射到檢測的位置和時間的信息中的至少一個的第二效果; 將第二效果顯示到合成圖像。
6.一種用于在配備有雙相機的便攜式終端中處理圖像的設(shè)備,所述設(shè)備包括: 第一相機,被配置為被安裝在便攜式終端的后側(cè)并獲得第一圖像; 第二相機,被配置為被安裝在便攜式終端的前側(cè)并獲得第二圖像; 控制器,被配置為從第一圖像和第二圖像中的一個圖像檢測對象圖像,并通過將對象圖像合成到第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像來產(chǎn)生合成圖像; 顯示單元,被配置為顯示合成圖像。
7.如權(quán)利要求6所述的設(shè)備,其中,控制器還被配置為檢測第一圖像和第二圖像中沒有檢測到對象圖像的另一圖像的背景圖像, 其中,控制器還被配置為將以下區(qū)域中的至少一個識別為背景圖像:相似顏色被廣泛分布的區(qū)域、圖案以特定間隔被重復(fù)的區(qū)域和人被排除在外的區(qū)域。
8.如權(quán)利要求6所述的設(shè)備,其中,控制器還被配置為:確定獲得的第一圖像和第二圖像中的至少一個圖像是否與存儲的圖像相同;作為確定的結(jié)果,當獲得的第一圖像或第二圖像中的所述至少一個圖像與存儲的圖像相同時,提取被映射到相應(yīng)圖像的第一效果;在合成圖像上顯示第一效果。
9.如權(quán)利要求8所述的設(shè)備,其中,存儲的圖像包括以下項中的至少一個:地標、由用戶預(yù)先設(shè)置和存儲的特定對象、由用戶預(yù)先設(shè)置和存儲的特定人。
10.如權(quán)利要求8所述的設(shè)備,其中,第一效果包括以下處理中的至少一個:將預(yù)先被映射到相應(yīng)圖像的表情符號、文字、數(shù)字、符號和圖片數(shù)據(jù)中的至少一個添加到合成圖像的處理、變換或編輯合成圖像的形狀、形式和顏色中的至少一個的處理, 其中,第一效果通過將第一圖像和第二圖像中的至少一個圖像處理為漫畫類型或位圖類型來將所述第一圖像和第二圖像中的至少一個圖像顯示在合成圖像上。
11.如權(quán)利要求6所述的設(shè)備,其中,控制器還被配置為檢測基于拍攝的位置信息和基于拍攝的時間信息中的至少一個;提取預(yù)先被映射到檢測的位置或時間的信息中的至少一個的第二效果;將第二效果顯示到合成圖像。
12.如權(quán)利要求10所述的設(shè)備,其中,控制器還被配置為確定基于拍攝的位置是否在用戶的存儲的活動半徑內(nèi),并確定基于拍攝的時間是否與用戶的存儲的日程相應(yīng)。
13.如權(quán)利要求10所述的設(shè)備,其中,控制器還被配置為自動地將與被映射到檢測的基于拍攝的位置信息和基于拍攝的時間信息中的至少一個的日程和位置中的至少一個有關(guān)的信息輸出到合成圖像。
14.如權(quán)利要求6所述的設(shè)備,其中,控制器還被配置為根據(jù)檢測的對象圖像和背景圖像來推薦將被映射到合成圖像的效果, 其中,推薦的效果包括以下處理中的至少一個:根據(jù)第一圖像和第二圖像來變換或編輯合成圖像的形狀、形式和顏色的處理、添加指示與人的圖像和背景圖像有關(guān)的信息的文字、數(shù)字、符號、圖片、表情符號、語音和聽覺數(shù)據(jù)中的至少一個的處理。
15.如權(quán)利要求6所述的設(shè)備,其中,控制器還被配置為當在應(yīng)用處理功能期間上傳合成圖像時,通過提取被映射到檢測的對象圖像和背景圖像中的至少一個圖像的信息來自動地更新標題。
【文檔編號】H04N5/265GK104010138SQ201410062750
【公開日】2014年8月27日 申請日期:2014年2月24日 優(yōu)先權(quán)日:2013年2月23日
【發(fā)明者】金大成, 金少拉, 金賢璟, 樸亢圭, 林承卿 申請人:三星電子株式會社