本發(fā)明實施例涉及增強現(xiàn)實技術(shù)領(lǐng)域,尤其涉及一種增強現(xiàn)實的處理方法、裝置及移動終端。
背景技術(shù):
增強現(xiàn)實技術(shù)(Augmented Reality,AR)是將現(xiàn)實世界中的一定時間空間范圍內(nèi)很難體驗到的信息(如視覺信息、聲音、味道、觸覺等)疊加融合到真實的環(huán)境中被人類感官所感知,從而增強使用者在真實環(huán)境中的感知能力,加深沉浸感的體驗。
隨著手機等智能終端上的拍照功能越來越成熟,用戶使用手機拍照的頻率越來越高,增強現(xiàn)實功能也開始慢慢集成到手機等智能終端上。
在現(xiàn)有拍照過程中,現(xiàn)有增強現(xiàn)實技術(shù)只是簡單地將特定的增強現(xiàn)實內(nèi)容疊加到現(xiàn)實圖像中,提供的增強現(xiàn)實內(nèi)容與用戶的需求匹配度較低,無法滿足用戶的需求。
技術(shù)實現(xiàn)要素:
本發(fā)明實施例提出一種增強現(xiàn)實的處理方法、裝置及移動終端,以實現(xiàn)根據(jù)用戶心情提供相應(yīng)的增強現(xiàn)實內(nèi)容,提高增強現(xiàn)實內(nèi)容與用戶需求的匹配度,滿足用戶需求。
第一方面,本發(fā)明實施例提供了一種增強現(xiàn)實的處理方法,包括:
獲取現(xiàn)實圖像中的目標(biāo)對象;
確定用戶的心情的類別;
根據(jù)所述用戶的心情的類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。
第二方面,本發(fā)明實施例還提供了一種增強現(xiàn)實的處理裝置,包括:
目標(biāo)對象獲取單元,用于獲取現(xiàn)實圖像中的目標(biāo)對象;
用戶心情確定單元,用于確定用戶的心情的類別;
增強現(xiàn)實處理單元,用于根據(jù)所述用戶的心情的類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。
第三方面,本發(fā)明實施例還提供了一種移動終端,包括第二方面提供的增強現(xiàn)實的處理裝置。
本發(fā)明實施例提供的增強現(xiàn)實的處理方法、裝置及移動終端,獲取現(xiàn)實圖像中的目標(biāo)對象,確定用戶的心情的類別,根據(jù)所述用戶的心情類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。增強現(xiàn)實處理的過程與用戶的心情關(guān)聯(lián),根據(jù)用戶心情提供相應(yīng)的增強現(xiàn)實處理,提高增強現(xiàn)實處理與用戶需求的匹配度,滿足用戶需求。
附圖說明
圖1是本發(fā)明實施例一提供的一種增強現(xiàn)實的處理方法的流程示意圖;
圖2是本發(fā)明實施例二提供的一種增強現(xiàn)實的處理方法的流程示意圖;
圖3是本發(fā)明實施例三提供的一種增強現(xiàn)實的處理方法的流程示意圖;
圖4a是本發(fā)明實施例四提供的一種增強現(xiàn)實的處理方法的流程示意圖;
圖4b-圖4e是本發(fā)明實施例四提供的在拍照過程中使用增強現(xiàn)實的處理方法對圖像處理的示意圖;
圖5a是本發(fā)明實施例五提供的一種增強現(xiàn)實的處理方法的流程示意圖;
圖5b-圖5d是本發(fā)明實施例五提供的在拍照過程中使用增強現(xiàn)實的處理方法對圖像處理的示意圖;
圖6是本發(fā)明實施例六提供的一種增強現(xiàn)實的處理裝置的結(jié)構(gòu)示意圖。
具體實施方式
下面結(jié)合附圖并通過具體實施方式來進一步說明本發(fā)明的技術(shù)方案??梢岳斫獾氖牵颂幩枋龅木唧w實施例僅僅用于解釋本發(fā)明,而非對本發(fā)明的限定。另外還需要說明的是,為了便于描述,附圖中僅示出了與本發(fā)明相關(guān)的部分而非全部結(jié)構(gòu)。
在更加詳細地討論示例性實施例之前應(yīng)當(dāng)提到的是,一些示例性實施例被描述成作為流程圖描繪的處理或方法。雖然流程圖將各項步驟描述成順序的處理,但是其中的許多步驟可以被并行地、并發(fā)地或者同時實施。此外,各項步驟的順序可以被重新安排。當(dāng)其步驟完成時所述處理可以被終止,但是還可以具有未包括在附圖中的附加步驟。所述處理可以對應(yīng)于方法、函數(shù)、規(guī)程、子例程、子程序等等。
實施例一
圖1是本發(fā)明實施例一提供的一種增強現(xiàn)實的處理方法的流程示意圖。該方法可以由增強現(xiàn)實的處理裝置執(zhí)行,其中該裝置可由軟件和/或硬件實現(xiàn),一般可集成在移動終端中。如圖1所示,該方法包括:
S110、獲取現(xiàn)實圖像中的目標(biāo)對象。
現(xiàn)實圖像為攝像部件拍攝到的真實現(xiàn)實世界中景象,目標(biāo)對象可以是現(xiàn)實圖像中能夠?qū)ζ溥M行增強現(xiàn)實操作的物體,也可以是用戶想要獲取其增強現(xiàn)實內(nèi)容的物體。例如,在移動終端的攝像頭開啟之后,對攝像頭取景范圍內(nèi)的目標(biāo)對象進行識別檢測,獲取識別出的目標(biāo)對象。也可以是對已拍攝完成后存儲的現(xiàn)實圖像中的目標(biāo)對象進行識別檢測,獲取識別出的目標(biāo)對象。在本實施例中,目標(biāo)對象可為現(xiàn)實圖像中的人物的圖像。
在本實施例中,移動終端也可將現(xiàn)實圖像展示給用戶,用戶從該現(xiàn)實圖像中選擇用戶想要增強的目標(biāo)對象。例如,將包含人物的現(xiàn)實圖像呈現(xiàn)給用戶,用戶點擊圖像中人物時,獲取人物的圖像信息作為目標(biāo)對象。
S120、確定用戶的心情的類別。
例如可以獲取用戶的特征信息,將特征信息傳輸至服務(wù)器,進行大數(shù)據(jù)處理確定用戶的心情。其中,用戶的特征信息可以為用戶的表情、動作和聲音等信息。用戶的心情的類別可包括正常心情、愉悅心情或者負面心情。
其中,用戶的特征信息既可以為現(xiàn)實圖像中的人物的特征信息,也可以為當(dāng)前使用移動終端拍攝現(xiàn)實圖像的用戶的特征信息。
S130、根據(jù)所述用戶的心情的類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。
在確定用戶的心情的類別之后,可以獲取與用戶的心情關(guān)聯(lián)的增強現(xiàn)實內(nèi)容,對目標(biāo)圖像進行增強現(xiàn)實處理。增強現(xiàn)實過程可以是對目標(biāo)對象進行二維或三維渲染,也可是將增強現(xiàn)實內(nèi)容與目標(biāo)對象進行疊加或者混合,還可以是將增強現(xiàn)實內(nèi)容融合到現(xiàn)實圖像的場景中。例如在確定用戶的心情比較愉悅時,可以獲取與愉悅心情關(guān)聯(lián)的增強現(xiàn)實內(nèi)容,對目標(biāo)對象進行增強處理。例如在確定用戶的心情比較愉悅時,可以獲取具有陽光特效的增強現(xiàn)實內(nèi)容,將該增現(xiàn)實內(nèi)融合到現(xiàn)實圖像中。
本實施例提供的技術(shù)方案,獲取現(xiàn)實圖像中的目標(biāo)對象,確定用戶的心情的類別,根據(jù)所述用戶的心情的類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。增強現(xiàn)實處理與用戶的心情關(guān)聯(lián),根據(jù)用戶心情獲取相應(yīng)的增強現(xiàn)實內(nèi)容,提高增強現(xiàn)實處理與用戶需求的匹配度,滿足用戶需求。
實施例二
圖2是本發(fā)明實施例二提供的增強現(xiàn)實的處理方法的流程示意圖。本實施例以上述實施例一為基礎(chǔ)進行優(yōu)化,參見圖2,本實施例提供的增強現(xiàn)實的處理方法包括:
S210、獲取現(xiàn)實圖像中的目標(biāo)對象。
S220、獲取所述現(xiàn)實圖像中的用戶的特征信息。
所述用戶的特征信息包括用戶的臉部特征信息、肢體特征信息、語音特征信息、和生物特征信息中的至少一種信息。
S230、根據(jù)所述用戶的特征信息確定用戶的心情的類別。
具體地,識別出現(xiàn)實圖像中的人物圖像,獲取該人物的臉部特征信息和肢體特征信息,或者通過語音識別識別獲取現(xiàn)實圖像中的人物的語音特征之后,將該人物的臉部特征信息、肢體特征信息、語音特征信息或者生物特征信息與預(yù)設(shè)臉部特征信息、預(yù)設(shè)肢體特征信息或者預(yù)設(shè)語音特征信息進行匹配,確定用戶的心情的類別。
例如獲取到用戶的肢體特性信息后,識別出用戶正在擺出“剪刀手”的造型,可以確定用戶的心情比較愉悅。例如獲取到用戶的語音中包含歌詞信息時,一般可確定用戶的心情比較愉悅。
S240、根據(jù)所述用戶的心情的類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。
在本實施例的另一種實施方式中,還可以獲取當(dāng)前拍照用戶的特征信息;根據(jù)所述當(dāng)前拍照用戶的特征信息確定用戶的心情。例如通過前置攝像頭獲取當(dāng)前拍照用戶的臉部特征信息和肢體特征信息,通過語音輸入獲取語音特征信息。
即獲取當(dāng)前拍照用戶的特征信息,確定當(dāng)前拍照用戶的心情。可以確保與當(dāng)前用戶拍出與其心情匹配的圖像。當(dāng)前用戶可以根據(jù)其心情拍攝出與其心情符合的圖像。
在本實施例的另一種實施方式中,還可以根據(jù)用戶的輸入信息確定用戶的心情的類別。例如,在移動終端界面向用戶提供輸入關(guān)鍵詞的對話框,當(dāng)用戶輸入“開心”、愉悅等詞匯時候,可以確定用戶的心情為愉悅心情,當(dāng)用戶輸入“煩躁”、“傷心”等詞匯的時候,可以確定用戶的心情為負面心情。當(dāng)用戶想要拍攝出與心情的類別關(guān)聯(lián)的增強現(xiàn)實圖像時,可以輸入相應(yīng)的信息,移動終端根據(jù)用戶輸入的信息確定用戶的心情類別,并根據(jù)用戶的心情對目標(biāo)對象進行增強現(xiàn)實處理。
本實施例提供的技術(shù)方案,通過獲取現(xiàn)實圖像中人物的特征信息、獲取當(dāng)前拍照用戶的特征信息或者根據(jù)用戶的輸入信息,確定用戶的心情的類別,獲取與用戶心情關(guān)聯(lián)的增強現(xiàn)實內(nèi)容,使用該增強現(xiàn)實內(nèi)容增強目標(biāo)對象。可以準(zhǔn)確地確定用戶的心情,并根據(jù)用戶的心情對現(xiàn)實圖像進行增強現(xiàn)實處理,可以提高拍照圖像與用戶需求的匹配程度,提高用戶體驗。
實施例三
圖3是本發(fā)明實施例三提供的增強現(xiàn)實的處理方法的流程示意圖。本實施例以上述實施例一為基礎(chǔ)進行優(yōu)化,參見圖3,本實施例提供的增強現(xiàn)實的處理方法包括:
S310、獲取現(xiàn)實圖像中的目標(biāo)對象。
S320、確定用戶的心情的類別。
其中,所述用戶的心情的類別包括正常心情、愉悅心情或者負面心情。
移動終端本地或者服務(wù)器存儲有用戶當(dāng)前的心情以及用戶心情的類別,獲取用戶的特征信息之后,可以根據(jù)用戶的特征信息確定用戶心情的類別。
S330、在所述心情的類別為非正常心情時,獲取與所述用戶的心情以及所述目標(biāo)對象關(guān)聯(lián)的增強現(xiàn)實內(nèi)容。
其中,負面心情可以是心情低落或者生氣、憤怒時的狀態(tài)。在用戶的心情為愉悅心情或者負面心情時,獲取相應(yīng)的增強現(xiàn)實內(nèi)容,對目標(biāo)對象進行增強。在用戶的心情為正常心情時,對目標(biāo)對象不進行增強現(xiàn)實的操作。
S340、使用所述增強現(xiàn)實內(nèi)容對所述目標(biāo)對象進行增強現(xiàn)實處理。
例如可以將增強現(xiàn)實內(nèi)容的對目標(biāo)對象進行渲染、將增強現(xiàn)實內(nèi)容疊加得到目標(biāo)對象的場景中或者使用增強現(xiàn)實內(nèi)容替換目標(biāo)對象等。
本實施例提供的技術(shù)方案,通過確定用戶心情的類別,根據(jù)用戶心情的類別確定是否對目標(biāo)對象進行增強現(xiàn)實操作,可以實現(xiàn)在用戶心情愉悅或者心情低落時,對目標(biāo)對象進行增強現(xiàn)實處理,提高用戶使用增強現(xiàn)實功能的體驗。
實施例四
圖4a是本發(fā)明實施例四提供的增強現(xiàn)實的處理方法的流程示意圖。本實施例以上述實施例三為基礎(chǔ)進行優(yōu)化,參見圖4a,本實施例提供的增強現(xiàn)實的處理方法包括:
S410、獲取現(xiàn)實圖像中的目標(biāo)對象。
S420、確定用戶的心情的類別。
其中,所述用戶的心情的類別包括正常心情、愉悅心情或者負面心情。
S430、在所述心情的類別為非正常心情時,基于所述目標(biāo)對象,獲取與用戶的心情的愉悅程度或者負面程度匹配的增強現(xiàn)實內(nèi)容。
在確定用戶的心情為愉悅心情或者負面心情之后,可確定用戶心情的愉悅程度或者負面程度。例如可以識別出用戶的表情,根據(jù)用戶的表情是微笑還是大笑確定用戶心情的愉悅程度;根據(jù)用戶的動作幅度的大小確定用戶愉悅的程度。根據(jù)用戶的哭聲的分貝大小確定用戶心情的負面程度;根據(jù)用戶的表情確定用戶的憤怒程度??梢酝ㄟ^預(yù)先在服務(wù)器建立用戶表情、動作、語言內(nèi)容、和語言大小等與用戶心情的愉悅程度或者負面程度的對應(yīng)關(guān)系。
確定用戶的心情愉悅程度或者負面程度之后,獲取與用戶的心情的愉悅程度或者負面程度匹配的增強現(xiàn)實內(nèi)容。
S440、使用所述增強現(xiàn)實內(nèi)容對所述目標(biāo)對象進行增強現(xiàn)實處理。
示例性的用戶打開拍照軟件后進入拍照模式,圖4b和圖4c是通過移動終端攝像頭獲取到的兩個現(xiàn)實圖像,獲取的目標(biāo)對象為圖像中的人物,通過識別該人物的表情和/或動作確定用戶的心情為負面心情??梢钥吹綀D4b中人物的負面心情的負面程度大于圖4c中人物的負面心情的負面程度。基于目標(biāo)對象,獲取與用戶的心情的愉悅程度或者負面程度匹配的增強現(xiàn)實內(nèi)容,對應(yīng)圖4b,獲取的增強現(xiàn)實內(nèi)容為下雨場景,對于圖4c,獲取的增強現(xiàn)實內(nèi)容為烏云場景。使用相應(yīng)的增強場景形成的增強后的圖像分別如圖4d和圖4e所示。
本發(fā)明實施例提供的技術(shù)方案,獲取現(xiàn)實圖像中的目標(biāo)對象,確定用戶的心情的類別,基于目標(biāo)對象,獲取與用戶的心情的愉悅程度或者負面程度匹配的增強現(xiàn)實內(nèi)容,使用所述增強現(xiàn)實內(nèi)容對所述目標(biāo)對象進行增強現(xiàn)實處理??梢愿鶕?jù)用戶的心情對增強現(xiàn)實進行程度控制,根據(jù)用戶開心或者不開心的程度向用戶提供不同的增強現(xiàn)實效果的圖像,提高用戶體驗。
實施例五
圖5a是本發(fā)明實施例五提供的增強現(xiàn)實的處理方法的流程示意圖。本實施例以上述實施例三為基礎(chǔ)進行優(yōu)化,參見圖5a,本實施例提供的增強現(xiàn)實的處理方法包括:
S510、獲取現(xiàn)實圖像中的目標(biāo)對象。
S520、確定用戶的心情的類別。
其中,所述用戶的心情的類別包括正常心情、愉悅心情或者負面心情。
S530、在所述心情的類別為非正常心情時,獲取與所述用戶的心情以及所述目標(biāo)對象關(guān)聯(lián)的多個增強現(xiàn)實內(nèi)容。
在確定用戶的心情為愉悅心情或者負面心情之后,可以獲取與用戶的心情以及目標(biāo)對象關(guān)聯(lián)的多個增強現(xiàn)實內(nèi)容。例如,獲取的目標(biāo)對象為現(xiàn)實圖像中的用戶,確定用戶的心情為愉悅心情,此時可以獲取與用戶的心情以及目標(biāo)對象關(guān)聯(lián)的多個增強現(xiàn)實內(nèi)容,獲取的增強現(xiàn)實內(nèi)容可以為太陽、彩虹等內(nèi)容。
S540、每次選擇所述多個增強現(xiàn)實內(nèi)容中至少一個對所述目標(biāo)對象進行增強現(xiàn)實處理以形成多個增強后的圖像。
對目標(biāo)對象進行增強現(xiàn)實處理可以將增強現(xiàn)實內(nèi)容的對目標(biāo)對象進行渲染、將增強現(xiàn)實內(nèi)容疊加得到目標(biāo)對象的場景中或者使用增強現(xiàn)實內(nèi)容替換目標(biāo)對象等處理。
例如獲取的多個對象中為太陽、彩虹、白云時,可以選擇太陽疊加至現(xiàn)實圖像形成第一個增強后的圖像,選擇太陽和彩虹疊加至現(xiàn)實圖像形成第二個增強后的圖像,選擇太陽、彩虹和白云疊加至現(xiàn)實圖像形成第三個增強后的圖像。其中,在現(xiàn)實圖像中疊加的增強現(xiàn)實內(nèi)容越多,對現(xiàn)實圖像的增強效果越強。
示例性的,用戶打開拍照軟件后進入拍照模式,圖5b是通過移動終端攝像頭獲取到的現(xiàn)實圖像,獲取目標(biāo)對象為圖像中的人物,通過識別該人物的表情和/或動作確定用戶的心情為愉悅心情。獲取與用戶的心情以及目標(biāo)對象關(guān)聯(lián)的兩個增強現(xiàn)實內(nèi)容,兩個增強現(xiàn)實內(nèi)容分別為太陽和彩虹。選擇彩虹疊加至現(xiàn)實圖像形成如圖5c所示的圖像,選擇太陽和彩虹疊加至現(xiàn)實圖像形成如圖5d所示的圖像。
S550、將所述形成的多個增強后的圖像顯示;
可以將形成的多個增強后的圖像同時顯示,供用戶選擇。
S560、保存用戶從所述形成的多個增強后的圖像中選擇的圖像。
當(dāng)用戶選擇顯示多個增強后的圖像中的一個或者多個時,將用戶選擇的圖像保存。
本發(fā)明實施例提供的技術(shù)方案,在獲取與用戶的心情以及目標(biāo)對象關(guān)聯(lián)的多個增強現(xiàn)實內(nèi)容,每次選擇多個增強現(xiàn)實內(nèi)容中至少一個對所述目標(biāo)對象進行增強現(xiàn)實處理以形成多個增強后的圖像,可以形成多個不同增強程度效果的圖像,用戶可以從增強處理后的圖像中選擇自己喜歡的圖像,并將用戶選擇的增強圖像保存,提高提供的增強現(xiàn)實內(nèi)容與用戶需求的匹配程度,提高用戶體驗。
實施例六
圖6是本發(fā)明實施例六提供的增強現(xiàn)實的處理裝置的結(jié)構(gòu)示意圖,該裝置可由軟件和/或硬件實現(xiàn),一般集成在移動終端中,可通過執(zhí)行增強現(xiàn)實的處理方法來實現(xiàn)。參見圖6,該裝置包括:
目標(biāo)對象獲取單元610,用于獲取現(xiàn)實圖像中的目標(biāo)對象;
用戶心情確定單元620,用于確定用戶的心情的類別;
增強現(xiàn)實處理單元630,用于根據(jù)所述用戶的心情的類別,對所述目標(biāo)對象進行增強現(xiàn)實處理。
進一步的,所述用戶心情確定單元620包括:
第一特征信息獲取子單元621,用于獲取所述現(xiàn)實圖像中的用戶的特征信息;
第一用戶心情確定子單元622,用于根據(jù)所述用戶的特征信息確定用戶的心情的類別。
進一步的,所述用戶心情確定單元620包括:
第二特征信息獲取子單元623,用于獲取當(dāng)前拍照用戶的特征信息;
第二用戶心情確定子單元624,用于根據(jù)所述當(dāng)前拍照用戶的特征信息確定用戶的心情的類別。
其中,所述用戶的特征信息包括用戶的臉部特征信息、肢體特征信息、語音特征信息、和生物特征信息中的至少一種信息。
進一步的,所述用戶心情確定單元620具體用于:
根據(jù)用戶的輸入信息確定用戶的心情的類別。
進一步的,所述增強現(xiàn)實處理單元630包括:
增強現(xiàn)實內(nèi)容獲取子單元631,用于在所述心情的類別為非正常心情時,獲取與所述用戶的心情以及所述目標(biāo)對象關(guān)聯(lián)的增強現(xiàn)實內(nèi)容;
圖像增強子單元632,用于使用所述增強現(xiàn)實內(nèi)容對所述目標(biāo)對象進行增強現(xiàn)實處理;
其中,所述用戶的心情的類別包括正常心情、愉悅心情或者負面心情。
進一步的,所述增強現(xiàn)實內(nèi)容獲取子單元631用于:
基于所述目標(biāo)對象,獲取與用戶的心情的愉悅程度或者負面程度匹配的增強現(xiàn)實內(nèi)容。
進一步的,所述增強現(xiàn)實內(nèi)容獲取子單元631用于:
獲取與所述用戶的心情以及所述目標(biāo)對象關(guān)聯(lián)的多個增強現(xiàn)實內(nèi)容;
所述圖像增強子單元632用于:
每次選擇所述多個增強現(xiàn)實內(nèi)容中至少一個對所述目標(biāo)對象進行增強現(xiàn)實處理以形成多個增強后的圖像。
進一步的,所述裝置還包括:
圖像顯示單元640,用于在所述使用所述增強現(xiàn)實內(nèi)容對所述目標(biāo)對象進行增強現(xiàn)實處理之后,將所述形成的多個增強后的圖像顯示;
圖像保存單元650,用于保存用戶從所述形成的多個增強后的圖像中選擇的圖像。
上述裝置可執(zhí)行本發(fā)明任意實施例所提供增強現(xiàn)實的處理方法,具備執(zhí)行上述方法相應(yīng)的功能模塊和有益效果。未在本實施例中詳盡描述的技術(shù)細節(jié),可參見本發(fā)明實施例所提供的方法。
另外,本發(fā)明實施例還提供了一種移動終端,包括本發(fā)明實施例六所提供的裝置,能夠執(zhí)行本發(fā)明任意實施例所提供的方法。
注意,上述僅為本發(fā)明的較佳實施例及所運用技術(shù)原理。本領(lǐng)域技術(shù)人員會理解,本發(fā)明不限于這里所述的特定實施例,對本領(lǐng)域技術(shù)人員來說能夠進行各種明顯的變化、重新調(diào)整和替代而不會脫離本發(fā)明的保護范圍。因此,雖然通過以上實施例對本發(fā)明進行了較為詳細的說明,但是本發(fā)明不僅僅限于以上實施例,在不脫離本發(fā)明構(gòu)思的情況下,還可以包括更多其他等效實施例,而本發(fā)明的范圍由所附的權(quán)利要求范圍決定。