一種基于用戶語義的圖像處理方法
【專利摘要】本發(fā)明公開了一種基于用戶語義的圖像處理方法，其通過預(yù)先搜集訓(xùn)練圖像及濾鏡方案，并對訓(xùn)練圖像進(jìn)行分類和對濾鏡方案進(jìn)行標(biāo)注語義的設(shè)置，圖像處理時只需用戶選擇待處理的原始圖像及輸入效果語義，服務(wù)器即可根據(jù)接收的原始圖像和效果語義智能提供對應(yīng)的濾鏡方案并將經(jīng)過濾鏡處理后的效果圖返回給用戶，操作方便，為用戶節(jié)約了寶貴的時間和精力。
【專利說明】—種基于用戶語義的圖像處理方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種圖像處理方法，特別是一種基于用戶語義的圖像處理方法。
【背景技術(shù)】
[0002]日常生活中，我們在分享圖像前經(jīng)常要對圖像進(jìn)行處理，而現(xiàn)在的圖像處理軟件都是需要用戶自己去調(diào)整細(xì)節(jié)，還沒有完全智能地為用戶挑選適合的效果進(jìn)行處理，而且用戶也會因?yàn)樾Ч^多而導(dǎo)致花費(fèi)大量的時間與精力去選擇與對比。還有，現(xiàn)在的圖像處理軟件里的效果都是預(yù)先設(shè)定好的，能滿足大部分情況，但是不能滿足一些特殊情況，例如用戶心情不好的時候，需要的可能就是一些比較傷感的效果。用戶過年過節(jié)的時候，需要的可能就是一些比較喜慶的元素。

【發(fā)明內(nèi)容】

[0003]本發(fā)明為解決上述問題，提供了一種基于用戶語義的圖像處理方法，其能夠根據(jù)用戶選擇的待處理圖像及輸入的效果語義智能提供濾鏡方案，為用戶節(jié)約寶貴的時間和精力。
[0004]為實(shí)現(xiàn)上述目的，本發(fā)明采用的技術(shù)方案為:
[0005]一種基于用戶語義的圖像處理方法，其特征在于，包括以下步驟:
[0006]10.搜集訓(xùn)練圖像及濾鏡方案，并保存至服務(wù)器；
[0007]20.對訓(xùn)練圖像進(jìn)行分類，對濾鏡方案進(jìn)行標(biāo)注語義的設(shè)置，并將圖像類別與濾鏡方案相匹配；
[0008]30.選擇待處理的原始圖像，并輸入要進(jìn)行的圖像處理的效果語義；
[0009]40.將選擇的原始圖像和輸入的效果語義上傳至服務(wù)器，服務(wù)器根據(jù)接收的原始圖像和效果語義進(jìn)行分析，得到與濾鏡方案的標(biāo)注語義相匹配的最終效果語義；
[0010]50.服務(wù)器根據(jù)原始圖像及最終效果語義進(jìn)行圖像類別的分析，并將分析完成的原始圖像的圖像類別所對應(yīng)的濾鏡方案作用于原始圖像并返回給用戶；
[0011]60.用戶接收經(jīng)過濾鏡處理后的圖像，保存為結(jié)果圖像。
[0012]優(yōu)選的，所述的步驟30中選擇的原始圖像為一張或一張以上，若原始圖像為一張以上時，所述的步驟40中各個原始圖像分別進(jìn)行圖像類別的分析。
[0013]優(yōu)選的，所述的標(biāo)注語義或最終效果語義包括以下類別的一種或多種:心情類語義、環(huán)境類語義、圖像主體類語義。
[0014]優(yōu)選的，所述的心情類語義包括以下詞匯或其同義詞、近義詞中的一種或多種:喜、怒、憂、思、悲、恐、驚。
[0015]優(yōu)選的，所述的環(huán)境類語義包括圖像的背景場所、天氣情況，其中背景場所包括以下場所的一種:公司、家、體育場、球館、演唱會、酒吧；天氣情況包括以下天氣的一種:下雨、下雪、晴天、陰天、霧天。
[0016]優(yōu)選的，所述的圖像主體類語義包括食物、人、車、建筑物、景物或?qū)櫸?。[0017]優(yōu)選的，所述的步驟40中服務(wù)器根據(jù)接收的原始圖像和效果語義進(jìn)行分析，得到與濾鏡方案的標(biāo)注語義相匹配的最終效果語義，主要是利用對詞語進(jìn)行詞的提取，并根據(jù)提取的內(nèi)容規(guī)劃各種語義類型。
[0018]優(yōu)選的，所述的步驟50中服務(wù)器根據(jù)原始圖像及最終效果語義進(jìn)行圖像類別的分析，主要是根據(jù)最終效果語義對原始圖像的類別進(jìn)行初步確定，然后再提取原始圖像中的組成因素進(jìn)一步確定其圖像類別。
[0019]優(yōu)選的，所述的原始圖像的組成因素包括:圖像的主體、圖像的色調(diào)、圖像的光線。
[0020]優(yōu)選的，所述的步驟40里的濾鏡方案的處理步驟包括以下一種或一種以上的組合操作:曲線處理、色階處理、亮度對比度處理、飽和度處理、模糊處理、可選顏色處理、素材混合處理、閾值處理、陰影高光處理、色彩平衡處理、曝光度處理。
[0021]優(yōu)選的，所述的步驟50中將分析完成的原始圖像的圖像類別及其對應(yīng)的濾鏡方案作用于原始圖像生成效果圖，并將效果圖返回給用戶。
[0022]本發(fā)明的有益效果是:
[0023]本發(fā)明的一種基于用戶語義的圖像處理方法，其通過預(yù)先搜集訓(xùn)練圖像及濾鏡方案，并對訓(xùn)練圖像進(jìn)行分類和對濾鏡方案進(jìn)行標(biāo)注語義的設(shè)置，圖像處理時只需用戶選擇待處理的原始圖像及輸入效果語義，服務(wù)器即可根據(jù)接收的原始圖像和效果語義智能提供對應(yīng)的濾鏡方案，并將經(jīng)過濾鏡處理后的效果圖返回給用戶，操作方便，為用戶節(jié)約了寶貴的時間和精力。
【專利附圖】

【附圖說明】
[0024]此處所說明的附圖用來提供對本發(fā)明的進(jìn)一步理解，構(gòu)成本發(fā)明的一部分，本發(fā)明的示意性實(shí)施例及其說明用于解釋本發(fā)明，并不構(gòu)成對本發(fā)明的不當(dāng)限定。在附圖中:
[0025]圖1為本發(fā)明一種基于用戶語義的圖像處理方法的流程簡圖；
[0026]圖2為本發(fā)明一實(shí)施例中待處理的原始圖像；
[0027]圖3為圖2原始圖像基于用戶語義的圖像處理后的結(jié)果圖像。
【具體實(shí)施方式】
[0028]為了使本發(fā)明所要解決的技術(shù)問題、技術(shù)方案及有益效果更加清楚、明白，以下結(jié)合附圖及實(shí)施例對本發(fā)明進(jìn)行進(jìn)一步詳細(xì)說明。應(yīng)當(dāng)理解，此處所描述的具體實(shí)施例僅用以解釋本發(fā)明，并不用于限定本發(fā)明。
[0029]如圖1所示，本發(fā)明的一種基于用戶語義的圖像處理方法，其包括以下步驟:
[0030]10.搜集訓(xùn)練圖像及濾鏡方案，并保存至服務(wù)器；
[0031]20.對訓(xùn)練圖像進(jìn)行分類，對濾鏡方案進(jìn)行標(biāo)注語義的設(shè)置，并將圖像類別與濾鏡方案相匹配；
[0032]30.選擇待處理的原始圖像，并輸入要進(jìn)行的圖像處理的效果語義；
[0033]40.將選擇的原始圖像和輸入的效果語義上傳至服務(wù)器，服務(wù)器根據(jù)接收的原始圖像和效果語義進(jìn)行分析，得到與濾鏡方案的標(biāo)注語義相匹配的最終效果語義；
[0034]50.服務(wù)器根據(jù)原始圖像及最終效果語義進(jìn)行圖像類別的分析，并將分析完成的原始圖像的圖像類別所對應(yīng)的濾鏡方案作用于原始圖像并返回給用戶；[0035]60.用戶接收經(jīng)過濾鏡處理后的圖像，保存為結(jié)果圖像。
[0036]在完成上述步驟后，還可增加一詢問步驟，詢問用戶是否將結(jié)果圖像添加至服務(wù)器的訓(xùn)練圖像的數(shù)據(jù)庫中；此處的服務(wù)器為遠(yuǎn)程服務(wù)器。
[0037]本實(shí)施例中，所述的步驟30中選擇的原始圖像為一張或一張以上，若原始圖像為一張以上時，所述的步驟40中各個原始圖像分別進(jìn)行圖像類別的分析。
[0038]上述的標(biāo)注語義或最終效果語義包括以下類別的一種或多種:心情類語義、環(huán)境類語義、圖像主 體類語義；其中，心情類語義包括以下詞匯或其同義詞、近義詞中的一種或多種:喜、怒、憂、思、悲、恐、驚；環(huán)境類語義包括圖像的背景場所、天氣情況，其中背景場所包括以下場所的一種:公司、家、體育場、球館、演唱會、酒吧；天氣情況包括以下天氣的一種:下雨、下雪、晴天、陰天、霧天；圖像主體類語義包括食物、人、車、建筑物、景物或?qū)櫸?。例?“我在酒吧，好high ! ”這段語義就包括了主體是人物，環(huán)境是酒吧，心情是很開心，興奮；“心情壓抑時，來個甜品補(bǔ)充下能量！ ”這段語義就包括了主體是食物甜品、心情是壓抑的，不開心的；“廈門天氣好好”這段語義就包括了當(dāng)前的天氣情況是晴天，地點(diǎn)是廈門。上述僅列舉了部分語義，還可包括其同義詞或近義詞等。
[0039]本實(shí)施例中，所述的步驟40中服務(wù)器根據(jù)接收的原始圖像和效果語義進(jìn)行分析，得到與濾鏡方案的標(biāo)注語義相匹配的最終效果語義，主要是利用對詞語進(jìn)行詞的提取，并根據(jù)提取的內(nèi)容規(guī)劃各種語義類型；所述的步驟50中服務(wù)器根據(jù)原始圖像及最終效果語義進(jìn)行圖像類別的分析，主要是根據(jù)最終效果語義對原始圖像的類別進(jìn)行初步確定，然后再提取原始圖像中的組成因素進(jìn)一步確定其圖像類別。
[0040]所述的原始圖像的組成因素包括:圖像的主體、圖像的色調(diào)、圖像的光線。
[0041]其中，圖像的主體可以通過顯著性檢測對圖像進(jìn)行主體的提取，然后通過深度學(xué)習(xí)模糊卷積神經(jīng)網(wǎng)絡(luò)的方法判斷其主體，例如:人、動物、食物、建筑物、景物等。所述的卷積神經(jīng)網(wǎng)絡(luò)(Convolutional Neural Networks,簡稱CNN)是近年來廣泛應(yīng)用于模式識別、圖像處理等領(lǐng)域的一種高效識別算法，它具有結(jié)構(gòu)簡單、訓(xùn)練參數(shù)少和適應(yīng)性強(qiáng)等特點(diǎn)，它是通過直接作用于輸入樣本，用樣本來訓(xùn)練網(wǎng)絡(luò)并最終實(shí)現(xiàn)檢測任務(wù)的，可以省去傳統(tǒng)方法中建模、參數(shù)估計(jì)以及參數(shù)檢驗(yàn)、重建模型等的一系列復(fù)雜過程。
[0042]圖像的色調(diào)包括整體主色調(diào)、主體主色調(diào)、環(huán)境主色調(diào)等；整體主色調(diào)可以通過對圖像的所有顏色進(jìn)行分布統(tǒng)計(jì)，得到最多的顏色區(qū)域，并從該顏色區(qū)域中獲取最主要的顏色作為整體主色調(diào)，主體主色調(diào)即在主體區(qū)域中進(jìn)行計(jì)算，環(huán)境主色調(diào)即在主體以外的區(qū)域進(jìn)行計(jì)算。
[0043]濾鏡方案的處理步驟包括以下一種或一種以上的組合操作:曲線處理、色階處理、亮度對比度處理、飽和度處理、模糊處理、可選顏色處理、素材混合處理、閾值處理、陰影高光處理、色彩平衡處理、曝光度處理。
[0044]圖像的光線包括光線的類別及光線的方向等；光線的類別包括環(huán)境光、主體光、整體光等；環(huán)境光即表示主體區(qū)域以外的平均顏色，主體光為主體區(qū)域的平均顏色，整體光為整張圖像的平均顏色；光線的方向主要是指主體在圖像中所處的光線情況，例如順光、逆光、太陽直射光等。
[0045]所述的步驟50中將分析完成的原始圖像的圖像類別及其對應(yīng)的濾鏡方案作用于原始圖像生成效果圖，并將效果圖返回給用戶。具體為:根據(jù)原始圖像中的組成因素確定其圖像類別，例如根據(jù)原始圖像的主體、光線、色調(diào)等因素對圖像進(jìn)行適合的效果處理，提供與該圖像類別相對應(yīng)的濾鏡方案，并將經(jīng)過濾鏡處理后的效果圖返回給用戶；例如:主體是人時，我們就會對圖像進(jìn)行磨皮美白處理；主體光線不足時，我們就會對圖像進(jìn)行補(bǔ)光處理；過年過節(jié)時，我們就會為圖像添加喜慶的邊框或者素材因素；心情不好時，我們就會對圖像進(jìn)行各種傷感效果的處理，如圖2及圖3所示，圖2為待處理的原始圖像，當(dāng)用戶輸入的效果語義為“心情不好，來個甜品”時，這段語義包括了主體是甜品，心情是不開心的，因此服務(wù)器將提供比較傷感的濾鏡方案對圖2進(jìn)行處理，例如原來的顏色較為鮮艷時，處理為較暗淡的效果，或增加其它傷感因素，例如下雨天，得到處理后的圖3。
[0046]上述說明示出并描述了本發(fā)明的優(yōu)選實(shí)施例，應(yīng)當(dāng)理解本發(fā)明并非局限于本文所披露的形式，不應(yīng)看作是對其他實(shí)施例的排除，而可用于各種其他組合、修改和環(huán)境，并能夠在本文發(fā)明構(gòu)想范圍內(nèi)，通過上述教導(dǎo)或相關(guān)領(lǐng)域的技術(shù)或知識進(jìn)行改動。而本領(lǐng)域人員所進(jìn)行的改動和變化不脫離本發(fā)明的精神和范圍，則都應(yīng)在本發(fā)明所附權(quán)利要求的保護(hù)范圍內(nèi)。
【權(quán)利要求】
1.一種基于用戶語義的圖像處理方法，其特征在于，包括以下步驟: 10.搜集訓(xùn)練圖像及濾鏡方案，并保存至服務(wù)器； 20.對訓(xùn)練圖像進(jìn)行分類，對濾鏡方案進(jìn)行標(biāo)注語義的設(shè)置，并將圖像類別與濾鏡方案相匹配； 30.選擇待處理的原始圖像，并輸入要進(jìn)行的圖像處理的效果語義； 40.將選擇的原始圖像和輸入的效果語義上傳至服務(wù)器，服務(wù)器根據(jù)接收的原始圖像和效果語義進(jìn)行分析，得到與濾鏡方案的標(biāo)注語義相匹配的最終效果語義； 50.服務(wù)器根據(jù)原始圖像及最終效果語義進(jìn)行圖像類別的分析，并將分析完成的原始圖像的圖像類別所對應(yīng)的濾鏡方案作用于原始圖像并返回給用戶； 60.用戶接收經(jīng)過濾鏡處理后的圖像，保存為結(jié)果圖像。
2.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的步驟30中選擇的原始圖像為一張或一張以上，若原始圖像為一張以上時，所述的步驟40中各個原始圖像分別進(jìn)行圖像類別的分析。
3.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的標(biāo)注語義或最終效果語義包括以下類別的一種或多種:心情類語義、環(huán)境類語義、圖像主體類語義。
4.根據(jù)權(quán)利要求3所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的心情類語義包括以下詞匯或其同義詞、近義詞中的一種或多種:喜、怒、憂、思、悲、恐、驚。
5.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的環(huán)境類語義包括圖像的背景場所、天氣情況，其中背景場所包括以下場所的一種:公司、家、體育場、球館、演唱會、酒吧；天氣情況包括以下天氣的一種:下雨、下雪、晴天、陰天、霧天。
6.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的圖像主體類語義包括食物、人、車、建筑物、景物或?qū)櫸铩?br> 7.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的步驟40中服務(wù)器根據(jù)接收的原始圖像和效果語義進(jìn)行分析，得到與濾鏡方案的標(biāo)注語義相匹配的最終效果語義，主要是利用對詞語進(jìn)行詞的提取，并根據(jù)提取的內(nèi)容規(guī)劃各種語義類型。
8.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的步驟50中服務(wù)器根據(jù)原始圖像及最終效果語義進(jìn)行圖像類別的分析，主要是根據(jù)最終效果語義對原始圖像的類別進(jìn)行初步確定，然后再提取原始圖像中的組成因素進(jìn)一步確定其圖像類別。
9.根據(jù)權(quán)利要求8所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的原始圖像的組成因素包括:圖像的主體、圖像的色調(diào)、圖像的光線。
10.根據(jù)權(quán)利要求1至9中任一項(xiàng)所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的濾鏡方案的處理步驟包括以下一種或一種以上的組合操作:曲線處理、色階處理、亮度對比 度處理、飽和度處理、模糊處理、可選顏色處理、素材混合處理、閾值處理、陰影高光處理、色彩平衡處理、曝光度處理。
11.根據(jù)權(quán)利要求1所述的一種基于用戶語義的圖像處理方法，其特征在于:所述的步驟50中將分析完成的原始圖像的圖像類別及其對應(yīng)的濾鏡方案作用于原始圖像生成效果圖，并 將效果圖返回給用戶。
【文檔編號】G06K9/62GK103927372SQ201410168031
【公開日】2014年7月16日 申請日期:2014年4月24日 優(yōu)先權(quán)日:2014年4月24日
【發(fā)明者】張偉, 傅松林, 曹晨, 張長定 申請人:廈門美圖之家科技有限公司