本公開總體涉及計(jì)算機(jī)視覺領(lǐng)域，具體涉及圖像合成方法及設(shè)備。

背景技術(shù)：

圖像合成指的是將多幅圖像合成為一幅新的圖像，并且使合成后的圖像盡可能顯得自然真實(shí)。例如，從一幅圖像中提取出前景對(duì)象圖像(下文中簡(jiǎn)稱前景圖像)，并將其合成到另一幅背景圖像以形成一幅新的圖像就是一個(gè)典型的圖像合成。圖像合成在圖像與視頻編輯應(yīng)用中具有重要的意義，其使得用戶可以將一幅圖像中提取出的對(duì)象無縫地合成到另外一幅圖像中，因而在例如增強(qiáng)現(xiàn)實(shí)、視頻會(huì)議等需要將人或其他對(duì)象與虛擬背景進(jìn)行合成的許多場(chǎng)合中有著廣泛的應(yīng)用。

關(guān)于圖像合成，本領(lǐng)域中的常用方法包括泊松圖像編輯、顏色傳遞等。前者利用泊松方程將圖像合成問題表示為插值問題，但是利用該方法合成的圖像中可能存在顏色偏移問題。后者應(yīng)用在PhotoShop的MatchColor功能中，其通過將待合成的例如前景圖像和背景圖像的顏色直方圖的均值和方差對(duì)齊來進(jìn)行合成。但是，由于該方法將圖像的光照和反射性質(zhì)合并在一起處理，因此前景圖像會(huì)受到背景圖像的干擾而導(dǎo)致合成后的結(jié)果呈現(xiàn)不自然的效果。另一方面，通常待合成的各幅圖像是在不同的時(shí)間、地點(diǎn)、場(chǎng)景下獲得的，因而具有不同的光照條件。因此如果在圖像合成時(shí)不考慮光照問題而直接將一副圖像添加到另一幅圖像中，則由于光照條件的不一致，將導(dǎo)致生成的合成圖像有明顯的人工合成痕跡，顯得不自然不真實(shí)。本領(lǐng)域中上述的兩種常用合成方法均未能夠很好地解決這一問題。

技術(shù)實(shí)現(xiàn)要素：

鑒于以上問題而提出了本公開。

根據(jù)本公開的一個(gè)方面的實(shí)施例，提供了一種圖像合成方法，包括：獲取第一圖像和第二圖像；將第一圖像分解為第一光照?qǐng)D像和第一反射圖像； 根據(jù)第一光照?qǐng)D像將第二圖像變換為第一圖像的光照條件下的圖像；將變換后的第二圖像合成到第一圖像中。

根據(jù)本公開的另一個(gè)方面的實(shí)施例，提供了一種圖像合成設(shè)備，包括：獲取部件，配置為獲取第一圖像和第二圖像；分解部件，配置為將第一圖像分解為第一光照?qǐng)D像和第一反射圖像；變換部件，配置為根據(jù)第一光照?qǐng)D像將第二圖像變換為第一圖像的光照條件下的圖像；合成部件，配置為將變換后的第二圖像合成到第一圖像中。

根據(jù)本公開的另一個(gè)方面的實(shí)施例，提供了一種圖像合成設(shè)備，包括：處理器；存儲(chǔ)器；和存儲(chǔ)在所述存儲(chǔ)器中的計(jì)算機(jī)程序指令，在所述計(jì)算機(jī)程序指令被所述處理器運(yùn)行時(shí)執(zhí)行以下步驟：獲取第一圖像和第二圖像；將第一圖像分解為第一光照?qǐng)D像和第一反射圖像；根據(jù)第一光照?qǐng)D像將第二圖像變換為第一圖像的光照條件下的圖像；將變換后的第二圖像合成到第一圖像中。

通過根據(jù)本公開的上述方面的圖像合成方法和設(shè)備，能夠?qū)⒉煌庹諚l件下的兩幅圖像合成在一起，并且使合成后的圖像呈現(xiàn)自然的效果。

附圖說明

通過結(jié)合附圖對(duì)本公開實(shí)施例進(jìn)行更詳細(xì)的描述，本公開的上述以及其它目的、特征和優(yōu)勢(shì)將變得更加明顯。附圖用來提供對(duì)本公開實(shí)施例的進(jìn)一步理解，并且構(gòu)成說明書的一部分，與本公開實(shí)施例一起用于解釋本公開，并不構(gòu)成對(duì)本公開的限制。在附圖中，相同的參考標(biāo)號(hào)通常代表相同部件或步驟。

圖1示意性地示出了根據(jù)本發(fā)明實(shí)施例的圖像合成技術(shù)的可能的應(yīng)用場(chǎng)景。

圖2示出了根據(jù)本公開實(shí)施例的圖像合成方法的流程圖。

圖3例示了示例性的背景圖像以及由該背景圖像分解得到的背景光照?qǐng)D像和背景反射圖像。

圖4示出了根據(jù)本公開實(shí)施例的、根據(jù)背景光照?qǐng)D像將前景圖像變換為背景圖像的光照條件下的圖像的處理的流程圖。

圖5例示了示例性的前景圖像以及由該前景圖像分解得到的前景光照?qǐng)D像和前景反射圖像。

圖6示出了根據(jù)本公開實(shí)施例的、根據(jù)背景光照?qǐng)D像將前景光照?qǐng)D像變換為背景圖像的光照條件下的圖像的處理的流程圖。

圖7示出了由示例的變換后的前景光照?qǐng)D像和前景反射圖像合成得到變換后的前景圖像的示例情形。

圖8示出了將示例的變換后的前景圖像合成到背景圖像中的示例情形。

圖9示出了根據(jù)本公開實(shí)施例的圖像合成設(shè)備的功能配置框圖。

圖10示出了用于實(shí)現(xiàn)根據(jù)本公開實(shí)施例的示例性圖像合成設(shè)備的計(jì)算設(shè)備框圖。

具體實(shí)施方式

下面將結(jié)合本公開實(shí)施例中的附圖，對(duì)本公開實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本公開一部分實(shí)施例，而不是全部的實(shí)施例?；诒竟_中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本公開保護(hù)的范圍。

圖1示意性地示出了根據(jù)本發(fā)明實(shí)施例的圖像合成技術(shù)的可能的應(yīng)用場(chǎng)景。如圖1所示，用戶站在攝像頭101的攝像范圍內(nèi)，該攝像頭101對(duì)用戶進(jìn)行拍攝，該攝像頭101可以是2D或3D攝像頭。諸如計(jì)算機(jī)的處理設(shè)備102對(duì)由攝像頭101拍攝的圖像進(jìn)行分析，提取前景對(duì)象，將前景對(duì)象與某一背景圖像進(jìn)行合成，生成新的合成圖像。投影儀103和投影屏幕104用于顯示目的，例如顯示器，電視等的其他顯示設(shè)備亦可作此用途。需要說明的是，圖1僅僅圖示了本發(fā)明的一種可能的應(yīng)用場(chǎng)景，根據(jù)實(shí)際情況，應(yīng)用場(chǎng)景中的裝置可以相應(yīng)地增加或減少，并具有不同的配置。

如前所述，圖像合成用于將多幅圖像合成為一幅新的圖像。在下文中，為了便于描述，以將從一副圖像中提取的前景對(duì)象的圖像(以下簡(jiǎn)稱前景圖像)與一副背景圖像合成為例，對(duì)根據(jù)本發(fā)明的圖像合成技術(shù)進(jìn)行描述，其中包含所述前景圖像的圖像和所述背景圖像是在不同的時(shí)間、地點(diǎn)和場(chǎng)景下獲得的，因而具有不同的光照條件。

下面參考圖2對(duì)根據(jù)本公開實(shí)施例的圖像合成方法進(jìn)行描述。圖2示出了根據(jù)本公開實(shí)施例的圖像合成方法的流程圖。

如圖2所示，在步驟S210，獲取前景圖像和背景圖像。

在該步驟中，可以通過任何方式獲取要合成的前景圖像和背景圖像。例 如，可以從外部輸入所述前景圖像和背景圖像，也可以拍攝得到所述前景圖像和背景圖像。

在步驟S220，將背景圖像分解為背景光照?qǐng)D像和背景反射圖像。

根據(jù)Edward Land于1986年提出的Retinex顏色恒常性理論，一幅圖像可以如表達(dá)式(1)所示被分解為光照(illumination)圖像和反射(reflectance)圖像。

I(x，y)＝S(x，y)·R(x，y) ...(1)

其中，S(x,y)表示光照?qǐng)D像，R(x,y)表示反射圖像，(x,y)為圖像中像素的坐標(biāo)。

目前，在計(jì)算機(jī)視覺領(lǐng)域中，對(duì)于圖像分解的技術(shù)已經(jīng)進(jìn)行了許多研究，并提出了許多具體的圖像分解方法。例如，Arjan Gijsenij在2011年發(fā)表的“Color constancy using Natural Image Statistics and Scene Semantics”、Nikola Banic在2013年發(fā)表的“Using the random sprays retinex algorithm for global illumination estimation”，Sean Bell在2014年發(fā)表的“Intrinsic images in the wild”等文章中均給出了具體的圖像分解方法。在本發(fā)明中，作為示例，采用Sean Bell所提出的圖像分解方法。下面僅僅是為了說明的完整，對(duì)該圖像分解方法進(jìn)行簡(jiǎn)單的介紹。

根據(jù)Sean Bell提出的方法，圖像分解即尋找最符合如下概率分布p的反射圖像R和光照?qǐng)D像S：

滿足

其中表示顏色通道c∈{r，g，b}

具體的，在Sean Bell提出的方法中，首先通過對(duì)像素顏色進(jìn)行k-means聚類，初始化反射圖像R的集合；然后，對(duì)每個(gè)像素從反射圖像R的集合中選取一個(gè)進(jìn)行標(biāo)記，使得p(R,S|I)最大化；最后，通過最小化光照?qǐng)D像S中的不連續(xù)性，調(diào)整反射圖像R。

圖3例示了示例性的背景圖像以及由該背景圖像分解得到的背景光照?qǐng)D像和背景反射圖像。能夠看到，背景圖像以及由此分解得到的背景光照?qǐng)D像、背景反射圖像具有相同的尺寸。

上述圖像分解方法僅僅是一個(gè)示例，在該步驟S220中，本領(lǐng)域技術(shù)人員 可以采用任何已知的圖像分解方法將背景圖像分解為背景光照?qǐng)D像S_BG(x,y)和背景反射圖像R_BG(x,y)。

在步驟S230，根據(jù)背景光照?qǐng)D像將前景圖像變換為背景圖像的光照條件下的圖像。下面將結(jié)合圖4對(duì)該步驟中的處理進(jìn)行詳細(xì)的描述。圖4示出了根據(jù)本公開實(shí)施例的、根據(jù)背景光照?qǐng)D像將前景圖像變換為背景圖像的光照條件下的圖像的處理的流程圖。

如圖4所示，在步驟S2301，將前景圖像分解為前景光照?qǐng)D像和前景反射圖像。

與背景圖像的分解相同，在該步驟中，可以采用本領(lǐng)域中任何已知的圖像分解方法將前景圖像分解為前景光照?qǐng)D像S_FG(x,y)和前景反射圖像R_FG(x,y)，此處不再贅述。圖5例示了示例性的前景圖像以及由該前景圖像分解得到的前景光照?qǐng)D像和前景反射圖像。

在步驟S2302，根據(jù)背景光照?qǐng)D像將前景光照?qǐng)D像變換為背景圖像的光照條件下的圖像。

作為示例，在該步驟中利用背景光照?qǐng)D像和前景光照?qǐng)D像的直方圖對(duì)前景光照?qǐng)D像進(jìn)行變換。另一方面，如前所述，前景圖像是從一副圖像中提取的前景對(duì)象的圖像，其通常僅僅是整個(gè)圖像的一部分，并且在合成時(shí)，也僅僅覆蓋背景圖像的部分區(qū)域。也就是說，被合成的前景圖像僅會(huì)受到背景圖像中局部光照條件的影響。因此，作為示例，在該步驟中，利用背景光照?qǐng)D像中局部區(qū)域的直方圖對(duì)前景光照?qǐng)D像的直方圖進(jìn)行變換。

下面將結(jié)合圖6對(duì)該步驟中的處理進(jìn)行詳細(xì)的描述。圖6示出了根據(jù)本公開實(shí)施例的、根據(jù)背景光照?qǐng)D像將前景光照?qǐng)D像變換為背景圖像的光照條件下的圖像的處理的流程圖。

在步驟S23021中，確定背景圖像中、前景圖像將被合成到其中的區(qū)域。

該步驟用于在背景圖像中定位前景圖像將要覆蓋的區(qū)域。例如，以圖4和圖5所示的前景圖像和背景圖像為例，假設(shè)前景圖像的寬度為w，高度為h，則在該步驟中在背景圖像中定位一個(gè)前景圖像將被合成到其中的寬度和高度分別為w和h的區(qū)域。

在步驟S23022，計(jì)算背景光照?qǐng)D像中與所述區(qū)域?qū)?yīng)區(qū)域的局部直方圖。

如前所述，背景圖像以及分解得到的背景光照?qǐng)D像具有相同的尺寸。在 該步驟中，計(jì)算背景光照?qǐng)D像中與在背景圖像中定位的區(qū)域?qū)?yīng)區(qū)域的局部直方圖。

圖像的直方圖是一種常用的用來描述圖像灰度分布的圖，其通常用橫軸表示圖像的灰度級(jí)，用縱軸表示各灰度級(jí)包含的像素個(gè)數(shù)。在該步驟中，作為示例，如表達(dá)式(3)所示計(jì)算背景光照?qǐng)D像中與在背景圖像中定位的區(qū)域?qū)?yīng)區(qū)域的局部直方圖：

其中，r_k表示第k級(jí)灰度值，n_i表示圖像中灰度為r_i的像素的個(gè)數(shù)，n表示整個(gè)圖像中像素的個(gè)數(shù)，P(r_k)是灰度值r_k在圖像中出現(xiàn)的概率。

在步驟S23023，計(jì)算前景光照?qǐng)D像的直方圖。

在該步驟中，與步驟S23022類似地計(jì)算前景光照?qǐng)D像的直方圖，此處不再詳述。

在步驟S23024，以背景光照?qǐng)D像的局部直方圖作為目標(biāo)直方圖，對(duì)前景光照?qǐng)D像的直方圖進(jìn)行規(guī)定化，以得到變換后的前景光照?qǐng)D像。

直方圖規(guī)定化是本領(lǐng)域中公知的常用圖像處理方法。所謂直方圖規(guī)定化，就是通過一個(gè)灰度映射函數(shù)，將原灰度直方圖改造成規(guī)定的直方圖形狀。直方圖規(guī)定化實(shí)際上是對(duì)直方圖所代表的圖像的處理，即通過對(duì)輸入圖像進(jìn)行直方圖規(guī)定化處理，使得輸出圖像具有規(guī)定的直方圖形狀。具體到該步驟中，則是如表達(dá)式(4)所示，對(duì)作為輸入圖像的前景光照?qǐng)D像的直方圖進(jìn)行規(guī)定化處理，以使其具有背景光照?qǐng)D像的局部直方圖形狀，由此得到作為輸出圖像的變換后的前景光照?qǐng)D像：

z_k＝G^-1(s_k)，其中

其中G是灰度映射函數(shù)，z_k表示希望輸出圖像具有的規(guī)定概率密度函數(shù)的離散化值，s_k表示輸入圖像的概率密度函數(shù)的離散化值，P_r(r_j)表示希望輸出圖像所具有的指定概率密度函數(shù)，r_j表示第j級(jí)灰度值，L是離散灰度級(jí)的數(shù)量。

通過上述的直方圖規(guī)定化處理，對(duì)于作為輸入圖像的前景光照?qǐng)D像中的每個(gè)像素，通過將其原始灰度值映射到新的灰度值，實(shí)現(xiàn)了前景光照?qǐng)D像的變換。

以上，結(jié)合圖6對(duì)利用背景光照?qǐng)D像和前景光照?qǐng)D像的直方圖對(duì)前景光 照?qǐng)D像變換為背景圖像的光照條件下的示例處理進(jìn)行了描述。可選的，在該處理中，可以將前景光照?qǐng)D像和背景光照?qǐng)D像劃分為小塊，并且通過逐個(gè)小塊地進(jìn)行直方圖規(guī)定化來實(shí)現(xiàn)前景光照?qǐng)D像的變換。具體的，當(dāng)在圖6所示的步驟S23022中計(jì)算背景光照?qǐng)D像中與所述區(qū)域?qū)?yīng)區(qū)域的局部直方圖時(shí)，先將背景光照?qǐng)D像中與所述區(qū)域?qū)?yīng)的區(qū)域劃分為m×n個(gè)小塊，然后針對(duì)每個(gè)所述小塊計(jì)算其直方圖；類似的，當(dāng)在圖6所示的步驟S23023中計(jì)算前景光照?qǐng)D像的直方圖時(shí)，將前景光照?qǐng)D像同樣劃分為所述m×n個(gè)小塊，然后針對(duì)每個(gè)所述小塊計(jì)算直方圖；隨后，當(dāng)在圖6所示的步驟S23024中進(jìn)行直方圖規(guī)定化處理處理時(shí)，對(duì)于前景光照?qǐng)D像的每個(gè)小塊的直方圖，以背景光照?qǐng)D像中的對(duì)應(yīng)小塊的直方圖作為目標(biāo)，進(jìn)行直方圖規(guī)定化，由此實(shí)現(xiàn)前景光照?qǐng)D像的變換。通過如上逐塊進(jìn)行直方圖的規(guī)定化，可以很好地保持光照變化的平滑性，使得變換后的前景光照?qǐng)D像與背景圖像的光照分布位置相關(guān)，也能更好地模擬前景光照?qǐng)D像在背景圖像的光照條件下的效果。

回到圖4，在步驟S2303,合成變換后的前景光照?qǐng)D像S’_FG(x,y)與前景反射圖像R_FG(x,y)以得到變換后的前景圖像。

如前文中提到的，一幅圖像可以如表達(dá)式(1)所示被分解為光照?qǐng)D像和反射圖像。在該步驟中，同樣可以通過該表達(dá)式(1)，合成變換后的前景光照?qǐng)D像S’_FG(x,y)與前景反射圖像R_FG(x,y)以得到變換后的前景圖像。圖7示出了由示例的變換后的前景光照?qǐng)D像和前景反射圖像合成得到變換后的前景圖像的示例情形。

可選的，如果在上述步驟S2302中將前景光照?qǐng)D像和背景光照?qǐng)D像劃分為小塊，并通過逐個(gè)小塊地進(jìn)行直方圖規(guī)定化來實(shí)現(xiàn)前景光照?qǐng)D像的變換，則在該步驟S2303中，在進(jìn)行合成處理之前，可以先對(duì)變換后的前景光照?qǐng)D像進(jìn)行諸如高斯濾波等平滑濾波，以消除可能的“塊效應(yīng)”，隨后將平滑濾波后的前景光照?qǐng)D像與前景反射圖像進(jìn)行合成以得到變換后的前景圖像。

回到圖2，在步驟S240，將變換后的前景圖像合成到背景圖像中。

在該步驟中，通過將變換后的前景圖像直接覆蓋到在背景圖像中所定位的要被覆蓋區(qū)域，得到合成的圖像。圖8示出了將示例的變換后的前景圖像合成到背景圖像中的示例情形。

以上已經(jīng)參考附圖描述了根據(jù)本公開實(shí)施例的圖像合成方法。在該方法中，先根據(jù)由背景圖像分解得到的背景光照?qǐng)D像將前景圖像變換為背景圖像 的光照條件下的圖像，然后將變換后的前景圖像合成到背景圖像，從而能夠?qū)⒃诓煌庹諚l件下得到的兩幅圖像合成在一起，并且使合成后的圖像呈現(xiàn)自然的效果。

需要說明的是，在以上的描述中以將前景圖像與背景圖像合成為例，對(duì)根據(jù)本公開的圖像合成技術(shù)進(jìn)行了描述。能夠理解，本公開并不限于前景圖像和背景圖像的合成，而是可以用于任意兩幅圖像的合成。更明確的說，上文中描述的背景圖像和前景圖像可以分別是任意的第一圖像和第二圖像，只要第二圖像的大小相對(duì)較小從而在合成時(shí)不會(huì)遮擋覆蓋整個(gè)第一圖像即可。

下面參考圖9描述根據(jù)本公開實(shí)施例的圖像合成設(shè)備。圖9示出了根據(jù)本公開實(shí)施例的圖像合成設(shè)備的功能配置框圖。如圖9所示，圖像合成設(shè)備900可以包括：獲取部件910，分解部件920，變換部件930，以及合成部件940。所述各部件的具體功能和操作與上文中針對(duì)圖2-8描述的基本相同，因此為了避免重復(fù)，在下文中僅對(duì)所述設(shè)備進(jìn)行簡(jiǎn)要的描述，而省略對(duì)相同細(xì)節(jié)的詳細(xì)描述。

獲取部件910配置為獲取第一圖像和第二圖像。所述獲取部件910可以通過各種適當(dāng)?shù)姆绞絹慝@取要合成的前景圖像和背景圖像。例如，該獲取部件910可以是攝像單元，以拍攝得到要合成的前景圖像和背景圖像，或者該獲取部件910可以是輸入單元，以從外部輸入所述前景圖像和背景圖像。

分解部件920配置為將第一圖像分解為第一光照?qǐng)D像和第一反射圖像。具體的，分解部件920可以采用計(jì)算機(jī)視覺領(lǐng)域中任何已知的圖像分解方法將第一圖像分解為第一光照?qǐng)D像S_BG(x,y)和第一反射圖像R_BG(x,y)，此處不再詳細(xì)描述。

變換部件930配置為根據(jù)第一光照?qǐng)D像將第二圖像變換為第一圖像的光照條件下的圖像。作為示例該變換部件930可以包括子分解部件9301、子變換部件9302和子合成部件9303。

子分解部件9301配置為將第二圖像分解為第二光照?qǐng)D像S_FG(x,y)和第二反射圖像R_FG(x,y)。

子變換部件9302根據(jù)第一光照?qǐng)D像將第二光照?qǐng)D像變換為第一圖像的光照條件下的圖像。作為示例，該子變換部件9302利用第一光照?qǐng)D像和第二光照?qǐng)D像的直方圖對(duì)第二光照?qǐng)D像進(jìn)行變換。具體的，子變換部件9302確定第一圖像中、第二圖像將被合成到其中的區(qū)域，計(jì)算第一光照?qǐng)D像中與所述 區(qū)域?qū)?yīng)區(qū)域的局部直方圖，并計(jì)算第二光照?qǐng)D像的直方圖。子變換部件9302進(jìn)一步配置為以第一光照?qǐng)D像的局部直方圖作為目標(biāo)直方圖，對(duì)第二光照?qǐng)D像的直方圖進(jìn)行規(guī)定化，以得到變換后的第二光照?qǐng)D像。直方圖規(guī)定化是本領(lǐng)域中公知的常用圖像處理方法。所謂直方圖規(guī)定化，就是通過一個(gè)灰度映射函數(shù)，將原灰度直方圖改造成規(guī)定的直方圖形狀。此處，子變換部件9302通過上文所述的表達(dá)式(4)對(duì)作為輸入圖像的第二光照?qǐng)D像的直方圖進(jìn)行規(guī)定化處理，以使其具有第一光照?qǐng)D像的局部直方圖形狀，由此得到作為輸出圖像的變換后的第二光照?qǐng)D像?？蛇x的，子變換部件9302可以將第二光照?qǐng)D像和第一光照?qǐng)D像劃分為小塊，并且通過逐個(gè)小塊地進(jìn)行直方圖規(guī)定化來實(shí)現(xiàn)第二光照?qǐng)D像的變換。具體的，子變換部件9302在計(jì)算第一光照?qǐng)D像中與所述區(qū)域?qū)?yīng)區(qū)域的局部直方圖時(shí)，先將第一光照?qǐng)D像中與所述區(qū)域?qū)?yīng)的區(qū)域劃分為m×n個(gè)小塊，然后針對(duì)每個(gè)所述小塊計(jì)算其直方圖；類似的，在計(jì)算第二光照?qǐng)D像的直方圖時(shí)，子變換部件9302將第二光照?qǐng)D像同樣劃分為所述m×n個(gè)小塊，然后針對(duì)每個(gè)所述小塊計(jì)算直方圖；隨后，在進(jìn)行直方圖規(guī)定化處理處理時(shí)，子變換部件9302對(duì)于第二光照?qǐng)D像的每個(gè)小塊的直方圖，以第一光照?qǐng)D像中的對(duì)應(yīng)小塊的直方圖作為目標(biāo)，進(jìn)行直方圖規(guī)定化，由此實(shí)現(xiàn)第二光照?qǐng)D像的變換。通過如上逐塊進(jìn)行直方圖的規(guī)定化，可以很好地保持光照變化的平滑性，使得變換后的第二光照?qǐng)D像與第一圖像的光照分布位置相關(guān)，也能更好地模擬第二光照?qǐng)D像在第一圖像的光照條件下的效果。

子合成部件9303配置為合成變換后的第二光照?qǐng)D像與第二反射圖像以得到變換后的第二圖像。具體的，子合成部件9303可以通過上文中所述的表達(dá)式(1)來合成變換后的第二光照?qǐng)D像與第二反射圖像以得到變換后的第二圖像?？蛇x在，如果子變換部件9302被配置為將第二光照?qǐng)D像和第一光照?qǐng)D像劃分為小塊，并通過逐個(gè)小塊地進(jìn)行直方圖規(guī)定化來實(shí)現(xiàn)第二光照?qǐng)D像的變換，則子合成部件9303在進(jìn)行合成處理之前，可以先對(duì)變換后的第二光照?qǐng)D像進(jìn)行諸如高斯濾波等平滑濾波，以消除可能的“塊效應(yīng)”，隨后將平滑濾波后的第二光照?qǐng)D像與第二反射圖像進(jìn)行合成以得到變換后的第二圖像。

合成部件940配置為將變換后的第二圖像合成到第一圖像中。具體的，合成部件940通過將變換后的第二圖像直接覆蓋到在第一圖像中所定位的要被覆蓋區(qū)域，得到合成的圖像。

以上已經(jīng)參考圖9描述了根據(jù)本公開實(shí)施例的圖像合成設(shè)備900。該圖像合成設(shè)備900根據(jù)由第一圖像分解得到的第一光照?qǐng)D像將第二圖像變換為第一圖像的光照條件下的圖像，隨后將變換后的第二圖像合成到第一圖像，因而能夠?qū)⒃诓煌庹諚l件下得到的兩幅圖像合成在一起，并且使合成后的圖像呈現(xiàn)自然的效果。

下面，參照?qǐng)D10來描述可用于實(shí)現(xiàn)本公開實(shí)施例的示例性圖像合成設(shè)備的計(jì)算設(shè)備框圖。

如圖10所示，計(jì)算設(shè)備1000包括一個(gè)或多個(gè)處理器1002、存儲(chǔ)裝置1004、攝像頭1006和輸出裝置1008，這些組件通過總線系統(tǒng)1010和/或其它形式的連接機(jī)構(gòu)(未示出)互連。應(yīng)當(dāng)注意，圖10所示的計(jì)算設(shè)備1000的組件和結(jié)構(gòu)只是示例性的，而非限制性的，根據(jù)需要，計(jì)算設(shè)備1000也可以具有其他組件和結(jié)構(gòu)。

處理器1002可以是中央處理單元(CPU)或者具有數(shù)據(jù)處理能力和/或指令執(zhí)行能力的其它形式的處理單元，并且可以控制計(jì)算設(shè)備1000中的其它組件以執(zhí)行期望的功能。

存儲(chǔ)裝置1004可以包括一個(gè)或多個(gè)計(jì)算機(jī)程序產(chǎn)品，所述計(jì)算機(jī)程序產(chǎn)品可以包括各種形式的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，例如易失性存儲(chǔ)器和/或非易失性存儲(chǔ)器。所述易失性存儲(chǔ)器例如可以包括隨機(jī)存取存儲(chǔ)器(RAM)和/或高速緩沖存儲(chǔ)器(cache)等。所述非易失性存儲(chǔ)器例如可以包括只讀存儲(chǔ)器(ROM)、硬盤、閃存等。在所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上可以存儲(chǔ)一個(gè)或多個(gè)計(jì)算機(jī)程序指令，處理器1002可以運(yùn)行所述程序指令，以實(shí)現(xiàn)上文所述的本公開的實(shí)施例的功能以及/或者其它期望的功能。在所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中還可以存儲(chǔ)各種應(yīng)用程序和各種數(shù)據(jù)，例如上述第一光照?qǐng)D像、第一反射圖像、第二光照?qǐng)D像、第二反射圖像、各個(gè)直方圖、變換后的第二圖像等等。

攝像頭1006用于拍攝所述第一圖像和第二圖像，并且將所拍攝的第一圖像和第二圖像存儲(chǔ)在存儲(chǔ)裝置1004中以供其它組件使用。

輸出裝置1008可以向外部輸出各種信息，例如合成的圖像，并且可以包括顯示器、投影儀、電視等各種顯示設(shè)備。

以上結(jié)合具體實(shí)施例描述了本公開的基本原理，但是，需要指出的是，在本公開中提及的優(yōu)點(diǎn)、優(yōu)勢(shì)、效果等僅是示例而非限制，不能認(rèn)為這些優(yōu) 點(diǎn)、優(yōu)勢(shì)、效果等是本公開的各個(gè)實(shí)施例必須具備的。另外，上述公開的具體細(xì)節(jié)僅是為了示例的作用和便于理解的作用，而非限制，上述細(xì)節(jié)并不限制本公開為必須采用上述具體的細(xì)節(jié)來實(shí)現(xiàn)。

本公開中涉及的器件、裝置、設(shè)備、系統(tǒng)的方框圖僅作為例示性的例子并且不意圖要求或暗示必須按照方框圖示出的方式進(jìn)行連接、布置、配置。如本領(lǐng)域技術(shù)人員將認(rèn)識(shí)到的，可以按任意方式連接、布置、配置這些器件、裝置、設(shè)備、系統(tǒng)。諸如“包括”、“包含”、“具有”等等的詞語是開放性詞匯，指“包括但不限于”，且可與其互換使用。這里所使用的詞匯“或”和“和”指詞匯“和/或”，且可與其互換使用，除非上下文明確指示不是如此。這里所使用的詞匯“諸如”指詞組“諸如但不限于”，且可與其互換使用。

本公開中的步驟流程圖以及以上方法描述僅作為例示性的例子并且不意圖要求或暗示必須按照給出的順序進(jìn)行各個(gè)實(shí)施例的步驟，某些步驟可以并行、彼此獨(dú)立或按照其他適當(dāng)?shù)捻樞驁?zhí)行。另外，諸如“其后”、“然后”、“接下來”等等的詞語不意圖限制步驟的順序；這些詞語僅用于引導(dǎo)讀者通讀這些方法的描述。

還需要指出的是，在本公開的裝置和方法中，各部件或各步驟是可以分解和/或重新組合的。這些分解和/或重新組合應(yīng)視為本公開的等效方案。

提供所公開的方面的以上描述以使本領(lǐng)域的任何技術(shù)人員能夠做出或者使用本公開。對(duì)這些方面的各種修改對(duì)于本領(lǐng)域技術(shù)人員而言是非常顯而易見的，并且在此定義的一般原理可以應(yīng)用于其他方面而不脫離本公開的范圍。因此，本公開不意圖被限制到在此示出的方面，而是按照與在此公開的原理和新穎的特征一致的最寬范圍。盡管以上已經(jīng)討論了多個(gè)示例方面和實(shí)施例，但是本領(lǐng)域技術(shù)人員將認(rèn)識(shí)到其某些變型、修改、改變、添加和子組合。