圖像之間顏色轉(zhuǎn)換的方法和裝置制造方法
【專利摘要】建議了一種用于補(bǔ)償由像素?cái)?shù)據(jù)表示的作為第一和第二圖像的至少兩幅圖像之間的色差的圖像間的顏色轉(zhuǎn)換的方法和裝置,其中對(duì)于圖像的相應(yīng)特征點(diǎn),計(jì)算顏色映射和幾何映射以通過(guò)應(yīng)用所述幾何映射和所述顏色映射到第一圖像以產(chǎn)生補(bǔ)償?shù)牡谝粓D像來(lái)補(bǔ)償?shù)谝粓D像,所述補(bǔ)償?shù)牡谝粓D像用于通過(guò)比較補(bǔ)償?shù)牡谝粓D像和第二圖像來(lái)檢測(cè)補(bǔ)償失敗的區(qū)域以執(zhí)行排除補(bǔ)償失敗的圖像區(qū)域的顏色轉(zhuǎn)換。所述方法可在空閑時(shí)執(zhí)行,并且可應(yīng)用于均衡在幾何和顏色上不同的圖像之間的色差,這是例如有助于減少所產(chǎn)生的用于轉(zhuǎn)換數(shù)據(jù)、數(shù)據(jù)壓縮或在3D應(yīng)用程序中的精確的視差估計(jì)的比特率,以及改善的3D對(duì)象的紋理的顏色一致性。
【專利說(shuō)明】圖像之間顏色轉(zhuǎn)換的方法和裝置
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種在例如提供在幾何和顏色方面略有不同的圖像的兩個(gè)相機(jī)的圖像的圖像之間進(jìn)行顏色轉(zhuǎn)換的方法和裝置。
【背景技術(shù)】
[0002]在立體或3D再現(xiàn)的視頻處理中,一個(gè)問(wèn)題是同一場(chǎng)景的兩個(gè)或兩個(gè)以上的視圖之間的色差,因?yàn)?D視頻內(nèi)容通常是從兩個(gè)或兩個(gè)以上的所捕獲的2D視頻中創(chuàng)建的。例如,這些差異可能是由物理燈光效果,或由相機(jī)不是完全相同而導(dǎo)致的,因?yàn)?,例如,每個(gè)相機(jī)都有自己的鏡頭、傳感器和更具體的性能。特別是在3D再現(xiàn)的情況下,它會(huì)導(dǎo)致兩個(gè)畫(huà)面中都有稍微不同的顏色的干擾影響,這可能會(huì)導(dǎo)致觀眾頭疼。
[0003]此外,還有一些需要立體圖像的校準(zhǔn)顏色作為顏色差異的補(bǔ)償?shù)募夹g(shù)方面,例如,減少所需的比特率,使用3D信息用于視圖內(nèi)插或隱藏物體的檢測(cè)來(lái)允許更精確的視差估計(jì)創(chuàng)建或加強(qiáng)3D信息或2D圖像。已知的用于補(bǔ)償輸入圖像之間的色差的方法可以分為兩組:顏色映射和顏色轉(zhuǎn)換。通常情況下,處理兩幅圖像,其目標(biāo)是描述允許將一個(gè)圖像的顏色變換到同一場(chǎng)景的其它的圖像的顏色的顏色變換。
[0004]在顏色映射中,假設(shè)輸入圖像之間的幾何對(duì)應(yīng)——所謂的特征對(duì)應(yīng)——是可用的。特征對(duì)應(yīng)的一個(gè)眾所周知的方法是尺度不變特征變換,所謂的SIFT。它使用描述符基于輸入圖像中的高斯差異(所謂的DoG)檢測(cè)相應(yīng)的特征點(diǎn)。在低紋理的圖像或圖像部分中,例如天空、人造表面、單一顏色圖像中,幾何對(duì)應(yīng)往往是不可用的。在顏色轉(zhuǎn)換中,不使用幾何對(duì)應(yīng)并且不需要對(duì)圖像進(jìn)行紋理處理。有一種精確的幾何對(duì)應(yīng)是無(wú)意義的情況,因?yàn)閮蓚€(gè)輸入圖像不顯示相同的語(yǔ)義場(chǎng)景,而只是語(yǔ)義接近。根據(jù)一個(gè)著名的顏色轉(zhuǎn)換算法,將第一和第二階圖像信號(hào)靜止?fàn)顟B(tài)從參考圖像轉(zhuǎn)換到對(duì)應(yīng)的目標(biāo)圖像。為了能夠分別地處理顏色通道,使用憑經(jīng)驗(yàn)得到的去相關(guān)的顏色空間。
[0005]也就是說(shuō),當(dāng)應(yīng)用已知的顏色映射算法時(shí),如果圖像的一部分中的圖像內(nèi)容不對(duì)應(yīng)于SIFT算法的選擇標(biāo)準(zhǔn),則不利用這部分圖像的顏色。例如,在圖像的低紋理部分是這種情況。
[0006]而且,當(dāng)對(duì)顯示相同的語(yǔ)義場(chǎng)景的圖像應(yīng)用顏色轉(zhuǎn)換方法時(shí),計(jì)算出的顏色轉(zhuǎn)換的精度將受到存在在其他圖像中沒(méi)有對(duì)應(yīng)的圖像區(qū)域的影響,因?yàn)?,例如,圖像統(tǒng)計(jì)將相應(yīng)地受到這些區(qū)域的影響。這是左圖像的左邊界處的部分可能在右圖像中不可見(jiàn)的立體圖像的情況或示例,反之亦然。另一示例是來(lái)自相機(jī)動(dòng)作是沿固定線路移動(dòng)(travelling)類型的動(dòng)作畫(huà)面場(chǎng)景的圖像。這里,在每個(gè)圖像中,該場(chǎng)景的一小部分不再可見(jiàn),并且該場(chǎng)景的另外一小部分變?yōu)榭梢?jiàn)的,但是之前未曾可見(jiàn)過(guò)。
【發(fā)明內(nèi)容】
[0007]本發(fā)明的一個(gè)方面是提供一種用于補(bǔ)償至少兩幅圖像之間的色差的、雖然存在從一個(gè)到另一個(gè)圖像的裁剪的顏色轉(zhuǎn)換,存在通過(guò)視差效應(yīng)覆蓋或顯現(xiàn)的圖像區(qū)域,或者通過(guò)移動(dòng)對(duì)象或移動(dòng)相機(jī)覆蓋或顯現(xiàn)的圖像區(qū)域。
[0008]通過(guò)在獨(dú)立權(quán)利要求中所公開(kāi)的方法和裝置解決了這個(gè)問(wèn)題。本發(fā)明的有利的附加實(shí)施例公開(kāi)在各個(gè)從屬權(quán)利要求中。
[0009]根據(jù)本發(fā)明,解決了以下矛盾:遭受不能在在其它圖像中沒(méi)有幾何對(duì)應(yīng)的圖像中利用圖像的部分的顏色使得該圖像不對(duì)應(yīng)于SIFT算法的選擇標(biāo)準(zhǔn)的問(wèn)題的顏色映射,和遭受如果兩個(gè)輸入圖像不顯示完全相同的語(yǔ)義場(chǎng)景而只是語(yǔ)義接近并且?guī)缀螌?duì)應(yīng)不可用時(shí)則幾何對(duì)應(yīng)沒(méi)有太大意義的問(wèn)題的顏色轉(zhuǎn)換。
[0010]因此,本發(fā)明的一個(gè)方面是檢測(cè)幾何補(bǔ)償失敗的第一圖像的區(qū)域,通過(guò)在排除補(bǔ)償失敗的圖像區(qū)域時(shí),比較所述第一圖像和第二幾何補(bǔ)償過(guò)的圖像并對(duì)這兩個(gè)圖像應(yīng)用顏色轉(zhuǎn)換方法來(lái)實(shí)現(xiàn)上述檢測(cè)。這意味著,換句話說(shuō),建議檢測(cè)幾何補(bǔ)償失敗的第二圖像的區(qū)域,在排除幾何補(bǔ)償失敗的圖像區(qū)域的過(guò)程中通過(guò)比較所述第二圖像和第一幾何補(bǔ)償過(guò)的圖像并對(duì)這兩個(gè)圖像應(yīng)用顏色轉(zhuǎn)換方法來(lái)實(shí)現(xiàn)上述檢測(cè)。
[0011]根據(jù)本發(fā)明的一個(gè)方法,利用所述至少兩個(gè)圖像的尺度不變特征變換
[0012]-提供一組對(duì)應(yīng)的特征點(diǎn),
[0013]-計(jì)算能夠?qū)⑺龅谝粓D像中的特征點(diǎn)的顏色映射到所述第二圖像中的相應(yīng)特征點(diǎn)的顏色的顏色映射模型,
[0014]-計(jì)算能夠?qū)⑺龅谝粓D像中的特征點(diǎn)的圖像位置映射到所述第二圖像中的相應(yīng)特征點(diǎn)的圖像位置的幾何映射模型,
[0015]-使用所述幾何映射模型和所述顏色映射模型補(bǔ)償?shù)谝粓D像以生成補(bǔ)償?shù)牡谝粓D像,
[0016]-通過(guò)比較所述第二圖像和所述補(bǔ)償?shù)牡谝粓D像來(lái)檢測(cè)補(bǔ)償失敗的區(qū)域,
[0017]-對(duì)排除補(bǔ)償失敗的圖像區(qū)域的第一和第二圖像應(yīng)用顏色轉(zhuǎn)換方法。
[0018]這意味著,通過(guò)在不具有最初校準(zhǔn)模式的情況下可在空閑時(shí)執(zhí)行的幾何和顏色轉(zhuǎn)換步驟的適合的組合解決了以下矛盾:一方面,顏色映射遭受不能在在其它圖像中沒(méi)有幾何對(duì)應(yīng)的圖像中利用圖像的部分的顏色的問(wèn)題,另一方面,顏色轉(zhuǎn)換遭受如果兩個(gè)輸入圖像不顯示相同的語(yǔ)義場(chǎng)景而只是語(yǔ)義接近時(shí)則幾何對(duì)應(yīng)沒(méi)有意義的問(wèn)題。
[0019]由相應(yīng)的裝置來(lái)實(shí)現(xiàn)該方法,其中,將代表第一和第二圖像的數(shù)據(jù)應(yīng)用到處理器,其用于計(jì)算將所述第一圖像的顏色映射到第二圖像的顏色的顏色映射模型,用于計(jì)算將所述第一圖像的圖像位置映射到所述第二圖像的中的相應(yīng)特征點(diǎn)的圖像位置的幾何映射模型,
[0020]用于使用所述幾何映射模型和所述顏色映射模型補(bǔ)償?shù)谝粓D像以生成補(bǔ)償?shù)膱D像,用于通過(guò)比較所述第二圖像和所述補(bǔ)償?shù)牡谝粓D像來(lái)檢測(cè)補(bǔ)償失敗的區(qū)域和用于對(duì)排除補(bǔ)償失敗的圖像區(qū)域的兩個(gè)圖像應(yīng)用顏色轉(zhuǎn)換算法。
[0021]根據(jù)本發(fā)明的另一實(shí)施例,通過(guò)比較所述第一圖像和補(bǔ)償?shù)牡诙D像來(lái)檢測(cè)補(bǔ)償失敗的區(qū)域。
[0022]本發(fā)明的優(yōu)點(diǎn)是,利用了圖像的所有部分,并同時(shí)對(duì)于裁剪、顯現(xiàn)區(qū)域、覆蓋區(qū)域和移動(dòng)對(duì)象具有魯棒性。
[0023]原則上,本發(fā)明適合用于均衡色差,這對(duì)一系列應(yīng)用是有幫助的。例如,當(dāng)立體視頻序列被壓縮時(shí),對(duì)左、右圖像間的色差的補(bǔ)償可以降低產(chǎn)生的比特率。另一個(gè)示例是立體序列的3D分析。當(dāng)補(bǔ)償了色差后,視差估計(jì)可以更精確。另一個(gè)示例是在后期制作中視覺(jué)效果的3D資產(chǎn)創(chuàng)建。當(dāng)補(bǔ)償了多視圖序列中的色差后,提取的3D對(duì)象的紋理將具有改善了的顏色一致性。
【專利附圖】
【附圖說(shuō)明】
[0024]參考附圖描述本發(fā)明的示例性實(shí)施例,附圖中示出:
[0025]圖1示出用于補(bǔ)償至少兩個(gè)圖像之間的色差的顏色轉(zhuǎn)換的方法和第一實(shí)施例的框圖,以及
[0026]圖2示出用于補(bǔ)償至少兩個(gè)圖像之間的色差的顏色轉(zhuǎn)換的方法和第二實(shí)施例的框圖。
【具體實(shí)施方式】
[0027]在整個(gè)附圖中相似的附圖標(biāo)記和字符指定相似的元素。
[0028]首先參考圖1,其概括地以框圖形式示出類似于示出可能包括可以作為軟件或硬件執(zhí)行的模塊、電路或設(shè)備的方法的流程圖的基本方框作為用于補(bǔ)償至少兩個(gè)圖像之間的色差的顏色轉(zhuǎn)換的第一實(shí)施例。圖1在第一步驟中示出為用于在所述至少兩個(gè)圖像之間補(bǔ)償色差的第一圖像Fi和第二圖像Si之間的顏色轉(zhuǎn)換從第一圖像Fi和第二圖像Si計(jì)算相應(yīng)特征點(diǎn)Corrfeapoi。這可以例如通過(guò)應(yīng)用所謂的SIFT算法來(lái)進(jìn)行,因?yàn)樗潜娝苤模⑶?,例如,已被Hasan Sheikh Faridul等人在2012年11月12日一11月16日在洛杉肌的顏色和成像會(huì)議(Color and Imaging Conference)上在《Optimization ofSparse Color Correspondences for Color Mapping》中披露。在第二步驟中,基于增益、偏移和伽馬的顏色映射方法以及投影幾何映射模型被并行應(yīng)用到通過(guò)所述計(jì)算相應(yīng)特征點(diǎn)Corrfeapoi而提供的特征點(diǎn)對(duì)應(yīng)。
[0029]基于增益、偏移和伽馬的顏色映射方法是眾所周知的,并且對(duì)于實(shí)驗(yàn)性實(shí)施例,如Hasan Sheikh Faridul等人所披露的那樣,使用所謂的GOG并從相應(yīng)特征點(diǎn)估計(jì)所述G0G。GOG代表用于計(jì)算所述相應(yīng)特征點(diǎn)Corrfeapoi的顏色映射Cacm的增益、偏移和伽馬的縮寫(xiě)
ο
[0030]為了計(jì)算所述相應(yīng)特征點(diǎn)Corrfeapoi的幾何映射Cagm選擇眾所周知的投影幾何映射模型。使用例如Richard J.Radke等人2000年9月在加拿大溫哥華的關(guān)于圖像處理的 IEEE 國(guó)際會(huì)議論文集上的((Efficiently Estimating Projective Transformations))中公布的迭代優(yōu)化過(guò)程來(lái)從特征點(diǎn)對(duì)應(yīng)估計(jì)六個(gè)參數(shù)。
[0031]根據(jù)圖1所示的第一實(shí)施例,通過(guò)如上所述計(jì)算顏色映射Cacm將第一圖像Fi補(bǔ)償為補(bǔ)償?shù)牡谝粓D 像CompFi,然后,使用投影映射模型幾何映射第一圖像Fi。對(duì)于第二圖像的每個(gè)像素,使用所述投影映射模型確定所述第一圖像中的相應(yīng)的幾何位置。相應(yīng)的幾何位置通常不是第一圖像的像素的位置,而是像素的整數(shù)位置之間的中間位置。使用三線性插值來(lái)與整數(shù)像素位置相聯(lián)系。三線性插值是在規(guī)則網(wǎng)格上進(jìn)行多變量插值的方法。它使用像素的整數(shù)網(wǎng)格的顏色坐標(biāo)來(lái)線性地接近三個(gè)整數(shù)像素位置的局部三角形內(nèi)的中間位置的顏色坐標(biāo)。在眾所周知的三線性插值中,計(jì)算重心坐標(biāo),其直接提供中間位置的內(nèi)插的顏色坐標(biāo)。在隨后的用于檢測(cè)具有補(bǔ)償失敗的區(qū)域Regcompfail的步驟中,對(duì)于補(bǔ)償失敗的區(qū)域分析補(bǔ)償?shù)牡谝粓D像CompFi。此步驟是通過(guò)計(jì)算第二圖像Si和所述補(bǔ)償?shù)牡谝粓D像CompFi之間的逐像素絕對(duì)差值并應(yīng)用預(yù)定閾值到所述絕對(duì)差值以便檢測(cè)具有補(bǔ)償失敗的像素來(lái)進(jìn)行的。此外,分別應(yīng)用形態(tài)吹制(morphological blowing)和收縮算子(shrinking operator)來(lái)順利獲得具有補(bǔ)償失敗的成形的圖像區(qū)域。最后,當(dāng)從顏色轉(zhuǎn)換的計(jì)算中排除補(bǔ)償失敗的圖像區(qū)域時(shí),使用例如E.Reinhard, M.Ashikhmin, B.Gooch, P.Shirley在IEEE計(jì)算機(jī)圖形學(xué)和應(yīng)用的應(yīng)用感知特刊(Computer Graphics andApplication, special issue on Applied Perception)2001 年 9 月至 10 月的第 21 卷第 5號(hào)第34-41頁(yè)上的《Color Transfer between Images》所披露的顏色轉(zhuǎn)換方法。因此,通過(guò)應(yīng)用例如上述顏色轉(zhuǎn)換方法將第一圖像Fi的像素?cái)?shù)據(jù)、第二圖像Si的像素?cái)?shù)據(jù)和所述檢測(cè)具有補(bǔ)償失敗的區(qū)域Regcompfail的結(jié)果組合在顏色轉(zhuǎn)換Coltrans方框中以提供顏色轉(zhuǎn)換模型Ctm。所述代表圖像的圖像的像素?cái)?shù)據(jù)一般被設(shè)置為圖像文件,從而使得它們可以被用來(lái)計(jì)算相應(yīng)特征點(diǎn)Corrfeapoi和應(yīng)用顏色轉(zhuǎn)換方法。
[0032]本發(fā)明的第二實(shí)施例在圖2中示出,其中,該方法中所固有的原理通過(guò)生成用于檢測(cè)具有補(bǔ)償失敗的區(qū)域Regcompfail的補(bǔ)償?shù)牡诙D像CompSI來(lái)實(shí)現(xiàn)。補(bǔ)償?shù)牡诙D像CompSI由用于從第一圖像Fi和第二圖像Si的像素?cái)?shù)據(jù)計(jì)算相應(yīng)特征點(diǎn)Corrfeapoi的計(jì)算部件和用于計(jì)算顏色映射Cacm和計(jì)算所述相應(yīng)特征點(diǎn)Corrfeapoi的幾何映射Cagm的計(jì)算部件生成,所述相應(yīng)特征點(diǎn)Corrfeapoi在提供補(bǔ)償?shù)牡诙D像CompSI的部件中與用于提供補(bǔ)償?shù)牡诙D像CompSI的數(shù)據(jù)的第二圖像Si的像素?cái)?shù)據(jù)相結(jié)合。補(bǔ)償?shù)牡诙D像CompSI的數(shù)據(jù)被應(yīng)用到用于檢測(cè)具有補(bǔ)償失敗的區(qū)域Regcompfail的計(jì)算部件,對(duì)于所述具有補(bǔ)償失敗的區(qū)域Regcompfail因此也應(yīng)用第一圖像Fi的像素?cái)?shù)據(jù)。最后,顏色轉(zhuǎn)換Coltrans方框與用于檢測(cè)具有補(bǔ)償失敗的區(qū)域Regcompfail的部件的輸出端相連接以在例如提供在幾何和顏色方面略有不同的圖像的兩個(gè)相機(jī)的圖像的第一圖像Fi的像素?cái)?shù)據(jù)和第二圖像Si的像素?cái)?shù)據(jù)之間進(jìn)行顏色轉(zhuǎn)換。然后,在顏色轉(zhuǎn)換Coltrans方框的輸出端提供顏色轉(zhuǎn)換模型Ctm以通過(guò)考慮具有補(bǔ)償失敗的區(qū)域來(lái)將顏色轉(zhuǎn)換方法應(yīng)用到第一圖像Fi和第二圖像Si。
[0033]在需要進(jìn)行兩個(gè)以上的圖像一即η元組的圖像一之間的顏色轉(zhuǎn)換的情況下,通過(guò)如上所述計(jì)算第η-l個(gè)顏色映射將前η-l個(gè)圖像補(bǔ)償為η-l個(gè)補(bǔ)償?shù)膱D像,然后使用η-l個(gè)投影映射模型幾何映射前η-l個(gè)圖像。對(duì)于每個(gè)最后圖像的每個(gè)像素,使用所描述的投影映射模型和三線性插值來(lái)確定前η-l個(gè)圖像中的相應(yīng)幾何位置。在隨后的用于檢測(cè)具有補(bǔ)償失敗的區(qū)域的步驟中,對(duì)于諸如所描述的補(bǔ)償失敗的區(qū)域分析補(bǔ)償?shù)那唉?l個(gè)圖像。最后,如上所述,使用η-l個(gè)顏色轉(zhuǎn)換方法來(lái)分別將顏色從η-l個(gè)第一圖像中的每一個(gè)轉(zhuǎn)換到最后一個(gè)圖像。
[0034]在數(shù)個(gè)第一圖像和數(shù)個(gè)第二圖像的情況下,應(yīng)以下列方式執(zhí)行所述方法。首先,將數(shù)個(gè)第一圖像組合——例如通過(guò)將其拼湊在一起——為新的、較大的第一圖像。其次,將數(shù)個(gè)第二圖像組合——例如通過(guò)將其拼湊在一起——為新的、較大的第二圖像。然后,所發(fā)明的方法被應(yīng)用到新的第一圖像和新的第二圖像。
[0035]有利地,根據(jù)建議的顏色轉(zhuǎn)換,圖像的所有部分都被被利用,使得該方法對(duì)裁剪、顯現(xiàn)區(qū)域、覆蓋區(qū)域和移動(dòng)對(duì)象具有魯棒性。此外,可以在不具有最初校準(zhǔn)模式的情況下進(jìn)行顏色校準(zhǔn),并且可在空閑時(shí)進(jìn)行顏色校準(zhǔn)。[0036]如圖1和圖2所示,圖中的方框可以包括可以作為軟件或硬件執(zhí)行的模塊、電路或設(shè)備。根據(jù)本發(fā)明的另一實(shí)施例,提供圖象處理器以執(zhí)行上述方法之一。
[0037]本發(fā)明可應(yīng)用于均衡在幾何和顏色上不同的圖像之間的色差,這是例如有助于減少所產(chǎn)生的用于轉(zhuǎn)換數(shù)據(jù)或數(shù)據(jù)壓縮或在3D應(yīng)用中的精確的視差估計(jì)的比特率,以及改善的3D對(duì)象的紋理的顏色一致性。
[0038]雖然已相對(duì)于其兩個(gè)特定的實(shí)施例示出和描述本發(fā)明,但本領(lǐng)域技術(shù)人員應(yīng)理解,在不脫離權(quán)利要求書(shū)的精神和范圍的情況下,可以在其中作出在形式上和細(xì)節(jié)上的上述和各種其他變化、省略和補(bǔ)充。
【權(quán)利要求】
1.一種用于補(bǔ)償由像素?cái)?shù)據(jù)表示的至少兩幅圖像之間的色差的圖像間的顏色轉(zhuǎn)換(Coltrans)的方法,其特征在于: -從所述至少兩幅圖像中生成相應(yīng)特征點(diǎn)(Corrfeapoi); -計(jì)算能夠?qū)⑺鲋辽賰煞鶊D像中的第一圖像(Fi)中的特征點(diǎn)的顏色映射到第二圖像(Si )中的相應(yīng)特征點(diǎn)的顏色的顏色映射(Cacm), -計(jì)算能夠?qū)⑺龅谝粓D像(Fi)中的特征點(diǎn)的圖像位置映射到所述第二圖像(Si)中的相應(yīng)特征點(diǎn)的圖像位置的幾何映射(Cagm), -使用所述幾何映射(Cagm)和所述顏色映射(Cacm)補(bǔ)償?shù)谝粓D像(Fi)以生成補(bǔ)償?shù)牡谝粓D像(CompFi)或者使用所述幾何映射(Cagm)和所述顏色映射(Cacm)補(bǔ)償?shù)诙D像(Si)以生成補(bǔ)償?shù)牡诙D像(CompSi), -通過(guò)比較所述第二圖像(Si)和所述補(bǔ)償?shù)牡谝粓D像(CompFi)來(lái)檢測(cè)補(bǔ)償失敗的區(qū)域或者通過(guò)比較所述第一圖像(Fi)和所述補(bǔ)償?shù)牡诙D像來(lái)檢測(cè)補(bǔ)償失敗的區(qū)域,以及 -對(duì)排除補(bǔ)償失敗的圖像區(qū)域的第一(Fi)和第二圖像(Si)應(yīng)用顏色轉(zhuǎn)換(Coltrans)方法。
2.根據(jù)權(quán)利要求1所述的方法,其中,基于至少作為第一圖像(Fi)和第二圖像(Si)的輸入圖像中的高斯差異通過(guò)尺度不變特征變換生成圖像的相應(yīng)特征點(diǎn)(Corrfeapoi )。
3.根據(jù)權(quán)利要求1所述的方法,其中,通過(guò)基于增益、偏移和伽馬將顏色映射方法應(yīng)用到相應(yīng)特征點(diǎn)(Corrfeapoi)來(lái)計(jì)算顏色映射(Cacm)。`
4.根據(jù)權(quán)利要求1所述的方法,其中,通過(guò)投影幾何映射模型的迭代優(yōu)化過(guò)程來(lái)計(jì)算幾何映射(Cagm)。
5.根據(jù)權(quán)利要求1所述的方法,其中,通過(guò)計(jì)算顏色映射(Cacm)來(lái)將第一圖像(Fi)補(bǔ)償為補(bǔ)償?shù)牡谝粓D像(CompFi),然后,使用投影映射模型來(lái)幾何映射第一圖像(Fi)。
6.根據(jù)權(quán)利要求1所述的方法,其中,通過(guò)計(jì)算顏色映射(Cacm)來(lái)將第二圖像(Si)補(bǔ)償為補(bǔ)償?shù)牡诙D像(CompSi),然后,使用投影映射模型來(lái)幾何映射第二圖像(Si)。
7.根據(jù)權(quán)利要求1所述的方法,其中,通過(guò)計(jì)算第二圖像(Si)和所述補(bǔ)償?shù)牡谝粓D像(CompFi)之間的逐像素絕對(duì)差值或者通過(guò)計(jì)算第一圖像(Fi)和所述補(bǔ)償?shù)牡诙D像(CompSi)之間的逐像素絕對(duì)差值并應(yīng)用預(yù)定閾值到所述絕對(duì)差值以便檢測(cè)具有補(bǔ)償失敗的像素來(lái)進(jìn)行對(duì)具有補(bǔ)償失敗的區(qū)域的檢測(cè)(Regcompfail )。
8.根據(jù)權(quán)利要求1所述的方法,其中,將排除補(bǔ)償失敗的圖像區(qū)域的顏色轉(zhuǎn)換(Coltrans)方法應(yīng)用到第一(Fi)和第二(Si)圖像以提供顏色轉(zhuǎn)換模型(Ctm)。
9.一種用于補(bǔ)償由像素?cái)?shù)據(jù)表示的至少兩幅圖像之間的色差的圖像間的顏色轉(zhuǎn)換(Coltrans)的裝置,其中,提供圖像處理器以執(zhí)行根據(jù)權(quán)利要求1至8中任一項(xiàng)所述的方法之一 O
10.根據(jù)權(quán)利要求9所述的裝置,包括:計(jì)算器,用于從像素?cái)?shù)據(jù)計(jì)算將所述至少兩個(gè)圖像的第一圖像(Fi)的顏色映射到第二圖像(Si)的顏色的顏色映射(Cacm)以及用于計(jì)算將所述第一圖像(Fi )的圖像位置映射到所述第二圖像(Si )中的相應(yīng)特征點(diǎn)(Corrf eapoi)的圖像位置以提供補(bǔ)償?shù)膱D像(CompFi或CompSi)的像素?cái)?shù)據(jù)的幾何映射(Cagm),用于計(jì)算第二圖像(Si)和所述補(bǔ)償?shù)牡谝粓D像(CompFi)之間的或者第一圖像(Fi)和所述補(bǔ)償?shù)牡诙D像(CompSi)之間的逐像素絕對(duì)差值并應(yīng)用預(yù)定閾值到所述絕對(duì)差值以便從所述圖像間的顏色轉(zhuǎn)換(Coltrans)中`排除具有補(bǔ)償失敗的像素區(qū)域。
【文檔編號(hào)】G06T15/00GK103871037SQ201310660126
【公開(kāi)日】2014年6月18日 申請(qǐng)日期:2013年12月9日 優(yōu)先權(quán)日:2012年12月7日
【發(fā)明者】J.斯托德, H.??朔ɡ锒艩? E.喬利 申請(qǐng)人:湯姆遜許可公司