專利名稱：用于圖像對準(zhǔn)的方法和設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于圖像對準(zhǔn)(image alignment)的方法和設(shè)備。
背景技術(shù)：
為了制作三維(3D)圖像，有必要獲得同一場景的兩個鏡頭并且將一個圖像相對 于另一圖像略微移置。這意味著，在圖像被移置前有必要仔細(xì)地對準(zhǔn)圖像。為了實現(xiàn)該 對準(zhǔn)，通常使用特殊的相機(jī)機(jī)架(rig)來捕獲這兩個鏡頭。3ality生產(chǎn)一種這樣的機(jī)架。然而，由于對準(zhǔn)處理的復(fù)雜度，這些機(jī)架要用很長的時間來搭建。這是非常不 合需求的，特別是在拍攝進(jìn)度被嚴(yán)密管理的電視直播制作中。此外，這些機(jī)架也很昂貴。通常，3D機(jī)架的成本如此之高以致它們經(jīng)常被節(jié)目 制作方租用而不是購買。因此希望在不需要難以搭建并且昂貴的傳統(tǒng)3D機(jī)架的情況下產(chǎn)生所需要的配 準(zhǔn)。本發(fā)明的一個目的是緩減這些問題。

發(fā)明內(nèi)容
根據(jù)本發(fā)明的第一個方面，提供一種將由第一相機(jī)捕獲的第一圖像與利用第二 相機(jī)捕獲的圖像的至少一個片段對準(zhǔn)的方法，由第一和第二相機(jī)捕獲的圖像具有重疊的 視野，該方法包括在第一圖像中，確定指示重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；在第二圖像中，確定指示重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；確定第一圖像中的重疊的視野中和第二圖像中的重疊的視野中相對應(yīng)的圖像特 性值之間的位置差；以及對第一圖像施加變換，所述變換調(diào)節(jié)第一圖像相對于第二圖像的方位，其中， 當(dāng)?shù)谝缓偷诙D像中相對應(yīng)的圖像特性值之間的位置差是預(yù)定量時，第一和第二圖像被 對準(zhǔn)。這是有益的，因為其使得一個圖像可以被調(diào)節(jié)使得其與第二圖像對準(zhǔn)。該方法還可包括選擇第一圖像和第二圖像中重疊的視野中的至少一部分；顯示標(biāo)識第一圖像中的重疊的視野中的被選擇的部分中的圖像特性值的第一曲 線圖，每個圖像特性值被繪制在該曲線圖上與第一圖像中具有這樣的圖像特性值的位置 相對應(yīng)的點處；以及在所顯示的第一曲線圖上疊加第二圖像中的重疊的視野中的被選擇的部分中的 圖像特性值，每個圖像特性值被繪制在所述曲線圖上與第二圖像中具有這樣的圖像特性 值的位置相對應(yīng)的點處，從而第一和第二圖像中相對應(yīng)的圖像特性值之間的位置差根據(jù) 所繪制的圖像特性值之間的距離被確定。這在確定圖像需要如何被變換來對準(zhǔn)時提供圖形輔助。
該方法還可包括在第一圖像和第二圖像兩者的重疊的視野中選擇第二區(qū)域； 顯示標(biāo)識第一圖像中的重疊的視野中的第二區(qū)域中的圖像特性值的第二曲線圖，每個圖 像特性值被繪制在所述曲線圖上與第一圖像中具有這樣的圖像特性值的位置相對應(yīng)的點 處；在所顯示的第二曲線圖上疊加第二圖像中的第二區(qū)域中的圖像特性值，每個圖像特 性值被繪制在所述曲線圖上與第二圖像中具有這樣的圖像特性值的位置相對應(yīng)的點處， 從而第一和第二圖像中相對應(yīng)的圖像特性值之間的位置差根據(jù)所述第二曲線圖中所繪制 的圖像特性值之間的距離被確定。這是有益的，因為其使得可以快速計算出變換量。重疊的區(qū)域可以分別在第一和第二圖像的對端(opposite end)處。這在圖像拼接 和/或圖像穩(wěn)定化領(lǐng)域中特別有用。該方法還可以包括顯示矢量顯示器，其中，矢量顯示器同時顯示第一和第二圖 像的重疊區(qū)域中每個被選擇的位置處的色度水平。這輔助色彩匹配。該方法可以包括選擇重疊的區(qū)域內(nèi)的一區(qū)域并且在執(zhí)行確定步驟之前對所選擇 的區(qū)域執(zhí)行縮放功能。這使得用戶能夠更容易地看關(guān)心的區(qū)域。該方法還可以包括在對準(zhǔn)之前對第一和第二圖像執(zhí)行色彩校正。這提高對準(zhǔn)的 總體準(zhǔn)確度。根據(jù)另一個方面，提供一種用于將由第一相機(jī)捕獲的第一圖像與利用第二相機(jī) 捕獲的圖像的至少一個片段對準(zhǔn)的設(shè)備，由第一和第二相機(jī)捕獲的圖像具有重疊的視 野，該設(shè)備包括確定器，用于在第一圖像中，確定指示重疊的視野內(nèi)的位置處的圖像特性的圖 像特性值；確定器可操作用于，在第二圖像中，確定指示重疊的視野內(nèi)的位置處的圖像特 性的圖像特性值，并且確定第一圖像中的重疊的視野中和第二圖像中的重疊的視野中相 對應(yīng)的圖像特性值之間的位置差；和變換裝置，可操作用于對第一圖像施加變換，變換調(diào)節(jié)第一圖像相對于第二圖 像的方位，其中，當(dāng)?shù)谝缓偷诙D像中相對應(yīng)的圖像特性值之間的位置差是預(yù)定量時， 第一和第二圖像被對準(zhǔn)。該設(shè)備可以包括選擇器，可操作用于選擇第一圖像和第二圖像中重疊的視野 中的至少一部分；顯示裝置，可操作用于顯示標(biāo)識第一圖像中的重疊的視野中的被選擇 的部分中的圖像特性值的第一曲線圖，每個圖像特性值被繪制在該曲線圖上與第一圖像 中具有這樣的圖像特性值的位置相對應(yīng)的點處；顯示裝置還可操作用于，在所顯示的第一曲線圖上疊加第二圖像中的重疊的視 野中的被選擇的部分中的圖像特性值，每個圖像特性值被繪制在所述曲線圖上與第二圖 像中具有這樣的圖像特性值的位置相對應(yīng)的點處，從而第一和第二圖像中相對應(yīng)的圖像 特性值之間的位置差根據(jù)所繪制的圖像特性值之間的距離被確定。選擇器還可操作用于在第一圖像和第二圖像兩者的重疊的視野中選擇第二區(qū) 域；并且顯示裝置還可操作用于顯示標(biāo)識第一圖像中的重疊的視野中的第二區(qū)域中 的圖像特性值的第二曲線圖，每個圖像特性值被繪制在所述曲線圖上與第一圖像中具有這樣的圖像特性值的位置相對應(yīng)的點處，并且在所顯示的第二曲線圖上疊加第二圖像中 的第二區(qū)域中的圖像特性值，每個圖像特性值被繪制在該曲線圖上與第二圖像中具有這 樣的圖像特性值的位置相對應(yīng)的點處，從而第一和第二圖像中相對應(yīng)的圖像特性值之間 的位置差根據(jù)第二曲線圖中所繪制的圖像特性值之間的距離被確定。重疊的區(qū)域可以分別在第一和第二圖像的對端處。顯示裝置還可操作用于顯示矢量顯示器，其中，矢量顯示器同時顯示第一和第 二圖像中的重疊的區(qū)域中每個位置處的色度水平。設(shè)備還可以包括選擇裝置，選擇裝置可操作用于選擇重疊的區(qū)域內(nèi)的區(qū)域并且 在所選擇的區(qū)域被饋送給確定器之前對所選擇的區(qū)域執(zhí)行縮放功能。設(shè)備還可以包括色彩校正器，色彩校正器可操作用于在對準(zhǔn)之前對第一和第二 圖像執(zhí)行色彩校正。根據(jù)另一個方面，提供一種對準(zhǔn)系統(tǒng)，包括連接到根據(jù)所述實施例中任一個的 設(shè)備的被安裝在機(jī)架上的多個相機(jī)元件。根據(jù)另一個方面，提供一種計算機(jī)程序，包含計算機(jī)可讀指令，指令在被裝載 到計算機(jī)時，配置計算機(jī)來執(zhí)行根據(jù)所述實施例中任一個的方法。根據(jù)另一個方面，提供一種存儲介質(zhì)，被配置為存儲計算機(jī)程序。


從以下可以結(jié)合附圖閱讀的說明性實施例的詳細(xì)描述中，本發(fā)明的以上和其它 目的、特征和優(yōu)勢將顯而易見，其中圖1示出根據(jù)本發(fā)明實施例用于捕獲在生成三維圖像中使用的圖像的系統(tǒng)；圖2示出在圖1的系統(tǒng)中使用的工作站；圖3示出使用多個圖2的工作站的圖1的系統(tǒng)；圖4示出與圖2的工作站一起使用的界面的呈現(xiàn)；圖5示出圖2的用戶控制系統(tǒng)中設(shè)置模式的呈現(xiàn)；圖6A到圖6D示出根據(jù)本發(fā)明實施例用于確定滾轉(zhuǎn)畸變的量的跡線模式的呈 現(xiàn)；圖7A到圖7D示出根據(jù)本發(fā)明實施例用于確定透鏡畸變的量的跡線模式的呈 現(xiàn)；以及圖8示出極坐標(biāo)模板。
具體實施例方式參考圖1，示出用于捕獲在生成3D圖像中使用的場景圖像的系統(tǒng)100。系統(tǒng)100 具有相機(jī)機(jī)架(rig) 115，相機(jī)機(jī)架115上安裝兩個相機(jī)105。這些相機(jī)可以是攝像機(jī)或 照相機(jī)。盡管圖1中未示出，但是每個相機(jī)相對于彼此的偏轉(zhuǎn)(yaw)可以改變。具體 地，當(dāng)被安裝在機(jī)架115上時，每個相機(jī)105的俯仰(pitch)和滾轉(zhuǎn)(roll)通常相對于彼 此是固定的。然而，每個相機(jī)105的偏轉(zhuǎn)可以被相互獨立地調(diào)節(jié)。這使得相機(jī)105 “前 束”(toe-in)可以改變。在被適當(dāng)?shù)劓i定(即，固定于機(jī)架115)時，機(jī)架115的偏轉(zhuǎn)、 俯仰和滾轉(zhuǎn)可以一致地移動。機(jī)架115的位置可以用轉(zhuǎn)動臂120適當(dāng)?shù)劓i定。
根據(jù)本發(fā)明實施例，每個相機(jī)105的輸出饋送(feed)被饋送到工作站200中。 在圖1中，這些輸出被標(biāo)為a和b。每個相機(jī)105的輸出饋送包括圖像數(shù)據(jù)。然而，也 可以從每個相機(jī)饋送其它數(shù)據(jù)。例如，也可以從每個相機(jī)饋送元數(shù)據(jù)。元數(shù)據(jù)可以涉及 相機(jī)設(shè)置，例如，每個相機(jī)的光圈設(shè)置、聚焦長度和/或縮放。另外，元數(shù)據(jù)可以包括 有關(guān)相機(jī)操作者或出色取景標(biāo)兵(shotmarker)等的信息。在該實施例中，每個相機(jī)105 的輸出饋送可以使用電線或通過網(wǎng)絡(luò)來連接。實際上，相機(jī)105和工作站200之間的連 接可以是無線的。這意味著，工作站200可以遠(yuǎn)離相機(jī)機(jī)架115。另外，用戶終端125也連接到工作站200。用戶終端125允許用戶在對準(zhǔn)處理 (稍后說明)期間控制工作站200。工作站200也有許多輸出饋送。在具體實施例中， 如稍后將說明的，存在4個輸出饋送，然而，本發(fā)明不限于此并且也可以使用比4更少或 更多的輸出饋送。參考圖2，示出根據(jù)本發(fā)明實施例的工作站200。根據(jù)本發(fā)明實施例的工作站 200包含基于cell處理器的體系架構(gòu)(由索尼、東芝和IBM設(shè)計)，這被專門設(shè)計用于應(yīng) 付大量的數(shù)據(jù)處理。這尤其適合圖像處理任務(wù)。工作站200具有兩個輸入饋送；一個 輸入饋送來自一個相機(jī)105(在圖2中標(biāo)記為“左i/p”和“右i/p”)。如在圖1和圖 2中所述，工作站200有4個輸出饋送；經(jīng)校正的左輸出饋送、經(jīng)校正的右輸出饋送、立 體聲監(jiān)視器輸出饋送和波形監(jiān)視器輸出饋送。稍后將描述這些。另外，在圖2中示出與 用戶終端125的連接。將了解，輸入饋送和輸出饋送的這種配置意味著每對相機(jī)(即，針對每一對左 右兩個相機(jī))設(shè)置一個工作站。該配置可以擴(kuò)展。具體地，如果還可使用高清晰度-串 行數(shù)據(jù)接口(HD-SDI)卡，則該配置可以擴(kuò)展為支持雙鏈路4:4:4輸出。該種類型的輸出 對于顯示立體聲輸出饋送的立體圖(anaglyph)輸出特別有用。稍后，將參考圖4到圖6 來描述工作站200的操作。參考圖3，示出具有多個使用單鏈路HD-SDI的工作站的系統(tǒng)300。在該布置 中，示出兩個工作站200A和200B。然而，在實施例中，本發(fā)明完全可擴(kuò)展來從任意數(shù) 目的相機(jī)對接收輸入。第一工作站200A擁有來自第一和第二相機(jī)對的輸入。換而言之， 存在到第一工作站200A中的4個分開的相機(jī)饋送。類似地，第二工作站200B擁有來自 第三和第四相機(jī)對的輸入。第一工作站200A的輸出饋送是第一相機(jī)對的輸出經(jīng)校正的左饋送和第一相機(jī)對 的輸出經(jīng)校正的右饋送。另外，還從第一工作站200A提供第二相機(jī)對的輸出經(jīng)校正的左 饋送和第二相機(jī)對的輸出經(jīng)校正的右饋送。類似地，第二工作站200B的輸出饋送是第三 相機(jī)對的輸出經(jīng)校正的左饋送和第三相機(jī)對的輸出經(jīng)校正的右饋送。另外，還從第二工 作站200B提供第四相機(jī)對的輸出經(jīng)校正的左饋送和第四相機(jī)對的輸出經(jīng)校正的右饋送。第一和第二工作站200A和200B的這些輸出饋送被饋送到交叉點交換器 (XPT) 305。XPT 305可以要么是交叉點要么是包括交叉點的交換器。本領(lǐng)域技術(shù)人員將 了解，交叉點使得任意輸入可以被映射到任意輸出，并且交換器使得在改變輸入到輸出 的映射時可以施加效果。所以，可以利用擦拭或淡入效果來改變輸出相機(jī)對。另外，XPT 305提供了左輸出饋送和右輸出饋送。XPT 305基于XPT305的操作 者所進(jìn)行的選擇來選擇來自用于監(jiān)視的相機(jī)對之一的輸出饋送。然而，也可以改為是用戶終端125控制XPT 305。換而言之，XPT305的操作者或用戶終端125中的任一者可以 選擇相機(jī)對中的哪些將被顯示在左右監(jiān)視器上并且XPT 305選擇來自合適的相機(jī)對的經(jīng) 校正的左右饋送。左右輸出饋送和左右輸出監(jiān)視器饋送被饋送到監(jiān)視工作站310中。監(jiān)視工作站 310基于Cell處理器，因為Cell處理器特別適合處理上述圖像處理任務(wù)。監(jiān)視工作站310的輸出是節(jié)目立體聲監(jiān)視器輸出、預(yù)覽立體聲監(jiān)視器輸出和節(jié) 目/預(yù)覽波形或立體聲監(jiān)視器輸出。技術(shù)人員將了解，節(jié)目立體聲監(jiān)視器輸出是被發(fā)送 用于廣播的直播饋送，預(yù)覽立體聲監(jiān)視器輸出是使得可以“離播地”(off-air)嘗試不同 效果的直播饋送版本，并且節(jié)目/預(yù)覽波形是包含節(jié)目立體聲監(jiān)視器輸出和預(yù)覽立體聲 監(jiān)視器輸出任一者的雙路饋送(dual feed)。在圖3中所描述的實施例的可替換實施例中，可以使用雙鏈路HDSDI來替代單 鏈路 HD-SDI。輸入相機(jī)饋送是高清晰度的，并且具體地是1920x1080像素分辨率的幀率為 23.98 逐行分段幀(Progressive Segmented Frame，PsF)、24PsF> 25Psf> 29.97PsF> 3OPsF 50隔行(i)、59.94i或60i中的一種。將了解，也可以支持50逐行(P)、59.94P和60P, 但是在該情況中，每個工作站200A和200B將由于工作站200中HD-SDI輸入的數(shù)目而 只能支持一個相機(jī)對。另外，將了解，相機(jī)數(shù)目的增大將增大所需要的處理功率?？商?換地，輸入相機(jī)饋送可以具有1280x720像素的分辨率，具有50P、59.94或60P之一。由 監(jiān)視工作站310提供的輸出饋送可以是與輸入相機(jī)饋送的類型相同的類型。然而，這不 是必須的。實際上，輸出饋送可以是與輸入相機(jī)饋送的類型不同的類型。例如，輸出饋 送可以被下轉(zhuǎn)換(downconvert)成可以記錄到記錄介質(zhì)上的低分辨率圖像。這對于“急 速”編輯(“rush” edit)可能是有用的，通過“急速”編輯，對所捕獲的素材執(zhí)行粗裁 (rough cut)來確保所有所需要的鏡頭已經(jīng)被捕獲?，F(xiàn)在將描述根據(jù)本發(fā)明實施例的對準(zhǔn)處理。該處理使得來自相機(jī)對的左右相機(jī) 的輸出饋送可以被對準(zhǔn)，即便安裝在相機(jī)機(jī)架115上的左右相機(jī)105沒有被完全對準(zhǔn)也可 以如此。將明白，由于對準(zhǔn)處理需要像素特性信息，所以來自左右相機(jī)的輸出饋送可能 在對準(zhǔn)處理開始之前經(jīng)歷色彩匹配。如果3D機(jī)架包括波束分裂器則尤其如此。盡管不 是必須，但是色彩匹配確保在進(jìn)行位置對準(zhǔn)處理之前，每個輸出的相機(jī)饋送中的同源像 素(homologous pixel)的色彩特性相匹配。這可以提高圖像被對準(zhǔn)的準(zhǔn)確度。為了執(zhí)行 色彩匹配，在對準(zhǔn)之前，用戶將在左右輸出相機(jī)饋送圖像上標(biāo)識出至少一個區(qū)域，這至 少一個區(qū)域應(yīng)當(dāng)嚴(yán)格色彩匹配。根據(jù)該信息，用戶可以確定要對該區(qū)域以及對整個圖像 施加的色彩匹配的水平。這是通過使用專門的用戶界面來調(diào)節(jié)一種或兩種色彩的參數(shù)來 實現(xiàn)的。在本發(fā)明的實施例中，用戶使用三個控制集來控制色彩匹配；每個控制集針對 R、G和B特性中的一個。這三種類型的控制在廣播視頻處理領(lǐng)域中是已知的，在這里 將不再進(jìn)一步描述。此外，盡管在實施例中，該控制器被集成到用戶終端中，但是本發(fā) 明不限于此。實際上，可以構(gòu)想到這樣的控制器可以與終端分離。一旦色差已被確定，則這給出對由左右相機(jī)捕獲的色彩之間的差的指示并且從 而可以應(yīng)用于來自輸出饋送的所有圖像。在色彩校正之后，來自相機(jī)對中的左相機(jī)的經(jīng)校正的輸出饋送被顯示為401。類似地，來自同一相機(jī)對中的右相機(jī)的經(jīng)校正的輸出饋送被顯示為402。用戶終端125的 用戶選擇所顯示的經(jīng)校正的左相機(jī)饋送401中的區(qū)域404并且選擇所顯示的經(jīng)校正的右相 機(jī)饋送402中的區(qū)域403。由于所選擇的區(qū)域403和404將被用于對準(zhǔn)左右圖像401和 402，所以所選擇的區(qū)域應(yīng)當(dāng)包括場景中既被左相機(jī)又被右相機(jī)捕獲的特征。在具體實施 例中，由于既被左相機(jī)又被右相機(jī)捕獲的場景非常相似，所以存在許多既被左相機(jī)又被 右相機(jī)捕獲的特征。然而，如果既被左相機(jī)又被右相機(jī)捕獲的場景在它們的視野中只有 很小的重疊區(qū)域，則所選擇的區(qū)域應(yīng)當(dāng)至少包括該重疊的一部分。來自左相機(jī)的經(jīng)校正的輸出饋送401的被選區(qū)域404’被顯示在來自左相機(jī)的 經(jīng)校正的輸出饋送401的下面。另外，來自右相機(jī)的經(jīng)校正的輸出饋送402的被選區(qū)域 403’被顯示在來自右相機(jī)的經(jīng)校正的輸出饋送402的下面。所顯示的被選區(qū)域403’和 404，是被進(jìn)行了放大的被選區(qū)域403和404的版本。換而言之，被選區(qū)域401和402 中的每一個被進(jìn)行數(shù)字放大并且經(jīng)放大區(qū)域的結(jié)果被顯示在所顯示的被選區(qū)域403’和 404，中，其中所顯示的被選區(qū)域403，和404，分別在來自左相機(jī)和右相機(jī)的經(jīng)校正的 輸出饋送的下面。通過進(jìn)行放大，被選區(qū)域的尺寸增大并且容易由用戶觀察。在來自左相機(jī)的經(jīng)校正輸出饋送的所顯示被選區(qū)域404’內(nèi)的第一區(qū)域404A和 第二區(qū)域404B以及在來自右相機(jī)的經(jīng)校正輸出饋送的所顯示被選區(qū)域403’內(nèi)的第一區(qū) 域403A和第二區(qū)域403B通過用戶終端125來確定。顯然，兩個第一區(qū)域403A和404A 選擇垂直像素列的范圍，并且第二區(qū)域403B和404B選擇水平像素行的范圍。然而，本 發(fā)明不限于此。第一區(qū)域403A和404A以及第二區(qū)域403B和404B都可以選擇任意方向 的采樣點的范圍。實際上，這些方向不必相同。在顯示400上，提供顯示波形的部分410。在波形顯示部分410中，顯示第一波 形415和第二波形417。這些波形一般顯示像素特性，例如，像素或像素群組內(nèi)的紅、 綠、藍(lán)(RGB)分量。然而，本發(fā)明不限于此。實際上，這些波形可以顯示像素或像素 群組的任意特性，例如，亮度水平、色差水平(Cr、Cb水平)等。在實施例中，第一波 形415顯示多個跡線(trace)的疊加，其中，每個跡線對應(yīng)于在圖4的χ方向上延伸的所 選擇的像素行之一。第一波形415的χ軸上的每個點對應(yīng)于沿第二區(qū)域404Β的χ軸的像 素位置。所顯示的這條線是紅色的并且在第一波形中具有點404C。疊加其上的是示出通過對區(qū)域403Β執(zhí)行類似的技術(shù)所生成的波形的線。所顯示 的這條線是青色的并且在第一波形中具有點403C。這里應(yīng)當(dāng)注意，第一波形中的這兩條 線是不同顏色的，以能夠相互區(qū)分。然而，也可以在這些線重疊的地方，顯示第三種顏 色(在實施例中，為白色)。第二波形417顯示多個跡線的疊加，其中，每個跡線對應(yīng)于在圖4的y方向上延 伸的所選擇的像素行之一。第二波形417的y軸上的每個點對應(yīng)于沿第一區(qū)域404A的y 軸延伸的所選擇的像素行之一。該跡線是紅色的并且在第二波形中具有點404D。疊加其上的是示出針對第二區(qū)域403B的類似跡線的線。該跡線是青色的并且具 有點403D。任意兩種不同顏色都可以用來區(qū)分這些線，并且可以用第三種顏色(在實施 例中，為白色)來顯示共同的跡線。在點403C和404C處，可以看到非常相似的像素特性。實際上，點403C對應(yīng)于 第二放大區(qū)域403，的場景中的按鈕403E。類似地，點404C對應(yīng)于被放大的第一區(qū)域404’的場景中的按鈕404E。這些按鈕是由左相機(jī)和右相機(jī)捕獲的場景內(nèi)的相同特征。 然而，從第一波形415來看，很顯然點403C和404C在χ方向上不位于相同位置。這意 味著，來自左相機(jī)401的經(jīng)校正的輸出饋送和來自右相機(jī)402的經(jīng)校正的輸出饋送沒有被 完全對準(zhǔn)。換而言之，來自左相機(jī)401的經(jīng)校正的輸出饋送和來自右相機(jī)402的經(jīng)校正 的輸出饋送不完全重疊。實際上，通過以這種疊加方式提供第一波形，可以確定來自左 相機(jī)401的經(jīng)校正的輸出饋送對準(zhǔn)來自右相機(jī)402的經(jīng)校正的輸出饋送的右方。類似地，點403D和404D示出非常相似的像素特性。實際上，點403D對應(yīng)于 第一區(qū)域404中的按鈕404F。類似地，點404D對應(yīng)于第二區(qū)域403中的按鈕403F。換 而言之，線403D和404D表示由左相機(jī)和右相機(jī)捕獲的場景內(nèi)的相同特征。然而，從第 二波形417可見，顯然點403D和404D在y方向上不位于相同位置。因此，按鈕403F 和404F在y方向上未完全對準(zhǔn)。這意味著，來自左相機(jī)401的經(jīng)校正的輸出饋送和來自 右相機(jī)402的經(jīng)校正的輸出饋送在y方向上未完全對準(zhǔn)。實際上，通過以這種疊加方式 提供第二波形417，可以確定來自左相機(jī)的經(jīng)校正的輸出饋送未被對準(zhǔn)并且實際上在來自 右相機(jī)402的經(jīng)校正的輸出饋送的下方。實際上，如前所述，第一波形415中χ方向上的每個點對應(yīng)于第二區(qū)域403B和 404B的χ方向上的像素位置，并且第二波形417的y方向上的每個點對應(yīng)于第一區(qū)域 403A和404A的y方向上的像素位置。這意味著，通過得知點403C和404C之間的距 離，可以確定在來自左相機(jī)401的經(jīng)校正的輸出與來自右相機(jī)402的經(jīng)校正的輸出之間在 χ方向上的偏移。類似地，通過得知點403D和404D之間的距離，可以確定在來自左相 機(jī)401的經(jīng)校正的輸出與來自右相機(jī)402的經(jīng)校正的輸出之間在y方向上的偏移。這意 味著，通過簡單地分析點403C和404C之間以及點403D和404D之間的距離，就可以確 定來自左相機(jī)401的經(jīng)校正的輸出和來自右相機(jī)402的經(jīng)校正的輸出在特定方向上何時被 充分對準(zhǔn)。將了解，在經(jīng)校正的輸出在特定方向上偏移預(yù)定距離的情況下，對準(zhǔn)可能是充 分的。例如，當(dāng)拍攝3D連續(xù)鏡頭(footage)時，有必要在y方向上對準(zhǔn)圖像的同時將經(jīng) 校正的輸出在χ方向上偏移預(yù)定量。然而，對于圖像拼接，希望在χ方向和y方向上都 完全對準(zhǔn)圖像。本發(fā)明不限于3D或圖像拼接，并且也可以構(gòu)想到任意方向上的任意水平 的對準(zhǔn)。例如，在圖像穩(wěn)定化中，完全對準(zhǔn)是有用的。此外，還可以對準(zhǔn)在不同時刻拍 攝的圖像。可以使用該信息來調(diào)節(jié)位于相機(jī)機(jī)架115上的相機(jī)105的對準(zhǔn)。為了這樣做， 將由工作站200生成控制伺服電機(jī)的適當(dāng)信息并且將其饋送給伺服控制器(未示出)。 此外，該信息可以提供給手動機(jī)架操作員。然而，為了降低機(jī)架115的成本和設(shè)計復(fù)雜 度，在實施例中，可以變換來自左或右相機(jī)401或402的經(jīng)校正的輸出圖像來實現(xiàn)這樣的 對準(zhǔn)?，F(xiàn)在，將描述來自左相機(jī)401的經(jīng)校正的輸出饋送的該變換。盡管，僅描述一個 輸出饋送的變換，但是本發(fā)明不限于此并且任意一個或兩個圖像都可以被變換。相機(jī)可以進(jìn)行的三種移動是偏轉(zhuǎn)(繞著圖4的χ方向旋轉(zhuǎn))、俯仰(繞著圖4的 y方向旋轉(zhuǎn))和滾轉(zhuǎn)(繞著相機(jī)的光軸旋轉(zhuǎn))?？梢栽趤碜韵鄼C(jī)的輸出饋送中復(fù)制相機(jī)的 這種移動。為了這樣做，使用4x4矩陣中的旋轉(zhuǎn)、縮放、變換和投影的集合來變換輸出 饋送。這種類型的變換有時稱為模型視圖投影矩陣(model view projection matrix)。該變
11換需要左相機(jī)和右相機(jī)的視野。如前所述，可以確定來自左相機(jī)401的輸出饋送位于來自右相機(jī)402的輸出饋送 的右方。為了對此進(jìn)行校正，并且如果需要，對左相機(jī)401的輸出饋送施加將左相機(jī)401 的輸出向右移動的偏轉(zhuǎn)變換。還可以構(gòu)想到平面移位。在來自左相機(jī)401的輸出饋送被 變換之后，點403C和404C之間的距離被測量。如果點403C和404C之間的距離處在某 一閾值(例如，對于3D連續(xù)鏡頭是所希望的瞳孔間距離士 1像素)或者該閾值以下，則 偏轉(zhuǎn)變換停止。然而，如果點403C和404C之間的距離在閾值之上，則偏轉(zhuǎn)變換繼續(xù)。此外，如上所述，在實施例中，由于知道區(qū)域404B和403B的寬度(S卩，χ方向 上的長度)，知道波形415的長度(即，該波形表示多少像素)，并且通過確定點403C和 404C之間的距離知道相機(jī)的視野(或等同的信息)，所以可以確定恰當(dāng)?shù)貙?zhǔn)經(jīng)校正的輸 出饋送需要多少偏轉(zhuǎn)變換。相比于迭代方法，這增大了對準(zhǔn)進(jìn)行的速度。在圖像在χ方向上被恰當(dāng)?shù)貙?zhǔn)之后，來自左相機(jī)401的經(jīng)校正的輸出饋送被施 加俯仰變換來將該饋送向上移。這是因為來自左相機(jī)的輸出饋送被對準(zhǔn)在來自右相機(jī)的 輸出饋送下方。在來自左相機(jī)401的輸出饋送被變換之后，點403D和404D之間的距離 被測量。如果點403D和404D之間的距離處在某一閾值(例如，完全對準(zhǔn)士 1像素)或 該閾值以下，則俯仰變換停止。然而，如果點403D和404D之間的距離在閾值之上，則 俯仰變換繼續(xù)。此外，在實施例中，知道區(qū)域404Α和403Α的高度(即，y方向上的長度)，知 道波形417的長度(即，該波形表示多少像素)并且通過確定兩個點403D和404D之間 的距離知道相機(jī)的視野(或等同信息)。因此，可以確定要恰當(dāng)?shù)貙?zhǔn)輸出饋送需要多少 俯仰變換。相比于迭代方法，這增大了對準(zhǔn)進(jìn)行的速度。這里應(yīng)當(dāng)注意，盡管以上恰當(dāng)?shù)膶?zhǔn)是通過在對一個圖像施加水平偏移之后施 加垂直偏移來執(zhí)行的，但是本發(fā)明不限于此。例如，可能需要對來自相機(jī)的輸出饋送施 加滾轉(zhuǎn)旋轉(zhuǎn)校正。這將去除對任一相機(jī)施加的任意不正確的滾轉(zhuǎn)角度。稍后，將參考圖 6A來描述涉及滾轉(zhuǎn)旋轉(zhuǎn)的校正的本發(fā)明實施例。此外，如以上所述，對準(zhǔn)處理假定兩個 相機(jī)的聚焦長度相同。然而，在不能使用俯仰、偏轉(zhuǎn)和滾轉(zhuǎn)校正來獲得對準(zhǔn)的情況中， 施加縮放校正。這通過縮放一個或兩個圖像來實現(xiàn)。如果必要，在各個不同的聚焦長度 時，進(jìn)行施加俯仰、偏轉(zhuǎn)和滾轉(zhuǎn)校正的處理。除了第一和第二波形415和417以外，還提供矢量顯示器420。矢量顯示器420 是已知的并且繪出色度信息。在本發(fā)明實施例中的矢量顯示器420上，示出在第一波形 上繪出的像素的色度信息。通過繪制色度信息，可以執(zhí)行色彩匹配。所以，通過在場景 中選擇應(yīng)當(dāng)具有相同顏色的一個或多個特征，可以更改由任意相機(jī)捕獲的特征的色彩特 性直到矢量顯示器420上的色彩相同為止。另外還顯示第一監(jiān)視器輸出406和第二監(jiān)視器輸出405。第一監(jiān)視器輸出406示 出來自左相機(jī)的輸出饋送401和來自右相機(jī)的輸出饋送402的立體圖呈現(xiàn)。在第二監(jiān)視 器405中示出放大區(qū)域403和404的立體圖呈現(xiàn)。在第一監(jiān)視器輸出406附近提供按鈕425(或按鈕已經(jīng)被按壓的指示器)，按鈕 425使得可以顯示來自左右相機(jī)的輸出饋送401和402之間的差而不是立體圖呈現(xiàn)。在第 二監(jiān)視器輸出405附近設(shè)置了類似的按鈕430，其示出第一區(qū)域403和第二區(qū)域404之間的差的呈現(xiàn)。將了解，在左右相機(jī)被對準(zhǔn)時，即，來自左右相機(jī)的圖像輸出被對準(zhǔn)時， 輸出饋送之間的差將為0。換而言之，監(jiān)視器輸出將是灰色的。然而，當(dāng)圖像未被完美 地對準(zhǔn)時，在每個像素處將顯示差分值。該差分值將在第一監(jiān)視器405上被呈現(xiàn)為指示 出對準(zhǔn)不正確的區(qū)域的有色陰影。因此，差分特征提供附加檢查來確保使用波形部分410 所確定的對準(zhǔn)是正確的。盡管以上提及的是作為具體顏色的差分信號，但是本發(fā)明不限 于此。實際上，可以構(gòu)想到指示正的或負(fù)的差分值的任意顏色。在確定圖像被正確對準(zhǔn)之后，從左右相機(jī)饋送輸出的圖像被縮放來確保使由之 前的調(diào)節(jié)造成的任意空白區(qū)域消失并且輸出饋送填滿可用的畫面尺寸。在來自左相機(jī)和右相機(jī)的輸出饋送正被對準(zhǔn)時，用戶有權(quán)使用設(shè)置畫面。該設(shè) 置畫面在單獨的計算機(jī)上運行。然而，其也可以由工作站200運行，盡管其通?？梢栽?單獨的屏幕上觀察。在圖5中示出設(shè)置畫面的呈現(xiàn)。設(shè)置畫面500用來控制對準(zhǔn)，而且 還包括左右相機(jī)515的圖形表示。其向用戶提供觀想相機(jī)布置的機(jī)會。另外，存在彼此 疊加的左右相機(jī)的圖形表示520。此外，在區(qū)域505中示出在對準(zhǔn)過程期間確定的并且由 用戶終端125控制的變換參數(shù)。這些參數(shù)可以由用戶手動調(diào)節(jié)，如果他們需要對對準(zhǔn)后 的圖像施加某些特殊的效果(例如，增大的前束)的話。通過調(diào)節(jié)相機(jī)對前束或水平平 面移位，明顯的3D收斂被改變。這有將對象相對于將要顯示所產(chǎn)生的圖像的屏幕的平面 向前或向后移動的效果。此外，在恰當(dāng)?shù)貙?zhǔn)圖像來拍攝3D圖像的情況中，有必要讓χ方向上的圖像之 間具有位移來生成3D圖像。對對準(zhǔn)的校正可以使用用戶區(qū)域505來觀想。最終，表示 對左右相機(jī)施加的變換的網(wǎng)格也被顯示。這是有用的，因為其使得用戶可以確定哪種變 換已經(jīng)被施加于圖像來校正對準(zhǔn)。實際上，應(yīng)當(dāng)注意，變換復(fù)制相機(jī)的移動，而不是復(fù) 制圖像將在其上被觀察的平面的移動。由于預(yù)期將只有很小的校正將被施加于圖像來恰 當(dāng)?shù)貙?zhǔn)圖像，所以，這些不容易被系統(tǒng)的用戶辨別。因此，在網(wǎng)格上施加夸大變換的 權(quán)重，使得用戶可以容易地觀察變換。此外，應(yīng)當(dāng)注意，提供這，用戶容易確定相機(jī)對 準(zhǔn)得很不好并且它們應(yīng)當(dāng)被手動調(diào)節(jié)并且該校正處理應(yīng)重新開始。這對于減少用來恰當(dāng) 地對準(zhǔn)圖像要花費的時間是有用的。盡管已經(jīng)參考恰當(dāng)?shù)貙?zhǔn)圖像說明了以上內(nèi)容使得可以從已對準(zhǔn)的圖像來制作 3D圖像，但是本發(fā)明不限于此。實際上，存在其中兩個或更多圖像的對準(zhǔn)非常有用的許 多應(yīng)用。例如，在圖像拼接(其中，從多個合成圖像制成全景圖)中，有必要確保重疊 的區(qū)域是對準(zhǔn)的。在該情況中，對準(zhǔn)每個圖像的不同部分是特別有用的。例如，對準(zhǔn)不 同圖像的不同區(qū)域的各個部分是有用的。所以，在圖像拼接的情況中，將在一個圖像的 最左側(cè)的區(qū)域與在另一圖像的最右側(cè)的區(qū)域?qū)?zhǔn)是有用的。換而言之，將圖像的相互重 疊的區(qū)域完全對準(zhǔn)是有用的。如前所述，在本發(fā)明的實施例中，可以針對滾轉(zhuǎn)畸變和透鏡畸變進(jìn)行校正。在 圖4中，每個圖像的兩個區(qū)域被選擇。這些圖像通過分析區(qū)域內(nèi)的像素特性來對準(zhǔn)。圖 6A到圖6D描述了更容易針對滾轉(zhuǎn)畸變和透鏡畸變進(jìn)行校正的另一實施例。圖6A示出沒有滾轉(zhuǎn)畸變的圖像。圖6B示出被施加了 20°逆時針滾轉(zhuǎn)畸變的和 圖6A—樣的圖像。在圖像600A中，內(nèi)圓形跡線605A和外圓形跡線610A被選擇，而 在滾轉(zhuǎn)畸變的圖像600B中，內(nèi)圓形跡線605B和外圓形跡線610B被選擇。內(nèi)圓形跡線和外圓形跡線是被分析的半徑范圍的邊界。兩個圖像中的圓形跡線與場景中的相同特征 相交，即，圖像600A中的網(wǎng)615A和滾轉(zhuǎn)畸變的圖像600B中的615B的第一部分，和圖 像600A中的網(wǎng)620A和滾轉(zhuǎn)畸變的圖像600B中的620B的第二部分。從圖6A和圖6B可見，在內(nèi)圓形跡線和外圓形跡線之間存在寬度為50像素的區(qū) 域(內(nèi)圓形跡線具有距圖像中心100像素的半徑，并且外圓形跡線具有距圖像中心150像 素的半徑)。并且，在圖6A和圖6B中可見，圖像600A和600B分別被水平線625A和 625B對半分開。該筆直的水平線是徑向(radial)特征并且定義0°。此外，該直線穿過 捕獲該圖像的相機(jī)的光軸，盡管不一定如此。圖6C示出與圍繞圖像600A中的內(nèi)外圓形跡線之間的區(qū)域內(nèi)的圓周的采樣點的 圖像特性相對應(yīng)的波形，并且圖6D示出與圍繞圖像600B中的內(nèi)外圓形跡線之間的區(qū)域 內(nèi)的圓周的采樣點的圖像特性相對應(yīng)的波形。這是波形650D。另外，在圖6D中，圖 6C的波形650C被繪制在相同的軸上。這使得容易在波形之間進(jìn)行比較。具體地，波形由指定范圍中的不同半徑處許多單個的跡線的疊加組成。單個 的跡線是針對沿那個半徑的圓形路徑以等間距的點采樣的像素的像素特性相對角度的線 圖。在采樣點不是精確地落在像素位置上的地方，取最接近的4個像素并且特性被進(jìn)行 雙線性插值來估計那個采樣點處的特性。以與上述方式類似的方式，圖像特性是每個像 素的RGB值，盡管也可以構(gòu)想到諸如Cr，Cb值之類的任意恰當(dāng)?shù)奶匦曰虿煌牧硪惶?性。在實施例中，由于圖像由像素組成并且內(nèi)外的跡線是圓形的，所以圖像中特性 被測量的點不一定位于像素點處。更具體地，在實施例中，由于圖像由正交網(wǎng)格上的像 素組成，并且像素采樣點在極坐標(biāo)網(wǎng)格上，于是圖像中特性被測量的點不一定處于像素 點處。因此，采樣點處的特性必須要么從最近的像素位置插值或從最近的4個像素位置 進(jìn)行雙線性插值或用其它措施插值。從0°開始，每個半徑處的每個采樣點的圖像特性的值被測量。在環(huán)繞圖像600A的所有值都已經(jīng)被計算之后，生成波形650C。波形650C實 際上是不同半徑的許多跡線的疊加。從波形650C可見，點655C和660C特別顯眼。它 們分別對應(yīng)于圖像600A中的網(wǎng)615A和620A的部分。從χ軸可見，點655C大約5°而 點660C大約185°。對滾轉(zhuǎn)畸變的圖像600Β執(zhí)行類似的過程。這樣的分析產(chǎn)生圖6D中所示的波形 650D。從圖6D中可見，點660D對應(yīng)于圖像600Β中的部分620Β而點655D對應(yīng)于圖 像600Β中的部分615Β。在圖6D中，顯而易見點660D位于約165°而點655D位于約 345°。通過比較波形650C和650D，顯而易見圖像600Β是圖像600Α的滾轉(zhuǎn)畸變的版 本并且滾轉(zhuǎn)畸變量是20°。而且，通過比較波形650C和650D，顯然滾轉(zhuǎn)是逆時針方向 的。盡管已經(jīng)參考測量兩個圖像之間的滾轉(zhuǎn)畸變描述了前述滾轉(zhuǎn)畸變校正，但是也 可以確定單個相機(jī)上的滾轉(zhuǎn)畸變。為了實現(xiàn)這一點，如果場景中的特征處在已知的角 度，則可以使用以上技術(shù)來測量所捕獲的圖像中該特征的角度。通過測量圖像中該特征 的角度，可以確定相機(jī)的滾轉(zhuǎn)量。一旦滾轉(zhuǎn)畸變被計算出，則可以將滾轉(zhuǎn)畸變變換施加于圖像來針對滾轉(zhuǎn)畸變進(jìn)行校正。這可以通過施加逐行校正來迭代地校正直到跡線匹配為止。參考圖7A，示出沒有透鏡畸變的棋盤形圖案700A。在該圖案中，畫出第一徑 向線705A和第二徑向線710A。這提供用于透鏡畸變分析的邊界線。第一徑向線705A 和第二徑向線710A橫跨圖案700A并且穿過圖像700A的中心。該情況中該圖像的中心 是相機(jī)715A的光軸，但是本發(fā)明不限于此。實際上，技術(shù)人員將了解，圖像的中心可以 在圖像700A的任意適當(dāng)?shù)狞c處。在圖7C中示出與沒有透鏡畸變的棋盤形圖案700A相對應(yīng)的波形750C。該波 形由指定范圍中不同角度的許多單個的跡線的疊加組成。單個的跡線是針對沿那個角度 的徑向路徑在等間距的點處采樣的像素的像素特性相對距圖像中心的距離的線圖。由于 采樣點是極坐標(biāo)的并且像素布置在正交網(wǎng)格中，所以采樣點未嚴(yán)格匹配像素位置。在采 樣點沒有精確地落在像素位置的情況中，取最接近的4個像素并且特性被進(jìn)行雙線性插 值來估計那個采樣點處的特性。然而，構(gòu)想到諸如鄰接插值之類的其它插值方法。如以上關(guān)于圖6A到圖6D所說明的，由于線705A和710A不一定是筆直的，所 以在離開中心715的位置處的圖像特性值被計算出作為最接近的4個像素的雙線性插值。 還如上所述，每個位置的圖像特性被繪制在波形上。換而言之，線705A和710A之間每 個位置的圖像特性被繪制在波形750C上。在圖7C中可見，755C處的波形類似于方波脈沖群。這是由于線705A和710A之 間的距離很小并且棋盤形圖案具有不同的白色和黑色的塊，在線705A和710A之間的距 離較小的情況下，這些塊看起來像從中心開始以相同的距離從黑色變?yōu)榘咨?。然而，?向圖像700A的外部，線705A和710A之間的距離增大。這意味著，在區(qū)域760C中，跨 許多不同的像素位置發(fā)生從黑色向白色的改變。這導(dǎo)致具有許多不同轉(zhuǎn)變的區(qū)域760C。圖7B讓圖7A的棋盤形圖像被施加大量負(fù)的透鏡畸變。這示出為圖像700B。 第一線705B和第二線710B被繪出橫跨圖像700B。與圖7A類似，第一線705B和第二 線710B在點715B處穿過圖像的中心。第一和第二線705B和710B的位置與圖7A中的 圖像700A中的相同。在圖7D中示出與圖像700B相對應(yīng)的波形。以與關(guān)于圖7C描述的方式類似的 方式，在圖7D中，部分755D類似圖7C中的部分755C。這是因為，在接近圖像700B 的中心715B時第一線705B和710B之間的距離很小。圖7C和圖7D的波形通常會被繪 制在相同軸上這樣容易進(jìn)行比較。然而，朝向圖像700B的外部區(qū)域，透鏡畸變具有“擠壓”圖像的效果。換而言 之，黑白轉(zhuǎn)變之間的像素數(shù)隨著接近圖像700B的邊緣而減小。這可以在圖7D中看到。 如前所述，部分755D類似于圖7C中相對應(yīng)的部分755C。然而，在部分760D中，黑白 轉(zhuǎn)變之間的距離在它們變得越接近的范圍內(nèi)改變。盡管未被示出，但是如果在該圖像中 存在較大程度的正的透鏡畸變，這也將是可辨識的。具有正的透鏡畸變，圖像也看起來
“被擠壓”。此外，如在之前的示例中一樣，由于圖7D的χ軸表示圖像中的位置，所以可以 識別施加于圖像700B的透鏡畸變量。這使得可以容易地確定所需要的校正量。圖8示出可以施加于圖像來輔助兩個圖像的對準(zhǔn)的極坐標(biāo)跡線模板800。極坐 標(biāo)跡線800包括外圓形跡線810和內(nèi)圓形跡線820，其示出圓周波形中各個跡線的半徑的范圍和徑向波形中各個跡線的角度的范圍。它們包圍的區(qū)域與前述被選擇的區(qū)域404A和 404B類似。這使得兩個有大小的圓形跡線中的一個能夠被施加于兩個圖像。這用來針 對旋轉(zhuǎn)誤差進(jìn)行校正，如參考圖6A到圖6D所述的。另外，提供在外圓形跡線810的中 心處相交的徑向線825。這兩條徑向線使得能夠校正透鏡畸變，如參考圖7A到圖7D所 述的。已經(jīng)參考工作站和用戶終端描述了前述實施例。然而，本發(fā)明可以以不同方式 實施。例如，工作站和用戶終端可以集成到包括所有必要的用戶輸入設(shè)備的一個產(chǎn)品。 此外，本發(fā)明的實施例可以是包含計算機(jī)可讀指令的計算機(jī)程序。此外，計算機(jī)程序可 以包含在信號中，這些信號可以通過網(wǎng)絡(luò)(例如互聯(lián)網(wǎng))轉(zhuǎn)送，或者存儲在諸如光盤之類 的存儲介質(zhì)上。最終，本發(fā)明可以實施為包含計算機(jī)程序的存儲介質(zhì)。盡管這里參考附圖詳細(xì)描述了本發(fā)明的說明性實施例，但是可以理解，本發(fā)明 不限于這些精確的實施例，并且本領(lǐng)域技術(shù)人員可以在不偏離由權(quán)利要求限定的本發(fā)明 的范圍和精神的情況下實行各種更改和修改。
權(quán)利要求
1.一種將由第一相機(jī)捕獲的第一圖像與利用第二相機(jī)捕獲的圖像的至少一個片段對 準(zhǔn)的方法，由所述第一相機(jī)和第二相機(jī)捕獲的圖像具有重疊的視野，該方法包括在所述第一圖像中，確定指示所述重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；在所述第二圖像中，確定指示所述重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；確定所述第一圖像中的所述重疊的視野中和所述第二圖像中的所述重疊的視野中相 對應(yīng)的圖像特性值之間的位置差；對所述第一圖像施加變換，所述變換調(diào)節(jié)所述第一圖像相對于所述第二圖像的方 位，其中，當(dāng)所述第一圖像和第二圖像中相對應(yīng)的圖像特性值之間的位置差是預(yù)定量 時，所述第一圖像和第二圖像被對準(zhǔn)；選擇所述第一圖像和所述第二圖像中所述重疊的視野中的至少一部分； 顯示標(biāo)識所述第一圖像中的所述重疊的視野中的被選擇的部分中的圖像特性值的第 一曲線圖，每個圖像特性值被繪制在所述曲線圖上與所述第一圖像中具有這樣的圖像特 性值的位置相對應(yīng)的點處；以及在所顯示的第一曲線圖上疊加所述第二圖像中的所述重疊的視野中的被選擇的部分 中的圖像特性值，每個圖像特性值被繪制在所述曲線圖上與所述第二圖像中具有這樣的 圖像特性值的位置相對應(yīng)的點處，從而所述第一圖像和第二圖像中相對應(yīng)的圖像特性值 之間的位置差根據(jù)所繪制的圖像特性值之間的距離被確定。
2.根據(jù)權(quán)利要求1所述的方法，包括在所述第一圖像和所述第二圖像兩者的所述重疊的視野中選擇第二區(qū)域； 顯示標(biāo)識所述第一圖像中的所述重疊的視野中的所述第二區(qū)域中的圖像特性值的第 二曲線圖，每個圖像特性值被繪制在該曲線圖上與所述第一圖像中具有這樣的圖像特性 值的位置相對應(yīng)的點處；在所顯示的第二曲線圖上疊加所述第二圖像中的所述第二區(qū)域中的圖像特性值，每 個圖像特性值被繪制在該曲線圖上與所述第二圖像中具有這樣的圖像特性值的位置相對 應(yīng)的點處，從而所述第一圖像和第二圖像中相對應(yīng)的圖像特性值之間的位置差根據(jù)所述 第二曲線圖中所繪制的圖像特性值之間的距離被確定。
3.根據(jù)權(quán)利要求1所述的方法，其中，所述重疊的區(qū)域分別在所述第一圖像和第二圖 像的對端處。
4.根據(jù)權(quán)利要求1所述的方法，還包括顯示矢量顯示器，其中，所述矢量顯示器同時 顯示所述第一圖像和第二圖像中的所述重疊的區(qū)域中每個被選擇的位置處的色度水平。
5.根據(jù)權(quán)利要求1所述的方法，包括選擇所述重疊的區(qū)域內(nèi)的區(qū)域并且在執(zhí)行所 述確定步驟之前對所選擇的區(qū)域執(zhí)行縮放功能。
6.根據(jù)權(quán)利要求1所述的方法，包括在所述對準(zhǔn)之前對所述第一圖像和第二圖像執(zhí)行 色彩校正。
7.一種用于將由第一相機(jī)捕獲的第一圖像與利用第二相機(jī)捕獲的圖像的至少一個片 段對準(zhǔn)的設(shè)備，由所述第一相機(jī)和第二相機(jī)捕獲的圖像具有重疊的視野，該設(shè)備包括確定器，用于在所述第一圖像中，確定指示所述重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；所述確定器可操作 用于，在所述第二圖像中，確定指示所述重疊的視野內(nèi)的位置處 的圖像特性的圖像特性值，并且確定所述第一圖像中的所述重疊的視野中和所述第二圖 像中的所述重疊的視野中相對應(yīng)的圖像特性值之間的位置差；和變換裝置，可操作用于對所述第一圖像施加變換，所述變換調(diào)節(jié)所述第一圖像相對 于所述第二圖像的方位，其中，當(dāng)所述第一圖像和第二圖像中相對應(yīng)的圖像特性值之間 的位置差是預(yù)定量時，所述第一圖像和第二圖像被對準(zhǔn)；選擇器，可操作用于選擇所述第一圖像和所述第二圖像中所述重疊的視野中的至少 一部分；顯示裝置，可操作用于顯示標(biāo)識所述第一圖像中的所述重疊的視野中的被選擇的部 分中的圖像特性值的第一曲線圖，每個圖像特性值被繪制在所述曲線圖上與所述第一圖 像中具有這樣的圖像特性值的位置相對應(yīng)的點處；以及所述顯示裝置還可操作用于，在所顯示的第一曲線圖上疊加所述第二圖像中的所 述重疊的視野中的被選擇的部分中的圖像特性值，每個圖像特性值被繪制在所述曲線圖 上與所述第二圖像中具有這樣的圖像特性值的位置相對應(yīng)的點處，從而所述第一圖像和 第二圖像中相對應(yīng)的圖像特性值之間的位置差根據(jù)所繪制的圖像特性值之間的距離被確 定。
8.根據(jù)權(quán)利要求7所述的設(shè)備，其中，所述選擇器還可操作用于在所述第一圖像和所述第二圖像兩者的所述重疊的視野中選擇第二區(qū)域；并且所述顯示裝置還可操作用于顯示標(biāo)識所述第一圖像中的所述重疊的視野中的所 述第二區(qū)域中的圖像特性值的第二曲線圖，每個圖像特性值被繪制在該曲線圖上與所述 第一圖像中具有這樣的圖像特性值的位置相對應(yīng)的點處，并且在所顯示的第二曲線圖上 疊加所述第二圖像中的所述第二區(qū)域中的圖像特性值，每個圖像特性值被繪制在該曲線 圖上與所述第二圖像中具有這樣的圖像特性值的位置相對應(yīng)的點處，從而所述第一圖像 和第二圖像中相對應(yīng)的圖像特性值之間的位置差根據(jù)所述第二曲線圖中所繪制的圖像特 性值之間的距離被確定。
9.根據(jù)權(quán)利要求7所述的設(shè)備，其中，所述重疊的區(qū)域分別在所述第一圖像和第二圖 像的對端處。
10.根據(jù)權(quán)利要求7所述的設(shè)備，所述顯示裝置還可操作用于顯示矢量顯示器，其 中，所述矢量顯示器同時顯示所述第一圖像和第二圖像中的所述重疊的區(qū)域中每個位置 處的色度水平。
11.根據(jù)權(quán)利要求7所述的設(shè)備，包括選擇裝置，所述選擇裝置可操作用于選擇所 述重疊的區(qū)域內(nèi)的區(qū)域并且在所選擇的區(qū)域被饋送給所述確定器之前對所選擇的區(qū)域執(zhí) 行縮放功能。
12.根據(jù)權(quán)利要求7所述的設(shè)備，包括色彩校正器，所述色彩校正器可操作用于在所 述對準(zhǔn)之前對所述第一圖像和第二圖像執(zhí)行色彩校正。
13.—種對準(zhǔn)系統(tǒng)，包括連接到根據(jù)權(quán)利要求7所述的設(shè)備的被安裝在機(jī)架上的多個 相機(jī)元件。
14.一種計算機(jī)程序，包含計算機(jī)可讀指令，所述指令在被裝載到計算機(jī)時，配置所述計算機(jī)來執(zhí)行根據(jù)權(quán)利要求1所述的方法。
15. 一種存儲介質(zhì)，被配置為存儲根據(jù)權(quán)利要求14所述的計算機(jī)程序。
全文摘要
本發(fā)明公開了用于圖像對準(zhǔn)的方法和設(shè)備。該方法將由第一相機(jī)捕獲的第一圖像與利用第二相機(jī)捕獲的圖像的至少一個片段對準(zhǔn)，由第一和第二相機(jī)捕獲的圖像具有重疊的視野，該方法包括在第一圖像中，確定指示重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；在第二圖像中，確定指示重疊的視野內(nèi)的位置處的圖像特性的圖像特性值；確定第一圖像中的重疊的視野中和第二圖像中的重疊的視野中相對應(yīng)的圖像特性值之間的位置差；以及對第一圖像施加變換，該變換調(diào)節(jié)第一圖像相對于第二圖像的方位，其中，當(dāng)?shù)谝缓偷诙D像中相對應(yīng)的圖像特性值之間的位置差是預(yù)定量時，第一和第二圖像被對準(zhǔn)。
文檔編號G06T7/00GK102013096SQ201010276400
公開日2011年4月13日 申請日期2010年9月6日 優(yōu)先權(quán)日2009年9月4日
發(fā)明者理查德·札瑞德·庫珀, 薩拉·伊麗莎白·威特 申請人:索尼公司