多視圖視頻處理中的串?dāng)_降低的制作方法
【專利摘要】在一個(gè)實(shí)例中，一種方法包含識(shí)別在多視圖圖像幀的對(duì)應(yīng)對(duì)中的在相同位置對(duì)中的像素的第一集合，其中所述相同位置對(duì)具有大于選定視差閾值的在所述像素之間的視差。所述方法進(jìn)一步包含識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變閾值的強(qiáng)度轉(zhuǎn)變的選定距離內(nèi)的所述圖像幀中的至少一者中的像素的第二集合。所述方法進(jìn)一步包含對(duì)經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像素應(yīng)用串?dāng)_校正。
【專利說明】多視圖視頻處理中的串?dāng)_降低

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及用于視頻處理的技術(shù)，且更具體來說，涉及用于多視圖視頻處理的技 術(shù)。

【背景技術(shù)】
[0002] 數(shù)字視頻能力可并入到廣泛范圍的裝置中，包括數(shù)字電視、數(shù)字直播系統(tǒng)、無線廣 播系統(tǒng)、個(gè)人數(shù)字助理（PDA)、膝上型或桌上型計(jì)算機(jī)、數(shù)碼相機(jī)、數(shù)字記錄裝置、數(shù)字媒體 播放器、視頻游戲裝置、視頻游戲控制臺(tái)、蜂窩式或衛(wèi)星無線電電話、視頻電話會(huì)議裝置及 其類似物。數(shù)字視頻裝置實(shí)施視頻壓縮技術(shù)，例如通過MPEG-2、MPEG-4、ITU-TH.263、ITU-T H. 264/MPEG-4第10部分高級(jí)視頻譯碼（AVC)、目前正在開發(fā)的高效率視頻譯碼（HEVC)標(biāo) 準(zhǔn)和此些標(biāo)準(zhǔn)的擴(kuò)展部分定義的標(biāo)準(zhǔn)中描述的技術(shù)，以便更有效地發(fā)射、接收和存儲(chǔ)數(shù)字 視頻息。
[0003] 前述標(biāo)準(zhǔn)中的一些的擴(kuò)展（包含H. 264/AVC)提供用于進(jìn)行多視圖視頻譯碼以便 產(chǎn)生立體聲或三維（"3D"）視頻的技術(shù)。確切地說，已將用于多視圖譯碼的技術(shù)用于可縮 放視頻譯碼（SVC)標(biāo)準(zhǔn)（其為對(duì)H.264/AVC的可縮放擴(kuò)展）及多視圖視頻譯碼（MVC)標(biāo)準(zhǔn) (其變?yōu)閷?duì)H. 264/AVC的多視圖擴(kuò)展）。對(duì)于HEVC標(biāo)準(zhǔn)，也可開發(fā)SVC及MVC擴(kuò)展。
[0004] 通常，使用兩個(gè)視圖（例如，左視圖及右視圖）達(dá)成立體聲視頻。左視圖的圖片實(shí) 質(zhì)上可與右視圖的圖片同時(shí)顯示以達(dá)成三維視頻效果。舉例來說，用戶可佩戴偏光被動(dòng)式 眼鏡，其將左視圖從右視圖中過濾掉?；蛘?，可快速連續(xù)展示兩個(gè)視圖的圖片，且用戶可佩 戴主動(dòng)式眼鏡，其以相同頻率快速遮光左眼及右眼，但其中相位移位90度。


【發(fā)明內(nèi)容】

[0005] -股來說，本發(fā)明描述用于多視圖視頻處理的技術(shù)。確切地說，本發(fā)明涉及多視圖 視頻譯碼中的串?dāng)_及重像降低。
[0006] 在本發(fā)明的一個(gè)實(shí)例中，一種處理多視圖視頻的方法包含識(shí)別在多視圖圖像幀的 對(duì)應(yīng)對(duì)中的在相同位置對(duì)中的像素的第一集合，其中所述相同位置對(duì)具有大于選定視差閾 值的在所述像素之間的視差。所述方法進(jìn)一步包含識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變閾值的強(qiáng)度轉(zhuǎn) 變的選定距離內(nèi)的所述圖像幀中的至少一者中的像素的第二集合。所述方法進(jìn)一步包含對(duì) 經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像素應(yīng)用串?dāng)_校正。
[0007] 在本發(fā)明的另一實(shí)例中，一種計(jì)算機(jī)可讀媒體存儲(chǔ)用于致使處理器執(zhí)行多視圖視 頻處理的可執(zhí)行指令。這包含用于致使處理器識(shí)別在多視圖圖像幀的對(duì)應(yīng)對(duì)中的在相同位 置對(duì)中的像素的第一集合的可執(zhí)行指令，其中所述相同位置對(duì)具有大于選定視差閾值的在 所述像素之間的視差。這進(jìn)一步包含用于致使處理器識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變閾值的強(qiáng)度 轉(zhuǎn)變的選定距離內(nèi)的所述圖像幀中的至少一者中的像素的第二集合的可執(zhí)行指令。這進(jìn)一 步包含用于致使處理器對(duì)經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像 素應(yīng)用串?dāng)_校正的可執(zhí)行指令。
[0008] 在本發(fā)明的另一實(shí)例中，一種設(shè)備包含用于識(shí)別在多視圖圖像幀的對(duì)應(yīng)對(duì)中的在 相同位置對(duì)中的像素的第一集合的裝置，其中所述相同位置對(duì)具有大于選定視差閾值的在 所述像素之間的視差。所述設(shè)備進(jìn)一步包含用于識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變閾值的強(qiáng)度轉(zhuǎn)變 的選定距離內(nèi)的所述圖像幀中的至少一者中的像素的第二集合的裝置。所述設(shè)備進(jìn)一步包 含用于對(duì)經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像素應(yīng)用串?dāng)_校正 的裝置。
[0009] -或多個(gè)實(shí)例的細(xì)節(jié)陳述于附圖及以下描述中。其它特征、目標(biāo)及優(yōu)勢(shì)將從描述 及附圖和從權(quán)利要求書中顯而易見。

【專利附圖】

【附圖說明】
[0010] 圖1為說明實(shí)例多視圖視頻處理系統(tǒng)的框圖。
[0011] 圖2描繪能夠播放視頻及/或呈現(xiàn)圖像的實(shí)例裝置。
[0012] 圖3及4說明可在多視圖視頻中的不同視圖中同時(shí)顯示的一對(duì)對(duì)應(yīng)圖像幀。
[0013] 圖5描繪用于多視圖視頻處理的實(shí)例過程的流程圖。
[0014] 圖6及7在概念上描繪可在多視圖視頻中的不同視圖中同時(shí)顯示的一對(duì)對(duì)應(yīng)圖像 幀的處理階段/圖6及圖7描繪右視圖圖像幀及左視圖圖像幀的匹配對(duì)的串?dāng)_降低候選者 (CRC)映射的中間階段的實(shí)例。
[0015] 圖8及圖9描繪在視差映射及強(qiáng)度轉(zhuǎn)變映射兩者之后在右視圖圖像幀及左視圖圖 像幀的匹配對(duì)中的串?dāng)_降低候選者（CRC)映射的簡化說明。
[0016] 圖10及圖11描繪在視差映射及強(qiáng)度轉(zhuǎn)變映射兩者之后在右視圖圖像幀及左視圖 圖像幀的匹配對(duì)中的串?dāng)_降低候選者（CRC)映射的額外說明。
[0017] 圖12描繪在串?dāng)_降低過程的說明性實(shí)例中的基于2D查找表的串?dāng)_處理塊。
[0018] 圖13描繪可用以模型化串?dāng)_降低參數(shù)及對(duì)圖像幀應(yīng)用串?dāng)_降低以用于多視圖視 頻處理的擬合曲線的各種實(shí)例的曲線集合。
[0019] 圖14展示被劃分成不同區(qū)的陣列的圖像幀的實(shí)例，其中可執(zhí)行不同的基于位置 的調(diào)整以用于多視圖視頻處理。
[0020] 圖15為說明根據(jù)本發(fā)明的實(shí)例的可經(jīng)配置以利用用于多視圖視頻處理的技術(shù)的 實(shí)例視頻編碼及解碼系統(tǒng)的框圖。

【具體實(shí)施方式】
[0021] -股來說，本發(fā)明描述用于處理多視圖視頻數(shù)據(jù)（例如，用以產(chǎn)生三維（3D)效果 的視頻數(shù)據(jù)）的技術(shù)。確切地說，本發(fā)明涉及用以降低多視圖視頻處理中的串?dāng)_及重像的 技術(shù)。本發(fā)明的技術(shù)包含在多視圖視頻處理中，識(shí)別圖像幀中的像素對(duì)之間的強(qiáng)度的差，及 識(shí)別所述圖像幀及用于3D顯示的一對(duì)圖像幀（例如，左視圖及右視圖）中的對(duì)應(yīng)圖像幀中 的像素的相同位置對(duì)之間的顯著視差，以及基于所述識(shí)別應(yīng)用串?dāng)_校正參數(shù)。本發(fā)明的技 術(shù)還包含識(shí)別為用于串?dāng)_校正的候選者的像素，及應(yīng)用串?dāng)_校正參數(shù)，所述串?dāng)_校正參數(shù) 至少部分基于所述像素是在圖像幀的兩個(gè)或兩個(gè)以上部分中的哪一者中。
[0022] -股來說，為了產(chǎn)生視頻中的立體視圖或三維（3D)效果，可同時(shí)或幾乎同時(shí)展示 場(chǎng)景的兩個(gè)視圖（例如，左眼視圖及右眼視圖）。可從略微不同的水平位置捕捉對(duì)應(yīng)于場(chǎng)景 的左眼視圖及右眼視圖的同一場(chǎng)景的兩個(gè)圖片，所述略微不同的水平位置表示觀察者的左 眼及右眼之間的水平視差。通過同時(shí)或幾乎同時(shí)顯示這兩個(gè)圖片，以使得左眼視圖圖片被 觀察者的左眼感知到，及右眼視圖圖片被觀察者的右眼感知到，觀察者可體驗(yàn)到三維視頻 效果。也可執(zhí)行其它多視圖譯碼，以便提供不同透視圖（例如，左、中、右、蟲眼、鳥眼等），或 提供適合于不同大小或分辨率的顯示屏的不同深度水平（例如，其中若干對(duì)左及右圖像幀 是用于這些不同多視圖視角或深度水平中的每一者）。
[0023] 串?dāng)_是3D或其它多視圖視頻系統(tǒng)中的左及右圖像通道的發(fā)光輸出的不完全隔 離，其致使專用于兩個(gè)圖像通道中的一者的明度泄漏到其它圖像通道中。重像為用于感知 串?dāng)_的主觀術(shù)語。取決于多視圖圖像的內(nèi)容，重像可不同于串?dāng)_。如由觀察者感知到的重 像或串?dāng)_為系統(tǒng)串?dāng)_、圖像的兩個(gè)視圖之間的視差及圖像對(duì)比度的函數(shù)。這兩個(gè)可被一起 稱作串?dāng)_/重像，其中串?dāng)_及重像皆為適用的。
[0024] 舉例來說，觀察者可在兩個(gè)對(duì)應(yīng)多視圖圖像幀中的區(qū)的對(duì)應(yīng)像素之間存在相對(duì)較 高視差（結(jié)合兩個(gè)對(duì)應(yīng)圖像幀的所述區(qū)中的強(qiáng)度的相對(duì)較高轉(zhuǎn)變）時(shí)感知到多視圖圖像的 區(qū)中的重像。兩個(gè)對(duì)應(yīng)多視圖圖像幀中的區(qū)的兩個(gè)狀態(tài)之間的視差與多視圖圖像中的深 度的轉(zhuǎn)變（即，明顯特寫物體與明顯遠(yuǎn)處背景之間的轉(zhuǎn)變）相關(guān)聯(lián)，而強(qiáng)度的轉(zhuǎn)變?yōu)榱炼?(即，圖像的明亮區(qū)域與黑暗區(qū)域之間的對(duì)比度）的轉(zhuǎn)變。重像的可見度因此隨著深度的增 加（即左-右視差的增加）而增加，且隨亮度的轉(zhuǎn)變的增加（鄰近亮及暗區(qū)域之間的鮮明 對(duì)比）而增加。重像的可見度還隨背光水平的增加而增加，其中背光水平越高會(huì)導(dǎo)致背景 黑色的水平越低。
[0025] 串?dāng)_/重像為影響3D視頻/電影及3D游戲兩者中的3D圖片質(zhì)量的最重要質(zhì)量 屬性中的一者。串?dāng)_/重像的副作用可包含3D效果的丟失、深度分辨率的丟失、圖像對(duì)比 度的丟失及觀察者的不適。一些報(bào)告指出，3D視覺質(zhì)量的可感知重像效果及降級(jí)通常在系 統(tǒng)串?dāng)_達(dá)到在2 %到6 %的范圍內(nèi)的水平時(shí)開始出現(xiàn)。
[0026] 3D顯示器上可能存在許多非均一性，以使得對(duì)屏幕上所顯示的所有像素應(yīng)用一個(gè) 串?dāng)_方法可能引入串?dāng)_而非使其降低。本發(fā)明的技術(shù)可說明性地包含執(zhí)行二維、基于位置 的串?dāng)_調(diào)整的顯示器處理器。這可提供質(zhì)量比對(duì)屏幕上的所有像素簡單地應(yīng)用均一串?dāng)_校 正更佳的串?dāng)_校正。
[0027] 預(yù)處理模塊可通過識(shí)別實(shí)際上將受益于串?dāng)_降低的區(qū)域（其可僅包含相對(duì)較小 比例的圖像幀）及僅在那些區(qū)域中應(yīng)用串?dāng)_降低來提供質(zhì)量保護(hù)的額外層。在一些實(shí)例 中，預(yù)處理模塊識(shí)別為串?dāng)_降低的目標(biāo)的此相對(duì)較小比例的圖像幀可涉及圖像幀中的10% 到15%的像素。僅對(duì)可能相對(duì)較小比例的圖像幀應(yīng)用串?dāng)_降低可在帶寬及處理源上施加低 負(fù)擔(dān)，且因此允許在不借助于帶寬降低技術(shù)的情況下應(yīng)用串?dāng)_降低，所述帶寬降低技術(shù)可 涉及使用較低質(zhì)量參考幀或使用查找表的錯(cuò)誤索引。僅對(duì)可能相對(duì)較小比例的圖像幀應(yīng)用 串?dāng)_降低還可需要較少的硬件周期，且可以幫助節(jié)約硬件區(qū)域。
[0028] 圖1為說明實(shí)例多視圖視頻處理系統(tǒng)100的框圖。在圖1中的多視圖視頻處理 系統(tǒng)100的高級(jí)示意框圖中展示本發(fā)明的多視圖視頻處理技術(shù)的特定實(shí)例，如下參考說明 性實(shí)例描述所述高級(jí)示意框圖。在圖1的實(shí)例中，多視圖視頻處理方法100包含預(yù)處理塊 110、串?dāng)_降低處理塊120及后處理塊130。"串?dāng)_降低"及"串?dāng)_校正"遍及本發(fā)明可互換 地使用，且在任一情況下，可說明性地指代經(jīng)應(yīng)用以降低、補(bǔ)償、去除、消除或校正串?dāng)_/重 像的效果、測(cè)量或參數(shù)。
[0029] 在此實(shí)例中，預(yù)處理塊110包含范圍映射模塊118及串?dāng)_區(qū)映射模塊112。串?dāng)_區(qū) 映射模塊112包含視差映射模塊114及強(qiáng)度轉(zhuǎn)變映射模塊116。可按任何次序執(zhí)行視差映 射及強(qiáng)度轉(zhuǎn)變映射。后處理塊130包含基于位置的調(diào)整模塊132。在各種實(shí)例中，多視圖 視頻處理系統(tǒng)100可以方法、裝置、設(shè)備、用于執(zhí)行功能的裝置、集成電路或積體電路的集 合（例如，芯片組）、計(jì)算機(jī)可讀媒體或其組合的形式來實(shí)施。在圖1的多視圖視頻處理系 統(tǒng)100的上下文中，"處理塊"或"塊"或"模塊"可指方法中的步驟或步驟的集合，或裝置、 設(shè)備、用于執(zhí)行功能的裝置或執(zhí)行或處理所指示功能的計(jì)算機(jī)可讀媒體的模塊或部分。在 以軟件來實(shí)施模塊方面來說，軟件執(zhí)行于一或多個(gè)硬件元件上，且將不被視為軟件本身。
[0030] 在預(yù)處理塊110的串?dāng)_區(qū)映射模塊112中，視差映射模塊114可執(zhí)行在相同時(shí)間 位置的一對(duì)對(duì)應(yīng)左及右多視圖圖像幀的比較分析，及產(chǎn)生識(shí)別具有兩個(gè)幀之間的相對(duì)較高 視差（其導(dǎo)致大感知深度轉(zhuǎn)變）的對(duì)應(yīng)左及右多視圖圖像幀的所述對(duì)中的像素或像素區(qū)的 映射。強(qiáng)度閾值映射模塊116可分析在個(gè)別幀內(nèi)的像素對(duì)或像素集合或像素區(qū)，且產(chǎn)生識(shí) 別在具有相對(duì)較高強(qiáng)度閾值（例如，具有在圖像幀中彼此接近的明亮區(qū)域及黑暗區(qū)域）的 幀內(nèi)的像素對(duì)的映射。在8位圖像的實(shí)例中的強(qiáng)度閾值可例如為相同位置像素之間的10的 轉(zhuǎn)變。在其它實(shí)例中也可使用其它閾值，例如10位圖像中的20、40或80的轉(zhuǎn)變，或12位 圖像中的80、160或320的轉(zhuǎn)變。這些僅為說明性值，且在其它實(shí)例中也可使用其它值。預(yù) 處理塊110還可包含范圍映射模塊118,所述范圍映射模塊可識(shí)別適用于圖像幀的區(qū)或像 素的背光值或背景黑色的水平。
[0031] 串?dāng)_降低處理塊120產(chǎn)生用于圖像幀的像素的初始串?dāng)_校正參數(shù)或值，且可以多 種方式實(shí)現(xiàn)此情形。在一些實(shí)例中，串?dāng)_降低處理塊120使用2D查找表（LUT) 122的選項(xiàng)， 其中查找表由顯示測(cè)量表征。此技術(shù)可引起相對(duì)較低的處理負(fù)擔(dān)。在一些實(shí)例中，串?dāng)_降 低處理塊120使用基于等式的處理124的選項(xiàng)。在一些實(shí)施方案中，此技術(shù)可使得串?dāng)_降 低處理塊120能夠產(chǎn)生具有相對(duì)較高精度且需要較少數(shù)據(jù)存儲(chǔ)空間的初始串?dāng)_校正。
[0032] 后處理塊130可使用多種技術(shù)中的任一者來修改用于圖像幀的像素的串?dāng)_校正 參數(shù)。舉例來說，后處理塊130可依據(jù)圖像幀中的像素的位置及相應(yīng)地可呈現(xiàn)圖像的屏幕 或顯示器上的像素的位置來調(diào)整串?dāng)_降低參數(shù)。串?dāng)_及重像可在圖像幀的部分中不同地出 現(xiàn)，或基于屏幕或顯示器的哪些部分上呈現(xiàn)圖像的一部分而出現(xiàn)。具體來說，后處理塊130 可修改串?dāng)_校正參數(shù)以考慮及補(bǔ)償此基于位置的差分串?dāng)_，即，圖像幀的不同部分之間的 串?dāng)_的差別。
[0033] 下文進(jìn)一步描述及在對(duì)應(yīng)圖中描繪如圖1中所示的多視圖視頻處理系統(tǒng)100的各 種方面。
[0034] 可參考H. 264/AVC(高級(jí)視頻譯碼）標(biāo)準(zhǔn)的多視圖視頻譯碼（MVC)擴(kuò)展將本發(fā) 明的技術(shù)描述為可如何實(shí)施本發(fā)明的技術(shù)的說明性實(shí)例。在JVT-AD007 "ITU-T Rec. Η· 264 IIS0/IEC 14496-10 高級(jí)視頻譯碼的編輯草案修訂（Editors' draft revision to ITU-T Rec. H. 264| IS0/IEC 14496-lOAdvanced Video Coding) "（瑞士日內(nèi)瓦第 30 屆 JVT 會(huì)議，2009年1月到2月）中描述MVC的最新聯(lián)合草案，所述草案可從http ://wftp3. itu. int/av-arch/ivt-site/2009 01 Geneva,TVT-AD007獲得,其特此通過引用并入。雖然可 在H.264/AVC方面描述本發(fā)明的技術(shù)，但應(yīng)理解本發(fā)明的技術(shù)可適用于其它多視圖視頻譯 碼過程，或適用于對(duì)當(dāng)前提出的視頻譯碼標(biāo)準(zhǔn)的未來多視圖擴(kuò)展。
[0035] 也可由MVC支持兩個(gè)視圖的譯碼。MVC的優(yōu)勢(shì)中的一者為MVC編碼器可將兩個(gè)以 上視圖視為3D視頻輸入，且MVC解碼器可解碼此多視圖表示。因此，具有MVC解碼器的任 何呈現(xiàn)器可經(jīng)配置以處理具有多個(gè)視圖的3D視頻內(nèi)容。在MVC中，通過允許在相同存取單 元中的圖片當(dāng)中的預(yù)測(cè)（即，在相同時(shí)間實(shí)例或時(shí)間位置內(nèi)）來實(shí)現(xiàn)視圖間預(yù)測(cè)。在對(duì)非 基本或非參考視圖中的一者中的圖片進(jìn)行譯碼時(shí)，如果圖片是在不同視圖中但在相同時(shí)間 實(shí)例內(nèi)，那么可將圖片添加到參考圖片列表中?？蓪⒁晥D間預(yù)測(cè)參考圖片置于參考圖片列 表的任何位置中，就像任何幀間預(yù)測(cè)參考圖片一樣。
[0036] 圖2描繪能夠播放視頻及/或呈現(xiàn)圖像的實(shí)例裝置200。如圖2中所描繪，裝置 200正顯示圖像，所述圖像可為根據(jù)如上文所描述的多種多視圖顯示技術(shù)中的任一者經(jīng)呈 現(xiàn)為一對(duì)對(duì)應(yīng)多視圖圖像幀的3D圖像。如圖2中所示的裝置200可實(shí)施如圖1中所示的 多視圖視頻處理系統(tǒng)100的全部或部分。呈現(xiàn)于裝置200上的圖像可為形成3D視頻輸出 的一系列3D圖像中的一個(gè)3D圖像，所述3D視頻輸出可為電影、視頻片段、電視節(jié)目插曲、 視頻游戲輸出、視頻會(huì)議輸出或任何其它類型的實(shí)時(shí)或預(yù)先記錄的視頻。裝置200可基于 經(jīng)由無線或硬線網(wǎng)絡(luò)或傳輸媒體發(fā)射的流式傳輸輸入信號(hào)或基于全部內(nèi)容或多或少可存 儲(chǔ)于或多或少本地存儲(chǔ)媒體上的本地存儲(chǔ)的視頻文件顯示3D視頻輸出，且先前可能已被 下載及寫入到存儲(chǔ)媒體。裝置200可呈例如智能電話、平板計(jì)算機(jī)、電視、計(jì)算機(jī)監(jiān)視器、媒 體播放器、視頻游戲裝置、連接到視頻游戲控制臺(tái)的監(jiān)視或能夠呈現(xiàn)3D視頻或多視圖視頻 的任何其它種類的裝置等多種裝置中的任一者的形式。如圖2中所示的裝置200提供用于 3D視頻呈現(xiàn)及處理的上下文，如參考后續(xù)圖所描述。
[0037] 考慮如圖1中所示的預(yù)處理塊110的實(shí)例，預(yù)處理塊110可掃描圖像幀中的像素 的像素強(qiáng)度值（例如，明度值）以產(chǎn)生圖像幀的串?dāng)_區(qū)映射。產(chǎn)生圖像幀的串?dāng)_區(qū)映射包含 識(shí)別像素，所述像素為用于造成圖像幀與多視圖圖像系統(tǒng)中的對(duì)應(yīng)圖像幀（例如，3D視頻 系統(tǒng)中的對(duì)應(yīng)左及右圖像幀）之間的串?dāng)_的候選者，且為用于應(yīng)用串?dāng)_消除的候選者。舉 例來說，在圖3及4中展示呈現(xiàn)于圖2中的裝置200上的圖像的兩個(gè)對(duì)應(yīng)3D圖像幀。
[0038] 圖3及4說明可在多視圖視頻中的不同視圖中同時(shí)顯示的一對(duì)對(duì)應(yīng)圖像幀210及 220。圖3展示右視圖圖像幀210,且圖4展示左視圖圖像幀220,其一起可對(duì)應(yīng)于呈現(xiàn)于圖2 中的裝置200上的3D圖像。在右視圖圖像幀210中，前景人物202的位置與背景物體204、 206相比較向左，而在左視圖圖像幀220中，前景人物202的位置與背景物體204、206相比 較向右。因此，在右視圖圖像幀210暴露于觀察者的右眼，同時(shí)或在十分接近的時(shí)間點(diǎn)內(nèi)左 視圖圖像幀220暴露于觀察者的左眼時(shí)，兩個(gè)幀210、220 -起致使觀察者從兩個(gè)圖像幀的 組合當(dāng)中感知到三維圖像。舉例來說，如果與交替觀察者的眼睛的視圖的主動(dòng)式3D觀察裝 置協(xié)調(diào)地快速連續(xù)顯示圖像幀的所述對(duì)，以使得觀察者在實(shí)際上相同時(shí)間感知到兩個(gè)圖像 幀，那么一對(duì)圖像幀可被視為實(shí)際上同時(shí)的一對(duì)圖像幀，或?qū)嶋H上在相同時(shí)間位置發(fā)生。在 裝置200快速連續(xù)呈現(xiàn)圖像幀的3D對(duì)時(shí)，觀察者可將圖像幀的連續(xù)對(duì)感知為3D視頻。
[0039] 在圖像幀210及220中前景人物202相對(duì)于背景物體204、206的不同左-右定位 可通過比較在圖像幀的底部的前景人物202的左下邊緣從圖像幀的左下角的位移來說明。 右視圖圖像幀210中的此位移203A相對(duì)較小，而左視圖圖像幀220中的此位移203B顯著 大于右視圖圖像幀210中的位移203A。圖2中所描繪的組合的圖像（如由裝置200所呈 現(xiàn)）展示處于相對(duì)中間位置的前景人物202以表示觀察者的感知，而在任何單個(gè)實(shí)像圖像 中貞中前景人物202實(shí)際上并不定位于圖2中所示的中間位置中。圖3及4中所示的實(shí)例為 簡化實(shí)例，且在3D圖像的其它對(duì)中，可呈現(xiàn)各種物體及物體的部分以在深度的連續(xù)范圍中 以任何顯而易見深度出現(xiàn)，就如觀察實(shí)際三維世界時(shí)一樣。
[0040] 裝置200可包含或存取多視圖視頻處理系統(tǒng)（例如，如圖1中所示的系統(tǒng)100)或 其它實(shí)施方案。裝置200可并有構(gòu)成全部系統(tǒng)100的硬件及/或軟件元件，或系統(tǒng)100的 全部或部分可操作或定位于其它位置處，且可與裝置200通信連接，以使得系統(tǒng)100可由裝 置200存取。如下描述實(shí)例，其中系統(tǒng)100代表裝置200進(jìn)行操作，其中系統(tǒng)100可并入于 裝置200中或可由裝置200存取。
[0041] 系統(tǒng)100可在處理右視圖圖像幀210及左視圖圖像幀220時(shí)（例如在對(duì)圖像幀進(jìn) 行解碼之后）應(yīng)用串?dāng)_降低技術(shù)。在呈現(xiàn)圖像幀的系統(tǒng)100的實(shí)例中，系統(tǒng)100可使用兩 個(gè)準(zhǔn)則識(shí)別串?dāng)_候選者像素。在圖像的對(duì)應(yīng)對(duì)中的左及右圖像之間存在圖像間視差時(shí)，串 擾/重像更加可見（與前景物體與背景之間的深度的轉(zhuǎn)變對(duì)應(yīng)），因此系統(tǒng)100可將圖像間 視差評(píng)估為第一準(zhǔn)則。串?dāng)_/重像也在急劇強(qiáng)度轉(zhuǎn)變中（例如，在單個(gè)圖像幀內(nèi)的黑暗區(qū) 域與明亮區(qū)域之間的邊緣處）更加可見，因此系統(tǒng)100可將強(qiáng)度轉(zhuǎn)變?cè)u(píng)估為第二準(zhǔn)則。系 統(tǒng)100可評(píng)估明度以及一或多個(gè)色度值或某一其它像素強(qiáng)度值的強(qiáng)度轉(zhuǎn)變。系統(tǒng)100可按 任何次序評(píng)估及/或映射幀間視差及幀內(nèi)強(qiáng)度轉(zhuǎn)變，例如，系統(tǒng)100可映射幀間視差及接著 幀內(nèi)強(qiáng)度轉(zhuǎn)變，或映射幀內(nèi)強(qiáng)度轉(zhuǎn)變及接著幀間視差。
[0042] 圖5描繪用于多視圖視頻處理的實(shí)例過程300的流程圖。系統(tǒng)100可使用過程 300 (以軟件、硬件或其組合來實(shí)施）來產(chǎn)生串?dāng)_/重像映射（接下來被稱作"串?dāng)_映射")， 如圖5中所示。由系統(tǒng)100執(zhí)行的過程300可評(píng)估在給定圖像幀內(nèi)的接近像素（即，彼此 接近的像素）當(dāng)中的強(qiáng)度轉(zhuǎn)變（即，幀內(nèi)強(qiáng)度閾值檢測(cè)），以及評(píng)估給出圖像幀的3D對(duì)的左 及右視圖的兩個(gè)對(duì)應(yīng)的在時(shí)間上匹配的圖像幀之間的相同位置中的像素之間的視差（即， 幀間視差檢測(cè)）。過程300幀內(nèi)強(qiáng)度閾值檢測(cè)組件可與圖1的強(qiáng)度閾值映射塊116對(duì)應(yīng)， 且過程300的幀間視差檢測(cè)組件可與圖1的視差映射塊114對(duì)應(yīng)。可按任何次序執(zhí)行過程 300的幀間視差檢測(cè)部分及過程300的幀間視差檢測(cè)，所述次序包含重疊或同時(shí)次序。
[0043] 在圖7中所說明的實(shí)例中，系統(tǒng)100應(yīng)用邊緣檢測(cè)濾波器Sh。實(shí)例濾波器掩模 可對(duì)每一像素應(yīng)用邊緣檢測(cè)濾波器（302)以獲得值S rat (304)，所述值為每一像素的強(qiáng)度 的轉(zhuǎn)變的測(cè)量，其中Stjut=S1^Input t5舉例來說，可應(yīng)用Sh= [-1 0 1]的邊緣檢測(cè)濾波 器。其它實(shí)例可使用變化長度及形式的邊緣檢測(cè)濾波器。如果Swt>Tran Siti〇n_TH，其中 Transition_TH為預(yù)定或先前選定的轉(zhuǎn)變閾值（306)，那么系統(tǒng)100將像素標(biāo)記為"大轉(zhuǎn)變" 的"LT"（308)。系統(tǒng)100可單獨(dú)地評(píng)估明度、色度或其它像素強(qiáng)度值中的強(qiáng)度的轉(zhuǎn)變。將 出于說明的目的描述明度中的轉(zhuǎn)變的評(píng)估。系統(tǒng)100可對(duì)在給定像素的行長度內(nèi)的每一像 素應(yīng)用此濾波器，且如果那些像素中的任一者的S wt大于轉(zhuǎn)變閾值，那么系統(tǒng)100可將給定 像素標(biāo)記為LT。
[0044] 在評(píng)估強(qiáng)度轉(zhuǎn)變時(shí)，系統(tǒng)100可評(píng)估在受到評(píng)估的當(dāng)前或給定像素的選定行長度 (以像素的數(shù)目來測(cè)量）的一維（I-D)鄰域內(nèi)的大轉(zhuǎn)變。舉例來說，對(duì)于給定像素，系統(tǒng)100 可評(píng)估在與給定像素相同的行中的在32個(gè)像素或64個(gè)像素或128個(gè)像素或受到評(píng)估的給 定像素的任一側(cè)上的某一其它長度的像素的選定行長度之外的其它像素。系統(tǒng)100可通過 數(shù)個(gè)測(cè)量中的任一者測(cè)量給定像素與在給定像素周圍的選定行長度內(nèi)的其它像素之間的 強(qiáng)度轉(zhuǎn)變。系統(tǒng)100可通過組合如應(yīng)用于像素行內(nèi)的每一像素的在所述行中的強(qiáng)度測(cè)量的 處理以避免處理的重復(fù)及約束算法復(fù)雜性，使強(qiáng)度閾值檢測(cè)過程最佳化。
[0045] 舉例來說，系統(tǒng)100可確定在給定像素的選定行長度內(nèi)的哪一其它像素具有來自 選定像素的明度、色度或其它強(qiáng)度測(cè)量的值的最大差，且可將最大差取作用于給定像素的 強(qiáng)度增量。系統(tǒng)100接著可比較給定像素的強(qiáng)度增量與選定強(qiáng)度轉(zhuǎn)變閾值，所述選定強(qiáng)度 轉(zhuǎn)變閾值可在相同測(cè)量中規(guī)定為強(qiáng)度增量，例如明度、色度或其它強(qiáng)度測(cè)量，且如果用于給 定像素的強(qiáng)度增量因?yàn)闇y(cè)量而高于選定強(qiáng)度轉(zhuǎn)變閾值，那么系統(tǒng)100可將給定像素標(biāo)記為 大轉(zhuǎn)變的"LT"，S卩，高強(qiáng)度轉(zhuǎn)變。系統(tǒng)100還可使用多種其它技術(shù)以用于將像素指明為具 有高強(qiáng)度轉(zhuǎn)變，例如結(jié)合像素行距離使用滑動(dòng)閾值，例如包含應(yīng)用對(duì)于較短像素分離相對(duì) 較小且對(duì)于較大像素分離相對(duì)較大（直到選定像素行長度的結(jié)束）的變量選定閾值。在結(jié) 合幀間視差中的差別考慮時(shí)，標(biāo)記為"LT"的像素可被認(rèn)為是用于串?dāng)_校正的候選者。如果 像素的S tjlJS過閾值，或在給定像素的選定行長度內(nèi)的至少一個(gè)其它像素具有超過閾值的 Swt，那么可將像素標(biāo)記為LT。
[0046] 系統(tǒng)100還可比較每一給定像素與在圖像幀的在時(shí)間上匹配的左/右對(duì)中的其它 圖像幀中的相同位置中的對(duì)應(yīng)像素（312)。如同強(qiáng)度轉(zhuǎn)變一樣，系統(tǒng)100還可評(píng)估像素中的 明度、色度或一些其它值。系統(tǒng)100可評(píng)估對(duì)應(yīng)左及右圖像幀中的兩個(gè)相同位置像素之間 的差，且獲得值S (i，j) = |L(i，j)-R(i，j) I作為像素間視差（314)。在此實(shí)例中，L(i， j)指示左視圖像素的強(qiáng)度，且R(i，j)指示右視圖像素的強(qiáng)度，其中此些像素是在相應(yīng)視圖 內(nèi)的相同位置處。系統(tǒng)100可評(píng)估視差是否大于視差閾值DisparityJU即δ (i，j)= L(i，j)-R(i，j)| >Disparity_TH(316)，且如果是，那么系統(tǒng)100將對(duì)應(yīng)像素標(biāo)記為"大 視差"的"LD"（318)。也就是說，"視差"可指視圖間圖像幀之間的相同位置或匹配像素位 置中（即，在相同時(shí)間點(diǎn)的不同視圖的圖像幀中的匹配或?qū)?yīng)像素位置處）的視圖間強(qiáng)度 差。
[0047] 系統(tǒng)100接著可比較被標(biāo)記為"LT"及"LD"兩者的像素（322)，且對(duì)于被標(biāo)記為兩 者的像素，系統(tǒng)100可將這些像素識(shí)別為串?dāng)_降低候選者（CRC)，且將這些像素添加到圖像 幀上的串?dāng)_降低候選者的映射（324)。
[0048] 圖6及圖7描繪此處標(biāo)記為210B及220B的右視圖圖像幀210及左視圖圖像幀 220的匹配對(duì)的串?dāng)_降低候選者（CRC)映射的中間階段的實(shí)例。確切地說，圖6及7展示 圖像幀的匹配的3D對(duì)的圖像幀的部分中的像素塊的兩個(gè)圖像幀映射之間的視差比較的中 間結(jié)果的簡化視圖。這些像素塊為其中如上文所描述的串?dāng)_區(qū)映射/預(yù)處理識(shí)別LD及LT 像素兩者（包含在強(qiáng)度轉(zhuǎn)變的選定距離內(nèi)的像素）的區(qū)域。CRC映射的其它實(shí)例可僅包含 在候選者像素周圍的水平行而非整個(gè)像素塊，但在圖6及7中所描繪的實(shí)例中，像素塊經(jīng)識(shí) 別為在被識(shí)別為具有大幀間視差的像素周圍及接近于所述像素，且因此被標(biāo)記為"LD"。每 一像素塊可含有一或多個(gè)及可能高達(dá)大數(shù)目的像素，其被識(shí)別為LD及LT兩者，且因此被識(shí) 別為用于串?dāng)_降低的目標(biāo)。每一像素塊可說明性地延伸到例如32、64、128或在每一串?dāng)_降 低候選者像素的任一側(cè)的像素的某一其它數(shù)目，且典型串?dāng)_降低候選者（CRC)映射可比圖 6及7的簡化描繪更加復(fù)雜。幀間視差處理可包含在222及224處展示的檢測(cè)具有平移非 視差（即，平移位移的幀間對(duì)比度的非視差或缺乏）的大圖像部分的能力，及從視差映射省 略那些部分。視差分析處理還檢測(cè)在226及228處展示的一些圖像部分，所述圖像部分具 有視差但不具有任何急劇強(qiáng)度轉(zhuǎn)變，以使得強(qiáng)度轉(zhuǎn)變分析處理將從針對(duì)大強(qiáng)度轉(zhuǎn)變被標(biāo)記 中省略這些圖像部分。因此，這些區(qū)可被標(biāo)記為LD但不被標(biāo)記為LT。在一些實(shí)例中，將標(biāo) 記為LD但不被標(biāo)記為LT的這些像素處理為用于串?dāng)_降低的候選者。在其它實(shí)例中，僅將 標(biāo)記為LD及LT兩者的區(qū)處理為用于串?dāng)_降低的候選者。
[0049] 圖8及圖9描繪在視差映射及強(qiáng)度轉(zhuǎn)變映射兩者（其可按任何次序執(zhí)行，包含并 聯(lián)或重疊次序）之后此處標(biāo)記為210C及220C的右視圖圖像幀210及左視圖圖像幀220的 匹配對(duì)中的串?dāng)_降低候選者（CRC)映射的簡化說明。右視圖圖像幀210C展示經(jīng)發(fā)現(xiàn)具有在 圖像幀的匹配的3D對(duì)的兩個(gè)匹配的圖像幀210C及220C之間的大強(qiáng)度轉(zhuǎn)變及大視差兩者 圖像幀的部分中的代表性像素塊。類似地，左視圖圖像幀220C展示經(jīng)發(fā)現(xiàn)具有在圖像幀的 匹配的3D對(duì)的兩個(gè)匹配的圖像幀210C及220C之間的大強(qiáng)度轉(zhuǎn)變（LT)及大視差（LD)兩 者的圖像幀的部分中的代表性像素塊。雖然為了圖8及9中的簡化視圖起見描繪了相對(duì)較 大代表性像素塊，但各種實(shí)例可在逐像素基礎(chǔ)上應(yīng)用強(qiáng)度轉(zhuǎn)變閾值及視差閾值濾波器。也 可包含額外像素作為用于在強(qiáng)度轉(zhuǎn)變候選者的選定距離內(nèi)的串?dāng)_降低處理候選者，其中在 各種實(shí)例中，距離可在行或列內(nèi)為線性的，或在行及列的矩形塊內(nèi)為矩形的，或在被定義為 行的平方及列的平方的和的平方根（例如，sqrt (M2XN2))的半徑R內(nèi)為圓形的，或在橢圓函 數(shù)（例如，PFJPF2= 2a)或任何其它函數(shù)內(nèi)。
[0050] 圖10及圖11描繪在更細(xì)尺度的逐像素基礎(chǔ)（其尺寸相對(duì)于圖像大小足夠小，使 得其可以此尺度連續(xù)呈現(xiàn)）上在視差映射及強(qiáng)度轉(zhuǎn)變映射兩者之后此處標(biāo)記為210D及 220D的右視圖圖像幀210及左視圖圖像幀220的匹配對(duì)中的串?dāng)_降低候選者（CRC)映射的 額外說明。像素210D及220D的群組可為已被識(shí)別為具有大于選定視差閾值的兩個(gè)圖像幀 之間的像素的相同位置對(duì)中的像素之間的視差及被識(shí)別為在大于選定強(qiáng)度轉(zhuǎn)變閾值的強(qiáng) 度轉(zhuǎn)變的選定距離內(nèi)的那些像素。在此實(shí)例中，可在每一像素的圓形范圍內(nèi)評(píng)估到強(qiáng)度轉(zhuǎn) 變的距離，其例如可被測(cè)量為水平像素距離的平方及垂直像素距離的平方的和的平方根。
[0051] 如上文所指示，CRC映射的其它實(shí)例可包含在候選者像素周圍的僅水平行而非整 個(gè)像素塊，但在圖8及9中所描繪的實(shí)例中，識(shí)別在被識(shí)別為具有大幀內(nèi)強(qiáng)度轉(zhuǎn)變及大幀間 視差兩者且因此被標(biāo)記為"LT"及"LD"兩者的像素周圍及接近于所述像素的像素塊。經(jīng)發(fā) 現(xiàn)具有大視差及大強(qiáng)度轉(zhuǎn)變兩者的經(jīng)CRC映射的像素塊通常在前景人物202與更遠(yuǎn)處背景 (包含相異背景物體204及206以及更遠(yuǎn)處及更無特征的背景）之間的邊緣周圍或接近于 所述邊緣。取決于用于檢測(cè)幀間視差的準(zhǔn)則，串?dāng)_降低處理還可給例如特寫人物的眼睛、鼻 子及嘴巴等區(qū)域加旗標(biāo)為高于面談圖像幀之間的閾值幀間視差，且因此也是用于串?dāng)_校正 處理的候選者，例如對(duì)于在圖10及11中的人物眼睛周圍的區(qū)域。
[0052] 串?dāng)_預(yù)處理模塊110因此可通過僅識(shí)別需要串?dāng)_降低的那些區(qū)域以使得可在不 會(huì)干擾帶寬或參考幀的質(zhì)量的情況下應(yīng)用串?dāng)_降低，來提供質(zhì)量保護(hù)的額外層。預(yù)處理階 段還通過識(shí)別需要串?dāng)_的某些區(qū)而使用較少硬件周期。系統(tǒng)僅對(duì)幀中的低百分比的像素應(yīng) 用串?dāng)_校正，以使得過程達(dá)成當(dāng)前像素的提早終止。在一些實(shí)例中，系統(tǒng)可對(duì)視頻內(nèi)容中的 所有像素的10%到15%應(yīng)用串?dāng)_校正。在其它實(shí)例中，系統(tǒng)可對(duì)視頻內(nèi)容中的像素的較大 或較小百分比應(yīng)用串?dāng)_校正。
[0053] -旦系統(tǒng)100已對(duì)如圖8及9中所示的圖像幀應(yīng)用強(qiáng)度閾值映射及視差映射兩 者，系統(tǒng)100便可繼續(xù)進(jìn)行串?dāng)_降低處理，或系統(tǒng)100可在繼續(xù)進(jìn)行串?dāng)_降低處理之前執(zhí)行 額外預(yù)處理分析或步驟（例如，在如圖1中所示的預(yù)處理塊Iio的范圍內(nèi)）。舉例來說，系 統(tǒng)100的預(yù)處理塊110可簡單地指明用于串?dāng)_降低處理的標(biāo)記為LD及LT兩者的所有像 素，或系統(tǒng)100可在指明其用于預(yù)處理之前執(zhí)行用于評(píng)估候選者像素的強(qiáng)度轉(zhuǎn)變及視差兩 者的額外步驟。系統(tǒng)100的預(yù)處理塊110還可執(zhí)行圖像幀的范圍映射（如圖1中的范圍映 射模塊118所指示），及比較串?dāng)_降低候選者像素與范圍映射。
[0054] 可在其它預(yù)處理步驟之前對(duì)每一圖像幀中的所有像素應(yīng)用此范圍映射118,或可 在其它預(yù)處理步驟之后及/或僅對(duì)圖像幀中的一些像素應(yīng)用此范圍映射。范圍映射可例如 涉及識(shí)別適用于圖像幀的區(qū)或像素的背光值或背景黑色的水平或明度的下部邊界值，進(jìn)行 補(bǔ)償，其可促使確保完整串?dāng)_補(bǔ)償。舉例來說，明度及/或色度的值可在可能值的指定數(shù)字 范圍內(nèi)，其中所述范圍是由指派給所述范圍的位的數(shù)目"η"來定界的，例如10位允許所述 像素的明度、色度或其它值具有由2 1°的范圍劃界的值。然而，總范圍可由邊界值劃界，例如 對(duì)明度值中的最亮白色及最暗黑色進(jìn)行譯碼，其不允許用于串?dāng)_的最佳可能降低的足夠界 限。此η位范圍的邊界值還可并不完全利用例如裝置200等裝置或顯示器機(jī)構(gòu)物理上能夠 重現(xiàn)的值范圍。
[0055] 舉例來說，系統(tǒng)100的預(yù)處理塊110可檢測(cè)被標(biāo)記為用于大視差及大強(qiáng)度轉(zhuǎn)變的 LD及LT兩者的幀的在時(shí)間上匹配的對(duì)中的像素群組，但這些像素及其周圍像素作為整體 還具有對(duì)圖像的相對(duì)黑暗區(qū)域進(jìn)行譯碼的值，以使得即使其涉及相對(duì)較大強(qiáng)度閾值，仍針 對(duì)明度的下限（即，針對(duì)像素強(qiáng)度協(xié)議能夠提供的最暗黑色）對(duì)所述強(qiáng)度閾值的一側(cè)進(jìn)行 譯碼。（其它實(shí)例可涉及其它邊界值，例如明度的上限。）此邊界值限制可約束系統(tǒng)100的 能力以防止此群組像素中的串?dāng)_及重像。在例如此情形的狀況下，系統(tǒng)100的預(yù)處理塊110 還可引入用于低于或高于對(duì)應(yīng)η位（例如，10位）范圍S(ρ)的碼或額外值，其中S為像素 P的范圍，其經(jīng)譯碼為用于明度及/或色度的源碼中的有界的完整范圍。預(yù)處理塊110可應(yīng) 用范圍映射以將其邊界值之外的10位值S(p)映射到擴(kuò)展范圍中的值，例如[0，1023]χ[0， 1023]-> S(p)?？梢跃€性或非線性方式進(jìn)行范圍映射。舉例來說，在實(shí)例線性狀況下，可 如下獲得在范圍映射之后的10位圖像的新像素值：
[0056] newleftpix = RangeMap+(leftpix* (1024-RangeMap) )>> 10 ;
[0057] newrightpix = RangeMap+(rightpix* (1024-RangeMap)) >> 10 ；
[0058] 其中值"RangeMap"為可調(diào)整參數(shù)。
[0059] -旦系統(tǒng)100的預(yù)處理塊110已評(píng)估一對(duì)圖像幀，且將一或多個(gè)像素標(biāo)記為LD及 /或LT以將像素識(shí)別為串?dāng)_候選者,且可能在識(shí)別串?dāng)_候選者像素之前或之后執(zhí)行例如范 圍映射等任何其它預(yù)處理步驟，系統(tǒng)100便接著可執(zhí)行串?dāng)_降低，如下文所論述。
[0060] 系統(tǒng)100可應(yīng)用各種技術(shù)中的任一者來執(zhí)行串?dāng)_降低（例如，使用串?dāng)_降低處理 塊120)。在一些實(shí)例中，串?dāng)_降低處理塊120可使用由顯示測(cè)量表征的2D查找表（LUT)，此 舉可引起相對(duì)較低的處理負(fù)擔(dān)。在一些實(shí)例中，串?dāng)_降低處理塊120可應(yīng)用等式，所述等式 以更高精確度來處理此函數(shù)，且需要較少數(shù)據(jù)存儲(chǔ)空間。下文給出17x17 2D查找表（LUT) 的實(shí)例：
[0061]

【權(quán)利要求】
1. 一種方法，其包括： 識(shí)別多視圖圖像峽的對(duì)應(yīng)對(duì)中的在相同位置對(duì)中的像素的第一集合，其中所述相同位 置對(duì)具有大于選定視差闊值的在所述像素之間的視差； 識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的選定距離內(nèi)的所述圖像峽中的至少一者 中的像素的第二集合；及 對(duì)經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像素應(yīng)用串?dāng)_校正。
2. 根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包括僅對(duì)經(jīng)識(shí)別為在所述第一集合及所述第 二集合兩者中的像素應(yīng)用串?dāng)_校正。
3. 根據(jù)權(quán)利要求1所述的方法，其中對(duì)所述像素應(yīng)用所述串?dāng)_校正包括將所述像素的 至少一部分的像素值從在選定位范圍內(nèi)映射到在所述選定位范圍之外。
4. 根據(jù)權(quán)利要求3所述的方法，其中所述選定位范圍是選自8位范圍、10位范圍及12 位范圍當(dāng)中。
5. 根據(jù)權(quán)利要求1所述的方法，其中識(shí)別具有大于所述選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變 的像素包括對(duì)所述圖像峽中的所述至少一者中的多個(gè)所述像素中的每一者應(yīng)用邊緣檢測(cè) 濾波器。
6. 根據(jù)權(quán)利要求1所述的方法，其中識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的選定 距離內(nèi)的像素包括識(shí)別在經(jīng)識(shí)別為具有大于所述選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的像素的 共同水平行內(nèi)的在選定距離內(nèi)的像素。
7. 根據(jù)權(quán)利要求1所述的方法，其中所述選定距離包括選自1與256個(gè)像素之間的距 離。
8. 根據(jù)權(quán)利要求1所述的方法，其中所述選定距離為64個(gè)像素。
9. 根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包括至少部分基于所述像素是在所述圖像峽 的兩個(gè)或兩個(gè)W上部分中的哪一者中對(duì)應(yīng)用所述串?dāng)_校正的所述像素中的一或多者應(yīng)用 調(diào)整。
10. 根據(jù)權(quán)利要求1所述的方法，其中識(shí)別具有大于所述選定轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的 像素包括評(píng)估所述像素的明度值中的轉(zhuǎn)變。
11. 根據(jù)權(quán)利要求1所述的方法，其中識(shí)別具有大于所述選定轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的 像素包括評(píng)估所述像素的一或多個(gè)色度值中的轉(zhuǎn)變。
12. 根據(jù)權(quán)利要求1所述的方法，其進(jìn)一步包括基于所述串?dāng)_校正呈現(xiàn)多視圖圖像峽 的所述對(duì)應(yīng)對(duì)。
13. 根據(jù)權(quán)利要求1所述的方法，其中所述串?dāng)_校正至少部分基于所述像素的顏色。
14. 根據(jù)權(quán)利要求13所述的方法，其中所述圖像峽包含顏色模型中的像素的H個(gè)或H 個(gè)W上顏色，且所述串?dāng)_校正基于所述像素是所述顏色模型中的哪一顏色而不同。
15. 根據(jù)權(quán)利要求13所述的方法，其中所述圖像峽包含在RGB顏色模型中的R像素、G 像素及B像素，且所述串?dāng)_校正基于像素是R像素、G像素還是B像素而不同。
16. 根據(jù)權(quán)利要求13所述的方法，其中所述圖像峽包含RGB顏色模型中的R像素、G像 素及B像素，且用于G像素的所述串?dāng)_校正大于用于R像素或B像素的所述串?dāng)_校正。
17. 根據(jù)權(quán)利要求13所述的方法，其中所述圖像峽包含Y' Cb化顏色模型中的Y'像 素、Cb像素及化像素，且所述串?dāng)_校正基于像素是Y'像素、Cb像素還是化像素而不同。
18. 根據(jù)權(quán)利要求13所述的方法，其中所述圖像峽包含在Y' Cb化顏色模型中的Y' 像素、Cb像素及化像素，且用于Y'像素的所述串?dāng)_校正大于用于Cb像素或化像素的所 述串?dāng)_校正。
19. 一種存儲(chǔ)指令的計(jì)算機(jī)可讀媒體，所述指令用于致使處理器： 識(shí)別多視圖圖像峽的對(duì)應(yīng)對(duì)中的在相同位置對(duì)中的像素的第一集合，其中所述相同位 置對(duì)具有大于選定視差闊值的在所述像素之間的視差； 識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的選定距離內(nèi)的所述圖像峽中的至少一者 中的像素的第二集合；及 對(duì)經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像素應(yīng)用串?dāng)_校正。
20. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其進(jìn)一步包括用于致使處理器僅對(duì)經(jīng)識(shí) 別為在所述第一集合及所述第二集合兩者中的像素應(yīng)用串?dāng)_校正的可執(zhí)行指令。
21. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中對(duì)所述像素應(yīng)用所述串?dāng)_校正包括 將所述像素的至少一部分的像素值從在選定位范圍內(nèi)映射到在所述選定位范圍之外。
22. 根據(jù)權(quán)利要求21所述的計(jì)算機(jī)可讀媒體，其中所述選定位范圍是選自8位范圍、10 位范圍及12位范圍當(dāng)中。
23. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中識(shí)別具有大于所述選定強(qiáng)度轉(zhuǎn)變闊 值的強(qiáng)度轉(zhuǎn)變的像素包括對(duì)所述圖像峽中的所述至少一者中的多個(gè)所述像素中的每一者 應(yīng)用邊緣檢測(cè)濾波器。
24. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng) 度轉(zhuǎn)變的選定距離內(nèi)的像素包括識(shí)別在經(jīng)識(shí)別為具有大于所述選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度 轉(zhuǎn)變的像素的共同水平行內(nèi)的在選定距離內(nèi)的像素。
25. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中所述選定距離包括選自1與256個(gè) 像素之間的距離。
26. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中所述選定距離為64個(gè)像素。
27. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其進(jìn)一步包括用于致使處理器至少部分 基于所述像素是在所述圖像峽的兩個(gè)或兩個(gè)W上部分中的哪一者中對(duì)應(yīng)用所述串?dāng)_校正 的所述像素中的一或多者應(yīng)用調(diào)整的可執(zhí)行指令。
28. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中識(shí)別具有大于所述選定轉(zhuǎn)變闊值的 強(qiáng)度轉(zhuǎn)變的像素包括評(píng)估所述像素的明度值中的轉(zhuǎn)變。
29. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中識(shí)別具有大于所述選定轉(zhuǎn)變闊值的 強(qiáng)度轉(zhuǎn)變的像素包括評(píng)估所述像素的一或多個(gè)色度值中的轉(zhuǎn)變。
30. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其進(jìn)一步包括用于致使處理器基于所述 串?dāng)_校正呈現(xiàn)多視圖圖像峽的所述對(duì)應(yīng)對(duì)的可執(zhí)行指令。
31. 根據(jù)權(quán)利要求19所述的計(jì)算機(jī)可讀媒體，其中所述串?dāng)_校正至少部分基于所述像 素的顏色。
32. 根據(jù)權(quán)利要求31所述的計(jì)算機(jī)可讀媒體，其中所述圖像峽包含在顏色模型中的像 素的H個(gè)或H個(gè)W上顏色，且所述串?dāng)_校正基于所述像素是所述顏色模型中的哪一顏色而 不同。
33. 根據(jù)權(quán)利要求31所述的計(jì)算機(jī)可讀媒體，其中所述圖像峽包含在RGB顏色模型中 的R像素、G像素及B像素，且所述串?dāng)_校正基于像素是R像素、G像素還是B像素而不同。
34. 根據(jù)權(quán)利要求31所述的計(jì)算機(jī)可讀媒體，其中所述圖像峽包含RGB顏色模型中的 R像素、G像素及B像素，且用于G像素的所述串?dāng)_校正大于用于R像素或B像素的所述串 擾校正。
35. 根據(jù)權(quán)利要求31所述的計(jì)算機(jī)可讀媒體，其中所述圖像峽包含Y' Cb化顏色模型 中的Y'像素、Cb像素及化像素，且所述串?dāng)_校正基于像素是Y'像素、Cb像素還是化像 素而不同。
36. 根據(jù)權(quán)利要求31所述的計(jì)算機(jī)可讀媒體，其中所述圖像峽包含在Y' Cb化顏色模 型中的Y'像素、Cb像素及化像素，且用于Y'像素的所述串?dāng)_校正大于用于Cb像素或化 像素的所述串?dāng)_校正。
37. -種設(shè)備，其包括： 用于識(shí)別多視圖圖像峽的對(duì)應(yīng)對(duì)中的在相同位置對(duì)中的像素的第一集合的裝置，其中 所述相同位置對(duì)具有大于選定視差闊值的在所述像素之間的視差； 用于識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的選定距離內(nèi)的所述圖像峽中的至少 一者中的像素的第二集合的裝置；及 用于對(duì)經(jīng)識(shí)別為在所述第一集合及所述第二集合中的至少一者中的像素應(yīng)用串?dāng)_校 正的裝置。
38. 根據(jù)權(quán)利要求37所述的設(shè)備，其進(jìn)一步包括用于僅對(duì)經(jīng)識(shí)別為在所述第一集合及 所述第二集合兩者中的像素應(yīng)用串?dāng)_校正的裝置。
39. 根據(jù)權(quán)利要求37所述的設(shè)備，其中對(duì)所述像素應(yīng)用所述串?dāng)_校正包括將所述像素 的至少一部分的像素值從在選定位范圍內(nèi)映射到在所述選定位范圍之外。
40. 根據(jù)權(quán)利要求39所述的設(shè)備，其中所述選定位范圍是選自8位范圍、10位范圍及 12位范圍當(dāng)中。
41. 根據(jù)權(quán)利要求37所述的設(shè)備，其中識(shí)別具有大于所述選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn) 變的像素包括對(duì)所述圖像峽中的所述至少一者中的多個(gè)所述像素中的每一者應(yīng)用邊緣檢 測(cè)濾波器。
42. 根據(jù)權(quán)利要求37所述的設(shè)備，其中識(shí)別在大于選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的選 定距離內(nèi)的像素包括識(shí)別在經(jīng)識(shí)別為具有大于所述選定強(qiáng)度轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的像素 的共同水平行內(nèi)的在選定距離內(nèi)的像素。
43. 根據(jù)權(quán)利要求37所述的設(shè)備，其中所述選定距離包括選自1與256個(gè)像素之間的 距離。
44. 根據(jù)權(quán)利要求37所述的設(shè)備，其中所述選定距離為64個(gè)像素。
45. 根據(jù)權(quán)利要求37所述的設(shè)備，其進(jìn)一步包括用于至少部分基于所述像素是在所述 圖像峽的兩個(gè)或兩個(gè)W上部分中的哪一者中對(duì)應(yīng)用所述串?dāng)_校正的所述像素中的一或多 者應(yīng)用調(diào)整的裝置。
46. 根據(jù)權(quán)利要求37所述的設(shè)備，其中識(shí)別具有大于所述選定轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的 像素包括評(píng)估所述像素的明度值中的轉(zhuǎn)變。
47. 根據(jù)權(quán)利要求37所述的設(shè)備，其中識(shí)別具有大于所述選定轉(zhuǎn)變闊值的強(qiáng)度轉(zhuǎn)變的 像素包括評(píng)估所述像素的一或多個(gè)色度值中的轉(zhuǎn)變。
48. 根據(jù)權(quán)利要求37所述的設(shè)備，其進(jìn)一步包括用于基于所述串?dāng)_校正呈現(xiàn)多視圖圖 像峽的所述對(duì)應(yīng)對(duì)的裝置。
49. 根據(jù)權(quán)利要求37所述的設(shè)備，其中所述串?dāng)_校正至少部分基于所述像素的顏色。
50. 根據(jù)權(quán)利要求49所述的設(shè)備，其中所述圖像峽包含顏色模型中的像素的H個(gè)或H 個(gè)W上顏色，且所述串?dāng)_校正基于所述像素是所述顏色模型中的哪一顏色而不同。
51. 根據(jù)權(quán)利要求49所述的設(shè)備，其中所述圖像峽包含在RGB顏色模型中的R像素、G 像素及B像素，且所述串?dāng)_校正基于像素是R像素、G像素還是B像素而不同。
52. 根據(jù)權(quán)利要求49所述的設(shè)備，其中所述圖像峽包含RGB顏色模型中的R像素、G像 素及B像素，且用于G像素的所述串?dāng)_校正大于用于R像素或B像素的所述串?dāng)_校正。
53. 根據(jù)權(quán)利要求49所述的設(shè)備，其中所述圖像峽包含Y' Cb化顏色模型中的Y'像 素、Cb像素及化像素，且所述串?dāng)_校正基于像素是Y'像素、Cb像素還是化像素而不同。
54. 根據(jù)權(quán)利要求49所述的設(shè)備，其中所述圖像峽包含在Y' Cb化顏色模型中的Y' 像素、Cb像素及化像素，且用于Y'像素的所述串?dāng)_校正大于用于Cb像素或化像素的所 述串?dāng)_校正。
55. 根據(jù)權(quán)利要求37所述的設(shè)備，其中所述設(shè)備包括集成電路。
56. 根據(jù)權(quán)利要求37所述的設(shè)備，其中所述設(shè)備包括移動(dòng)計(jì)算裝置。
57. 根據(jù)權(quán)利要求37所述的設(shè)備，其中所述設(shè)備包括電視。
【文檔編號(hào)】H04N13/00GK104471931SQ201380037549
【公開日】2015年3月25日 申請(qǐng)日期:2013年6月18日 優(yōu)先權(quán)日:2012年7月18日
【發(fā)明者】格克切·戴恩, 瓦蘇德弗·巴斯卡蘭 申請(qǐng)人:高通股份有限公司