專利名稱:減小基于運(yùn)動(dòng)估計(jì)的視頻處理系統(tǒng)的反應(yīng)時(shí)間的制作方法
技術(shù)領(lǐng)域:
本發(fā)明通常涉及視頻處理領(lǐng)域。更具體地本發(fā)明涉及通過執(zhí)行多個(gè)運(yùn)動(dòng)估計(jì)掃描而并不相反地增加視頻處理系統(tǒng)的運(yùn)動(dòng)估計(jì)操作的反應(yīng)時(shí)間,來增強(qiáng)在視頻屏幕例如電視屏幕上被顯示圖像的質(zhì)量。
背景技術(shù):
在運(yùn)動(dòng)估計(jì)被用來增強(qiáng)顯示圖像的質(zhì)量的電視領(lǐng)域公知,運(yùn)動(dòng)估計(jì)的質(zhì)量是至關(guān)重要的。在其它視頻應(yīng)用技術(shù)中,運(yùn)動(dòng)估計(jì)被用作兩個(gè)主要的視頻應(yīng)用技術(shù)——去隔行和畫面上變換的一部分。而且,包括空-時(shí)噪音減小和銳度增強(qiáng)的視頻應(yīng)用技術(shù)將同樣受益于運(yùn)動(dòng)估計(jì)的使用。
過去,對(duì)于兩個(gè)應(yīng)用技術(shù)僅使用一個(gè)運(yùn)動(dòng)估計(jì)器意味著去隔行都是匆忙運(yùn)行的,緊跟著的是畫面速率上變換(up-conversion)。另一方面,今天的電視屏幕更大且更亮并且因此使得贗象變得更加可見。在減小贗象影響的持久努力中,研究者已經(jīng)提出了更加復(fù)雜的算法。在C.Ciuhu和G.de Haan在2004年1月出版的SPIE,Proceeding of VCIP的700-711頁發(fā)表的“A two dimensional generalised sampling theory and application tode-interlacing”公開的基于新2D廣義取樣法則(GST)的去隔行算法中,以及R.B.Wittebrood,G.de Haan和R.Lodder在2003年6月出版的Digestof the ICCE’03的344-45頁發(fā)表的“Tackling occlusion in scan rateconversion system”公開的減小暈圈的畫面速率上變換算法都是典型的例子。這些算法基于已有的運(yùn)動(dòng)向量域提供了更好的結(jié)果,意味著它們僅消耗了已經(jīng)可用的運(yùn)動(dòng)向量域。因此它們高度依賴已消耗的運(yùn)動(dòng)向量域的質(zhì)量。
改善運(yùn)動(dòng)向量域的質(zhì)量的一種方式是增加每個(gè)輸入圖像對(duì)的運(yùn)動(dòng)估計(jì)掃描的數(shù)量。更大數(shù)量的掃描應(yīng)當(dāng)意味著更好的圖像質(zhì)量。在兩個(gè)連續(xù)運(yùn)動(dòng)估計(jì)通道上改變掃描的方向,例如第一通道是從屏幕的頂部到底部以及第二通道是從屏幕的底部到頂部,也似乎是個(gè)可關(guān)注的選擇,因?yàn)槠鋵?shí)現(xiàn)了運(yùn)動(dòng)向量域從兩個(gè)不同方向的集中。多次掃描、掃描方向交替和兩種掃描方式(曲折(meandering)方式和從頂部到底部以及從左到右的常規(guī)方式)的效果被A.Beric,G de Haan,J.van Meerbergen和R.Sethuraman在2003年9月以CD出版的“Proceedings of the IEEEInternational Conference on Image Processing”上發(fā)表的“Towards anefficient high quality picture rate up-converter”用實(shí)驗(yàn)方法分析,其在此整體引入作為參考。
該實(shí)驗(yàn)在如圖1所示的五個(gè)漸進(jìn)序列上(自行車101,獨(dú)白102,BBC腳本103,乒乓球104,混合器105)使用一組六個(gè)運(yùn)動(dòng)向量候選者進(jìn)行。計(jì)算的運(yùn)動(dòng)向量域的質(zhì)量通過在文獻(xiàn)中廣泛使用的標(biāo)準(zhǔn)——修正均方誤差(MMSE)來測(cè)量。實(shí)驗(yàn)的結(jié)論是增加運(yùn)動(dòng)估計(jì)掃描的數(shù)量實(shí)現(xiàn)了運(yùn)動(dòng)向量域的更好質(zhì)量。然而,在第二或第三掃描之后,MMSE曲線飽和,并且更多的掃描并不能實(shí)現(xiàn)更好的圖像質(zhì)量。而且,掃描方向的交替促使了運(yùn)動(dòng)向量域的更快集中,特別是在不同序列的情況下。這些結(jié)論在圖2中示出,其示出了為不同數(shù)量的運(yùn)動(dòng)估計(jì)通道并且具有掃描所使用的交替和曲折方式的不同結(jié)合而畫出的序列混合器105的MMSE。
然而,更多的運(yùn)動(dòng)估計(jì)掃描意味著視頻處理系統(tǒng)的更高等待時(shí)間,其使得例如在當(dāng)使用單獨(dú)聲音表現(xiàn)系統(tǒng)時(shí)的情況下產(chǎn)生唇同步損失,并且需要額外的存儲(chǔ)器資源來緩存圖像。
為了保持運(yùn)動(dòng)向量域的高水平質(zhì)量,兩個(gè)交替方向的掃描應(yīng)當(dāng)在去隔行側(cè)和上變換器側(cè)都執(zhí)行。圖3示出了在去隔行側(cè)301和303以及上變換側(cè)305和307執(zhí)行的運(yùn)動(dòng)估計(jì)掃描。一個(gè)單獨(dú)的運(yùn)動(dòng)估計(jì)器執(zhí)行四個(gè)掃描。第一掃描從頂部到底部,以及第二掃描從底部到頂部。如圖3所示,執(zhí)行這個(gè)操作的時(shí)間是4T,給出執(zhí)行一個(gè)掃描需要的時(shí)間是1T。隨著第二掃描的執(zhí)行,去隔行幀的產(chǎn)生就可以開始了。這大概在t=1T發(fā)生。上變換幀的產(chǎn)生在大概t=3T開始。不幸的,該方法在視頻處理系統(tǒng)中產(chǎn)生了太多不需要的等待時(shí)間。
在如圖3所示的公知方法中,最后的上變換運(yùn)動(dòng)估計(jì)掃描從底部到頂部執(zhí)行。這是很不方便的,因?yàn)橄袼卦陲@示設(shè)備上應(yīng)當(dāng)從頂部到底部來顯示。為了克服這種不便,上變換器應(yīng)當(dāng)僅執(zhí)行一個(gè)向下掃描,這將損壞質(zhì)量,或3個(gè)掃描即向下、向上、向下(其會(huì)增加等待時(shí)間以及所需的緩存容量)。因此,需要一種新的方法來執(zhí)行多個(gè)運(yùn)動(dòng)估計(jì)掃描而不用過度地增加視頻處理系統(tǒng)的等待時(shí)間。
因此,一種改進(jìn)的用于執(zhí)行多個(gè)運(yùn)動(dòng)估計(jì)掃描而不用過度地增加視頻處理系統(tǒng)的等待時(shí)間的方法和系統(tǒng)是有利的。
發(fā)明內(nèi)容
因此,本發(fā)明優(yōu)選設(shè)法逐一減輕、緩解或消除現(xiàn)有技術(shù)中的一個(gè)或多個(gè)上述缺陷以及缺點(diǎn)或其結(jié)合,并且通過提供一種根據(jù)權(quán)利要求的允許視頻圖像處理系統(tǒng)在去隔行側(cè)和上變換器側(cè)執(zhí)行多個(gè)運(yùn)動(dòng)估計(jì)掃描而不用過度地增加視頻處理系統(tǒng)的等待時(shí)間的系統(tǒng)、方法和計(jì)算機(jī)可讀介質(zhì)來至少解決上述問題。
根據(jù)本發(fā)明的總的解決方案是在去隔行側(cè)和上變換器側(cè)使用單獨(dú)的運(yùn)動(dòng)估計(jì)器,以及更具體地改變第一上變換器掃描的方向以使得其可在第二去隔行掃描被執(zhí)行時(shí)開始,從而減小了視頻圖像處理系統(tǒng)的等待時(shí)間。
根據(jù)本發(fā)明的一個(gè)方面,提供了一種方法在圖像處理系統(tǒng)中以連續(xù)的圖像處理步驟在視頻圖像幀上執(zhí)行運(yùn)動(dòng)估計(jì),所述方法包括以下步驟在第一圖像處理步驟在第一方向執(zhí)行第一運(yùn)動(dòng)估計(jì)掃描;在第一處理步驟在第二方向執(zhí)行第二運(yùn)動(dòng)估計(jì)掃描;在第二圖像處理步驟在第二方向執(zhí)行第一運(yùn)動(dòng)估計(jì)掃描;以及在第二處理步驟在第一方向執(zhí)行第二運(yùn)動(dòng)估計(jì)掃描。
根據(jù)本發(fā)明的另一個(gè)方面,提供了一種處理圖像幀的系統(tǒng),所述系統(tǒng)包括用于處理圖像幀的第一圖像處理器;與第一圖像處理器連接的第一運(yùn)動(dòng)估計(jì)器,其中第一運(yùn)動(dòng)估計(jì)器首先在第一方向掃描該幀并隨后在第二方向掃描該幀;與第一圖像處理器的輸出連接的第二圖像處理器,用于處理該幀;以及與第二圖像處理器連接的第二運(yùn)動(dòng)估計(jì)器,其中第二運(yùn)動(dòng)估計(jì)器首先在第二方向掃描該幀并隨后在第一方向掃描該幀,所述裝置彼此可操作的連接。
根據(jù)本發(fā)明的再一個(gè)方面,提供了一種具有體現(xiàn)在其上的用于由計(jì)算機(jī)處理的計(jì)算機(jī)程序的計(jì)算機(jī)可讀介質(zhì)。計(jì)算機(jī)程序包括用于在圖像處理系統(tǒng)中以連續(xù)的圖像處理步驟在視頻圖像幀上執(zhí)行運(yùn)動(dòng)估計(jì)的代碼段,所述方法包括以下步驟在第一圖像處理步驟在第一方向執(zhí)行第一運(yùn)動(dòng)估計(jì)掃描;在第一處理步驟在第二方向執(zhí)行第二運(yùn)動(dòng)估計(jì)掃描;在第二圖像處理步驟在第二方向執(zhí)行第一運(yùn)動(dòng)估計(jì)掃描;以及在第二處理步驟在第一方向執(zhí)行第二運(yùn)動(dòng)估計(jì)掃描。
本發(fā)明具有相對(duì)于現(xiàn)有技術(shù)的優(yōu)點(diǎn),其降低了整個(gè)系統(tǒng)的等待時(shí)間和所需的幀緩存存儲(chǔ)器容量而不會(huì)損壞所產(chǎn)生信號(hào)的質(zhì)量。
本發(fā)明的這些和其它方面、特征和優(yōu)點(diǎn)將從本發(fā)明以下參考附圖做出的實(shí)施例的描述中變得明顯和清楚,其中圖1示出了在運(yùn)動(dòng)向量域的質(zhì)量估計(jì)中使用的一系列序列;圖2示出了為不同數(shù)量的運(yùn)動(dòng)估計(jì)通道所畫出的混合器序列的MMSE;圖3示出了根據(jù)已知方法在去隔行側(cè)和上變換器側(cè)執(zhí)行的運(yùn)動(dòng)估計(jì)掃描;圖4示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的視頻處理系統(tǒng)的一些部件;圖5示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的上變換器的框圖;圖6示出了用于本發(fā)明的兩級(jí)緩存策略的框圖;圖7示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的在去隔行側(cè)和上變換器側(cè)執(zhí)行的運(yùn)動(dòng)估計(jì)掃描。
具體實(shí)施例方式
以下描述集中在可應(yīng)用在視頻圖像處理系統(tǒng)以及尤其是對(duì)于去隔行和上變換都利用多個(gè)運(yùn)動(dòng)估計(jì)的視頻圖像處理系統(tǒng)的本發(fā)明的一個(gè)實(shí)施例。然而,應(yīng)當(dāng)理解的是本發(fā)明不限于這種應(yīng)用,而可應(yīng)用到很多其它視頻應(yīng)用技術(shù)比如空-時(shí)噪音減小和銳度增強(qiáng),其二者都能受益于運(yùn)動(dòng)估計(jì)的使用。
本發(fā)明的一個(gè)實(shí)施例如圖4所示,其是包括多個(gè)階段的圖像處理系統(tǒng)400的框圖。圖像信號(hào)402被提供到第一階段401,其包括用于將信號(hào)解碼為存儲(chǔ)在幀緩存器(未示出)中的幀的視頻解碼器413和空間噪音減小單元415。然后第二階段403選擇一幀進(jìn)行處理,該階段包括去隔行處理器417和空-時(shí)噪音減小單元419。運(yùn)動(dòng)估計(jì)器421與去隔行處理器417可操作地連接以在由去隔行處理器417處理的每一幀上執(zhí)行運(yùn)動(dòng)估計(jì)掃描,其將在以下進(jìn)行詳細(xì)的描述。去隔行處理器的輸出與第三階段405連接,其包括空間定標(biāo)和銳度增強(qiáng)單元。第三階段405在將幀發(fā)送到第四階段407之前對(duì)其進(jìn)行定標(biāo)和銳化。第四階段407包括用于上變換圖像信號(hào)幀的上變換過程423。運(yùn)動(dòng)估計(jì)器425與上變換處理器423可操作地連接以在由上變換處理器423處理的每一幀上執(zhí)行運(yùn)動(dòng)估計(jì)掃描,其將在以下詳細(xì)描述。根據(jù)本發(fā)明的一個(gè)實(shí)施例,每個(gè)運(yùn)動(dòng)估計(jì)器421、425執(zhí)行每幀至少兩個(gè)掃描。隨后上變換處理器的輸出被發(fā)送到定標(biāo)器409,其在將幀發(fā)送到顯示設(shè)備411之前將其調(diào)制為適當(dāng)?shù)娘@示分辨率。
圖5示出了可用于本發(fā)明的上變換模塊。幀存儲(chǔ)器M1和M2分別用于從畫面輸入速率f1到輸出速率f2的頻率變換以及用于提供延遲圖像。
圖6示出了上變換處理器407所使用的兩個(gè)等級(jí)的緩存策略。存儲(chǔ)在幀存儲(chǔ)器M1和M2以及L1緩存中的數(shù)據(jù)是壓縮格式的,而存儲(chǔ)在L0緩存中的數(shù)據(jù)是未壓縮格式的。數(shù)據(jù)解壓縮模塊(DEC/IDCT)執(zhí)行解碼并找到數(shù)據(jù)流的反離散余弦變換的操作。等級(jí)1(L1)緩存保留五個(gè)塊行,圖像的搜索區(qū)域的高度,而整個(gè)搜索區(qū)域存儲(chǔ)在等級(jí)0(L0)緩存中。幀存儲(chǔ)器M1和M2和運(yùn)動(dòng)估計(jì)器/補(bǔ)償器(ME/MC)之間的數(shù)據(jù)通信量當(dāng)數(shù)據(jù)解壓縮模塊(DEC/IDCT)在接近L0緩存發(fā)生時(shí)最小。
在本發(fā)明的第一實(shí)施例中,在圖3所示的方向上執(zhí)行所有的四個(gè)掃描。在該實(shí)施例中,有兩個(gè)運(yùn)動(dòng)估計(jì)器421、425,其中第一運(yùn)動(dòng)估計(jì)器為去隔行階段執(zhí)行兩個(gè)掃描以及第二運(yùn)動(dòng)估計(jì)起為上變換階段執(zhí)行兩個(gè)掃描。
根據(jù)本發(fā)明的另一實(shí)施例,將參考圖7更加詳細(xì)地描述圖像處理系統(tǒng)400地操作。圖7示出了根據(jù)本發(fā)明第一實(shí)施例在去隔行處理器403和上變換處理器407執(zhí)行的運(yùn)動(dòng)估計(jì)掃描。在本發(fā)明的這個(gè)實(shí)施例中,兩個(gè)運(yùn)動(dòng)估計(jì)掃描對(duì)每個(gè)運(yùn)動(dòng)估計(jì)器在相反方向被執(zhí)行。首先,運(yùn)動(dòng)估計(jì)器405在如箭頭701所指示的第一方向在所選幀上執(zhí)行運(yùn)動(dòng)估計(jì)掃描。隨后運(yùn)動(dòng)估計(jì)器在如箭頭703所指示的另一個(gè)方向執(zhí)行第二掃描。根據(jù)本發(fā)明,一旦運(yùn)動(dòng)估計(jì)器405開始第二掃描,第二運(yùn)動(dòng)估計(jì)器409的第一運(yùn)動(dòng)估計(jì)掃描(用于上變換過程)從如箭頭705所指示的與運(yùn)動(dòng)估計(jì)器405的第一掃描相反的方向開始。因此,第一上變換運(yùn)動(dòng)估計(jì)器在第二去隔行運(yùn)動(dòng)估計(jì)結(jié)束之前開始。最后,第二運(yùn)動(dòng)估計(jì)器409在如箭頭707所指示的與第一掃描相反的方向執(zhí)行第二掃描。在本發(fā)明的該實(shí)施例中,第一去隔行運(yùn)動(dòng)估計(jì)掃描從頂部到底部,以及第二去隔行運(yùn)動(dòng)估計(jì)掃描從底部到頂部。此外,第一上變換運(yùn)動(dòng)估計(jì)掃描從底部到頂部,以及第二上變換運(yùn)動(dòng)估計(jì)掃描從頂部到底部。
在如圖3所示的已有系統(tǒng)中,隨著第二去隔行掃描的進(jìn)行,去隔行幀的產(chǎn)生在大概t=1T開始。然而,如圖7所示,第一上變換運(yùn)動(dòng)估計(jì)掃描可通過倒轉(zhuǎn)第一上變換運(yùn)動(dòng)估計(jì)掃描的方向在第二去隔行掃描開始后一小段時(shí)間(δ)開始。時(shí)間δ取決于估計(jì)器的搜索窗口或搜索區(qū)域的垂直尺寸(高度)。典型的,搜索區(qū)域的高度是5個(gè)塊(1個(gè)塊定義為8*8的像素區(qū)域)。對(duì)于標(biāo)準(zhǔn)清晰度(SD)分辨率,幀的高度是72個(gè)塊。因此,δ=5/72T≈7%T。因此,在不同方向?qū)τ谌ジ粜泻蜕献儞Q利用兩個(gè)運(yùn)動(dòng)估計(jì)的圖像處理系統(tǒng)的等待時(shí)間減小了93%T而不會(huì)降低最終信號(hào)的質(zhì)量。
本發(fā)明在圖像處理系統(tǒng)上具有多個(gè)額外的有益效果。首先,需要用于上變換的緩存存儲(chǔ)器(幀存儲(chǔ)器)的容量減小大約1個(gè)幀存儲(chǔ)器(720*576*2字節(jié)/像素≈6.3Mbit)。此外,第二上變換運(yùn)動(dòng)估計(jì)掃描從頂部到底部來產(chǎn)生。因此,屬于上變換幀的像素從頂部到底部產(chǎn)生。由于這個(gè)原因,這些像素可立即顯示在顯示設(shè)備411上。
如上所述,倒轉(zhuǎn)了上變換的第一運(yùn)動(dòng)估計(jì)掃描的方向的本發(fā)明,相對(duì)于現(xiàn)有系統(tǒng)具有很多優(yōu)點(diǎn)并且不會(huì)損壞所產(chǎn)生的信號(hào)質(zhì)量。首先,整個(gè)系統(tǒng)的等待時(shí)間降低而所需的幀(緩存)存儲(chǔ)器的容量減小了。此外,最后的運(yùn)動(dòng)估計(jì)掃描和上變換幀從頂部到底部產(chǎn)生,這意味著產(chǎn)生的像素可立即在屏幕上顯示。
本發(fā)明可以包括硬件、軟件、固件和其任何組合的適當(dāng)形式實(shí)施。然而優(yōu)選地,本發(fā)明可作為運(yùn)行在一個(gè)或多個(gè)數(shù)據(jù)處理器和/或數(shù)字信號(hào)處理器的計(jì)算機(jī)程序來實(shí)施。本發(fā)明實(shí)施例的元件和部件可以是物理地、功能性地和邏輯地以任何適當(dāng)方式實(shí)施。實(shí)際上,功能可在單個(gè)單元、多個(gè)單元或作為其它功能單元的一部分上實(shí)施。這樣,本發(fā)明可在單個(gè)單元中實(shí)施,或可物理地或功能性地分布在不同的單元和處理器中。
盡管本發(fā)明已經(jīng)如上參考具體實(shí)施例進(jìn)行描述,其目的不是在于限制于上述特定形式。而是本發(fā)明僅由權(quán)利要求限定,除了上述之外的其它實(shí)施例在這些權(quán)利要求的范圍內(nèi)也是等同可能的,例如不同于上面所描述的圖像處理步驟。
在權(quán)利要求中,術(shù)語“包括”不排出其它元件或步驟的存在。此外,盡管單獨(dú)列出了,多個(gè)裝置、元件或方法步驟可通過例如單個(gè)單元或處理器來實(shí)施。此外,盡管在不同權(quán)利要求中包括了單獨(dú)的特征,它們可能被有利地結(jié)合,并且在不同權(quán)利要求中包含并不意味著這些特征的結(jié)合不是可行和/或有利的。此外,單數(shù)標(biāo)記并不排出多個(gè)。術(shù)語“一”、“第一”、“第二”等不排除多個(gè)。權(quán)利要求中的參考標(biāo)記僅提供用于清楚示例并且不應(yīng)當(dāng)理解為以任何方式限定權(quán)利要求的范圍。
權(quán)利要求
1.一種在圖像處理系統(tǒng)中以連續(xù)的圖像處理步驟在視頻圖像上執(zhí)行運(yùn)動(dòng)估計(jì)的方法,該方法包括在第一圖像處理步驟的第一運(yùn)動(dòng)估計(jì)掃描中,在第一掃描方向上執(zhí)行第一掃描操作;在第一圖像處理步驟的第二運(yùn)動(dòng)估計(jì)掃描中,在第二掃描方向上執(zhí)行第一掃描操作;在第二圖像處理步驟的第一運(yùn)動(dòng)估計(jì)掃描中,在第一掃描方向上執(zhí)行第二掃描操作;在第二圖像處理步驟的第二運(yùn)動(dòng)估計(jì)掃描中,在第二掃描方向上執(zhí)行第二掃描操作。
2.如權(quán)利要求1所述的方法,在第一圖像處理步驟的第一掃描操作中的第一掃描方向與在第二圖像處理步驟的第一掃描操作中的第一掃描方向相反,以及在第一圖像處理步驟的第一掃描操作中的第二掃描方向與在第二圖像處理步驟的第二掃描操作中的第二掃描方向相反。
3.如權(quán)利要求1所述的方法,在第一圖像處理步驟的第一掃描操作中的第一掃描方向與在第二圖像處理步驟的第二掃描操作中的第一掃描方向相同,以及在第一圖像處理步驟的第一掃描操作中的第二掃描方向與在第二圖像處理步驟的第二掃描操作中的第二掃描方向相同,以及第一圖像處理步驟使用第一運(yùn)動(dòng)估計(jì)器以及第二圖像處理步驟使用第二運(yùn)動(dòng)估計(jì)器。
4.如權(quán)利要求1所述的方法,在第一圖像處理步驟的第一掃描操作中的第一掃描方向是從圖像的頂部到底部,以及在第一圖像處理步驟的第一掃描操作中的第二掃描方向是從圖像的底部到頂部,以及在第二圖像處理步驟的第二掃描操作中的第一掃描方向是從圖像的底部到頂部,以及在第二圖像處理步驟的第二掃描操作中的第二掃描方向是從圖像的頂部到底部。
5.如權(quán)利要求1所述的方法,其中第一圖像處理步驟相應(yīng)于去隔行。
6.如權(quán)利要求1或5所述的方法,其中第二處理步驟相應(yīng)于上變換。
7.如權(quán)利要求1所述的方法,其中第一圖像處理步驟的運(yùn)動(dòng)估計(jì)掃描由第一運(yùn)動(dòng)估計(jì)器執(zhí)行,以及第二圖像處理步驟的運(yùn)動(dòng)估計(jì)掃描由第二運(yùn)動(dòng)估計(jì)器執(zhí)行。
8.如權(quán)利要求1所述的方法,在第二圖像處理步驟的第一運(yùn)動(dòng)估計(jì)掃描在第一圖像處理步驟的第二運(yùn)動(dòng)估計(jì)掃描結(jié)束之前開始。
9.一種用于處理圖像的圖像處理系統(tǒng),該系統(tǒng)包括第一圖像處理器(417),用于處理圖像;與第一圖像處理器(417)連接的第一運(yùn)動(dòng)估計(jì)器(421),其中第一運(yùn)動(dòng)估計(jì)器(421)被配置為首先在第一掃描方向掃描圖像并隨后在第二掃描方向掃描圖像;與第一圖像處理器(417)的輸出連接的第二圖像處理器(423),用于處理圖像;與第二圖像處理器(423)連接的第二運(yùn)動(dòng)估計(jì)器(425),其中第二運(yùn)動(dòng)估計(jì)器(425)被配置為在兩個(gè)不同的掃描方向連續(xù)掃描圖像,其中圖像處理器(417,423)和運(yùn)動(dòng)估計(jì)器(421,425)彼此可操作的連接。
10.如權(quán)利要求9所述的系統(tǒng),其中第二運(yùn)動(dòng)估計(jì)器(425)被配置為首先在第一掃描方向掃描圖像并隨后在第二掃描方向掃描圖像。
11.如權(quán)利要求9所述的系統(tǒng),其中第二運(yùn)動(dòng)估計(jì)器(425)被配置為首先在第二掃描方向掃描圖像并隨后在第一掃描方向掃描圖像。
12.如權(quán)利要求9或11所述的系統(tǒng),其中所述第一掃描方向是從圖像的頂部到底部,以及第二掃描方向是從圖像的底部到頂部。
13.如權(quán)利要求9所述的系統(tǒng),其中第一圖像處理器(417)被配置為執(zhí)行去隔行。
14.如權(quán)利要求9或13所述的系統(tǒng),其中第二圖像處理器(423)被配置為執(zhí)行上變換。
15.如權(quán)利要求9所述的系統(tǒng),其中第二運(yùn)動(dòng)估計(jì)器(425)被配置為在第一運(yùn)動(dòng)估計(jì)器(421)的第二運(yùn)動(dòng)估計(jì)掃描結(jié)束之前開始它的第一運(yùn)動(dòng)估計(jì)掃描。
16.一種計(jì)算機(jī)可讀介質(zhì),在其上具體化有由計(jì)算機(jī)處理,用于在圖像處理系統(tǒng)中以連續(xù)的圖像處理步驟在視頻圖像上執(zhí)行運(yùn)動(dòng)估計(jì)的計(jì)算機(jī)程序,該計(jì)算機(jī)程序包括代碼段,用于在第一圖像處理步驟的第一運(yùn)動(dòng)估計(jì)掃描中,在第一掃描方向上執(zhí)行第一掃描操作;在第一圖像處理步驟的第二運(yùn)動(dòng)估計(jì)掃描中,在第二掃描方向上執(zhí)行第一掃描操作;在第二圖像處理步驟的第一運(yùn)動(dòng)估計(jì)掃描中,在第一掃描方向上執(zhí)行第二掃描操作;在第二圖像處理步驟的第二運(yùn)動(dòng)估計(jì)掃描中,在第二掃描方向上執(zhí)行第二掃描操作。
全文摘要
公開了一種在視頻處理系統(tǒng)中以連續(xù)圖像處理步驟在視頻圖像上執(zhí)行運(yùn)動(dòng)估計(jì)的方法和系統(tǒng)。根據(jù)一個(gè)實(shí)施例使用第一運(yùn)動(dòng)估計(jì)器在第一圖像處理步驟在第一方向上執(zhí)行第一運(yùn)動(dòng)估計(jì)掃描以及使用第一運(yùn)動(dòng)估計(jì)器在第一處理步驟在第二方向上執(zhí)行第二運(yùn)動(dòng)估計(jì)掃描。使用第二運(yùn)動(dòng)估計(jì)器在第二圖像處理步驟在第二方向上執(zhí)行第一運(yùn)動(dòng)估計(jì)掃描以及使用第二運(yùn)動(dòng)估計(jì)器在第二運(yùn)動(dòng)處理步驟在第一方向上執(zhí)行第二運(yùn)動(dòng)估計(jì)掃描。因?yàn)榈诙\(yùn)動(dòng)估計(jì)器在第一運(yùn)動(dòng)估計(jì)器的第二運(yùn)動(dòng)估計(jì)掃描結(jié)束之前開始其第一運(yùn)動(dòng)估計(jì)掃描,所以可減小反應(yīng)時(shí)間。
文檔編號(hào)H04N7/46GK101061710SQ200580039891
公開日2007年10月24日 申請(qǐng)日期2005年11月17日 優(yōu)先權(quán)日2004年11月22日
發(fā)明者A·貝里, R·塞瑟拉曼 申請(qǐng)人:皇家飛利浦電子股份有限公司