專利名稱：運(yùn)動補(bǔ)償預(yù)測方法和運(yùn)動補(bǔ)償預(yù)測裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及運(yùn)動補(bǔ)償預(yù)測方法和運(yùn)動補(bǔ)償預(yù)測裝置(使用運(yùn)動補(bǔ)償?shù)念A(yù)測方法和裝置)，并且適合于應(yīng)用到圖像信息編碼裝置，所述圖像信息編碼裝置用于通過網(wǎng)絡(luò)媒體來接收通過諸如離散余弦變換或Karhunen-Loeve變換之類的正交變換和運(yùn)動補(bǔ)償?shù)榷粔嚎s的圖像信息(比特流)，就像在例如MPEG、H.26x等中，所述網(wǎng)絡(luò)媒體諸如廣播衛(wèi)星服務(wù)、有線電視、因特網(wǎng)和/或移動電話等，所述圖像信息編碼裝置或者用于處理在諸如光盤/磁盤和/或快閃存儲器的存儲器或存儲媒體上的這樣壓縮的圖像信息。
本申請要求2004年6約29日提交的日本專利申請第2004-191937號的優(yōu)先權(quán)，其整體內(nèi)容通過參考被并入在此。
背景技術(shù)：
例如，如在日本公開專利第2004-56827號公布等中所公開的那樣，在近些年來，在廣播臺等和一般的家庭的傳播正在普及符合MPEG等的裝置，其中，圖像信息被處理為數(shù)字信息，以通過諸如離散預(yù)先變換等的正交變換和運(yùn)動補(bǔ)償(通過利用圖像信息的特定冗余)來壓縮這樣的圖像信息，以在那種情況下實(shí)現(xiàn)信息的有效傳輸和/或存儲。
特別是，MPEG2(ISO/IEC 13818-2)被定義為廣泛使用的圖像編碼系統(tǒng)。并且以用于轉(zhuǎn)換隔行掃描圖像和逐行掃描圖像的標(biāo)準(zhǔn)以及標(biāo)準(zhǔn)分辨率圖像和高清晰度圖像而被廣泛地用于專業(yè)使用和消費(fèi)者使用的寬泛應(yīng)用。通過使用MPEG2壓縮系統(tǒng)，例如，在具有720×480像素的標(biāo)準(zhǔn)分辨率的隔行掃描圖像的情況下，分配4～8Mbps的代碼數(shù)量(比特率)，在具有1920×1088像素的高分辨率的掃描圖像的情況下，分配18～22Mbps的代碼數(shù)量，以便可以執(zhí)行高壓縮率的實(shí)現(xiàn)和滿意的畫面質(zhì)量。
MPEG2涉及主要適合于廣播的高畫面質(zhì)量編碼，但是不符合具有低于MPEG1的代碼數(shù)量(比特率)、即較高壓縮率(比率)的編碼系統(tǒng)。據(jù)預(yù)測，通過普及移動終端，這種對編碼系統(tǒng)的需要在未來被增加。與其對應(yīng)，已經(jīng)執(zhí)行了MPEG4編碼系統(tǒng)的標(biāo)準(zhǔn)化。與所述圖像編碼系統(tǒng)相關(guān)聯(lián)，其標(biāo)準(zhǔn)在1998年12月在國際標(biāo)準(zhǔn)中被批準(zhǔn)為ISO/IEC 14496-2。
而且，近些年來，為了在開始實(shí)現(xiàn)用于電視會議的圖像編碼，正在開發(fā)H.26L(ITU-T Q6/16 VCEG)的標(biāo)準(zhǔn)(標(biāo)準(zhǔn)化)的實(shí)現(xiàn)。已知，雖然在通過H.26L的編碼/解碼中需要大的操作量，但是與諸如MPEG2或MPEG4之類的傳統(tǒng)編碼系統(tǒng)相比較，實(shí)現(xiàn)了更高的編碼效率。而且，現(xiàn)在，作為MPEG4的活動的一部分，執(zhí)行使得將上述的H.26L作為基礎(chǔ)并引入不能被H.26L支持的功能以實(shí)現(xiàn)更高的編碼效率的標(biāo)準(zhǔn)化，作為增強(qiáng)壓縮視頻編碼的結(jié)合模型。作為標(biāo)準(zhǔn)化的時(shí)間表，上述的標(biāo)準(zhǔn)化在2003年3月被作為名稱為H.264和MPEG-4第10部分高級視頻編碼(以下被稱為AVC)的國際標(biāo)準(zhǔn)。
在圖1中以方框圖示出了被適配用來輸出基于AVC標(biāo)準(zhǔn)的圖像壓縮信息DPC的圖像信息編碼裝置100的配置的一個(gè)示例。
所述圖像信息編碼裝置100包括模/數(shù)轉(zhuǎn)換單元101，它被提供圖像信號Sin來作為輸入；畫面分類緩沖器102，它被提供由模/數(shù)轉(zhuǎn)換單元101數(shù)字化的圖像數(shù)據(jù)；加法器103，它被提供已經(jīng)從畫面分類緩沖器102讀出的圖像數(shù)據(jù)；內(nèi)部預(yù)測單元112；運(yùn)動補(bǔ)償預(yù)測單元113；正交變換單元104，它被提供加法器103的輸出；量化單元105，它被提供正交變換單元104的輸出；可逆編碼單元106和逆量化單元108，它們被提供量化單元105的輸出；存儲緩沖器107，它被提供可逆編碼單元106的輸出；逆正交變換單元109，它被提供逆量化單元108的輸出；解塊濾波器110，它被提供逆正交變換單元109的輸出；幀存儲器111，它被提供解塊濾波器110的輸出；速率控制單元114，它被提供存儲緩沖器107的輸出，等等。
在圖像信息編碼裝置100中，作為輸入的圖像信號在模/數(shù)轉(zhuǎn)換單元101被首先轉(zhuǎn)換為數(shù)字信號。然后，按照作為輸出的圖像壓縮信息DPC的GOP(畫面組)結(jié)構(gòu)而在畫面分類緩沖器102執(zhí)行幀的分類。與要經(jīng)歷內(nèi)部編碼的圖像相關(guān)聯(lián)，在輸入圖像和由內(nèi)部預(yù)測單元112產(chǎn)生的像素值之間的不同信息被輸入到正交變換單元104，在此，實(shí)施諸如離散余弦變換或Karhunen-Loeve變換等的正交變換。使得作為正交變換單元104的輸出而獲得的變換系數(shù)在量化單元105進(jìn)行量化處理。作為量化單元105的輸出而獲得的量化的變換系數(shù)被輸入到可逆編碼單元106，在此，實(shí)施諸如可變長度編碼或算術(shù)編碼等的可逆編碼。其后，它們被存儲到存儲緩沖器107中，并且被輸出作為圖像壓縮信息DPC。通過速率控制單元114來控制量化單元105的行為。同時(shí)，作為量化單元105的輸出而獲得的量化的變換系數(shù)被輸入到逆量化單元108。而且，在逆正交變換單元109實(shí)施逆正交變換處理，以便提供解碼的圖像信息。在解塊濾波器110實(shí)施了塊失真的去除后，其信息被存儲在幀存儲器111中。在內(nèi)部預(yù)測單元112，與應(yīng)用到對應(yīng)的塊/宏塊的內(nèi)部預(yù)測模式相關(guān)聯(lián)的信息被發(fā)送到可逆編碼單元106，以便將如此發(fā)送的信息編碼為在圖像壓縮信息DPC中的首標(biāo)信息的一部分。
與經(jīng)歷相互編碼的圖像相關(guān)聯(lián)，圖像信息被首先輸入到運(yùn)動補(bǔ)償預(yù)測單元113。同時(shí)。從幀存儲器111獲得作為參考的圖像信息。使得如此獲得的圖像信息經(jīng)歷補(bǔ)償預(yù)測處理。因此，產(chǎn)生參考圖像信息。如此產(chǎn)生的參考圖像信息被發(fā)送到加法器103。在加法器103，如此發(fā)送的參考圖像信息被轉(zhuǎn)換為在參考圖像信息和對應(yīng)的圖像信息之間的差信號。運(yùn)動補(bǔ)償預(yù)測單元113同時(shí)向可逆編碼單元106輸出運(yùn)動向量信息。使得如此獲得的運(yùn)動向量信息經(jīng)歷諸如可變長度編碼或算術(shù)編碼之類的可逆編碼處理，以形成要被插入到圖像壓縮信息DPC的首標(biāo)部分中的信息。其他的處理類似于圖像壓縮信息DPC的那些處理。
圖2示出了被適配用來通過諸如離散余弦變換或Karhunen-Loeve變換等的逆正交變換和運(yùn)動補(bǔ)償而實(shí)現(xiàn)圖像解壓縮的圖像信息解碼裝置150的配置的示例的方框圖。
圖像信息解碼裝置150包括存儲緩沖器115，它被提供圖像壓縮信息DPC；可逆解碼單元116，它被提供已經(jīng)從存儲緩沖器115讀取的圖像壓縮信息DPC；可逆量化單元117，它被提供可逆解碼單元116的輸出；逆正交變換單元118，它被提供可逆量化單元117的輸出；加法器119，它被提供逆正交變換單元118的輸出；畫面分類緩沖器120和幀存儲器122，它們通過解塊濾波器125被提供加法器119的輸出；數(shù)/模轉(zhuǎn)換單元121，它被提供畫面分類緩沖器120的輸出；運(yùn)動補(bǔ)償預(yù)測單元123，它被提供幀存儲器122的輸出；以及，內(nèi)部預(yù)測單元124等。
在圖像信息解碼裝置150中，作為輸入的圖像壓縮信息DPC首先被存儲到存儲緩沖器115中。其后，如此存儲的圖像壓縮信息DPC被傳送到可逆解碼單元116。在此，根據(jù)所確定的圖像壓縮信息DPC的格式來執(zhí)行諸如可變長度解碼或算術(shù)解碼等的處理。在對應(yīng)的幀是內(nèi)部編碼幀的情況下，可逆解碼單元116也在此時(shí)解碼在圖像壓縮信息DPC的首標(biāo)部分中存儲的內(nèi)部預(yù)測模式信息以向內(nèi)部預(yù)測單元124發(fā)送如此獲得的信息。在對應(yīng)的幀是相互編碼的幀的情況下，可逆解碼單元116也解碼在圖像壓縮信息DPC的首標(biāo)部分存儲的運(yùn)動向量信息，以向運(yùn)動補(bǔ)償預(yù)測單元123傳送如此獲得的信息。
作為可逆解碼單元116的輸出而獲得的量化變換系數(shù)被輸入到可逆量化單元117。如此獲得的量化變換系數(shù)作為變換系數(shù)從中輸出。使得所述變換系數(shù)在逆正交變換單元118根據(jù)預(yù)定系統(tǒng)而進(jìn)行第四級逆正交變換。在對應(yīng)的幀是內(nèi)部編碼幀的情況下，在光源29執(zhí)行已經(jīng)實(shí)現(xiàn)了逆正交變換處理的圖像信息和在內(nèi)部預(yù)測單元124產(chǎn)生的預(yù)測圖像的合成。而且，在解塊濾波器125實(shí)現(xiàn)去除塊失真后，如此獲得的合成圖像被存儲在畫面分類緩沖器120中，并且使得由數(shù)/模轉(zhuǎn)換單元121進(jìn)行數(shù)/模轉(zhuǎn)換，以便提供輸出信號Sout。
在對應(yīng)的幀是相互編碼的幀的情況下，根據(jù)已經(jīng)實(shí)現(xiàn)了可逆解碼處理的運(yùn)動向量信息和在幀存儲器122中存儲的圖像信息來產(chǎn)生參考圖像。所述參考圖像和逆正交變換單元118的輸出在加法器120被合成。其他的處理類似于內(nèi)部編碼的幀的處理。
同時(shí)，在圖1中所示的圖像信息編碼裝置中，為了實(shí)現(xiàn)高壓縮率，運(yùn)動補(bǔ)償預(yù)測單元113執(zhí)行重要的角色。在AVC編碼系統(tǒng)中，下述的三個(gè)系統(tǒng)被引入，以由此實(shí)現(xiàn)與諸如MPEG 2·4等的傳統(tǒng)圖像編碼系統(tǒng)相比較更高的壓縮率。即，第一系統(tǒng)是多參考幀運(yùn)動補(bǔ)償，第二系統(tǒng)是使用可變塊大小的運(yùn)動補(bǔ)償(預(yù)測)，第三系統(tǒng)是使用FIR濾波器的1/4像素精度的運(yùn)動補(bǔ)償。
首先，描述由AVC編碼系統(tǒng)規(guī)定的多參考幀運(yùn)動補(bǔ)償。
在AVC中，如圖3中所示，相對于特定幀的圖像Forg存在多個(gè)幀的參考圖像Fref，因此能夠?qū)τ诿總€(gè)相應(yīng)的運(yùn)動補(bǔ)償塊分別地指定多個(gè)幀的參考圖像Fref。
因此，例如在緊前的幀中，即使在由于阻塞(occlusion)而不存在要參考的塊的情況下，也以追溯方式來執(zhí)行參考，由此使得有可能防止編碼效率的變低。即，在期望通過參考畫面而主要搜索的區(qū)域不被前景隱藏的情況下，當(dāng)與其對應(yīng)的圖像被不同的參考圖像隱藏時(shí)，參考那個(gè)圖像，以便可以進(jìn)行運(yùn)動補(bǔ)償預(yù)測。
而且，在作為參考的圖像中存在快閃的情況下，與其對應(yīng)的幀被參考，從而顯著地降低了編碼效率。而且，在這種情況下，以追溯的方式來進(jìn)行參考，由此使得有可能防止編碼效率的變低。
然后，將說明使用由AVC編碼系統(tǒng)規(guī)定的可變塊大小的運(yùn)動補(bǔ)償。
在AVC編碼系統(tǒng)中，當(dāng)在圖4A、4B、4C和4D中示出宏塊劃分時(shí)，一個(gè)宏塊被劃分為16×16、16×8、8×16或8×8的運(yùn)動補(bǔ)償塊的任何一個(gè)，以便能夠在相應(yīng)的運(yùn)動補(bǔ)償塊獨(dú)立地具有運(yùn)動向量和參考幀。而且，當(dāng)在圖5A、5B、5C和5D中示出子宏塊時(shí)，與8×8運(yùn)動補(bǔ)償塊相關(guān)聯(lián)，有可能將相應(yīng)的部分劃分為8×8、8×4、4×8和4×4的子劃分的任何一個(gè)。在相應(yīng)的宏塊MB中，相應(yīng)的運(yùn)動補(bǔ)償塊可以具有獨(dú)立的運(yùn)動向量信息。
然后，將說明由AVC編碼系統(tǒng)規(guī)定的1/4像素精度的運(yùn)動補(bǔ)償處理。
將通過使用圖6而在下面說明1/4像素精度的運(yùn)動補(bǔ)償處理。
在所述AVC編碼系統(tǒng)中，為了產(chǎn)生1/2像素精度的像素值，定義了具有在下面的公式(1)中所示的濾波系數(shù)的6抽頭的FIR(有限脈沖響應(yīng))濾波器。
{1，-5，20，20，-5，1}[公式1]與相對于在圖6中所示的像素值b、h的運(yùn)動補(bǔ)償(內(nèi)插)相關(guān)聯(lián)，使用公式(1)的濾波系數(shù)來首先執(zhí)行在下面的公式(2)中所示的邏輯和運(yùn)算。
b＝(E-5F+20G+20H-5H+J)h＝(A-5C+20G+20M-5R+T) [公式2]其后，執(zhí)行在公式(2)中示出的處理。
b＝Clip1((b+16)＞＞5)[公式(3)]在此，Clip1指示在(0，255)之間的剪輯(clip)處理。而且，＞＞5指示5位的移位，即除以25。
而且，與像素值j相關(guān)聯(lián)，在通過與b、h相同技術(shù)來產(chǎn)生像素值aa、bb、cc、dd、ee、ff、gg、hh后，如在公式(4)中所示來實(shí)現(xiàn)邏輯和運(yùn)算。因此，通過在公式(5)中所示的剪輯處理來計(jì)算像素值j。
j＝cc-5dd+20h+20m-5ee+ff [公式(4)]，或j＝aa-5bb+20b+20s-5gg+hhj＝Clip1((j+512)＞＞10)[公式(5)]與像素值a、c、d、f、i、k、g相關(guān)聯(lián)，通過下面的公式(6)所示的整數(shù)像素精度的像素值和1/2像素精度的像素值的線性內(nèi)插來確定那些像素值。
a＝(G+b+1)＞＞1
c＝(H+b+1)＞＞1d＝(G+h+1)＞＞1n＝(M+h+1)＞＞1f＝(b+j+1)＞＞1i＝(h+j+1)＞＞1 [公式6]k＝(j+m+1)＞＞1q＝(j+s+1)＞＞1而且，與像素值e、g、p相關(guān)聯(lián)，通過使用1/2像素精度的像素值的線性內(nèi)插來確定那些像素值。
e＝(b+h+1)＞＞1g＝(b+m+1)＞＞1 [公式7]p＝(h+s+1)＞＞1同時(shí)，在圖1中所示的圖像信息編碼裝置100中，需要大的操作量來用于搜索運(yùn)動向量。為了構(gòu)造在實(shí)時(shí)基礎(chǔ)上運(yùn)行的裝置，關(guān)鍵點(diǎn)是如何在最小化畫面質(zhì)量退化的同時(shí)降低運(yùn)動向量搜索所需要的操作數(shù)量。
但是，在AVC編碼系統(tǒng)中，如上所述，因?yàn)榭梢栽试S多個(gè)參考幀運(yùn)動補(bǔ)償、使用可變塊大小的運(yùn)動補(bǔ)償(預(yù)測)和1/4像素精度的運(yùn)動補(bǔ)償，因此當(dāng)候選參考幀的數(shù)量增加時(shí)，在運(yùn)動補(bǔ)償預(yù)測中的求精處理將會很重(花費(fèi)很多時(shí)間)。在所述求精處理中，在通過分層搜索而粗略進(jìn)行了搜索后，在作為所述分層搜索的結(jié)果而獲得的向量的外圍以基本(原始)尺度來搜索運(yùn)動向量。
而且，在與圖像編碼裝置(硬件實(shí)現(xiàn))相關(guān)聯(lián)地進(jìn)行考慮的情況下，因?yàn)橄鄬τ谠诤陦K內(nèi)的所有塊大小對于每個(gè)參考幀執(zhí)行了運(yùn)動搜索處理，因此對于存儲器的訪問變得頻繁。為此，根據(jù)情況，需要加寬存儲器帶寬。

發(fā)明內(nèi)容
本發(fā)明要解決的問題由于如上所述的傳統(tǒng)問題，本發(fā)明的目的是提供一種圖像信息編碼裝置，它被適配來輸出基于諸如AVC等的圖像編碼系統(tǒng)的圖像壓縮信息，其中，實(shí)現(xiàn)了運(yùn)動向量搜索的高速和存儲器訪問的減少。
為了解決上述問題，本發(fā)明涉及一種運(yùn)動補(bǔ)償預(yù)測方法，用于通過指定每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊使用的多個(gè)幀的參考圖像的任何一個(gè)來執(zhí)行基于分層搜索的運(yùn)動向量的搜索，所述每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊具有多個(gè)幀的參考圖像，并且是通過劃分在連續(xù)的幀圖像中的要處理的目標(biāo)幀圖像而被獲得的，所述運(yùn)動補(bǔ)償預(yù)測方法包括分層結(jié)構(gòu)實(shí)現(xiàn)步驟，通過間除使得圖像在最高層的、具有運(yùn)動補(bǔ)償塊的像素大小中的最大像素大小的運(yùn)動補(bǔ)償塊的像素，來產(chǎn)生具有預(yù)定的收縮率的較低層中的收縮圖像；第一運(yùn)動補(bǔ)償預(yù)測步驟，用于通過使用在所述分層結(jié)構(gòu)實(shí)現(xiàn)步驟中產(chǎn)生的收縮圖像而搜索運(yùn)動向量；參考圖像確定步驟，用于在所述收縮圖像上確定在第一運(yùn)動補(bǔ)償預(yù)測步驟使用的收縮參考圖像；第二運(yùn)動補(bǔ)償預(yù)測步驟，用于通過使用由已經(jīng)在第一運(yùn)動補(bǔ)償預(yù)測步驟搜索的運(yùn)動向量指定的預(yù)定檢索范圍來對于在收縮之前的圖像搜索運(yùn)動向量，并且執(zhí)行運(yùn)動補(bǔ)償預(yù)測。
而且，本發(fā)明涉及一種運(yùn)動補(bǔ)償預(yù)測裝置，所述裝置被適配用來通過指定每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊使用的多個(gè)幀的參考圖像的任何一個(gè)來執(zhí)行基于分層搜索的運(yùn)動向量的搜索，所述每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊具有多個(gè)幀的參考圖像，并且是通過劃分在連續(xù)的幀圖像中的要處理的目標(biāo)幀圖像而獲得的，所述運(yùn)動補(bǔ)償預(yù)測裝置包括分層結(jié)構(gòu)實(shí)現(xiàn)部件，通過間除使得圖像在最高層的、具有運(yùn)動補(bǔ)償塊的像素大小中的最大像素大小的運(yùn)動補(bǔ)償塊的像素，來產(chǎn)生具有預(yù)定的收縮率的較低層中的收縮圖像；第一運(yùn)動補(bǔ)償預(yù)測部件，用于通過使用由所述分層結(jié)構(gòu)實(shí)現(xiàn)部件產(chǎn)生的收縮圖像而搜索運(yùn)動向量；參考圖像確定部件，用于在所述收縮圖像上確定在第一運(yùn)動補(bǔ)償預(yù)測部件使用的收縮參考圖像；以及第二運(yùn)動補(bǔ)償預(yù)測部件，用于通過使用由已經(jīng)由第一運(yùn)動補(bǔ)償預(yù)測部件搜索的運(yùn)動向量指定的預(yù)定檢索范圍來對于收縮之前的圖像搜索運(yùn)動向量，并且執(zhí)行運(yùn)動補(bǔ)償預(yù)測。
通過下面給出的實(shí)施例的說明，本發(fā)明的其他目的和通過本發(fā)明獲得的實(shí)際優(yōu)點(diǎn)將更加清楚。


圖1是示出通過諸如離散余弦變換或Karhunen-Loeve變換等的正交變換和運(yùn)動補(bǔ)償來實(shí)現(xiàn)圖像壓縮的圖像信息編碼裝置的配置的方框圖。
圖2是示出被適配來通過諸如離散余弦變換或Karhunen-Loeve變換等的逆正交變換和運(yùn)動補(bǔ)償而實(shí)現(xiàn)圖像解壓縮的圖像信息解碼裝置的配置的方框圖。
圖3是示出由AVC編碼系統(tǒng)規(guī)定的多參考幀運(yùn)動補(bǔ)償?shù)乃枷氲囊晥D。
圖4A、4B、4C和4D是示出在基于由AVC編碼系統(tǒng)規(guī)定的可變塊大小的運(yùn)動補(bǔ)償處理中的宏塊劃分的視圖；圖5A、5B、5C和5D是示出在基于由AVC編碼系統(tǒng)規(guī)定的可變塊大小的運(yùn)動補(bǔ)償處理中的子宏塊劃分的視圖。
圖6是用于說明由AVC編碼系統(tǒng)規(guī)定的1/4像素精度的運(yùn)動補(bǔ)償處理的視圖。
圖7是示出應(yīng)用本發(fā)明的圖像信息編碼裝置的配置的方框圖。
圖8是示出在所述圖像信息編碼裝置中的間除(thinning)單元的工作原理的視圖；圖9是用于說明在運(yùn)動補(bǔ)償預(yù)測單元中的被查看的采樣(1/N2分辨率)的視圖。
圖10是示出在圖像信息編碼裝置中的收縮圖像和參考圖像之間的關(guān)系的一個(gè)示例的視圖。
圖11A和11B是示出在圖像信息編碼裝置中的多個(gè)MB區(qū)的劃分方式的示例的視圖。
圖12是示出在圖像信息編碼裝置中的圖像處理的過程的流程圖。
圖13是示出存儲器訪問的降低的狀態(tài)的視圖。
具體實(shí)施例方式
現(xiàn)在參見附圖來詳細(xì)說明本發(fā)明的優(yōu)選實(shí)施例。應(yīng)當(dāng)注意，本發(fā)明不限于下面的示例，而是當(dāng)然可以在不脫離本發(fā)明的主旨的情況下在主旨內(nèi)任意地改變或修改本發(fā)明。
本發(fā)明被應(yīng)用到例如如圖7中所示的配置的圖像信息編碼裝置20。
即，在圖7中所示的圖像信息編碼裝置20包括模/數(shù)轉(zhuǎn)換單元1，它被提供圖像信號Sin來作為輸入；畫面分類緩沖器2，它被提供由模/數(shù)轉(zhuǎn)換單元1數(shù)字化的圖像數(shù)據(jù)；加法器3，它被提供已經(jīng)從畫面分類緩沖器2讀出的圖像數(shù)據(jù)；內(nèi)部預(yù)測單元16；運(yùn)動補(bǔ)償預(yù)測單元17；正交變換單元4，它被提供加法器3的輸出；量化單元5，它被提供正交變換單元4的輸出；可逆編碼單元6和逆量化單元8，它們被提供量化單元5的輸出；存儲緩沖器7，它被提供可逆編碼單元6的輸出；速率控制單元18，它被提供存儲緩沖器7的輸出；逆正交變換單元9，它被提供逆量化單元8的輸出；解塊濾波器10，它被提供逆正交變換單元9的輸出；幀存儲器(全分辨率)11，它被提供解塊濾波器10的輸出；間除單元12，它被提供幀存儲器(全分辨率)11的輸出；幀存儲器(1/N2分辨率)13，它被提供間除單元12的輸出；運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)14，它被提供幀存儲器(1/N2分辨率)13的輸出；參考幀確定單元15，它連接到運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)14，等等。
在圖像信息編碼裝置20中，作為輸入的圖像信號Sin首先在模/數(shù)轉(zhuǎn)換單元1被轉(zhuǎn)換為數(shù)字信號。然后，按照作為輸出的圖像壓縮信息DPC的GOP(畫面組)結(jié)構(gòu)而在畫面分類緩沖器2執(zhí)行幀的分類。與經(jīng)歷內(nèi)部編碼的圖像相關(guān)聯(lián)，在輸入圖像和由內(nèi)部預(yù)測單元16產(chǎn)生的像素值之間的差信息被輸入到正交變換單元4，在此，對其實(shí)施諸如離散余弦變換或Karhunen-Loeve變換等的正交變換。
使得作為正交變換單元4的輸出而獲得的變換系數(shù)在量化單元5進(jìn)行量化處理。作為量化單元5的輸出而獲得的量化的變換系數(shù)被輸入到可逆編碼單元6，在此，對其實(shí)施諸如可變長度編碼或算術(shù)編碼之類的可逆編碼。其后，如此獲得的編碼的變換系數(shù)被存儲在存儲緩沖器7中，并且被輸出作為圖像壓縮信息DPC。同時(shí)，作為量化單元5的輸出而獲得的量化的變換系數(shù)被輸入到逆量化單元8。而且，使得那些量化的變換系數(shù)在逆正交變換單元9經(jīng)歷逆正交變換處理，以便提供解碼的圖像信息。在解塊濾波器10實(shí)施了塊失真的去除后，如此獲得的信息被存儲到幀存儲器(全分辨率)11中。與已經(jīng)在內(nèi)部預(yù)測單元16被應(yīng)用到對應(yīng)的塊/宏塊的內(nèi)部預(yù)測模式相關(guān)聯(lián)的信息被發(fā)送到可逆編碼單元6，在此，所述信息被編碼為在圖像壓縮信息DPC中的首標(biāo)信息的一部分。
與經(jīng)歷相互編碼的圖像相關(guān)聯(lián)，圖像信息首先被輸入到運(yùn)動補(bǔ)償預(yù)測單元17。同時(shí)，從幀存儲器11取出作為參考的圖像信息，在幀存儲器11，實(shí)施了運(yùn)動補(bǔ)償預(yù)測處理。因此，產(chǎn)生參考圖像信息。所述參考圖像信息被發(fā)送到加法器3，在此，所述參考圖像信息被轉(zhuǎn)換為在參考圖像信息和對應(yīng)的圖像信息之間的差信號。運(yùn)動補(bǔ)償預(yù)測單元17同時(shí)向可逆編碼單元6輸出運(yùn)動向量信息。使得如此獲得的運(yùn)動向量信息經(jīng)歷諸如可變長度編碼或算術(shù)編碼之類的可逆編碼處理，以形成要插入到圖像壓縮信息DPC的首標(biāo)部分中的信息。其他處理類似于被實(shí)施了內(nèi)部編碼的圖像壓縮信息DPC的處理。
而且，在圖像信息編碼裝置20中，如圖8中所示，向間除單元12提供在幀存儲器(全分辨率)11中存儲的圖像信息，以分別相對于水平方向和垂直方向而執(zhí)行1/N間除處理，以向幀存儲器(1/N2分辨率)13中存儲如此產(chǎn)生的像素值。
而且，運(yùn)動補(bǔ)償預(yù)測單元(1/N2分辨率)14通過使用在幀存儲器(1/N2分辨率)13中存儲的像素值或通過使用16×16塊的像素值、按照塊匹配來搜索對于對應(yīng)的塊最佳的運(yùn)動向量信息。在這種情況下，取代通過使用所有的像素值來計(jì)算預(yù)測能量，通過使用相對于如圖9中所示的宏塊MB以經(jīng)檢查形式而指定的像素PX的像素值來執(zhí)行計(jì)算如圖9中所示。
在場編碼對應(yīng)畫面中，在被劃分為第一場和第二場的狀態(tài)中執(zhí)行如圖8中所示的間除處理。
以如上所述的方式，已經(jīng)通過使用收縮圖像而搜索的運(yùn)動向量信息被輸入到運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17。當(dāng)例如N等于2時(shí)，在搜索單位是在運(yùn)動補(bǔ)償預(yù)測單元(1/4分辨率分辨率)14的8×8塊的情況下，相對于一個(gè)宏塊MB確定一個(gè)16×16塊，并且在搜索單位是16×16塊的情況下，相對于四個(gè)宏塊MB確定一個(gè)16×16塊。但是，運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17以這些16×16運(yùn)動向量為中心在很小或很窄范圍內(nèi)搜索在圖4和5中定義的所有運(yùn)動向量信息。以如上所述的方式，根據(jù)對于收縮圖像確定的運(yùn)動向量信息相對于很小或很窄的搜索范圍來執(zhí)行運(yùn)動補(bǔ)償預(yù)測，因此使得有可能在最小化畫面質(zhì)量退化的同時(shí)很大程度地減少操作數(shù)量。
相對于相應(yīng)的運(yùn)動補(bǔ)償塊的參考幀的確定執(zhí)行如下。
即運(yùn)動補(bǔ)償預(yù)測單元(1/N2分辨率)14對于作為候選者的所有參考幀執(zhí)行運(yùn)動向量的檢測。運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17執(zhí)行相對于相應(yīng)的參考幀而確定的運(yùn)動向量的求精處理，其后選擇作為相對于對應(yīng)的運(yùn)動補(bǔ)償塊的參考幀的參考幀以最小化剩余的或任何成本功能。在所述求精處理中，在通過分層搜索而粗略進(jìn)行了搜索后，在作為所述分層搜索的結(jié)果而獲得的運(yùn)動向量的外圍以基本(原始)尺度來搜索運(yùn)動向量。
同時(shí)，在AVC中，如上所述，因?yàn)樵试S多個(gè)參考幀運(yùn)動補(bǔ)償、使用可變塊大小的運(yùn)動補(bǔ)償(預(yù)測)和1/4像素精度的運(yùn)動補(bǔ)償，因此當(dāng)候選參考幀的數(shù)量增加時(shí)，在運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17中的求精處理將變得很重(花費(fèi)很多時(shí)間)。
而且，在與圖像編碼裝置(硬件實(shí)現(xiàn))相關(guān)聯(lián)地進(jìn)行考慮的情況下，因?yàn)橄鄬τ谠诤陦K內(nèi)的所有塊大小對于每個(gè)參考幀執(zhí)行了運(yùn)動搜索處理，因此對于存儲器的訪問變得頻繁。為此，需要加寬存儲器帶寬。
在此，在圖10中示出了在場編碼的情況下的一個(gè)實(shí)際示例。這個(gè)示例是這樣的示例其中，對應(yīng)的場是B畫面的底場，參考場的前側(cè)(List0)和后側(cè)(List1)都是兩個(gè)場，并且?guī)鎯ζ?1/N2分辨率)的收縮率N是4。List0、List1是參考圖像的索引的列表。在要參考前側(cè)的P畫面中，使用被稱為List0的索引列表，以便執(zhí)行參考圖像的指定。在要參考后側(cè)的B畫面中，使用被稱為List1的索引列表，以便執(zhí)行參考圖像的指定。
在通過每個(gè)參考場的塊匹配在運(yùn)動補(bǔ)償預(yù)測單元(1/N2分辨率)14得到最佳的運(yùn)動向量，并且在運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17以所述運(yùn)動向量作為中心來對于所有的塊大小執(zhí)行求精處理、以確定每個(gè)List(列表)的參考場的情況下，在運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17中的求精處理變得很重(花費(fèi)很多時(shí)間)。因此，在圖像信息編碼裝置20中，在參考幀確定單元15如圖11和12所示來確定參考場。
以在圖10中所示的收縮率(1/4)，在使得在運(yùn)動補(bǔ)償預(yù)測單元(1/16分辨率)17的塊匹配的單位是如圖11(A)中所示的16×16的情況下，將相對于4×4宏塊(對應(yīng)于16)的運(yùn)動向量設(shè)置為在運(yùn)動補(bǔ)償預(yù)測單元(全分辨率)17的相同的值。
在圖像信息編碼裝置20中，如圖11(B)中所示，16×16塊被劃分為16×4的區(qū)域以保持在運(yùn)動補(bǔ)償預(yù)測單元(1/16分辨率)14的16×16塊匹配中的每個(gè)16×4區(qū)域的能量(SAD)。
即，當(dāng)索引號(B1KIdx)從區(qū)域的上部開始編號為0、1、2、3時(shí)，每個(gè)參考場可以獲得由下面的公式(8)表示的能量(SAD)。
相對于ListX(X＝0，1)SAD_ListX[refIdx][B1KIdx] [公式8](B1KIdx＝0～3)具體上，SAD_ListX[refIdx][B1KIdx]表示能量狀態(tài)的形成，其中相對于已經(jīng)通過ListX的每個(gè)參考圖像索引號refIdx的16×16塊匹配而確定的最佳運(yùn)動向量而對于每個(gè)B1kIdx存儲SADa。所述參考圖像索引號refIdx是用于指示可以從標(biāo)準(zhǔn)任意定義的參考圖像的索引，其中，在普通狀態(tài)中從較近的參考圖像開始分配小的編號。即使對于同一參考圖像，分別向指示前側(cè)的參考圖像的List0和指示后側(cè)的參考圖像的List1附加不同的參考圖像索引號。
而且，在相應(yīng)的參考場中，通過16×16塊匹配，獲得了最佳的運(yùn)動向量MV_ListX[refIdx](MV_List0
，MV_List0[1]，MV_List1
和MV_List1[1])。
在此，如下面的公式(9)所示，參考幀確定單元15進(jìn)行在相應(yīng)List(列表)的每個(gè)對應(yīng)索引號B1kIdx的剩余能量之間的比較，以確定參考場，其中，能量與16×4單元的參考場一樣小。
對于ListX(X＝0，1)refIdx[B1kIdx]＝MIN(SAD_ListX[refIdx][B1kIdx])(B1kIdx＝0～3)[公式(9)]而且，每個(gè)確定的參考圖像索引號refIdx也執(zhí)行運(yùn)動向量MV_ListX[refIdx]的轉(zhuǎn)換。
在能量是相同值的情況下，使得具有小參考圖像索引號refIdx的場成為參考場。
通過上述的處理，對于每個(gè)B1kIdx獲得參考場(refIdx_ListX[B1kIdx])和運(yùn)動向量(ML_ListX[B1kIdx])。
在此，雖然使得用于比較的索引值是作為M×N的塊匹配的結(jié)果而獲得的差絕對值和(SAD絕對差的和)，但是可以使用作為M×N的塊匹配的結(jié)果而獲得的正交變換的差絕對值和(SATD絕對變換的差的和)或差平方和(SSD平方差的和)。
而且，取代僅僅允許從剩余能量確定的SAD、SATD或SSD作為索引值，通過使用任意加權(quán)(λ1)將參考圖像索引refIdx編號值加到SAD等而獲得的值也可以是評估索引值。
當(dāng)通過Cost(成本)的名稱來定義評估索引時(shí)，通過公式(10)來表示評估索引。
Cost＝SAD+λ1×refIdx[公式(10)]而且，可以向評估索引加上運(yùn)動向量的信息數(shù)量。
具體上，通過使用加權(quán)變量λ2來定義評估索引產(chǎn)生公式，如公式(11)所示。
Cost＝SAD+λ1×refIdx+λ2×MV [公式(11)]即，圖像信息編碼裝置20按照在圖12的流程圖中所示的過程來執(zhí)行圖像處理。
即，通過間除單元137分別相對于水平和垂直方向?qū)τ谠趲鎯ζ?全分辨率)136中存儲的輸入圖像信息實(shí)施1/N間除處理，以將如此產(chǎn)生的像素值存儲到幀存儲器(1/N2分辨率)139中(步驟S1)。
進(jìn)行設(shè)置使得ListX(X＝0)(步驟S2)進(jìn)行設(shè)置使得refIdx＝0(步驟S3)通過運(yùn)動補(bǔ)償預(yù)測單元(1/N2分辨率)138，使用在幀存儲器(1/N2分辨率)139中存儲的像素值來通過塊匹配而執(zhí)行相對于對應(yīng)塊的最佳運(yùn)動向量信息的搜索(步驟S4)。
而且，在作為塊匹配的結(jié)果而獲得的SAD變得等于最小值的點(diǎn)對于每個(gè)B1kIdx存儲SAD值(步驟S5)。
然后，確定SAD_ListX[refIdx][B1kIdx]，用于指示能量狀態(tài)的形成，其中，相對于對于ListX的每個(gè)參考圖像索引號refIdx通過16×16塊匹配而確定的最佳運(yùn)動向量，對于每個(gè)B1kIdx，存儲SAD(步驟S6)。
遞增參考圖像索引號refIdx(步驟S7)。
判定是否參考圖像索引號refIdx變得等于最后的值(步驟S8)。在其判定結(jié)果是否的情況下，處理返回到步驟S4，以重復(fù)執(zhí)行步驟S4～S8的處理。
當(dāng)在步驟S8的判定結(jié)果為是時(shí)，對于ListX的每個(gè)B1kIdx確定其中SAD變得等于最小值的參考圖像索引號refIdx(步驟S9)。
進(jìn)行設(shè)置使得ListX(X＝1)(步驟S10)。
而且，判定是否ListX是List1(步驟S11)。在判定結(jié)果為是的情況下，處理返回到步驟S3以重復(fù)地執(zhí)行步驟S3～S11的處理。而且，在步驟S1的判定結(jié)果是否的情況下，處理結(jié)束。
僅僅對于已經(jīng)以如上所述的方式獲得的對于每個(gè)List或每個(gè)B1kIdx確定的參考圖像索引號refIdx和運(yùn)動向量的外圍執(zhí)行求精處理，以降低求精處理的操作數(shù)量，以使得能夠?qū)崿F(xiàn)高速的運(yùn)動向量搜索。
而且，因?yàn)樵谏鲜龅奶幚碇性?×1MB的區(qū)域中準(zhǔn)備了參考圖像索引編號refIdx和運(yùn)動向量，因此在求精處理中，重新利用已經(jīng)在對應(yīng)的宏塊MB之前被搜索的存儲器以對用于搜索運(yùn)動向量的區(qū)域進(jìn)行存儲器訪問，以便通過僅僅訪問在求精窗口REW內(nèi)新需要的區(qū)域ARn，如圖13中所示，以便也允許減少存儲器訪問。
雖然已經(jīng)通過將場作為示例而給出了說明，但是這可以類似地應(yīng)用到幀。
而且，雖然采取了4×1MB的塊作為示例，但是在M×N的宏塊MB被用作在收縮圖像的塊匹配的單位的情況下，本發(fā)明可以被應(yīng)用到使得M×N’(N’是1或更大，并且是N或更小)或M’×N(M’是1或更大，或者是M或更小)單元是B1kIdx的情況。
權(quán)利要求
1.一種運(yùn)動補(bǔ)償預(yù)測方法，用于通過指定每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊使用的多個(gè)幀的參考圖像的任何一個(gè)來執(zhí)行基于分層搜索的運(yùn)動向量的搜索，所述每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊具有多個(gè)幀的參考圖像，并且是通過劃分在連續(xù)的幀圖像中要處理的目標(biāo)幀圖像而獲得的，所述運(yùn)動補(bǔ)償預(yù)測方法包括分層結(jié)構(gòu)實(shí)現(xiàn)步驟，通過間除使得圖像在最高層的、具有運(yùn)動補(bǔ)償塊的像素大小中的最大像素大小的運(yùn)動補(bǔ)償塊的像素，來產(chǎn)生具有預(yù)定的收縮率的較低層中的收縮圖像；第一運(yùn)動補(bǔ)償預(yù)測步驟，用于通過使用在所述分層結(jié)構(gòu)實(shí)現(xiàn)步驟中產(chǎn)生的收縮圖像而搜索運(yùn)動向量；參考圖像確定步驟，用于在所述收縮圖像上確定在第一運(yùn)動補(bǔ)償預(yù)測步驟使用的收縮參考圖像；第二運(yùn)動補(bǔ)償預(yù)測步驟，用于通過使用由已經(jīng)在第一運(yùn)動補(bǔ)償預(yù)測步驟搜索的運(yùn)動向量指定的預(yù)定檢索范圍來對于在收縮之前的圖像搜索運(yùn)動向量，并且執(zhí)行運(yùn)動補(bǔ)償預(yù)測。
2.按照權(quán)利要求1的運(yùn)動補(bǔ)償預(yù)測方法，其中，在第一運(yùn)動補(bǔ)償預(yù)測步驟，作為分層搜索的單位的M×N宏塊被劃分為M’×N’(M’是1或更大或是M或更小，N’是1或更大或是N或更小)的塊，并且，在M’×N’基礎(chǔ)上保存作為M×N的塊匹配的結(jié)果而獲得的差絕對值和(SAD)。
3.按照權(quán)利要求1的運(yùn)動補(bǔ)償預(yù)測方法，其中，在所述第一運(yùn)動補(bǔ)償預(yù)測步驟，作為分層搜索的單位的M×N宏塊被劃分為M’×N’(M’是1或更大以及是M或更小，N’是1或更大以及是N或更小)的塊，并且，在M’×N’的基礎(chǔ)上保存作為M×N的塊匹配的結(jié)果而獲得的正交變換的差絕對值和(SATD)。
4.按照權(quán)利要求1的運(yùn)動補(bǔ)償預(yù)測方法，其中，在所述第一運(yùn)動補(bǔ)償預(yù)測步驟，作為分層搜索的單位的M×N宏塊被劃分為M’×N’(M’是1或更大以及是M或更小，N’是1或更大以及是N或更小)的塊，并且，在M’×N’基礎(chǔ)上保存作為M×N的塊匹配的結(jié)果而獲得的差平方和(SSD)。
5.按照權(quán)利要求2-4的任何一個(gè)的運(yùn)動補(bǔ)償預(yù)測方法，其中，在參考圖像確定步驟，對于每個(gè)參考圖像在M’×N’的基礎(chǔ)上執(zhí)行比較，并且改變參考圖像和運(yùn)動向量。
6.按照權(quán)利要求5的運(yùn)動補(bǔ)償預(yù)測方法，其中，在所述參考圖像確定步驟，當(dāng)在相應(yīng)的參考圖像中被劃分的塊的評估索引值是相同值的情況下，使用參考圖像，其中，參考圖像索引編號(refIdx)較小。
7.按照權(quán)利要求2-4的任何一個(gè)的運(yùn)動補(bǔ)償預(yù)測方法，其中，在所述參考圖像確定步驟，使得通過使用任意加權(quán)將參考圖像索引編號(refIdx)的量值相加而獲得的值與從塊匹配的結(jié)果計(jì)算的評估索引值一起成為評估索引。
8.按照權(quán)利要求1的運(yùn)動補(bǔ)償預(yù)測方法，其中，在所述參考圖像確定步驟，在B畫面的情況下，根據(jù)在相應(yīng)List確定的參考圖像索引號(refIdx)，執(zhí)行雙向預(yù)測的評估索引計(jì)算，以對于分層圖像執(zhí)行正向預(yù)測、反向預(yù)測和雙向預(yù)測的判定。
9.一種運(yùn)動補(bǔ)償預(yù)測裝置，所述裝置被適配用來通過指定每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊使用的多個(gè)幀的參考圖像的任何一個(gè)來執(zhí)行基于分層搜索的運(yùn)動向量的搜索，所述每個(gè)相應(yīng)的運(yùn)動補(bǔ)償塊具有多個(gè)幀的參考圖像，并且是通過劃分在連續(xù)的幀圖像中的要處理的目標(biāo)幀圖像而獲得的，所述運(yùn)動補(bǔ)償預(yù)測裝置包括分層結(jié)構(gòu)實(shí)現(xiàn)部件，通過間除使得圖像在最高層的、具有運(yùn)動補(bǔ)償塊的像素大小中的最大像素大小的運(yùn)動補(bǔ)償塊的像素，來產(chǎn)生具有預(yù)定的收縮率的較低層中的收縮圖像；第一運(yùn)動補(bǔ)償預(yù)測部件，用于通過使用由所述分層結(jié)構(gòu)實(shí)現(xiàn)部件產(chǎn)生的收縮圖像而搜索運(yùn)動向量；參考圖像確定部件，用于在所述收縮圖像上確定在第一運(yùn)動補(bǔ)償預(yù)測部件使用的收縮參考圖像；以及第二運(yùn)動補(bǔ)償預(yù)測部件，用于通過使用由已經(jīng)由第一運(yùn)動補(bǔ)償預(yù)測部件搜索的運(yùn)動向量指定的預(yù)定檢索范圍來對于收縮之前的圖像搜索運(yùn)動向量，并且執(zhí)行運(yùn)動補(bǔ)償預(yù)測。
10.按照權(quán)利要求9的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述第一運(yùn)動補(bǔ)償預(yù)測部件被適配為使得作為分層搜索的單位的M×N宏塊被劃分為M’×N’(M’是1或更大或是M或更小，N’是1或更大或是N或更小)的塊，并且，在M’×N’基礎(chǔ)上保存作為M×N的塊匹配的結(jié)果而獲得的差絕對值和(SAD)。
11.按照權(quán)利要求9的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述第一運(yùn)動補(bǔ)償預(yù)測部件被適配為使得作為分層搜索的單位的M×N宏塊被劃分為M’×N’(M’是1或更大以及是M或更小，N’是1或更大以及是N或更小)的塊，并且，在M’×N’基礎(chǔ)上保存作為M×N的塊匹配的結(jié)果而獲得的正交變換的差絕對值和(SATD)。
12.按照權(quán)利要求9的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述第一運(yùn)動補(bǔ)償預(yù)測部件被適配為使得作為分層搜索的單位的M×N宏塊被劃分為M’×N’(M’是1或更大以及是M或更小，N’是1或更大以及是N或更小)的塊，并且，在M’×N’基礎(chǔ)上保存作為M×N的塊匹配的結(jié)果而獲得的差平方和(SSD)。
13.按照權(quán)利要求9-12的任何一個(gè)的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述參考圖像確定部件進(jìn)行操作以對于每個(gè)參考圖像在M’×N’基礎(chǔ)上執(zhí)行比較，并且改變參考圖像和運(yùn)動向量。
14.按照權(quán)利要求13的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述參考圖像確定部件進(jìn)行操作以使得當(dāng)在相應(yīng)的參考圖像中被劃分的塊的評估索引值是相同值的情況下，使用參考圖像，其中，參考圖像索引編號(refIdx)較小。
15.按照權(quán)利要求9-12的任何一個(gè)的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述參考圖像確定部件進(jìn)行操作以使得通過使用任意加權(quán)而將參考圖像索引編號(refIdx)的量值相加而獲得的值與從塊匹配的結(jié)果計(jì)算的評估索引值一起成為評估索引。
16.按照權(quán)利要求9的運(yùn)動補(bǔ)償預(yù)測裝置，其中，所述參考圖像確定部件進(jìn)行操作以使得在B畫面的情況下，根據(jù)在相應(yīng)List確定的參考圖像索引號(refIdx)，執(zhí)行雙向預(yù)測的評估索引計(jì)算，以對于分層圖像執(zhí)行正向預(yù)測、反向預(yù)測和雙向預(yù)測的判定。
全文摘要
對于具有參考圖像幀并且由通過劃分在連續(xù)的幀圖像中的要處理的目標(biāo)幀圖像而構(gòu)成的每個(gè)運(yùn)動補(bǔ)償塊，指定使用哪個(gè)參考圖像幀，并且通過分層搜索來搜尋運(yùn)動向量。間除單元(12)通過間除使得圖像在最高層的、具有運(yùn)動補(bǔ)償塊的像素大小中的最大像素大小的運(yùn)動補(bǔ)償塊的像素，來創(chuàng)建在較低層中的具有預(yù)定的收縮率的收縮圖像。參考幀確定單元(15)確定在所述收縮圖像上的收縮參考圖像。運(yùn)動補(bǔ)償預(yù)測裝置(1/N
文檔編號H04N7/32GK1977541SQ20058002215
公開日2007年6月6日 申請日期2005年6月29日 優(yōu)先權(quán)日2004年6月29日
發(fā)明者土屋壽治, 和田徹, 佐藤數(shù)史, 山田誠 申請人:索尼株式會社