濾波方法、運動圖像解碼方法、運動圖像編碼方法、運動圖像解碼裝置、運動圖像編碼裝置 ...的制作方法
【專利摘要】有關本發(fā)明的濾波方法,是對相互相鄰的IPCM塊與非IPCM塊的邊界進行解塊/濾波處理的濾波方法,包括決定用于上述非IPCM塊的第1量化參數(shù)的步驟(S401)、使用上述第1量化參數(shù)決定與IPCM塊對應的第2量化參數(shù)的步驟(S402)、使用上述第1量化參數(shù)及上述第2量化參數(shù)決定濾波強度的步驟(S403)、和以所決定的上述濾波強度對上述邊界進行解塊/濾波處理的步驟(S404)。
【專利說明】濾波方法、運動圖像解碼方法、運動圖像編碼方法、運動圖
像解碼裝置、運動圖像編碼裝置及運動圖像編碼解碼裝置
【技術(shù)領域】
[0001]本發(fā)明涉及濾波方法、運動圖像解碼方法、運動圖像編碼方法、運動圖像解碼裝置、運動圖像編碼裝置及運動圖像編碼解碼裝置。
【背景技術(shù)】
[0002]IPCM (Intra Pulse Code Modulation)塊是具有將編碼流中包含的信號用原來的圖像的亮度及色度的樣本表示的、未壓縮的運動圖像或圖像樣本的塊。它們在熵編碼部將圖像樣本的塊編碼時、生成比減少的位數(shù)更多的位數(shù)的情況下使用。即,在IPCM塊中,不將像素值壓縮而原樣使用原來的圖像的像素值。將該IPCM塊在H.264/AVC的運動圖像壓縮規(guī)格中導入。
[0003]在H.264運動圖像規(guī)格中,在IPCM塊被編碼到編碼流中的情況下,將該IPCM塊作為未壓縮數(shù)據(jù)編碼。并且,將這些塊的解碼處理省略。但是,依然將后處理(包括解塊/濾波處理等的濾波處理)對容易成為使這些塊的畫質(zhì)下降的原因的塊邊界進行(例如,參照非專利文獻I)。
[0004]現(xiàn)有技術(shù)
[0005]非專利文獻
[0006]非專利文獻I JS0/IEC14496 — 10 “MPEG — 4PartIOAdvanced Video Coding”
【發(fā)明內(nèi)容】
[0007]發(fā)明的概要
[0008]發(fā)明要解決的問題
[0009]希望能對這樣的IPCM塊與非IPCM塊的邊界進行更適當?shù)臑V波處理。
[0010]所以,本發(fā)明的目的是提供一種能夠?qū)PCM塊與非IPCM塊的邊界進行適當?shù)臑V波處理的濾波方法。
[0011]解決問題的手段
[0012]為了達到上述目的,有關本發(fā)明的一技術(shù)方案的濾波方法,對圖像中包含的、相互相鄰的IPCM (Intra Pulse Code Modulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,包括--第I量化參數(shù)決定步驟,決定用于上述非IPCM塊的第I量化參數(shù);第2量化參數(shù)決定步驟,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù);濾波強度決定步驟,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定上述濾波強度;濾波步驟,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
[0013]發(fā)明的效果
[0014]根據(jù)以上,本發(fā)明能夠提供一種能夠?qū)PCM塊與非IPCM塊的邊界進行適當?shù)臑V波處理的濾波方法?!緦@綀D】
【附圖說明】
[0015]圖1是表示H.264方式的、IPCM塊與非IPCM塊的塊邊界處的濾波強度的決定方法的圖。
[0016]圖2是H.264方式的塊邊界濾波處理的流程圖。
[0017]圖3是H.264方式的濾波強度的決定處理的流程圖。
[0018]圖4是表示有關本發(fā)明的實施方式I的濾波方法的濾波強度的圖。
[0019]圖5是有關本發(fā)明的實施方式I的濾波方法的流程圖。
[0020]圖6是有關本發(fā)明的實施方式I的運動圖像編碼裝置的塊圖。
[0021]圖7A是表示有關本發(fā)明的實施方式I的塊邊界的一例的圖。
[0022]圖7B是表示有關本發(fā)明的實施方式I的塊邊界的一例的圖。
[0023]圖8A是表示有關本發(fā)明的實施方式I的濾波處理部的動作的圖。
[0024]圖SB是表示有關本發(fā)明的實施方式I的濾波處理部的動作的圖。
[0025]圖9是有關本發(fā)明的實施方式I的運動圖像解碼裝置的塊圖。
[0026]圖1OA是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0027]圖1OB是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0028]圖1OC是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0029]圖1OD是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0030]圖1OE是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0031]圖1OF是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0032]圖1OG是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0033]圖1OH是表示有關本發(fā)明的實施方式I的濾波處理部的結(jié)構(gòu)例的圖。
[0034]圖11是有關本發(fā)明的實施方式I的濾波方法的變形例的流程圖。
[0035]圖12是有關本發(fā)明的實施方式I的濾波強度的決定處理的流程圖。
[0036]圖13是表示有關本發(fā)明的實施方式I的濾波強度和塊單位的圖。
[0037]圖14A是表示有關本發(fā)明的比較例的濾波ON的標志的應用范圍的圖。
[0038]圖14B是表示有關本發(fā)明的實施方式I的濾波ON的標志的應用范圍的圖。
[0039]圖15是有關本發(fā)明的實施方式I的變形例的運動圖像編碼法的流程圖。
[0040]圖16是有關本發(fā)明的實施方式I的變形例的運動圖像解碼方法的流程圖。
[0041]圖17是有關本發(fā)明的實施方式2的運動圖像編碼裝置的塊圖。
[0042]圖18是有關本發(fā)明的實施方式2的運動圖像解碼裝置的塊圖。
[0043]圖19是有關本發(fā)明的實施方式2的濾波方法的流程圖。
[0044]圖20是表示有關本發(fā)明的實施方式2的濾波方法的具體例的流程圖。
[0045]圖21是有關本發(fā)明的實施方式2的變形例的運動圖像編碼法的流程圖。
[0046]圖22是有關本發(fā)明的實施方式2的變形例的運動圖像解碼方法的流程圖。
[0047]圖23是實現(xiàn)內(nèi)容分發(fā)服務的內(nèi)容供給系統(tǒng)的整體結(jié)構(gòu)圖。
[0048]圖24是數(shù)字廣播用系統(tǒng)的整體結(jié)構(gòu)圖。
[0049]圖25是表示電視機的結(jié)構(gòu)例的模塊圖。
[0050]圖26是表示對作為光盤的記錄介質(zhì)進行信息的讀寫的信息再現(xiàn)/記錄部的結(jié)構(gòu)例的模塊圖。[0051]圖27是表示作為光盤的記錄介質(zhì)的構(gòu)造例的圖。
[0052]圖28A是表示便攜電話的一例的圖。
[0053]圖28B是表示便攜電話的結(jié)構(gòu)例的模塊圖。
[0054]圖29是表示復用數(shù)據(jù)的結(jié)構(gòu)的圖。
[0055]圖30是示意地表示各流在復用數(shù)據(jù)中怎樣被復用的圖。
[0056]圖31是更詳細地表示在PES包序列中視頻流怎樣被保存的圖。
[0057]圖32是表示復用數(shù)據(jù)的TS包和源包的構(gòu)造的圖。
[0058]圖33是表示PMT的數(shù)據(jù)結(jié)構(gòu)的圖。
[0059]圖34是表示復用數(shù)據(jù)信息的內(nèi)部結(jié)構(gòu)的圖。
[0060]圖35是表示流屬性信息的內(nèi)部結(jié)構(gòu)的圖。
[0061]圖36是表示識別影像數(shù)據(jù)的步驟的圖。
[0062]圖37是表示實現(xiàn)各實施方式的運動圖像編碼方法及運動圖像解碼方法的集成電路的結(jié)構(gòu)例的模塊圖。
[0063]圖38是表示切換驅(qū)動頻率的結(jié)構(gòu)的圖。
[0064]圖39是表示識別影像數(shù)據(jù)、切換驅(qū)動頻率的步驟的圖。
[0065]圖40是表示將影像數(shù)據(jù)的標準與驅(qū)動頻率建立了對應的查找表的一例的圖。
[0066]圖41A是表示將信號處理部的模塊共用的結(jié)構(gòu)的一例的圖。
[0067]圖41B是表示將信號處理部的模塊共用的結(jié)構(gòu)的另一例的圖。
【具體實施方式】
[0068](作為本發(fā)明的基礎的認識)
[0069]本
【發(fā)明者】發(fā)現(xiàn),會發(fā)生以下的問題。
[0070]首先,在說明本發(fā)明的實施方式之前,對H.264的編碼及解碼方式中的、IPCM塊與非IPCM塊的邊界處的像素間濾波(解塊/濾波)處理進行說明。
[0071]圖1是說明H.264的編碼及解碼方式中的、IPCM塊(宏塊)與非IPCM塊(宏塊)的邊界處的像素間濾波的濾波強度的決定方法的概念的圖。
[0072]圖1示意地表示一方是非IPCM宏塊(圖左側(cè))、另一方是IPCM宏塊(圖右側(cè))的兩個宏塊的間的邊界。位于圖1的左側(cè)的3個圓表示3個像素(典型地,從邊界起依次稱作PO、p1、p2)。該左側(cè)3個像素屬于第I單位(編碼單位塊,以下稱作⑶塊)中的第I塊(P塊)。同時,該3個像素在作為比第I單位大的單位的宏塊單位的塊(以下,稱作MB塊)中屬于非IPCM型的第I宏塊。
[0073]同樣,位于圖1的右側(cè)的3個圓表示3個像素(典型地,從邊界起依次稱作q0、ql、q2)。該左側(cè)3個像素屬于第I單位中的第2塊(q塊)。同時,該3個像素在MB塊中屬于IPCM型的第2宏塊。
[0074]另外,以下將屬于IPCM型的宏塊的CU塊稱作IPCM塊,將屬于非IPCM型的宏塊的CU塊稱作非IPCM塊。S卩,所謂非IPCM ik,是指不是IPCM塊的塊。
[0075]以下,說明對該塊邊界(或者比編碼單位大的塊單位的邊界)處的像素q0、ql、p0及Pi應用的濾波強度的決定方法。
[0076]在H.264的濾波方法(規(guī)格書8.7節(jié)記載的濾波方法)中,規(guī)定了通常將對于兩個塊的邊界的濾波強度根據(jù)從第I宏塊的量化參數(shù)QPp導出的值qPp、和第2宏塊的量化參數(shù)QPq的平均值決定。具體而言,使用由規(guī)格書8 — 461式表示的以下的(式I)。
[0077]QPav= (QPp+QPq+1) ?1=> (QPp+l)?l (式 I)
[0078]該(式I)表示以下的運算。濾波強度以量化誤差的吸收等為目的設計為,量化參數(shù)的值越大,則施加越強(平滑度越強)的濾波。
[0079]在圖中,左側(cè)的量化參數(shù)QPp是為了第I宏塊(P側(cè)的塊)而編碼的量化參數(shù)。另外,為了方便,這里將QP在與為了濾波的目的而利用的值qP相同的意義下使用。此外,右側(cè)的量化參數(shù)QPq是對第2宏塊(q側(cè)的塊)本來應應用的量化參數(shù)。
[0080]這里,如在H.264的規(guī)格書8.7.2節(jié)中記載那樣的,將IPCM塊的量化參數(shù)qPq(圖中 QPq)的值設置為 O。即為“Both sides filtered with weak strength”。這意味著,關于作為兩個塊的邊界的I個邊界,對兩者的塊應用相同的濾波強度的濾波。這也意味著使兩個塊的濾波強度不同。即,在IPCM塊與非IPCM塊的邊界中,對兩者的塊執(zhí)行相同的濾波強度的濾波處理。
[0081]圖2是說明在H.264的規(guī)格書8.7節(jié)“Deblocking filter process”中記載的塊邊界濾波處理的概念的流程圖。
[0082]該流程圖關于H.264的濾波大體說明以下的3個。
[0083](1)8.7.2.1節(jié)的濾波強度(bS)決定順序
[0084]步驟SlOl 是與在 8.7.2.1 節(jié)中記載的 “Deviation process for the lumacontent dependent boundary filtering strength”過程對應的步驟。該過程根據(jù)塊型等決定對于I個塊邊界的濾波處理的濾波強度。這里,將濾波強度從濾波強度較強(bS=4)到不濾波(bS=0)而進行分類。 關于這一點在圖3中說明。
[0085](2)關于IPCM塊的量化參數(shù)qPz=0的設定過程
[0086]步驟S102~S107是在圖1中說明的濾波強度決定用的量化參數(shù)qP的值的設定處理。相對于通常的非IPCM塊(步驟S102或S105中“否”),將該塊屬于的宏塊的量化參數(shù)QP [i] (i是O或I的某個)設定為濾波強度決定用的量化參數(shù)qP [i](步驟S103及S106)。另一方面,在對象塊是IPCM塊的情況下(S102或S105中“是”),將IPCM塊的量化參數(shù)qP設置為O (步驟S104及S107)。
[0087]接著,在步驟S108中,通過上述(式I)計算qPav。
[0088](3)將 IfbS (或 filter Sample Flag)在兩者的塊中共用。
[0089]以下,說明將所決定的濾波強度(或不濾波的判斷標志)共通地(將相同的值)應用到夾著邊界的兩個塊中。
[0090]首先,在上述步驟S108后,進行使用上述規(guī)格書中的式8 - 462~式8 — 467的運算。具體而言,進行(I)用來將在步驟SlOl中設定的濾波強度微調(diào)的指標的導出、和(2)用于邊緣判斷的閾值的導出。
[0091]并且,對兩者的塊設定通過這些處理決定的濾波強度(S109)。具體而言,在濾波強度bS是I~4的某個的情況下,也對兩個塊應用由相同的bS的導出方法導出的值。例如,在濾波強度bS=4的情況下,將第I塊的像素P的值通過上述規(guī)格書的式(8 - 486~487)導出。此外,將第2塊中包含的像素q的值使用與在像素P的值的導出中使用的濾波強度相同的濾波強度導出。進而,為了對應于最終塊邊界實際是邊緣的情況等,做出進行/不進行濾波的判斷(fileter Samples Flag (也稱作濾波執(zhí)行標志)的值的導出)。具體而言,該判斷通過在步驟S109中導出的兩個閾值(two_threths ( α,β ))與ρ及q的實際的像素值的比較來進行(參照上述規(guī)格書,式(8 - 468))。但是,如上述那樣,關于濾波強度bS及濾波執(zhí)行標志,在兩個塊間都不能變更其值(或者執(zhí)行的有無)。
[0092]S卩,在H.264中,在封閉于濾波過程來看的情況下,不能實現(xiàn)適合于IPCM的處理。
[0093]圖3是表示在上述規(guī)格書的8.7.2.1節(jié)中記載的、對位于兩個宏塊的邊界的像素應用的濾波強度(bS)的決定順序(判斷順序)的流程圖。該流程圖是說明圖2所示的步驟SlOl的判斷順序的,是遵循規(guī)格書8.7.2.1節(jié)的判斷流程的。
[0094]首先,判斷第I塊的像素p0和第2塊的像素q0形成的邊界是否也對應于宏塊的邊界(S121)。換言之,判斷PO和q0是否位于宏塊邊界。
[0095]在處理對象的塊邊界不是宏塊邊界的情況下(S121中“否”),將濾波強度(bS)決定為作為比N (=4)小的值的3、2、1、0的某個(S124)。
[0096]另一方面,在處理對象的塊邊界是宏塊邊界的情況下(S121中“是”),判斷是否PO和q0的一方(或兩者)屬于巾貞內(nèi)預測模式的宏塊(S122)。
[0097]在兩者的塊不屬于幀內(nèi)預測模式的宏塊的情況下(S122中“否”),執(zhí)行其他判斷條件的判斷(S125)。
[0098]另一方面,在至少一方的塊屬于幀內(nèi)預測模式的宏塊的情況下(S122中“是”),沒有其他判斷條件(而必定)將濾波強度設定為意味著最強的強度的bS=4 (S123)。
[0099]這樣,在以往的濾波方法中,在濾波過程的內(nèi)部處理中,不能對夾著I個邊界的兩個塊執(zhí)行不同的處理(濾波強度及濾波應用有無)。此外,在著眼于IPCM的濾波強度的決定中雖然在規(guī)格中考慮到了,但在一方的塊是IPCM塊、另一方的塊是非IPCM塊的情況下,不能進行將IPCM塊的像素值以原樣的值輸出的控制。
[0100]IPCM塊是包含沒有編碼損失的忠實地表示“原圖像”的像素值的塊。因而,希望在濾波過程內(nèi)能夠控制以IPCM塊為一方的邊界處的濾波處理、或向IPCM塊的濾波的應用。
[0101]此外,如上述那樣,通常對于兩個塊的邊界的濾波強度基于從第I宏塊的量化參數(shù)QPp導出的值qPp和第2宏塊的量化參數(shù)QPq的平均值qPav決定。進而,將IPCM塊的量化參數(shù)qPq的值設置為O。由此,用來決定IPCM塊與非IPCM塊的邊界處的濾波強度的平均值qPav成為非IPCM塊的量化參數(shù)QPq的值的一半的值。即,在IPCM塊與非IPCM塊的邊界,與通常的情況(非IPCM塊彼此的邊界)相比,平均值qPav變小。這樣,本
【發(fā)明者】發(fā)現(xiàn),在IPCM塊與非IPCM塊的邊界中,不能適當?shù)卦O定濾波強度。
[0102]對此,有關本發(fā)明的一形態(tài)的濾波方法,對圖像中包含的、相互相鄰的IPCM(IntraPulse Code Modulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,包括:第I量化參數(shù)決定步驟,決定用于上述非IPCM塊的第I量化參數(shù);第2量化參數(shù)決定步驟,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù);濾波強度決定步驟,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定上述濾波強度;濾波步驟,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
[0103]據(jù)此,有關本發(fā)明的一技術(shù)方案的濾波方法使用非IPCM塊的量化參數(shù)決定IPCM塊的量化參數(shù)。由此,該濾波方法與作為IPCM塊的量化參數(shù)而使用零的情況相比,能夠?qū)PCM塊與非IPCM塊的邊界進行適當?shù)臑V波處理。[0104]此外,也可以是,在上述第2量化參數(shù)決定步驟中,將上述第2量化參數(shù)的值決定為與上述第I量化參數(shù)相同的值。
[0105]此外,也可以是,在上述濾波強度決定步驟中,計算上述第I量化參數(shù)和上述第2量化參數(shù)的平均值;使用計算出的上述平均值決定上述濾波強度。
[0106]此外,有關本發(fā)明的一技術(shù)方案的運動圖像解碼方法,將編碼比特流解碼,包括:差分信息取得步驟,通過將上述編碼比特流解析,取得表示在處理順序上緊接著之前的塊的量化參數(shù)與處理對象的塊的量化參數(shù)的差分是否是零的差分信息;濾波處理步驟,執(zhí)行所述的濾波方法;在上述第2量化參數(shù)決定步驟中,按照上述差分信息,將上述第2量化參數(shù)的值決定為與上述第I量化參數(shù)相同的值。
[0107]據(jù)此,有關本發(fā)明的一技術(shù)方案的運動圖像解碼方法能夠按照以其他目的使用的差分信息決定IPCM塊的量化參數(shù)。由此,該運動圖像解碼方法能夠不對運動圖像解碼裝置追加對IPCM塊進行特別的處理的功能而適當?shù)貨Q定IPCM塊的量化參數(shù)。
[0108]此外,也可以是,在上述第2量化參數(shù)決定步驟中,在上述非IPCM塊在處理順序上位于上述IPCM塊的緊接著之前的情況下,按照上述差分信息,將上述第2量化參數(shù)的值決定為與上述第I量化參數(shù)相同的值。
[0109]此外,也可以是,上述運動圖像解碼方法還包括:解碼步驟,通過將上述編碼比特流解碼,生成量化系數(shù);逆量化及逆變換步驟,通過將上述量化系數(shù)逆量化及逆變換,生成解碼殘差信號;加法步驟,通過對上述解碼殘差信號加上預測圖像信號,生成解碼圖像信號;上述IPCM塊及上述非IPCM塊包含在上述解碼圖像信號中;上述運動圖像解碼方法還包括通過使用在上述濾波步驟中進行上述解塊/濾波處理后的圖像信號進行預測處理、生成上述預測圖像信號的預測步驟。
[0110]此外,也可以是,上述運動圖像解碼方法根據(jù)上述編碼比特流中包含的、表示第I規(guī)格或第2規(guī)格的識別碼,切換依據(jù)上述第I規(guī)格的解碼處理、和依據(jù)上述第2規(guī)格的解碼處理;在上述ID表示第I規(guī)格的情況下,作為依據(jù)上述第I規(guī)格的解碼處理,進行上述差分信息取得步驟和上述濾波處理步驟。
[0111]此外,有關本發(fā)明的一技術(shù)方案的運動圖像編碼方法,通過將輸入圖像信號編碼,生成編碼比特流,包括:濾波處理步驟,執(zhí)行上述濾波方法;比特流生成步驟,作為表示上述第2量化參數(shù)是與上述第I量化參數(shù)相同的值的信息,生成包含表示在處理順序上緊接著之前的塊的量化參數(shù)與處理對象的塊的量化參數(shù)的差分是零的差分信息的上述編碼比特流。
[0112]據(jù)此,有關本發(fā)明的一技術(shù)方案的動畫編碼方法能夠使用以其他目的使用的差分信息,將運動圖像解碼裝置用來決定IPCM塊的量化參數(shù)的信息向該運動圖像解碼裝置傳遞。由此,即使不對運動圖像解碼裝置追加對IPCM塊進行特別的處理的功能,該運動圖像解碼裝置也能夠適當?shù)貨Q定IPCM塊的量化參數(shù)。
[0113]此外,也可以是,在上述比特流生成步驟中,在上述非IPCM塊在處理順序上位于上述IPCM塊的緊接著之前的情況下生成上述差分信息。
[0114]此外,也可以是,上述運動圖像編碼方法還包括:減法步驟,通過從上述輸入圖像信號減去預測圖像信號,生成殘差信號;變換及量化步驟,通過將上述殘差信號變換及量化,生成量化系數(shù);編碼步驟,通過將上述量化系數(shù)編碼,生成上述編碼比特流;逆量化及逆變換步驟,通過將上述量化系數(shù)逆量化及逆變換,生成解碼殘差信號;加法步驟,通過對上述解碼殘差信號加上上述預測圖像信號,生成解碼圖像信號;上述IPCM塊及上述非IPCM塊包含在上述解碼圖像信號中;上述運動圖像編碼方法還包括通過使用在上述濾波步驟中進行上述解塊/濾波處理后的圖像信號進行預測處理、生成上述預測圖像信號的預測步驟。
[0115]此外,有關本發(fā)明的一技術(shù)方案的運動圖像解碼裝置,對圖像中包含的、相互相鄰的IPCM (Intra Pulse Code Modulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,具備--第I量化參數(shù)決定部,決定用于上述非IPCM塊的第I量化參數(shù);第2量化參數(shù)決定部,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù);濾波強度決定部,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定濾波強度;濾波部,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
[0116]根據(jù)該結(jié)構(gòu),有關本發(fā)明的一技術(shù)方案的運動圖像解碼裝置使用非IPCM塊的量化參數(shù)決定IPCM塊的量化參數(shù)。由此,該運動圖像解碼裝置與作為IPCM塊的量化參數(shù)而使用零的情況相比,能夠?qū)PCM塊與非IPCM塊的邊界進行適當?shù)臑V波處理。
[0117]此外,有關本發(fā)明的一技術(shù)方案的運動圖像編碼裝置,對圖像中包含的、相互相鄰的IPCM (Intra Pulse Code Modulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,具備--第I量化參數(shù)決定部,決定用于上述非IPCM塊的第I量化參數(shù);第2量化參數(shù)決定部,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù);濾波強度決定部,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定濾波強度;濾波部,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
[0118]根據(jù)該結(jié)構(gòu),有 關本發(fā)明的一技術(shù)方案的運動圖像編碼裝置使用非IPCM塊的量化參數(shù)決定IPCM塊的量化參數(shù)。由此,該運動圖像編碼裝置與作為IPCM塊的量化參數(shù)而使用零的情況相比,能夠?qū)PCM塊與非IPCM塊的邊界進行適當?shù)臑V波處理。
[0119]此外,有關本發(fā)明的一技術(shù)方案的運動圖像編碼解碼裝置具備上述運動圖像編碼裝置和上述運動圖像解碼裝置。
[0120]另外,這些全局性或具體的技術(shù)方案既可以通過系統(tǒng)、方法、集成電路、計算機程序或記錄介質(zhì)實現(xiàn),也可以通過系統(tǒng)、方法、集成電路、計算機程序及記錄介質(zhì)的任意的組合實現(xiàn)。
[0121]以下,參照附圖對有關本發(fā)明的一技術(shù)方案的運動圖像解碼化裝置及運動圖像編碼裝置具體地說明。
[0122]另外,以下說明的實施方式都是表示本發(fā)明的一具體例的。在以下的實施方式中表示的數(shù)值、形狀、材料、構(gòu)成要素、構(gòu)成要素的配置位置及連接形態(tài)、步驟、步驟的順序等是一例,并不是限定本發(fā)明的意思。此外,關于以下的實施方式的構(gòu)成要素中的、在表示最上位概念的獨立權(quán)利要求中沒有記載的構(gòu)成要素,設為任意的構(gòu)成要素而進行說明。
[0123](實施方式I)
[0124]以下,對有關本發(fā)明的實施方式I的濾波方法進行說明。
[0125]圖4是表示應用有關本實施方式的濾波方法的條件及像素間濾波的濾波強度的決定方法的概念的圖。圖中的左3個圓與圖1同樣,表示第I塊中包含的像素。另外,關于其他部分,也對于與圖1同樣的要素省略說明。[0126]有關本實施方式的濾波方法對圖像中包含的多個塊進行濾波處理。典型地,將該濾波方法應用到對相鄰的塊的邊界進行的解塊/濾波處理中。另外,以下敘述將本發(fā)明應用到解塊/濾波處理中的例子,但本發(fā)明對于解塊/濾波處理以外的循環(huán)內(nèi)濾波處理(Adaptive Loop Filter)也能夠應用。
[0127]有關本實施方式的濾波方法與圖1中說明的濾波方法相比,以下的點不同。
[0128]首先,作為圖中右側(cè)的IPCM塊側(cè)的3個像素的像素值而輸出未濾波處理的像素值。
[0129]此外,在第I塊和第2塊中,使關于濾波的處置不同而進行控制。例如,對圖中的夾著I個邊界的一方(左側(cè))的塊應用濾波,對另一方(右側(cè))的塊不應用濾波。這樣,進行在塊間在濾波處理中設置差異的控制。
[0130]接著,將被應用濾波的左側(cè)的塊的濾波強度僅使用該左側(cè)的塊的量化參數(shù)QPp導出。即,將左側(cè)的非IPCM塊的濾波強度不使用右側(cè)的宏塊的量化參數(shù)QPq或其他作為代替的固定值(以往例中的O)而導出。
[0131]另外,圖2所示的H.264中的關于IPCM的判斷是是否為IPCM宏塊,但將該判斷用尺寸為可變的預測單位(Prediction Unit單位:PU單位)進行。S卩,以下所謂IPCM塊,是屬于IPCM型的PU塊的塊,所謂非IPCM塊,是屬于不為IPCM型的PU塊的塊。
[0132]以下,使用附圖對這些動作進行說明。
[0133]圖5是表示有關本實施方式的濾波方法的處理順序的流程圖。
[0134]有關本實施方式的濾波方法被作為編碼過程或解碼過程的一環(huán)執(zhí)行。因而,該濾波方法通過后述的圖6所示的運動圖像編碼裝置、或圖9所示的運動圖像解碼裝置內(nèi)的編碼循環(huán)或解碼循環(huán)內(nèi)的濾波處理部、和控制該濾波的控制部(Control Unit)執(zhí)行。
[0135]控制部首先判斷是否構(gòu)成邊界的兩個塊中的某一方的I3U塊的型是IPCM (S201)。例如,在圖4所示的例子的情況下,由于右側(cè)的PU塊是IPCM塊,所以判斷為一方是IPCM型。具體而言,控制部使用宏塊型或運動保障塊尺寸等的圖像數(shù)據(jù)的屬性參數(shù)執(zhí)行該判斷。
[0136]控制部在兩個塊的至少一方是IPCM塊的情況下(S201中“是”),判斷兩個塊中的另一方的塊是否是IPCM塊(S202)。例如,在圖4所示的圖的情況下,右側(cè)的塊是IPCM塊。因而,控制部判斷作為另一方的塊的左側(cè)的塊是否是IPCM塊。
[0137]S卩,在步驟S201及S202中,控制部判斷多個塊分別是IPCM塊還是非IPCM塊。具體而言,控制部判斷(I)是否兩個塊都是非IPCM塊(S201中“否”),(2)是否兩個塊都是IPCM塊(S202中“是”),(3)是否一方是IPCM塊且另一方是非IPCM塊(S202中“否”)。
[0138]在另一方的塊是IPCM塊的情況下(S202中“是”),即在兩者的塊是IPCM塊的情況下,不對兩者的塊(第I塊及第2塊的兩者)的像素P及q進行濾波處理(S203)。
[0139]另一方面,在另一方的塊不是IPCM塊的情況下(S202中“否”),S卩,在僅一方的塊是IPCM塊、另一方的塊是非IPCM塊的情況下,控制部通過控制濾波處理部,執(zhí)行步驟S204及S205的濾波處理。
[0140]首先,濾波處理部對非IPCM塊中包含的像素(例如,圖4的左側(cè)的3個像素)以規(guī)定的強度執(zhí)行濾波處理,將濾波處理后的像素值作為非IPCM塊的像素值輸出(S204)。此夕卜,在該濾波處理中,不僅是非IPCM塊的像素值,還使用IPCM塊的像素值。具體而言,濾波處理部通過使非IPCM塊的像素值和IPCM塊的像素值平滑化,計算濾波后的非IPCM塊的像素值。
[0141]此外,濾波處理部對IPCM塊中包含的像素(q側(cè)的像素q0、ql...)輸出未濾波處理的像素值(S205)。這里,所謂輸出未濾波處理的像素值,設想以下的兩個情況。
[0142]第I方法,是進行對非IPCM塊的濾波處理、對IPCM塊不進行濾波處理而輸出原來的像素值的方法。
[0143]第2方法,是對非IPCM塊和IPCM塊的兩者進行濾波處理、將濾波處理后的像素值中的IPCM塊的像素值置換為濾波處理前的原來的像素值、將置換后的像素值輸出的方法。在哪種情況下,輸出的IPCM塊的像素值都是進行濾波處理之前的原來的像素值。
[0144]另外,上述的濾波方法也可以采取在一方的塊和另一方的塊的濾波方式(濾波強度、濾波有無或適用像素數(shù))中設置差異而控制的方法。
[0145]另外,關于該步驟S204及S205的濾波處理(特別是控制部和濾波處理部的動作),使用圖6?圖8B在后面說明。
[0146]此外,在步驟S201中兩者的塊是非IPCM塊的情況下(S201中“否”),控制部進行通常的濾波動作(S206)。即,控制部對兩者的塊以規(guī)定的濾波強度執(zhí)行濾波處理。
[0147]以下,對使用上述濾波方法的運動圖像編碼裝置進行說明。
[0148]圖6是有關本實施方式的運動圖像編碼裝置100的功能塊圖。圖6所示的運動圖像編碼裝置100通過將輸入圖像信號120編碼而生成編碼比特流132。該運動圖像編碼裝置100具備減法器101、正交變換部102、量化部103、逆量化部104、逆正交變換部105、加法器106、濾波處理部115、存儲器109、預測部110、可變長編碼部111、選擇部112和控制部113。
[0149]減法器101通過計算輸入圖像信號120與預測圖像信號130的差而生成殘差信號121。正交變換部102通過將殘差信號121正交變換,生成變換系數(shù)122。量化部103通過將變換系數(shù)122量化,生成量化系數(shù)123。
[0150]逆量化部104通過將量化系數(shù)123逆量化,生成變換系數(shù)124。逆正交變換部105通過將變換系數(shù)124逆正交變換,生成解碼殘差信號125。加法器106通過將解碼殘差信號125與預測圖像信號130相加,生成解碼圖像信號126。
[0151]濾波處理部115通過對解碼圖像信號126實施濾波處理而生成圖像信號128,將所生成的圖像信號128向存儲器109保存。
[0152]預測部110通過使用保存在存儲器109中的圖像信號128有選擇地進行幀內(nèi)預測處理及幀間預測處理,生成預測圖像信號130。
[0153]可變長編碼部111通過將量化系數(shù)123可變長編碼(熵編碼)而生成編碼信號131。
[0154]選擇部112在對象塊是IPCM塊的情況下選擇輸入圖像信號120,在對象塊是非IPCM塊的情況下選擇編碼信號131,將所選擇的信號作為編碼比特流132輸出。
[0155]控制部113控制濾波處理部115及選擇部112。
[0156]另外,正交變換部102及量化部103是通過對殘差信號實施變換處理及量化處理而生成量化系數(shù)的變換及量化部的一例。此外,可變長編碼部111是通過將量化系數(shù)編碼而生成編碼信號的編碼部的一例。此外,逆量化部104及逆正交變換部105是通過對量化系數(shù)實施逆量化處理及逆變換處理而生成解碼殘差信號的逆量化及逆變換部的一例。
[0157]這里,在有關本實施方式的運動圖像編碼裝置100中,特別主要的結(jié)構(gòu)是控制部113及濾波處理部115。
[0158]如上述那樣,有關本實施方式的濾波方法被作為編碼及解碼過程的一部分執(zhí)行。因而,濾波處理部115配置在保持參照圖像等的存儲器109的前段。并且,濾波處理部115將執(zhí)行濾波處理的結(jié)果(或不執(zhí)行濾波的結(jié)果)向循環(huán)內(nèi)的存儲器109存儲。關于這一點,該濾波處理部115與稱作Loop濾波的H.264中的濾波是相同的。
[0159]此外,濾波處理部115具有兩個輸入系統(tǒng)。第I個輸入信號是表不非IPCM塊的像素值的解碼圖像信號126,第2個輸入信號是表示IPCM塊的像素值的輸入圖像信號120。這里,解碼圖像信號126是被實施變換處理、量化處理、逆量化處理及逆變換處理后的復原的編碼圖像信號。此外,輸入圖像信號120是不經(jīng)由編碼處理及解碼處理的原來的圖像信號。
[0160]按照控制部113的控制,濾波處理部115關于IPCM塊的像素輸出不進行濾波處理的原來的像素值,關于非IPCM塊的像素進行濾波處理,將濾波處理后的值輸出。
[0161]該濾波處理部115具備濾波部107和選擇部108。濾波部107通過對解碼圖像信號126實施濾波處理而生成圖像信號127。選擇部108在對象塊是IPCM塊的情況下選擇圖像信號127,在對象塊是非IPCM塊的情況下選擇輸入圖像信號120,將所選擇的信號作為圖像信號128輸出。
[0162]圖7A及圖7B是例示兩個塊的邊界的像素的圖。在圖7A所示的例子中,兩個塊在水平方向上相鄰。這里,將左側(cè)的包含從PO到pn的像素的塊稱作第I塊。該第I塊是非IPCM塊。此外,將另 一方的塊稱作第2塊。該第2塊是IPCM塊。另外,本實施方式的濾波處理如圖7B所示,當然 對于IPCM塊和非IPCM塊在垂直方向上相鄰的情況也能夠應用。
[0163]以下,說明濾波處理部115的動作的具體例。
[0164]圖8A及圖8B是表示對在圖7A所例示的兩個塊中包含的像素P[i]及q [j]實施濾波處理的情況下的濾波處理部115的動作的圖。即,第I塊屬于非IPCM塊,第2塊屬于IPCM塊。
[0165]濾波處理部115根據(jù)來自控制部113的控制信號,進行圖8A及圖8B所示的動作。
[0166]圖8A是表示對于非IPCM塊的濾波處理部115的動作的圖。另外,該動作相當于圖5所示的步驟S204。即,濾波處理部115使用第I塊的像素值(p0、pi...)和第2塊的像素值(qO、qL...)的兩者的像素值,計算與第I塊對應的像素的輸出結(jié)果ρ--、ρΠ...。
[0167]圖8Β是表示對于IPCM塊的濾波處理部115的動作的圖。另外,該動作相當于圖5所示的步驟S205。即,濾波處理部115關于第2塊的像素,輸出與所輸入的q0、ql、q2的值相同的值(未濾波處理的像素值)。
[0168]以下,對使用上述濾波方法的運動圖像解碼裝置進行說明。
[0169]圖9是有關本實施方式的運動圖像解碼裝置的功能塊圖。
[0170]圖9所示的運動圖像解碼裝置200通過將編碼比特流232解碼而生成輸出圖像信號220。這里,編碼比特流232例如是由上述運動圖像編碼裝置100生成的編碼比特流132。
[0171]該運動圖像解碼裝置200具備逆量化部204、逆正交變換部205、加法器206、濾波處理部215、存儲器209、預測部210、可變長解碼部211、分配部212和控制部213。
[0172]分配部212在對象塊是IPCM塊的情況下將編碼比特流232向濾波處理部215供給,在對象塊是非IPCM塊的情況下將編碼比特流232向可變長解碼部211供給。
[0173]可變長解碼部211通過將編碼比特流232可變長解碼(熵解碼)而生成量化系數(shù)223。
[0174]逆量化部204通過將量化系數(shù)223逆量化,生成變換系數(shù)224。逆正交變換部205通過將變換系數(shù)224逆正交變換,生成解碼殘差信號225。加法器206通過將解碼殘差信號225與預測圖像信號230相加,生成解碼圖像信號226。
[0175]濾波處理部215通過對解碼圖像信號226實施濾波處理而生成圖像信號228,將所生成的圖像信號228向存儲器209保存。
[0176]該濾波處理部215具備濾波部207及選擇部208。濾波部207通過對解碼圖像信號226實施濾波處理而生成圖像信號227。選擇部208在對象塊是IPCM塊的情況下選擇圖像信號227,在對象塊是非IPCM塊的情況下選擇編碼比特流232,將所選擇的信號作為圖像信號228輸出。
[0177]此外,將保存在存儲器209中的圖像信號228作為輸出圖像信號220輸出。
[0178]預測部210通過使用保存在存儲器209中的圖像信號228有選擇地進行幀內(nèi)預測處理及幀間預測處理,生成預測圖像信號230。
[0179]控制部213控制濾波處理部215及分配部212。
[0180]另外,可變長解碼部211是通過將編碼比特流解碼而生成量化系數(shù)的解碼部的一例。逆量化部204及逆正交變換部205是通過對量化系數(shù)實施逆量化處理及逆變換處理而生成解碼殘差信號的逆量化及逆變換部的一例。
[0181]這里,濾波處理部215的動作與運動圖像編碼裝置100的濾波處理部115的動作是同樣的。另外,控制部213在根據(jù)作為輸入的代碼列的編碼比特流232判斷第I塊或第2塊的PU單位的型是否是IPCM這一點上與運動圖像編碼裝置100具備的控制部113不同,而其他功能是同樣的。
[0182]以下,對上述濾波處理部115及215的變形例的結(jié)構(gòu)進行說明。
[0183]圖1OA~圖1OH是表示關于有關本實施方式的濾波處理部115及215的濾波的輸入輸出關系能采取的形態(tài)的圖。
[0184]如圖1OA所示,濾波部107及207也可以包括串聯(lián)連續(xù)的多個濾波部301及302。例如第I個濾波部301和第2個濾波部302也可以進行相互不同的處理。在此情況下,例如關于IPCM塊將全部的濾波處理旁通。
[0185]如圖1OB所示,濾波部311也可以使用兩者的輸入信號進行濾波處理。在此情況下,選擇部312對IPCM塊輸出未濾波處理的值,對非IPCM塊輸出由濾波部311濾波處理后的值。
[0186]如圖1OC所示,也可以對IPCM塊和非IPCM塊進行不同的濾波處理。例如,所謂不同的濾波處理,是濾波強度不同的濾波處理。此外,例如也可以使對于IPCM塊的濾波強度比對于非IPCM塊的濾波強度弱。
[0187]具體而言,分配部321在對象塊是非IPCM塊的情況下,將輸入信號向濾波部322輸出,在對象塊是IPCM塊的情況下,將輸入信號向濾波部323輸出。這里,輸入信號同時包括上述解碼圖像信號126及輸入圖像信號120。濾波部322通過使用輸入信號進行第I濾波強度的濾波處理而生成對象塊的像素值。濾波部323通過進行比第I濾波強度弱的第2濾波強度的濾波處理而生成對象塊的像素值。選擇部324在對象塊是非IPCM塊的情況下,將由濾波部322濾波處理后的對象塊的像素值輸出,在對象塊是IPCM塊的情況下,將由濾波部323濾波處理后的對象塊的像素值輸出。
[0188]如圖1OD所示,也可以原本不進行對IPCM塊的處理。具體而言,分配部331在對象塊是非IPCM塊的情況下,將輸入信號向濾波部332輸出,在對象塊是IPCM塊的情況下,將輸入信號向選擇部333輸出。選擇部333在對象塊是非IPCM塊的情況下,將由濾波部332濾波處理后的對象塊的像素值輸出,在對象塊是IPCM塊的情況下,將來自分配部331的信號中的對象塊的像素值輸出。
[0189]如圖1OE所示,也可以不是切換濾波部的輸出側(cè)、而是切換輸入側(cè)。進而,對于IPCM塊和非IPCM塊的濾波部的級數(shù)也可以不同。具體而言,分配部341在對象塊是非IPCM塊的情況下,將輸入信號向濾波部342輸出,在對象塊是IPCM塊的情況下,將輸入信號向濾波部344輸出。濾波部342使用輸入信號進行濾波處理。濾波部343使用由濾波部342濾波處理后的信號進行濾波處理,將濾波處理后的對象塊的像素值輸出。濾波部344使用輸入信號進行濾波處理,將濾波處理后的對象塊的像素值輸出。另外,由濾波部344進行的濾波處理既可以與由濾波部342進行的濾波處理或由濾波部343進行的濾波處理相同,也可以不同。
[0190]如圖1OF所示,也可以切換濾波部的輸出側(cè)。具體而言,濾波部351使用第I輸入信號進行濾波處理。濾波部352使用由濾波部351濾波處理后的信號進行濾波處理,將濾波處理后的對象塊的像素值輸出。濾波部353使用第2輸入信號進行濾波處理,將濾波處理后的對象塊的像素值輸出。選擇部354在對象塊是非IPCM塊的情況下,將由濾波部352濾波處理后的對象塊的像素值輸出,在對象塊是IPCM塊的情況下,將由濾波部353濾波處理后的對象塊的像素值輸出。
[0191]另外,所謂將未濾波的值輸出,包括將進行了濾波的結(jié)果的像素值pf替換為原來的輸入值P而輸出。
[0192]如圖1OG所示,也可以使用在兩系統(tǒng)中的一方進行濾波處理后的信號進行另一方的濾波處理。具體而言,濾波部361使用第2輸入信號進行濾波處理。濾波部362使用第I輸入信號、和由濾波部361進行濾波處理后的信號進行濾波處理。選擇部363在對象塊是非IPCM塊的情況下,將由濾波部362濾波處理后的對象塊的像素值輸出,在對象塊是IPCM塊的情況下,將由濾波部361濾波處理后的對象塊的像素值輸出。另外,選擇部363也可以在對象塊是IPCM塊的情況下將由濾波部362濾波處理后的對象塊的像素值輸出,在對象塊是非IPCM塊的情況下將由濾波部361濾波處理后的對象塊的像素值輸出。
[0193]如圖1OH所示,也可以使用暫且保存在存儲器373中的值作為輸入。具體而言,選擇部371選擇輸入信號和保持在存儲器373中的信號的一方。濾波部372使用由選擇部371選擇的信號進行濾波處理。
[0194]另外,這些是例示,有關本實施方式的濾波處理部115只要作為結(jié)果能夠?qū)崿F(xiàn)“輸出對于IPCM塊的像素沒有進行濾波處理的值”的功能就可以。
[0195]以下,說明有關本實施方式的濾波方法的變形例。圖11是表示有關本實施方式的濾波方法的變形例的動作的流程圖。
[0196]在上述說明中,在圖5所示的步驟S204及S205中,假設對非IPCM塊應用濾波,對IPCM塊輸出未濾波處理的像素值,但這也可以通過以下所示的步驟實現(xiàn)。即,也可以代替圖5所示的步驟S204及S205而進行圖11所示的處理。[0197]首先,取得相互相鄰的第I塊(塊[O])及第2塊(塊y [I])的像素值(S221 )。這里,例如第I塊是非IPCM ±夾,第2塊是IPCM塊。
[0198]接著,導出對第I塊應用的濾波強度bS [O]和對第2塊應用的濾波強度bS [I](S222及S223)。這里,濾波強度bS [O]和濾波強度bS [I]表示不同的強度。另外,在以往的技術(shù)中,對于I個塊邊界僅設定了 I個濾波強度。例如,在本實施方式中,將對于IPCM塊的濾波強度設定得比對于非IPCM塊的濾波強度弱。
[0199]接著,以濾波強度bS [O]對兩者的塊進行濾波處理,將濾波處理后的第I塊的像素值輸出(S224)。接著,以濾波強度bS [I]對兩者的塊進行濾波處理,將濾波處理后的第2塊的像素值輸出(S225)。
[0200]這里,通過將濾波強度的值設為0,能夠控制進行/不進行濾波處理。換言之,也可以為了各個塊而導出用來控制進行/不進行濾波處理的標志(filter Samples Flag)。
[0201]根據(jù)以上,有關本實施方式的濾波方法能夠在對一方的塊以第I濾波強度執(zhí)行濾波處理的同時,對另一方的塊以與第I濾波強度不同的第2濾波強度執(zhí)行濾波處理。此外,該濾波方法能夠在濾波過程內(nèi)實現(xiàn)這樣的處理。
[0202]圖12是有關本實施方式的濾波方法的另一變形例的流程圖。圖12所示的處理相對于圖3所示的處理追加了步驟S401。
[0203]該步驟S401為了對被判斷為幀內(nèi)預測的塊的IPCM塊賦予適當?shù)臑V波強度而追力口。在步驟S401中,判斷是否第I塊及第2塊的至少一方是IPCM塊。在第I塊及第2塊的至少一方是IPCM塊的情況下(S401中“是”),將濾波強度(bS)決定為作為比N (=4)小的值的3、2、1、0的某個(S124)。此外,在第I塊及第2塊的兩者是非IPCM塊的情況下(S401中“否”),將濾波強度設定為意味著最強的強度的bS=N (=4) (S123)。
[0204]在圖3所示的濾波方法的情況下,在一方的塊或兩者的塊是幀內(nèi)預測模式的宏塊的情況下(S122中“是”),沒有其他判斷條件,必定將濾波強度自身設定為意味著最強的強度的bS=4。
[0205]另一方面,在圖12所示的本實施方式的變形例中,即使是一方的塊或兩者的塊是幀內(nèi)預測模式的宏塊的情況下(S122中“是”),在一方的塊是IPCM塊的情況下(S401中“是”),也設定為比在步驟S123中設定的濾波強度(bS=4)弱的濾波強度(bS=0?3)。
[0206]圖13是表示通過有關本實施方式的濾波方法決定的濾波強度、和決定邊界的塊單位的圖。
[0207]如圖13所示,在宏塊MB [O]是幀間預測模式的宏塊、宏塊MB [I]是幀內(nèi)預測模式的宏塊的情況下(S122中“是”),在第I及第2塊都是非IPCM塊的情況下(S401中“否”),對兩者的塊設定bS=4 (S123)。
[0208]另一方面,在I3U塊[O]是非IPCM模式、I3U塊[I]是IPCM模式的情況下,即由于CU塊[O ]是非IPCM塊,CU塊[I ]是IPCM塊(S401中“是”),所以對CU塊[O ]及CU塊[I ]SSbS=O?3的某個。在該例中,對作為IPCM塊的⑶塊[I]設定bS=0,對作為非IPCM塊的⑶塊[O]設定bS=l?3的某個。
[0209]圖14A及圖14B是用來說明通過有關本實施方式的IPCM塊的處置而濾波ON的標志的應用范圍擴展的狀況的圖。圖14A作為比較例而表示沒有應用本實施方式的方法的情況。圖14B表不應用了本實施方式的方法的情況。[0210]如圖14B所示,通過使用有關本實施方式的濾波方法,能夠?qū)V波ON的標志的應用范圍擴展。
[0211]如以上這樣,有關本實施方式的濾波方法中,濾波處理部或控制部在循環(huán)內(nèi)濾波的處理中將“IPCM塊不進行濾波”作為判斷的暗示性的代碼解釋的規(guī)則。由此,如圖14A及圖14B所示,對于代碼列,能夠以更大的范圍指定是將濾波使能(enable)還是禁止(disbale)。由此,有關本實施方式的濾波方法能夠削減比特量。
[0212]此外,在上述說明中,說明了在解塊/濾波處理中應用本實施方式的例子,但在其他處理中也能夠應用同樣的方法。例如,也可以代替解塊/濾波處理而對適應循環(huán)濾波(ALF)處理或適應偏移處理應用上述處理。
[0213]解塊/濾波處理是對位于塊邊界的附近的再構(gòu)建像素樣本使用的濾波處理。通過進行該解塊/濾波處理,能夠降低通過塊單位的量化產(chǎn)生的塊邊界的噪聲。
[0214]適應的循環(huán)濾波處理是使用對象像素的周圍的像素值降低對象像素的噪聲的濾波處理。
[0215]是在適應的偏移處理中,按照塊對該塊中包含的多個像素值加上或減去I個偏移值的處理。
[0216]以下,說明該情況下的運動圖像編碼裝置100及運動圖像解碼裝置200的處理的流程。
[0217]圖15是有關本實施方式的變形例的運動圖像編碼方法的流程圖。
[0218]首先,運動圖像編碼裝置100進行對于處理對象塊的預測模式的決定(S301)。該預測模式是IPCM模式及非IPCM模式的某種。
[0219]接著,運動圖像編碼裝置100將所決定的預測模式向編碼比特流132寫入(S302)。換言之,可變長編碼部111生成包含所決定的預測模式的編碼比特流132 (編碼信號131)。
[0220]接著,運動圖像編碼裝置100判斷預測模式是否是IPCM模式(S303)。在預測模式是IPCM模式的情況下(S303中“是”),運動圖像編碼裝置100將輸入圖像信號120作為在幀間預測或幀內(nèi)預測中使用的參照圖像向存儲器109保存(S306)。
[0221]另一方面,在預測模式是非IPCM模式的情況下(S303中“否”),運動圖像編碼裝置100通過基于預測模式將圖像樣本的塊再構(gòu)建,生成解碼圖像信號126(S304)。并且,運動圖像編碼裝置100通過對解碼圖像信號126進行處理而生成圖像信號128(S305)。該處理包括解塊/濾波處理、適應循環(huán)濾波處理及適應偏移處理的至少一個。并且,運動圖像編碼裝置100將所生成的圖像信號128作為參照圖像向存儲器109保存(S306)。
[0222]圖16是有關本實施方式的變形例的運動圖像解碼方法的流程圖。
[0223]首先,運動圖像解碼裝置200通過將編碼比特流232解析,取得對于編碼比特流232中包含的處理對象塊的預測模式(S311)。該預測模式是IPCM模式及非IPCM模式的某種。
[0224]接著,運動圖像解碼裝置200判斷預測模式是否是IPCM模式(S312)。在預測模式是IPCM模式的情況下(S312中“是”),運動圖像解碼裝置200將編碼比特流232中包含的對象塊的圖像信號作為在幀間預測或幀內(nèi)預測中使用的參照圖像向存儲器209保存(S315)。
[0225]另一方面,在預測模式是非IPCM模式的情況下(S312中“否”),運動圖像解碼裝置200通過基于預測模式將圖像樣本的塊再構(gòu)建,生成解碼圖像信號226 (S313)。并且,運動圖像解碼裝置200通過對解碼圖像信號226進行處理而生成圖像信號228(S314)。該處理包括解塊/濾波處理、適應循環(huán)濾波處理及適應偏移處理的至少一個。并且,運動圖像解碼裝置200將所生成的圖像信號228作為參照圖像向存儲器109保存(S315)。
[0226](實施方式2)
[0227]有關本實施方式的濾波方法在對于IPCM塊與非IPCM塊的邊界的解塊/濾波處理中,使用非IPCM塊的量化參數(shù)決定IPCM塊的量化參數(shù)。例如,該濾波方法將IPCM塊的量化參數(shù)的值設為與非IPCM塊的量化參數(shù)相同的值。由此,該濾波方法能夠?qū)PCM塊與非IPCM塊的邊界以適當?shù)臑V波強度進行濾波處理。
[0228]另外,以下主要說明與實施方式I的差異點,重復的說明省略。
[0229]圖17是有關本實施方式的運動圖像編碼裝置400的塊圖。圖17所示的運動圖像編碼裝置400對圖像中包含的相互相鄰的IPCM塊與不是IPCM塊的非IPCM塊的邊界進行解塊/濾波處理。該運動圖像編碼裝置400具備第I量化參數(shù)決定部401、第2量化參數(shù)決定部402、濾波強度決定部403和濾波部404。另外,第I量化參數(shù)決定部401、第2量化參數(shù)決定部402、濾波強度決定部403及濾波部404例如包含在圖6所示的濾波處理部115或濾波部107中。此外,運動圖像編碼裝置400也可以還具備圖6所示的運動圖像編碼裝置100具備的多個處理部的全部或一部分。
[0230]圖18是有關本實施方式的運動圖像解碼裝置500的塊圖。圖18所示的運動圖像解碼裝置500對圖像中包含的相互相鄰的IPCM塊與非IPCM塊的邊界進行解塊/濾波處理。該運動圖像解碼裝置500具備第I量化參數(shù)決定部501、第2量化參數(shù)決定部502、濾波強度決定部503和濾波部504。另外,第I量化參數(shù)決定部501、第2量化參數(shù)決定部502、濾波強度決定部503及濾波部504例如包含在圖9所示的濾波處理部215或濾波部207中。此外,運動圖像解碼裝置500也可以還具備圖9所示的運動圖像解碼裝置200具備的多個處理部的全部或一部分。
[0231]另外,運動圖像編碼裝置400和運動圖像解碼裝置500進行的濾波處理是同樣的,所以以下作為代表而說明由運動圖像編碼裝置400進行的濾波處理。
[0232]圖19是由有關本實施方式的運動圖像編碼裝置400進行的濾波方法的流程圖。
[0233]首先,第I量化參數(shù)決定部401決定用于非IPCM塊的第I量化參數(shù)411 (S301)。例如,第I量化參數(shù)決定部401取得在量化部103或逆量化部104中使用過的非IPCM塊的量化參數(shù)作為第I量化參數(shù)411。同樣,第I量化參數(shù)決定部401例如取得在逆量化部204中使用過的非IPCM塊的量化參數(shù)作為第I量化參數(shù)411。
[0234]接著,第2量化參數(shù)決定部402使用第I量化參數(shù)411,對應于IPCM塊而決定用來決定濾波強度的第2量化參數(shù)412 (S302)。例如,第2量化參數(shù)決定部402將第2量化參數(shù)412決定為與第I量化參數(shù)411相同的值。
[0235]接著,濾波強度決定部403使用第I量化參數(shù)411及第2量化參數(shù)412決定濾波強度413 (S303)。例如,濾波強度決定部403計算第I量化參數(shù)411和第2量化參數(shù)412的平均值,使用計算出的平均值決定濾波強度413。
[0236]最后,濾波部404以所決定的濾波強度413對非IPCM塊與IPCM塊的邊界進行解塊/濾波處理(S304)。
[0237]以下,說明該濾波處理的具體例。[0238]圖20是表示有關本實施方式的濾波處理的一例的流程圖。
[0239]首先,運動圖像編碼裝置400將參數(shù)i設定為初始值零(S411)。接著,運動圖像編碼裝置400判斷參數(shù)i是否是I以上(S412)。
[0240]在參數(shù)i是I以下的情況下(S412中“是”),運動圖像編碼裝置400判斷塊[i]是否是IPCM塊(S413)。另外,以下的處理對i=0及1、即對塊[O]及塊[I]進行。這里,塊[O]及塊[I]是相鄰的兩個塊,對這兩個塊的邊界進行解塊/濾波處理。
[0241]在塊[i]是非IPCM塊的情況下(S413中“否”),第I量化參數(shù)決定部401使用以下的(式2)計算量化參數(shù)qP [i] (S414)。
[0242]qP [i]=QPy [i](式 2)
[0243]另外,量化參數(shù)QPy是在量化處理中使用的亮度成分的量化參數(shù),量化參數(shù)qP是濾波強度計算用的參數(shù)。即,第I量化參數(shù)決定部401將在對于非IPCM塊的亮度成分的量化處理中使用過的量化參數(shù)設定為該非IPCM塊的量化參數(shù)qP [i]。
[0244]另一方面,在塊[i]是IPCM塊的情況下(S413中“是”),第2量化參數(shù)決定部402使用以下的(式3)計算量化參數(shù)qP [i] (S415)。
[0245]qP [i]=QPy [(i+l)%2](式 3)
[0246]該(式3)在i=0的情況下是qP[0>QPy [1],在i=l的情況下是qP [I I=QPy [O]。即,第2量化參數(shù)決定部402將在對于非IPCM塊的亮度成分的量化處理中使用過的量化參數(shù)設定為IPCM塊的量化參數(shù)qP [i]。
[0247]接著,運動圖像編碼裝置400對參數(shù)i加“1”,進行步驟S412以后的處理。即,將步驟S413~S415對塊[O]及塊[I]分別執(zhí)行。由此,計算塊[O]的量化參數(shù)qP [O]及塊
[I]的量化參數(shù)qP [I]。
[0248]如果上述一系列的處理結(jié)束,則在步驟S416中將參數(shù)i設定為“2”。在此情況下(S412中“否”),接著,濾波強度決定部403使用以下的(式4)計算用來決定濾波強度的參數(shù) qPav (S417)。
[0249]qPav= (qP [0]+qP [l] +1) ?1 (式 4)
[0250]即,濾波強度決定部403將參數(shù)qPav設定為qP[O]和qP [ I ]的平均值。
[0251]最后,濾波強度決定部403使用參數(shù)qPav決定濾波強度413。另外,濾波強度413的決定方法例如可以使用在實施方式I中敘述的方法。
[0252]這里,設想塊[O]是非IPCM塊、塊[I ]是IPCM塊的情況。在此情況下,qPav=qPy
[0]+qPy [1]+1?1=QP [O]+QPy [O]+l?l=QPy [0]。即,僅使用對于非 IPCM 塊(塊[0])的亮度成分的量化參數(shù),決定參數(shù)qPav,即濾波強度413。
[0253]通過以上,有關本實施方式的運動圖像編碼裝置400能夠避免在IPCM塊與非IPCM塊的邊界設定較弱的濾波強度。這樣,運動圖像編碼裝置400能夠?qū)PCM塊和非IPCM塊的邊界以適當?shù)臑V波強度進 行濾波處理。
[0254]另外,由運動圖像解碼裝置500進行的濾波處理也與運動圖像編碼裝置400是同樣的。即,只要將上述說明中的運動圖像編碼裝置400、第I量化參數(shù)決定部401、第2量化參數(shù)決定部402、濾波強度決定部403、濾波部404、第I量化參數(shù)411、第2量化參數(shù)412、濾波強度413分別置換為運動圖像解碼裝置500、第I量化參數(shù)決定部501、第2量化參數(shù)決定部502、濾波強度決定部503、濾波部504、第I量化參數(shù)511、第2量化參數(shù)512、濾波強度513就可以。
[0255]此外,在運動圖像解碼裝置500中,第2量化參數(shù)決定部502也可以按照AQP,使用第I量化參數(shù)511決定第2量化參數(shù)512。這里,所謂Λ QP,是表示在處理順序(編碼順序或解碼順序)上緊接著之前的塊的量化參數(shù)與處理對象的塊的量化參數(shù)的差分的差分信息。S卩,在Λ QP是零的情況下,將IPCM塊的第2量化參數(shù)412設定為與非IPCM塊的第I量化參數(shù)411相同的值。
[0256]以下,說明使用該AQP的情況下的運動圖像編碼方法及運動圖像解碼方法的流程。
[0257]圖21是有關本實施方式的變形例的運動圖像編碼方法的流程圖。圖21所示的處理相對于圖19所示的處理追加了步驟S421及S422。
[0258]在步驟S421中,運動圖像編碼裝置400將對于IPCM塊的AQP設定為“O”。接著,運動圖像編碼裝置400生成包括AQP的編碼比特流(S422)。
[0259]此外,圖22是有關本實施方式的變形例的運動圖像解碼方法的流程圖。圖22所示的處理相對于圖19所示的處理追加了步驟S431,將步驟S402變更為步驟S402A。
[0260]在步驟S431中,運動圖像解碼裝置500通過將編碼比特流解析,取得該編碼比特流中包含的AQP。
[0261]在步驟S402A中,第2量化參數(shù)決定部502按照Λ QP,使用第I量化參數(shù)511決定第2量化參數(shù)512。這里,在處理對象的塊是IPCM塊的情況下,將Λ QP設定為“O”。由此,第2量化參數(shù)決定部502按照該AQP,將第2量化參數(shù)512設定為與在處理順序上緊接著之前的塊的量化參數(shù)相同的值。
[0262]S卩,在處理順序上緊接著之前的塊是非IPCM塊的情況下,與上述處理同樣,將IPCM塊的第2量化參數(shù)設定為與非IPCM塊的第I量化參數(shù)相同的值。換言之,在IPCM塊和在其左側(cè)相鄰的非IPCM塊的邊界,將IPCM塊的量化參數(shù)設定為與非IPCM塊的量化參數(shù)相同的值。另一方面,在IPCM塊的上、右及下側(cè)的邊界,IPCM塊的量化參數(shù)和非IPCM塊的量化參數(shù)必定不被設定為相同的值。但是,由于IPCM塊的量化參數(shù)通常被設定為不是零的與右塊的量化參數(shù)相同的值,所以與將IPCM塊的量化參數(shù)固定地設定為零的情況相比,濾波強度變強。即,通過這樣將非IPCM塊的Λ QP設定為“0”,能夠?qū)PCM塊與非IPCM塊的邊界設定適當?shù)臑V波強度。
[0263]另外,包含在編碼比特流中的、表示Λ QP是“O”的差分信息,只要是在運動圖像解碼裝置500中能夠判斷為AQP是“O”的信息就可以。即,差分信息既可以是明示地表示“AQP=0”的參數(shù),也可以是其以外。例如也可以規(guī)定為“在編碼比特流中不包含參數(shù)AQP的情況下看作AQP=0”。在此情況下,運動圖像編碼裝置400生成不包含對于IPCM塊的參數(shù)AQP的編碼比特流。此外,運動圖像解碼裝置500在編碼比特流中不包含參數(shù)AQP的情況下,看作AQP是零。
[0264]以上,對有關本發(fā)明的實施方式的濾波方法、運動圖像編碼方法、運動圖像解碼方法、運動圖像編碼裝置及運動圖像解碼裝置進行了說明,但本發(fā)明并不限定于該實施方式。
[0265]例如,也可以將有關上述實施方式的濾波方法、運動圖像編碼方法、運動圖像解碼方法、運動圖像編碼裝置及運動圖像解碼裝置、以及它們的變形例的功能中的至少一部分組合。[0266]此外,塊圖中的功能塊的分割是一例,也可以將多個功能塊作為一個功能塊實現(xiàn)、或?qū)⒁粋€功能塊分割為多個、將一部分的功能轉(zhuǎn)移到其他功能塊中。此外,也可以是單一的硬件或軟件將具有類似的功能的多個功能塊的功能并行地或時間劃分處理。
[0267]此外,執(zhí)行上述濾波方法中包含的多個步驟的順序是為了具體地說明本發(fā)明而用來例示的,也可以是上述以外的順序。此外,也可以將上述步驟的一部分與其他步驟同時(并行地)執(zhí)行。
[0268]例如,圖5所示的步驟S201及S202的順序并不限定于該順序。即,只要在作為結(jié)果而“夾著邊界的兩個塊中的一方的塊包含在IPCM塊中、另一方的塊不包含在IPCM塊中”的情況下執(zhí)行步驟S204及S205的處理就可以。此外,步驟SS204及S205的順序也可以是任意的。
[0269]同樣,圖11所示的步驟S222?S225的順序也并不限定于該順序。具體而言,只要步驟S224是步驟S222之后、步驟S225是步驟S223之后,步驟S222?S225的順序可以是任意的。
[0270](實施方式3)
[0271]通過將用來實現(xiàn)上述各實施方式所示的運動圖像編碼方法(圖像編碼方法)或運動圖像解碼方法(圖像解碼方法)的結(jié)構(gòu)的程序記錄到存儲介質(zhì)中,能夠?qū)⑸鲜龈鲗嵤┓绞剿镜奶幚碓讵毩⒌挠嬎銠C系統(tǒng)中簡單地實施。存儲介質(zhì)是磁盤、光盤、光磁盤、IC卡、半導體存儲器等,只要是能夠記錄程序的介質(zhì)就可以。
[0272]進而,這里說明在上述各實施方式中示出的運動圖像編碼方法(圖像編碼方法)及運動圖像解碼方法(圖像解碼方法)的應用例和使用它的系統(tǒng)。該系統(tǒng)的特征在于,具有由使用圖像編碼方法的圖像編碼裝置及使用圖像解碼方法的圖像解碼裝置構(gòu)成的圖像編碼解碼裝置。關于系統(tǒng)的其他結(jié)構(gòu),可以根據(jù)情況而適當變更。
[0273]圖23是表示實現(xiàn)內(nèi)容分發(fā)服務的內(nèi)容供給系統(tǒng)exlOO的整體結(jié)構(gòu)的圖。將通信服務的提供區(qū)劃分為希望的大小,在各小區(qū)內(nèi)分別設置有作為固定無線站的基站exl06、exl07、exl08、exl09、exllO。
[0274]該內(nèi)容供給系統(tǒng)exlOO在因特網(wǎng)exlOl上經(jīng)由因特網(wǎng)服務提供商exl02及電話網(wǎng)exl04、及基站 exl07 ?exllO 連接著計算機 exlll、PDA (Personal Digital Assistant)exll2、照相機exll3、便攜電話exll4、游戲機exll5等的各設備。
[0275]但是,內(nèi)容供給系統(tǒng)exlOO并不限定于圖23那樣的結(jié)構(gòu),也可以將某些要素組合連接。此外,也可以不經(jīng)由作為固定無線站的基站exl07?exllO將各設備直接連接在電話網(wǎng)exl04上。此外,也可以將各設備經(jīng)由近距離無線等直接相互連接。
[0276]照相機exll3是能夠進行數(shù)字攝像機等的運動圖像攝影的設備,照相機exll6是能夠進行數(shù)字照相機等的靜止圖像攝影、運動圖像攝影的設備。此外,便攜電話exll4是GSM (Global System for Mobile Communications)方式、CDMA (Code Division MultipleAccess)方式、W — CDMA (Wideband — Code Division Multiple Access)方式、或 LTE(Long Term Evolution)方式、HSPA (High Speed Packet Access)的便攜電話機、或 PHS(Personal Handyphone System)等,是哪種都可以。
[0277]在內(nèi)容供給系統(tǒng)exlOO中,通過將照相機exl 13等經(jīng)由基站exl09、電話網(wǎng)exl04連接在流媒體服務器exl03上,能夠進行現(xiàn)場轉(zhuǎn)播等。在現(xiàn)場轉(zhuǎn)播中,對用戶使用照相機exll3攝影的內(nèi)容(例如音樂會現(xiàn)場的影像等)如在上述各實施方式中說明那樣進行編碼處理(即,作為本發(fā)明的一個方式的圖像編碼裝置發(fā)揮作用),向流媒體服務器exl03發(fā)送。另一方面,流媒體服務器exl03將發(fā)送來的內(nèi)容數(shù)據(jù)對有請求的客戶端進行流分發(fā)。作為客戶端,有能夠?qū)⑸鲜鼍幋a處理后的數(shù)據(jù)解碼的計算機exlll、PDAexll2、照相機exll3、便攜電話exll4、游戲機exll5等。在接收到分發(fā)的數(shù)據(jù)的各設備中,將接收到的數(shù)據(jù)解碼處理而再現(xiàn)(即,作為本發(fā)明的一個方式的圖像解碼裝置發(fā)揮作用)。
[0278]另外,攝影的數(shù)據(jù)的編碼處理既可以由照相機exll3進行,也可以由進行數(shù)據(jù)的發(fā)送處理的流媒體服務器exl03進行,也可以相互分擔進行。同樣,分發(fā)的數(shù)據(jù)的解碼處理既可以由客戶端進行,也可以由流媒體服務器exl03進行,也可以相互分擔進行。此外,并不限于照相機exll3,也可以將由照相機exll6攝影的靜止圖像及/或運動圖像數(shù)據(jù)經(jīng)由計算機exlll向流媒體服務器exl03發(fā)送。此情況下的編碼處理由照相機exll6、計算機exlll、流媒體服務器exl03的哪個進行都可以,也可以相互分擔進行。
[0279]此外,這些編碼解碼處理一般在計算機exlll或各設備具有的LSIex500中處理。LSIex500既可以是單芯片,也可以是由多個芯片構(gòu)成的結(jié)構(gòu)。另外,也可以將運動圖像編碼解碼用的軟件裝入到能夠由計算機exlll等讀取的某些記錄介質(zhì)(⑶一 ROM、軟盤、硬盤等)中、使用該軟件進行編碼解碼處理。進而,在便攜電話exl 14是帶有照相機的情況下,也可以將由該照相機取得的運動圖像數(shù)據(jù)發(fā)送。此時的運動圖像數(shù)據(jù)是由便攜電話exll4具有的LSIex500編碼處理的數(shù)據(jù)。
[0280]此外,也可以是,流媒體服務器exl03是多個服務器或多個計算機,是將數(shù)據(jù)分散處理、記錄、及分發(fā)的。
[0281]如以上這樣,在內(nèi)容供給系統(tǒng)exlOO中,客戶端能夠接收編碼的數(shù)據(jù)而再現(xiàn)。這樣,在內(nèi)容供給系統(tǒng)exlOO中,客戶端能夠?qū)⒂脩舭l(fā)送的信息實時地接收、解碼、再現(xiàn),即使是沒有特別的權(quán)利或設備的用戶也能夠?qū)崿F(xiàn)個人廣播。
[0282]另外,并不限定于內(nèi)容供給系統(tǒng)exlOO的例子,如圖24所示,在數(shù)字廣播用系統(tǒng)ex200中也能夠裝入上述實施方式的至少運動圖像編碼裝置(圖像編碼裝置)或運動圖像解碼裝置(圖像解碼裝置)的某個。具體而言,在廣播站ex201中,將對影像數(shù)據(jù)復用了音樂數(shù)據(jù)等而得到的復用數(shù)據(jù)經(jīng)由電波向通信或廣播衛(wèi)星ex202傳送。該影像數(shù)據(jù)是通過上述各實施方式中說明的運動圖像編碼方法編碼后的數(shù)據(jù)(即,通過本發(fā)明的一個方式的圖像編碼裝置編碼后的數(shù)據(jù))。接受到該數(shù)據(jù)的廣播衛(wèi)星ex202發(fā)出廣播用的電波,能夠?qū)υ撾姴ㄟM行衛(wèi)星廣播接收的家庭的天線ex204接收該電波,通過電視機(接收機)ex300或機頂盒(STB) ex217等的裝置將接收到的復用數(shù)據(jù)解碼并將其再現(xiàn)(S卩,作為本發(fā)明的一個方式的圖像解碼裝置發(fā)揮作用)。
[0283]此外,也可以是,在將記錄在DVD、BD等的記錄介質(zhì)ex215中的復用數(shù)據(jù)讀取并解碼、或?qū)⒂跋駭?shù)據(jù)編碼再根據(jù)情況與音樂信號復用而寫入記錄介質(zhì)ex215中的讀取器/記錄器ex218中也能夠安裝上述各實施方式所示的運動圖像解碼裝置或運動圖像編碼裝置。在此情況下,可以將再現(xiàn)的影像信號顯示在監(jiān)視器ex219上,通過記錄有復用數(shù)據(jù)的記錄介質(zhì)ex215在其他裝置或系統(tǒng)中能夠再現(xiàn)影像信號。此外,也可以是,在連接在有線電視用的線纜ex203或衛(wèi)星/地面波廣播的天線ex204上的機頂盒ex217內(nèi)安裝運動圖像解碼裝置,將其用電視機的監(jiān)視器ex219顯示。此時,也可以不是在機頂盒、而在電視機內(nèi)裝入運動圖像解碼裝置。
[0284]圖25是表示使用在上述各實施方式中說明的運動圖像解碼方法及運動圖像編碼方法的電視機(接收機)ex300的圖。電視機ex300具備經(jīng)由接收上述廣播的天線ex204或線纜ex203等取得或者輸出對影像數(shù)據(jù)復用了聲音數(shù)據(jù)的復用數(shù)據(jù)的調(diào)諧器ex301、將接收到的復用數(shù)據(jù)解調(diào)或調(diào)制為向外部發(fā)送的編碼數(shù)據(jù)的調(diào)制/解調(diào)部ex302、和將解調(diào)后的復用數(shù)據(jù)分離為影像數(shù)據(jù)、聲音數(shù)據(jù)或?qū)⒃谛盘柼幚聿縠x306中編碼的影像數(shù)據(jù)、聲音數(shù)據(jù)復用的復用/分離部ex303。
[0285]此外,電視機ex300具備:具有將聲音數(shù)據(jù)、影像數(shù)據(jù)分別解碼、或?qū)⒏髯缘男畔⒕幋a的聲音信號處理部ex304和影像信號處理部ex305(即,作為本發(fā)明的一個方式的圖像編碼裝置或圖像解碼裝置發(fā)揮作用)的信號處理部ex306 ;具有將解碼后的聲音信號輸出的揚聲器ex307及顯示解碼后的影像信號的顯示器等的顯示部ex308的輸出部ex309。進而,電視機eX300具備具有受理用戶操作的輸入的操作輸入部ex312等的接口部ex317。進而,電視機ex300具有合并控制各部的控制部ex310、對各部供給電力的電源電路部ex311。接口部ex317也可以除了操作輸入部ex312以外,還具有與讀取器/記錄器ex218等的外部設備連接的橋接部ex313、用來能夠安裝SD卡等的記錄介質(zhì)ex216的插槽部ex314、用來與硬盤等的外部記錄介質(zhì)連接的驅(qū)動器ex315、與電話網(wǎng)連接的調(diào)制解調(diào)器ex316等。另外,記錄介質(zhì)ex216是能夠通過收存的非易失性/易失性的半導體存儲元件電氣地進行信息的記錄的結(jié)構(gòu)。電視機ex300的各部經(jīng)由同步總線相互連接。
[0286]首先,對電視機ex300將通過天線ex204等從外部取得的復用數(shù)據(jù)解碼、再現(xiàn)的結(jié)構(gòu)進行說明。電視機ex300接受來自遙控器ex220等的用戶操作,基于具有CPU等的控制部ex310的控制,將由調(diào)制/解調(diào)部ex302解調(diào)的復用數(shù)據(jù)用復用/分離部ex303分離。進而,電視機ex300將分離的聲音數(shù)據(jù)用聲音信號處理部ex304解碼,將分離的影像數(shù)據(jù)用影像信號處理部ex305使用在上述各實施方式中說明的解碼方法解碼。將解碼后的聲音信號、影像信號分別從輸出部ex309朝向外部輸出。在輸出時,可以暫時將這些信號儲存到緩沖器ex318、ex319等中,以使聲音信號和影像信號同步再現(xiàn)。此外,電視機ex300也可以不是從廣播等、而從磁/光盤、SD卡等的記錄介質(zhì)ex215、ex216讀出編碼的復用數(shù)據(jù)。接著,對電視機ex300將聲音信號或影像信號編碼、向外部發(fā)送或?qū)懭氲接涗浗橘|(zhì)等中的結(jié)構(gòu)進行說明。電視機ex300接受來自遙控器ex220等的用戶操作,基于控制部ex310的控制,由聲音信號處理部ex304將聲音信號編碼,由影像信號處理部ex305將影像信號使用在上述各實施方式中說明的編碼方法編碼。將編碼后的聲音信號、影像信號用復用/分離部ex303復用,向外部輸出。在復用時,可以暫時將這些信號儲存到緩沖器ex320、ex321等中,以使聲音信號和影像信號同步再現(xiàn)。另外,緩沖器ex318、ex319、ex320、ex321既可以如圖示那樣具備多個,也可以是共用一個以上的緩沖器的結(jié)構(gòu)。進而,在圖示以外,也可以是,在例如調(diào)制/解調(diào)部ex302或復用/分離部ex303之間等也作為避免系統(tǒng)的上溢、下溢的緩沖部而在緩沖器中儲存數(shù)據(jù)。
[0287]此外,電視機ex300除了從廣播等或記錄介質(zhì)等取得聲音數(shù)據(jù)、影像數(shù)據(jù)以外,也可以具備受理麥克風或照相機的AV輸入的結(jié)構(gòu),對從它們中取得的數(shù)據(jù)進行編碼處理。另夕卜,這里,將電視機ex300作為能夠進行上述編碼處理、復用、及外部輸出的結(jié)構(gòu)進行了說明,但也可以是,不能進行這些處理,而是僅能夠進行上述接收、解碼處理、外部輸出的結(jié)構(gòu)。
[0288]此外,在由讀取器/記錄器ex218從記錄介質(zhì)將復用數(shù)據(jù)讀出、或?qū)懭氲那闆r下,上述解碼處理或編碼處理由電視機ex300、讀取器/記錄器ex218的哪個進行都可以,也可以是電視機ex300和讀取器/記錄器ex218相互分擔進行。
[0289]作為一例,將從光盤進行數(shù)據(jù)的讀入或?qū)懭氲那闆r下的信息再現(xiàn)/記錄部ex400的結(jié)構(gòu)表示在圖26中。信息再現(xiàn)/記錄部ex400具備以下說明的單元ex401、ex402、ex403、ex404、ex405、ex406、ex407。光頭ex401對作為光盤的記錄介質(zhì)ex215的記錄面照射激光斑而寫入信息,檢測來自記錄介質(zhì)ex215的記錄面的反射光而讀入信息。調(diào)制記錄部ex402電氣地驅(qū)動內(nèi)置在光頭ex401中的半導體激光器,根據(jù)記錄數(shù)據(jù)進行激光的調(diào)制。再現(xiàn)解調(diào)部ex403將由內(nèi)置在光頭ex401中的光檢測器電氣地檢測到來自記錄面的反射光而得到的再現(xiàn)信號放大,將記錄在記錄介質(zhì)ex215中的信號成分分離并解調(diào),再現(xiàn)所需要的信息。緩沖器ex404將用來記錄到記錄介質(zhì)ex215中的信息及從記錄介質(zhì)ex215再現(xiàn)的信息暫時保持。盤馬達ex405使記錄介質(zhì)ex215旋轉(zhuǎn)。伺服控制部ex406 —邊控制盤馬達ex405的旋轉(zhuǎn)驅(qū)動一邊使光頭ex401移動到規(guī)定的信息軌道,進行激光斑的追蹤處理。系統(tǒng)控制部ex407進行信息再現(xiàn)/記錄部ex400整體的控制。上述的讀出及寫入的處理由系統(tǒng)控制部ex407利用保持在緩沖器ex404中的各種信息、此外根據(jù)需要而進行新的信息的生成、追力口、并且一邊使調(diào)制記錄部ex402、再現(xiàn)解調(diào)部ex403、伺服控制部ex406協(xié)調(diào)動作、一邊通過光頭ex401進行信息的記錄再現(xiàn)來實現(xiàn)。系統(tǒng)控制部ex407例如由微處理器構(gòu)成,通過執(zhí)行讀出寫入的程序來執(zhí)行它們的處理。
[0290]以上,假設光頭ex401照射激光斑而進行了說明,但也可以是使用近場光進行高密度的記錄的結(jié)構(gòu)。
[0291]在圖27中表示作為光盤的記錄介質(zhì)ex215的示意圖。在記錄介質(zhì)ex215的記錄面上,以螺旋狀形成有導引槽(溝),在信息軌道ex230中,預先通過溝的形狀的變化而記錄有表示盤上的絕對位置的地址信息。該地址信息包括用來確定作為記錄數(shù)據(jù)的單位的記錄塊ex231的位置的信息,通過在進行記錄及再現(xiàn)的裝置中將信息軌道ex230再現(xiàn)而讀取地址信息,能夠確定記錄塊。此外,記錄介質(zhì)ex215包括數(shù)據(jù)記錄區(qū)域ex233、內(nèi)周區(qū)域ex232、外周區(qū)域ex234。為了記錄用戶數(shù)據(jù)而使用的區(qū)域是數(shù)據(jù)記錄區(qū)域ex233,配置在比數(shù)據(jù)記錄區(qū)域ex233靠內(nèi)周或外周的內(nèi)周區(qū)域ex232和外周區(qū)域ex234用于用戶數(shù)據(jù)的記錄以外的特定用途。信息再現(xiàn)/記錄部ex400對這樣的記錄介質(zhì)ex215的數(shù)據(jù)記錄區(qū)域ex233進行編碼的聲音數(shù)據(jù)、影像數(shù)據(jù)或復用了這些數(shù)據(jù)的編碼數(shù)據(jù)的讀寫。
[0292]以上,舉I層的DVD、BD等的光盤為例進行了說明,但并不限定于這些,也可以是多層構(gòu)造、在表面以外也能夠記錄的光盤。此外,也可以是在盤的相同的地方使用不同波長的顏色的光記錄信息、或從各種角度記錄不同的信息的層等、進行多維的記錄/再現(xiàn)的構(gòu)造的光盤。
[0293]此外,在數(shù)字廣播用系統(tǒng)ex200中,也可以由具有天線ex205的車ex210從衛(wèi)星ex202等接收數(shù)據(jù)、在車ex210具有的車載導航儀ex211等的顯示裝置上再現(xiàn)運動圖像。另夕卜,車載導航儀ex211的結(jié)構(gòu)可以考慮例如在圖25所示的結(jié)構(gòu)中添加GPS接收部的結(jié)構(gòu),在計算機exlll及便攜電話exll4等中也可以考慮同樣的結(jié)構(gòu)。
[0294]圖28A是表示使用在上述實施方式中說明的運動圖像解碼方法和運動圖像編碼方法的便攜電話exll4的圖。便攜電話exll4具有由用來在與基站exllO之間收發(fā)電波的天線ex350、能夠拍攝影像、靜止圖像的照相機部ex365、顯示將由照相機部ex365攝影的影像、由天線ex350接收到的影像等解碼后的數(shù)據(jù)的液晶顯示器等的顯示部ex358。便攜電話exll4還具有包含操作鍵部ex366的主體部、用來進行聲音輸出的揚聲器等的聲音輸出部ex357、用來進行聲音輸入的麥克風等的聲音輸入部ex356、保存拍攝到的影像、靜止圖像、錄音的聲音、或者接收到的影像、靜止圖像、郵件等的編碼后的數(shù)據(jù)或者解碼后的數(shù)據(jù)的存儲器部ex367、或者作為與同樣保存數(shù)據(jù)的記錄介質(zhì)之間的接口部的插槽部ex364。
[0295]進而,使用圖28B對便攜電話exl 14的結(jié)構(gòu)例進行說明。便攜電話exl 14對于合并控制具備顯示部ex358及操作鍵部ex366的主體部的各部的主控制部ex360,將電源電路部ex361、操作輸入控制部ex362、影像信號處理部ex355、照相機接口部ex363、LCD (LiquidCrystal Display:液晶顯示器)控制部ex359、調(diào)制/解調(diào)部ex352、復用/分離部ex353、聲音信號處理部ex354、插槽部ex364、存儲器部ex367經(jīng)由總線ex370相互連接。
[0296]電源電路部ex361如果通過用戶的操作使通話結(jié)束及電源鍵成為開啟狀態(tài),則通過從電池組對各部供給電力,便攜電話exll4起動為能夠動作的狀態(tài)。
[0297]便攜電話exl 14基于具有CPU、ROM及RAM等的主控制部ex360的控制,在語音通話模式時,將由聲音輸入部ex356集音的聲音信號通過聲音信號處理部ex354變換為數(shù)字聲音信號,將其用調(diào)制/解調(diào)部ex352進行波譜擴散處理,由發(fā)送/接收部ex351實施數(shù)字模擬變換處理及頻率變換處理后經(jīng)由天線ex350發(fā)送。此外,便攜電話exll4在語音通話模式時,將由天線ex350接收到的接收數(shù)據(jù)放大并實施頻率變換處理及模擬數(shù)字變換處理,用調(diào)制/解調(diào)部ex352進行波譜逆擴散處理,通過聲音信號處理部ex354變換為模擬聲音數(shù)據(jù)后,將其經(jīng)由聲音輸出部ex357輸出。
[0298]進而,在數(shù)據(jù)通信模式時發(fā)送電子郵件的情況下,將通過主體部的操作鍵部ex366等的操作輸入的電子郵件的文本數(shù)據(jù)經(jīng)由操作輸入控制部ex362向主控制部ex360送出。主控制部ex360將文本數(shù)據(jù)用調(diào)制/解調(diào)部ex352進行波譜擴散處理,由發(fā)送/接收部ex351實施數(shù)字模擬變換處理及頻率變換處理后,經(jīng)由天線ex350向基站exllO發(fā)送。在接收電子郵件的情況下,對接收到的數(shù)據(jù)執(zhí)行上述處理的大致逆處理,并輸出到顯示部ex350o
[0299]在數(shù)據(jù)通信模式時,在發(fā)送影像、靜止圖像、或者影像和聲音的情況下,影像信號處理部ex355將從照相機部ex365供給的影像信號通過上述各實施方式所示的運動圖像編碼方法進行壓縮編碼(即,作為本發(fā)明的一個方式的圖像編碼裝置發(fā)揮作用),將編碼后的影像數(shù)據(jù)送出至復用/分離部ex353。另外,聲音信號處理部ex354對通過照相機部ex365拍攝影像、靜止圖像等的過程中用聲音輸入部ex356集音的聲音信號進行編碼,將編碼后的聲音數(shù)據(jù)送出至復用/分離部ex353。
[0300]復用/分離部ex353通過規(guī)定的方式,對從影像信號處理部ex355供給的編碼后的影像數(shù)據(jù)和從聲音信號處理部ex354供給的編碼后的聲音數(shù)據(jù)進行復用,將其結(jié)果得到的復用數(shù)據(jù)用調(diào)制/解調(diào)部(調(diào)制/解調(diào)電路部)ex352進行波譜擴散處理,由發(fā)送/接收部ex351實施數(shù)字模擬變換處理及頻率變換處理后,經(jīng)由天線ex350發(fā)送。
[0301]在數(shù)據(jù)通信模式時接收到鏈接到主頁等的運動圖像文件的數(shù)據(jù)的情況下,或者接收到附加了影像或者聲音的電子郵件的情況下,為了對經(jīng)由天線ex350接收到的復用數(shù)據(jù)進行解碼,復用/分離部ex353通過將復用數(shù)據(jù)分離,分為影像數(shù)據(jù)的比特流和聲音數(shù)據(jù)的比特流,經(jīng)由同步總線ex370將編碼后的影像數(shù)據(jù)向影像信號處理部ex355供給,并將編碼后的聲音數(shù)據(jù)向聲音信號處理部ex354供給。影像信號處理部ex355通過與上述各實施方式所示的運動圖像編碼方法相對應的運動圖像解碼方法進行解碼,由此對影像信號進行解碼(即,作為本發(fā)明的一個方式的圖像解碼裝置發(fā)揮作用),經(jīng)由IXD控制部ex359從顯示部ex358顯示例如鏈接到主頁的運動圖像文件中包含的影像、靜止圖像。另外,聲音信號處理部ex354對聲音信號進行解碼,從聲音輸出部ex357輸出聲音。
[0302]此外,上述便攜電話exll4等的終端與電視機ex300同樣,除了具有編碼器、解碼器兩者的收發(fā)型終端以外,還可以考慮只有編碼器的發(fā)送終端、只有解碼器的接收終端的3種安裝形式。另外,在數(shù)字廣播用系統(tǒng)ex200中,設為發(fā)送、接收在影像數(shù)據(jù)中復用了音樂數(shù)據(jù)等得到的復用數(shù)據(jù)而進行了說明,但除聲音數(shù)據(jù)之外復用了與影像關聯(lián)的字符數(shù)據(jù)等的數(shù)據(jù)也可以,不是復用數(shù)據(jù)而是影像數(shù)據(jù)本身也可以。
[0303]這樣,將在上述各實施方式中表示的運動圖像編碼方法或運動圖像解碼方法用在上述哪種設備、系統(tǒng)中都可以,通過這樣,能夠得到在上述各實施方式中說明的效果。
[0304]此外,本發(fā)明并不限定于這樣的上述實施方式,能夠不脫離本發(fā)明的范圍而進行各種變形或修正。
[0305](實施方式4)
[0306]也可以通過將在上述各實施方式中示出的運動圖像編碼方法或裝置、與依據(jù)MPEG - 2、MPEG4 — AVC、VC — I等不同的標準的運動圖像編碼方法或裝置根據(jù)需要而適當切換,來生成影像數(shù)據(jù)。
[0307]這里,在生成分別依據(jù)不同的標準的多個影像數(shù)據(jù)的情況下,在解碼時,需要選擇對應于各個標準的解碼方法。但是,由于不能識別要解碼的影像數(shù)據(jù)依據(jù)哪個標準,所以產(chǎn)生不能選擇適當?shù)慕獯a方法的問題。
[0308]為了解決該問題,在影像數(shù)據(jù)中復用了聲音數(shù)據(jù)等的復用數(shù)據(jù)采用包含表示影像數(shù)據(jù)依據(jù)哪個標準的識別信息的結(jié)構(gòu)。以下,說明包括通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)在內(nèi)的復用數(shù)據(jù)的具體的結(jié)構(gòu)。復用數(shù)據(jù)是MPEG - 2傳輸流形式的數(shù)字流。
[0309]圖29是表示復用數(shù)據(jù)的結(jié)構(gòu)的圖。如圖29所示,復用數(shù)據(jù)通過將視頻流、音頻流、演示圖形流(PG)、交互圖形流中的I個以上進行復用而得到。視頻流表示電影的主影像及副影像,音頻流(IG)表示電影的主聲音部分和與該主聲音混合的副聲音,演示圖形流表示電影的字幕。這里,所謂主影像,表示顯示在畫面上的通常的影像,所謂副影像,是在主影像中用較小的畫面顯示的影像。此外,交互圖形流表示通過在畫面上配置GUI部件而制作的對話畫面。視頻流通過在上述各實施方式中示出的運動圖像編碼方法或裝置、依據(jù)以往的MPEG - 2、MPEG4 — AVC,VC 一 I等標準的運動圖像編碼方法或裝置編碼。音頻流由杜比AC —3、Dolby Digital Plus、MLP、DTS、DTS — HD、或線性 PCM 等的方式編碼。
[0310]包含在復用數(shù)據(jù)中的各流通過PID被識別。例如,對在電影的影像中使用的視頻流分配0x1011,對音頻流分配0x1100到OxlllF,對演示圖形分配0x1200到0xl21F,對交互圖形流分配0x1400到0xl41F,對在電影的副影像中使用的視頻流分配OxlBOO到OxlBlF,對與主聲音混合的副聲音中使用的音頻流分配OxIAOO到OxlAlF。[0311]圖30是示意地表示復用數(shù)據(jù)怎樣被復用的圖。首先,將由多個視頻幀構(gòu)成的視頻流ex235、由多個音頻幀構(gòu)成的音頻流ex238分別變換為PES包序列ex236及ex239,并變換為TS包ex237及ex240。同樣,將演示圖形流ex241及交互圖形ex244的數(shù)據(jù)分別變換為PES包序列ex242及ex245,再變換為TS包ex243及ex246。復用數(shù)據(jù)ex247通過將這些TS包復用到I條流中而構(gòu)成。
[0312]圖31更詳細地表示在PES包序列中怎樣保存視頻流。圖31的第I段表示視頻流的視頻幀序列。第2段表示PES包序列。如圖31的箭頭yyl、yy2、yy3、yy4所示,視頻流中的多個作為Video Presentation Unit的I圖片、B圖片、P圖片按每個圖片被分割并保存到PES包的有效載荷中。各PES包具有PES頭,在PES頭中,保存有作為圖片的顯示時刻的PTS (Presentation Time-Stamp)及作為圖片的解碼時刻的 DTS (Decoding Time-Stamp)?
[0313]圖32表示最終寫入在復用數(shù)據(jù)中的TS包的形式。TS包是由具有識別流的PID等信息的4字節(jié)的TS頭和保存數(shù)據(jù)的184字節(jié)的TS有效載荷構(gòu)成的188字節(jié)固定長度的包,上述PES包被分割并保存到TS有效載荷中。在BD — ROM的情況下,對于TS包賦予4字節(jié)的TP_Extra_Header,構(gòu)成192字節(jié)的源包,寫入到復用數(shù)據(jù)中。在TP_Extra_Header中記載有ATS (Arrival_Time_Stamp)等信息。ATS表示該TS包向解碼器的PID濾波器的轉(zhuǎn)送開始時刻。在復用數(shù)據(jù)中,源包如圖32下段所示排列,從復用數(shù)據(jù)的開頭起遞增的號碼被稱作SPN (源包號)。
[0314]此外,在復用數(shù)據(jù)所包含的TS包中,除了影像、聲音、字幕等的各流以外,還有PAT (Program Association Table)、PMT (Program Map Table)、PCR (Program ClockReference)等。PAT表示在復用數(shù)據(jù)中使用的PMT的PID是什么,PAT自身的PID被登記為
O。PMT具有復用數(shù)據(jù)所包 含的影像、聲音、字幕等的各流的PID、以及與各PID對應的流的屬性信息,還具有關于復用數(shù)據(jù)的各種描述符。在描述符中,有指示許可/不許可復用數(shù)據(jù)的拷貝的拷貝控制信息等。PCR為了取得作為ATS的時間軸的ATC (Arrival Time Clock)與作為PTS及DTS的時間軸的STC (System Time Clock)的同步,擁有與該PCR包被轉(zhuǎn)送至解碼器的ATS對應的STC時間的信息。
[0315]圖33是詳細地說明PMT的數(shù)據(jù)構(gòu)造的圖。在PMT的開頭,配置有記述了包含在該PMT中的數(shù)據(jù)的長度等的PMT頭。在其后面,配置有多個關于復用數(shù)據(jù)的描述符。上述拷貝控制信息等被記載為描述符。在描述符之后,配置有多個關于包含在復用數(shù)據(jù)中的各流的流信息。流信息由記載有用來識別流的壓縮編解碼器的流類型、流的PID、流的屬性信息(幀速率、縱橫比等)的流描述符構(gòu)成。流描述符存在復用數(shù)據(jù)中存在的流的數(shù)量。
[0316]在記錄到記錄介質(zhì)等中的情況下,將上述復用數(shù)據(jù)與復用數(shù)據(jù)信息文件一起記錄。
[0317]復用數(shù)據(jù)信息文件如圖34所示,是復用數(shù)據(jù)的管理信息,與復用數(shù)據(jù)一對一地對應,由復用數(shù)據(jù)信息、流屬性信息以及入口映射構(gòu)成。
[0318]復用數(shù)據(jù)信息如圖34所示,由系統(tǒng)速率、再現(xiàn)開始時刻、再現(xiàn)結(jié)束時刻構(gòu)成。系統(tǒng)速率表示復用數(shù)據(jù)的向后述的系統(tǒng)目標解碼器的PID濾波器的最大轉(zhuǎn)送速率。包含在復用數(shù)據(jù)中的ATS的間隔設定為成為系統(tǒng)速率以下。再現(xiàn)開始時刻是復用數(shù)據(jù)的開頭的視頻幀的PTS,再現(xiàn)結(jié)束時刻設定為對復用數(shù)據(jù)的末端的視頻幀的PTS加上I幀量的再現(xiàn)間隔的值。[0319]流屬性信息如圖35所示,按每個PID登記有關于包含在復用數(shù)據(jù)中的各流的屬性信息。屬性信息具有按視頻流、音頻流、演示圖形流、交互圖形流而不同的信息。視頻流屬性信息具有該視頻流由怎樣的壓縮編解碼器壓縮、構(gòu)成視頻流的各個圖片數(shù)據(jù)的分辨率是多少、縱橫比是多少、幀速率是多少等的信息。音頻流屬性信息具有該音頻流由怎樣的壓縮編解碼器壓縮、包含在該音頻流中的聲道數(shù)是多少、對應于哪種語言、采樣頻率是多少等的信息。這些信息用于在播放器再現(xiàn)之前的解碼器的初始化等中。
[0320]在本實施方式中,使用上述復用數(shù)據(jù)中的、包含在PMT中的流類型。此外,在記錄介質(zhì)中記錄有復用數(shù)據(jù)的情況下,使用包含在復用數(shù)據(jù)信息中的視頻流屬性信息。具體而言,在上述各實施方式示出的運動圖像編碼方法或裝置中,設置如下步驟或單元,該步驟或單元對包含在PMT中的流類型、或視頻流屬性信息,設定表示是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)的固有信息。通過該結(jié)構(gòu),能夠識別通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)、和依據(jù)其他標準的影像數(shù)據(jù)。
[0321]此外,在圖36中表示本實施方式的運動圖像解碼方法的步驟。在步驟exSlOO中,從復用數(shù)據(jù)中取得包含在PMT中的流類型、或包含在復用數(shù)據(jù)信息中的視頻流屬性信息。接著,在步驟exSlOl中,判斷流類型、或視頻流屬性信息是否表示是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的復用數(shù)據(jù)。并且,在判斷為流類型、或視頻流屬性信息是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的復用數(shù)據(jù)情況下,在步驟exS102中,通過在上述各實施方式中示出的運動圖像解碼方法進行解碼。此外,在流類型、或視頻流屬性信息表示是依據(jù)以往的MPEG - 2、MPEG4 — AVC, VC 一 I等的標準的復用數(shù)據(jù)的情況下,在步驟exS103中,通過依據(jù)以往的標準的運動圖像解碼方法進行解碼。
[0322]這樣,通過在流類型、或視頻流屬性信息中設定新的固有值,在解碼時能夠判斷是否能夠通過在上述各實施方式中示出的運動圖像解碼方法或裝置解碼。因而,在被輸入了依據(jù)不同的標準的復用數(shù)據(jù)的情況下,也能夠選擇適當?shù)慕獯a方法或裝置,所以能夠不發(fā)生錯誤地進行解碼。此外,將在本實施方式中示出的運動圖像編碼方法或裝置、或者運動圖像解碼方法或裝置用在上述任何設備、系統(tǒng)中。
[0323](實施方式5)
[0324]在上述各實施方式中示出的運動圖像編碼方法及裝置、運動圖像解碼方法及裝置典型地可以由作為集成電路的LSI實現(xiàn)。作為一例,在圖37中表示I芯片化的LSIex500的結(jié)構(gòu)。LSIex500 具備以下說明的單元 ex501、ex502、ex503、ex504、ex505、ex506、ex507、ex508、ex509,各單元經(jīng)由總線ex510連接。電源電路部ex505通過在電源是開啟狀態(tài)的情況下對各部供給電力,起動為能夠動作的狀態(tài)。
[0325]例如在進行編碼處理的情況下,LSIex500基于具有CPUex502、存儲器控制器ex503、流控制器ex504、驅(qū)動頻率控制部ex512等的控制部ex501的控制,通過AV I/0ex509從麥克風exl 17及照相機exl 13等輸入AV信號。被輸入的AV信號暫時儲存在SDRAM等的外部的存儲器ex511中?;诳刂撇縠x501的控制,將儲存的數(shù)據(jù)根據(jù)處理量及處理速度適當?shù)胤譃槎啻蔚?,向信號處理部ex507發(fā)送,在信號處理部ex507中進行聲音信號的編碼及/或影像信號的編碼。這里,影像信號的編碼處理是在上述各實施方式中說明的編碼處理。在信號處理部ex507中,還根據(jù)情況而進行將編碼的聲音數(shù)據(jù)和編碼的影像數(shù)據(jù)復用等的處理,從流I/0ex506向外部輸出。將該輸出的比特流向基站exl07發(fā)送、或?qū)懭氲接涗浗橘|(zhì)ex215中。另外,在復用時,可以暫時將數(shù)據(jù)儲存到緩沖器ex508中以使其同步。
[0326]另外,在上述中,設存儲器ex511為LSIex500的外部的結(jié)構(gòu)進行了說明,但也可以是包含在LSIex500的內(nèi)部中的結(jié)構(gòu)。緩沖器ex508也并不限定于一個,也可以具備多個緩沖器。此外,LSIex500既可以形成I個芯片,也可以形成多個芯片。
[0327]此外,在上述中,假設控制部ex510具有CPUex502、存儲器控制器ex503、流控制器ex504、驅(qū)動頻率控制部ex512等,但控制部ex510的結(jié)構(gòu)并不限定于該結(jié)構(gòu)。例如,也可以是信號處理部ex507還具備CPU的結(jié)構(gòu)。通過在信號處理部ex507的內(nèi)部中也設置CPU,能夠進一步提高處理速度。此外,作為其他例,也可以是CPUex502具備信號處理部ex507、或作為信號處理部ex507的一部分的例如聲音信號處理部的結(jié)構(gòu)。在這樣的情況下,控制部ex501為具備具有信號處理部ex507或其一部分的CPUex502的結(jié)構(gòu)。
[0328]另外,這里設為LSI,但根據(jù)集成度的差異,也有稱作1C、系統(tǒng)LS1、超級(super)LS1、特級(ultra)LSI的情況。
[0329]此外,集成電路化的方法并不限定于LSI,也可以由專用電路或通用處理器實現(xiàn)。也可以利用在LSI制造后能夠編程的FPGA (Field Programmable Gate Array)、或能夠重構(gòu)LSI內(nèi)部的電路單元的連接及設定的可重構(gòu)處理器。
[0330]進而,如果因半導體技術(shù)的進步或派生的其他技術(shù)而出現(xiàn)代替LSI的集成電路化的技術(shù),則當然也可以使用該技術(shù)進行功能模塊的集成化。有可能是生物技術(shù)的應用等。
[0331](實施方式6)
[0332]在將通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)解碼的情況下,考慮到與將依據(jù)以往的MPEG - 2、MPEG4 — AVC, VC 一 I等標準的影像數(shù)據(jù)的情況相比處理量會增加。因此,在LSIex500中,需要設定為比將依據(jù)以往的標準的影像數(shù)據(jù)解碼時的CPUex502的驅(qū)動頻率更高的驅(qū)動頻率。但是,如果將驅(qū)動頻率設得高,則發(fā)生消耗電力變高的問題。
[0333]為了解決該問題,電視機ex300、LSIex500等的運動圖像解碼裝置采用識別影像數(shù)據(jù)依據(jù)哪個標準、并根據(jù)標準切換驅(qū)動頻率的結(jié)構(gòu)。圖38表示本實施方式的結(jié)構(gòu)ex800。驅(qū)動頻率切換部ex803在影像數(shù)據(jù)是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的情況下,將驅(qū)動頻率設定得高。并且,對執(zhí)行在上述各實施方式中示出的運動圖像解碼方法的解碼處理部ex801指示將影像數(shù)據(jù)解碼。另一方面,在影像數(shù)據(jù)是依據(jù)以往的標準的影像數(shù)據(jù)的情況下,與影像數(shù)據(jù)是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的數(shù)據(jù)的情況相比,將驅(qū)動頻率設定得低。并且,對依據(jù)以往的標準的解碼處理部ex802指示將影像數(shù)據(jù)解碼。
[0334]更具體地講,驅(qū)動頻率切換部ex803由圖37的CPUex502和驅(qū)動頻率控制部ex512構(gòu)成。此外,執(zhí)行在上述各實施方式中示出的運動圖像解碼方法的解碼處理部ex801、以及依據(jù)以往的標準的解碼處理部ex802對應于圖37的信號處理部ex507。CPUex502識別影像數(shù)據(jù)依據(jù)哪個標準。并且,基于來自CPUex502的信號,驅(qū)動頻率控制部ex512設定驅(qū)動頻率。此外,基于來自CPUex502的信號,信號處理部ex507進行影像數(shù)據(jù)的解碼。這里,可以考慮在影像數(shù)據(jù)的識別中使用例如在實施方式8中記載的識別信息。關于識別信息,并不限定于在實施方式8中記載的信息,只要是能夠識別影像數(shù)據(jù)依據(jù)哪個標準的信息就可以。例如,在基于識別影像數(shù)據(jù)利用于電視機還是利用于盤等的外部信號,來能夠識別影像數(shù)據(jù)依據(jù)哪個標準的情況下,也可以基于這樣的外部信號進行識別。此外,CPUex502的驅(qū)動頻率的選擇例如可以考慮如圖40所示的將影像數(shù)據(jù)的標準與驅(qū)動頻率建立對應的查找表進行。將查找表預先保存到緩沖器ex508、或LSI的內(nèi)部存儲器中,CPUex502通過參照該查找表,能夠選擇驅(qū)動頻率。
[0335]圖39表示實施本實施方式的方法的步驟。首先,在步驟exS200中,在信號處理部ex507中,從復用數(shù)據(jù)中取得識別信息。接著,在步驟exS201中,在CPUex502中,基于識別信息識別影像數(shù)據(jù)是否是通過在上述各實施方式中示出的編碼方法或裝置生成的數(shù)據(jù)。在影像數(shù)據(jù)是通過在上述各實施方式中示出的編碼方法或裝置生成的數(shù)據(jù)的情況下,在步驟exS202中,CPUex502向驅(qū)動頻率控制部ex512發(fā)送將驅(qū)動頻率設定得高的信號。并且,在驅(qū)動頻率控制部ex512中設定為高的驅(qū)動頻率。另一方面,在表示是依據(jù)以往的MPEG — 2、MPEG4 - AVC,VC 一 I等的標準的影像數(shù)據(jù)的情況下,在步驟exS203中,CPUex502向驅(qū)動頻率控制部ex512發(fā)送將驅(qū)動頻率設定得低的信號。并且,在驅(qū)動頻率控制部ex512中,設定為與影像數(shù)據(jù)是通過在上述各實施方式中示出的編碼方法或裝置生成的數(shù)據(jù)的情況相比更低的驅(qū)動頻率。
[0336]進而,通過與驅(qū)動頻率的切換連動而變更對LSIeX500或包括LSIeX500的裝置施加的電壓,由此能夠進一步提高節(jié)電效果。例如,在將驅(qū)動頻率設定得低的情況下,隨之,可以考慮與將驅(qū)動頻率設定得高的情況相比,將對LSIex500或包括LSIex500的裝置施加的電壓設定得低。
[0337]此外,驅(qū)動頻率的設定方法只要是在解碼時的處理量大的情況下將驅(qū)動頻率設定得高、在解碼時的處理量小的情況下將驅(qū)動頻率設定得低就可以,并不限定于上述的設定方法。例如,可以考慮在將依據(jù)MPEG4 — AVC標準的影像數(shù)據(jù)解碼的處理量大于將通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)解碼的處理量的情況下,與上述的情況相反地進行驅(qū)動頻率的設定。
[0338]進而,驅(qū)動頻率的設定方法并不限定于使驅(qū)動頻率低的結(jié)構(gòu)。例如,也可以考慮在識別信息是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下,將對LSIex500或包括LSIex500的裝置施加的電壓設定得高,在表示是依據(jù)以往的MPEG - 2、MPEG4 一 AVC、VC 一 I等的標準的影像數(shù)據(jù)的情況下,將對LSIex500或包括LSIex500的裝置施加的電壓設定得低。此外,作為另一例,也可以考慮在識別信息表示是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下,不使CPUex502的驅(qū)動停止,在表示是依據(jù)以往的MPEG — 2、MPEG4 — AVC,VC 一 I等的標準的影像數(shù)據(jù)的情況下,由于在處理中有富余,所以使CPUex502的驅(qū)動暫停。也可以考慮在識別信息表示是通過在上述各實施方式中示出的運動圖像編碼方法或裝置生成的影像數(shù)據(jù)的情況下,也只要在處理中有富余則使CPUex502的驅(qū)動暫停。在此情況下,可以考慮與表示是依據(jù)以往的MPEG - 2、MPEG4 — AVC, VC 一 I等的標準的影像數(shù)據(jù)的情況相比,將停止時間設定得短。
[0339]這樣,根據(jù)影像數(shù)據(jù)所依據(jù)的標準來切換驅(qū)動頻率,由此能夠?qū)崿F(xiàn)節(jié)電化。此外,在使用電池來驅(qū)動LSIex500或包括LSIex500的裝置的情況下,能夠隨著節(jié)電而延長電池的壽命。
[0340](實施方式7)
[0341]在電視機、便攜電話等上述的設備、系統(tǒng)中,有時被輸入依據(jù)不同的標準的多個影像數(shù)據(jù)。這樣,為了使得在被輸入了依據(jù)不同的標準的多個影像數(shù)據(jù)的情況下也能夠解碼,LSIex500的信號處理部ex507需要對應于多個標準。但是,如果單獨使用對應于各個標準的信號處理部ex507,則發(fā)生LSIex500的電路規(guī)模變大、此外成本增加的問題。
[0342]為了解決該問題,采用將用來執(zhí)行在上述各實施方式中示出的運動圖像解碼方法的解碼處理部、和依據(jù)以往的MPEG - 2、MPEG4 — AVC, VC 一 I等的標準的解碼處理部一部分共用的結(jié)構(gòu)。圖41A的ex900表示該結(jié)構(gòu)例。例如,在上述各實施方式中示出的運動圖像解碼方法和依據(jù)MPEG4 - AVC標準的運動圖像解碼方法在熵編碼、逆量化、解塊濾波器、運動補償?shù)鹊奶幚碇杏幸徊糠痔幚韮?nèi)容共通。可以考慮如下結(jié)構(gòu):關于共通的處理內(nèi)容,共用對應于MPEG4 - AVC標準的解碼處理部ex902,關于不對應于MPEG4 — AVC標準的本發(fā)明的一個方式所特有的其他的處理內(nèi)容,使用專用的解碼處理部ex901。特別是,本發(fā)明在濾波處理(解塊/濾波)方面具有特征,因此可以考慮例如對于濾波處理(解塊/濾波)使用專用的解碼處理部ex901,對于除此之外的熵解碼、逆量化、運動補償中的某一個或者全部的處理,共用解碼處理部。關于解碼處理部的共用,也可以是如下結(jié)構(gòu):關于共通的處理內(nèi)容,共用用來執(zhí)行在上述各實施方式中示出的運動圖像解碼方法的解碼處理部,關于MPEG4 —AVC標準所特有的處理內(nèi)容,使用專用的解碼處理部。
[0343]此外,用圖41B的exlOOO表示將處理一部分共用的另一例。在該例中,采用使用與本發(fā)明的一個方式所特有的處理內(nèi)容對應的專用的解碼處理部exlOOl、和與其他的以往標準所特有的處理內(nèi)容對應的專用的解碼處理部exl002、和與在本發(fā)明的一個方式的運動圖像解碼方法和其他的以往標準的運動圖像解碼方法中共通的處理內(nèi)容對應的共用的解碼處理部exl003的結(jié)構(gòu)。這里,專用的解碼處理部exl001、exl002并不一定是為本發(fā)明的一個方式、或者其他的以往標準所特有的處理內(nèi)容而特殊化的,可以是能夠執(zhí)行其他的通用處理的結(jié)構(gòu)。此外,也能夠由LSIeX500安裝本實施方式的結(jié)構(gòu)。
[0344]這樣,對于在本發(fā)明的一個方式的運動圖像解碼方法和以往的標準的運動圖像解碼方法中共通的處理內(nèi)容,共用解碼處理部,由此能夠減小LSI的電路規(guī)模并且降低成本。
[0345]產(chǎn)業(yè)上的可利用性
[0346]本發(fā)明能夠應用到濾波方法、運動圖像編碼裝置及運動圖像解碼裝置中。例如,本發(fā)明能夠在電視機、數(shù)字錄像機、汽車導航儀、便攜電話、數(shù)字照相機及數(shù)字攝像機等的高分辨率的信息顯示設備或攝像設備中使用。
[0347]標號說明
[0348]100、400運動圖像編碼裝置
[0349]101減法器
[0350]102正交變換部
[0351]103量化部
[0352]104、204 逆量化部
[0353]105、205逆正交變換部
[0354]106、206 加法器[0355]107、207、301、302、311、322、323、332、342、343、344、351、352、353、361、362、372、404、504濾波部
[0356]108、112、208、312、324、333、354、363、371 選擇部
[0357]109,209,373 存儲器
[0358]110、210 預測部
[0359]111可變長編碼部
[0360]113,213 控制部
[0361]115,215濾波處理部
[0362]120輸入圖像信號
[0363]121殘差信號
[0364]122、124、224 變換系數(shù)
[0365]123,223 量化系數(shù)
[0366]125,225解碼殘差信號
[0367]126、226解碼圖像信號
[0368]127、128、227、228 圖像信號
[0369]130、230預測圖像信號
[0370]131編碼信號
[0371]132,232編碼比特流
[0372]200、500運動圖像解碼裝置
[0373]211可變長解碼部
[0374]212、321、331、341 分配部
[0375]220輸出圖像信號
[0376]401、501第I量化參數(shù)決定部
[0377]402、502第2量化參數(shù)決定部
[0378]403、503濾波強度決定部
[0379]411,511第I量化參數(shù)
[0380]412、512第2量化參數(shù)
[0381]413、513 濾波強度
【權(quán)利要求】
1.一種濾波方法,對圖像中包含的、相互相鄰的IPCM( Intra Pulse Code Modulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,其特征在于,包括: 第I量化參數(shù)決定步驟,決定用于上述非IPCM塊的第I量化參數(shù); 第2量化參數(shù)決定步驟,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù); 濾波強度決定步驟,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定上述濾波強度; 濾波步驟,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
2.如權(quán)利要求1所述的濾波方法,其特征在于, 在上述第2量化參數(shù)決定步驟中,將上述第2量化參數(shù)的值決定為與上述第I量化參數(shù)相同的值。
3.如權(quán)利要求1或2所述的濾波方法,其特征在于, 在上述濾波強度決定步驟中, 計算上述第I量化參數(shù)和上述第2量化參數(shù)的平均值; 使用計算出的上述平均值決定上述濾波強度。
4.一種運動圖像解碼方法,將編碼比特流解碼,其特征在于, 包括: 差分信息取得步驟,通過將上述編碼比特流解析,取得表示在處理順序上緊接著之前的塊的量化參數(shù)與處理對象的塊的量化參數(shù)的差分是否是零的差分信息; 濾波處理步驟,執(zhí)行權(quán)利要求2所述的濾波方法; 在上述第2量化參數(shù)決定步驟中,按照上述差分信息,將上述第2量化參數(shù)的值決定為與上述第I量化參數(shù)相同的值。
5.如權(quán)利要求4所述的運動圖像解碼方法,其特征在于, 在上述第2量化參數(shù)決定步驟中,在上述非IPCM塊在處理順序上位于上述IPCM塊的緊接著之前的情況下,按照上述差分信息,將上述第2量化參數(shù)的值決定為與上述第I量化參數(shù)相同的值。
6.如權(quán)利要求4或5所述的運動圖像解碼方法,其特征在于, 上述運動圖像解碼方法還包括: 解碼步驟,通過將上述編碼比特流解碼,生成量化系數(shù); 逆量化及逆變換步驟,通過將上述量化系數(shù)逆量化及逆變換,生成解碼殘差信號; 加法步驟,通過對上述解碼殘差信號加上預測圖像信號,生成解碼圖像信號; 上述IPCM塊及上述非IPCM塊包含在上述解碼圖像信號中; 上述運動圖像解碼方法還包括通過使用在上述濾波步驟中進行上述解塊/濾波處理后的圖像信號進行預測處理、生成上述預測圖像信號的預測步驟。
7.如權(quán)利要求4~6中任一項所述的運動圖像解碼方法,其特征在于, 上述運動圖像解碼方法根據(jù)上述編碼比特流中包含的、表示第I規(guī)格或第2規(guī)格的識別碼,切換依據(jù)上述第I規(guī)格的解碼處理、和依據(jù)上述第2規(guī)格的解碼處理; 在上述ID表示第I規(guī)格的情況下,作為依據(jù)上述第I規(guī)格的解碼處理,進行上述差分信息取得步驟和上述濾波處理步驟。
8.—種運動圖像編碼方法,通過將輸入圖像信號編碼,生成編碼比特流,其特征在于,包括: 濾波處理步驟,執(zhí)行權(quán)利要求2所述的濾波方法; 比特流生成步驟,作為表示上述第2量化參數(shù)是與上述第I量化參數(shù)相同的值的信息,生成包含表示在處理順序上緊接著之前的塊的量化參數(shù)與處理對象的塊的量化參數(shù)的差分是零的差分信息的上述編碼比特流。
9.如權(quán)利要求8所述的運動圖像編碼方法,其特征在于, 在上述比特流生成步驟中,在上述非IPCM塊在處理順序上位于上述IPCM塊的緊接著之前的情況下生成上述差分信息。
10.如權(quán)利要求8或9所述的運動圖像編碼方法,其特征在于, 上述運動圖像編碼方法還包括: 減法步驟,通過從上述輸入圖像信號減去預測圖像信號,生成殘差信號; 變換及量化步驟,通過將上述殘差信號變換及量化,生成量化系數(shù); 編碼步驟,通過將上述量化系數(shù)編碼,生成上述編碼比特流; 逆量化及逆變換步驟,通過將上述量化系數(shù)逆量化及逆變換,生成解碼殘差信號; 加法步驟,通過對上述解碼殘差信號加上上述預測圖像信號,生成解碼圖像信號; 上述IPCM塊及上述非IPCM塊包含在上述解碼圖像信號中; 上述運動圖像編碼方法還包括通過使用在上述濾波步驟中進行上述解塊/濾波處理后的圖像信號進行預測處理、生成上述預測圖像信號的預測步驟。
11.一種運動圖像解碼裝置,對圖像中包含的、相互相鄰的IPCM (Intra Pulse CodeModulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,其特征在于,具備: 第I量化參數(shù)決定部,決定用于上述非IPCM塊的第I量化參數(shù); 第2量化參數(shù)決定部,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù); 濾波強度決定部,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定濾波強度; 濾波部,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
12.—種運動圖像編碼裝置,對圖像中包含的、相互相鄰的IPCM (Intra Pulse CodeModulation)塊與不是IPCM塊的非IPCM塊的邊界,進行解塊/濾波處理,其特征在于,具備: 第I量化參數(shù)決定部,決定用于上述非IPCM塊的第I量化參數(shù); 第2量化參數(shù)決定部,使用上述第I量化參數(shù),對應于上述IPCM塊,決定用來決定濾波強度的第2量化參數(shù); 濾波強度決定部,使用上述第I量化參數(shù)及上述第2量化參數(shù)決定濾波強度; 濾波部,以所決定的上述濾波強度,對上述邊界進行解塊/濾波處理。
13.—種運動圖像編碼解碼裝置,其特征在于,具備: 權(quán)利要求12所述的運動圖像編碼裝置; 權(quán)利要求11所述的運動圖像解碼裝置。
【文檔編號】H04N19/117GK103703774SQ201280025983
【公開日】2014年4月2日 申請日期:2012年7月10日 優(yōu)先權(quán)日:2011年7月19日
【發(fā)明者】林宗順, 袁明亮, 乃蘇孟德, 笹井壽郎, 西孝啟, 柴原陽司, 杉尾敏康 申請人:松下電器產(chǎn)業(yè)株式會社