專利名稱：用于將編碼數(shù)據(jù)解復(fù)用的設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種將能以相應(yīng)于多媒體對(duì)象的位流形式，更具體地，以與MPEG-4標(biāo)準(zhǔn)兼容的位流形式使用的編碼數(shù)據(jù)解復(fù)用的設(shè)備。
該MPEG-4標(biāo)準(zhǔn)提供了一種用以表示自然的或原始合成的音頻-視頻對(duì)象(稱為AVO)的標(biāo)準(zhǔn)方式，用以將它們組合在一起以產(chǎn)生形成音頻-視頻場(chǎng)景的復(fù)合AVO，以多路復(fù)用和同步與AVO有關(guān)的數(shù)據(jù)，并以在接收機(jī)端產(chǎn)生或再建的音頻-視頻場(chǎng)景交互。
如

圖1所示，由在例如在下述文件中所述的MPEG-4系統(tǒng)所接收的音頻-視頻場(chǎng)景通常包括幾個(gè)以分層形式構(gòu)成的AVO，所述文件為R.Koenen等人所著的“MPEG-4contex and objectives(背景和目的)”，Signal Processing(信號(hào)處理)Image Communication(圖象傳輸)9(1997)，1997年5月，n°4，pp.295-304。這種分層結(jié)構(gòu)的葉是原始的AVO，例如，在所示的音視頻表示例子中為背景，一個(gè)正在談話的人的圖畫，與該人有關(guān)的聲音，在場(chǎng)景中顯示的一個(gè)3D對(duì)象，等(任何類型的文本，曲線，這些可以是二維或三維)。圖1也原理性顯示了視頻和音頻合成器如何在場(chǎng)景被提供和顯示給用戶之前對(duì)它進(jìn)行處理，而用戶也有可能與其進(jìn)行交互。
與這些AVO有關(guān)的數(shù)據(jù)在一個(gè)或多個(gè)基本流(ES)中傳輸，數(shù)目由他們所要求的傳輸服務(wù)的質(zhì)量和一些其他參數(shù)決定。在圖2中原理性顯示的所謂MPEG-4系統(tǒng)層模型提供一個(gè)MPEG-4終端的所有實(shí)現(xiàn)都可以基于的共同模型。如圖3所示，圖3中顯示了諸如一個(gè)MPEG-4終端(在接收機(jī)端)的主要部件，以TransMux流形式的來自一個(gè)網(wǎng)絡(luò)或一個(gè)存儲(chǔ)介質(zhì)(“傳輸/存儲(chǔ)介質(zhì)”，在圖2中；“網(wǎng)絡(luò)層”，在圖3中)的數(shù)據(jù)流必須被適當(dāng)?shù)亟鈴?fù)用以恢復(fù)原始流?？紤]到這些原始流的解壓縮，為了再建初始AVO(原始AV對(duì)象)，這些原始流傳到適合的解碼器。所解碼的AVO，隨著給出關(guān)于所述場(chǎng)景成分信息的場(chǎng)景描述指示，被用于構(gòu)成和再現(xiàn)其作者所)以給定層次，交互形式)描繪的場(chǎng)景。另外對(duì)于作者所允許的程度，上行流(用戶事件，類請(qǐng)求，…)被發(fā)送回網(wǎng)絡(luò)層以與該場(chǎng)景交互。
更精確地，圖2中所示的MPEG-4終端為一個(gè)包含下面三層的多層結(jié)構(gòu)TransMux層(傳輸復(fù)用層)21，F(xiàn)lexmux層(多用性復(fù)用層)22，Access Unit層(存取單元層)23。
該TransMux層21指明任何適于傳輸MPEG-4數(shù)據(jù)流(從而也就允許MPEG-4用于一個(gè)寬范圍的操作環(huán)境)的已有或?qū)頋撛诘亩嗦窂?fù)用功能，該層包括一個(gè)保護(hù)子層和一個(gè)多路復(fù)用子層(雖然在TransMux例子中可能不能分別標(biāo)識(shí)這些子層，保護(hù)子層更主要提供誤差保護(hù)和適用于給定網(wǎng)絡(luò)或存儲(chǔ)介質(zhì)的誤差保護(hù)工具)。該層在MPEG-4語境中沒有定義，實(shí)際上是到網(wǎng)絡(luò)或存儲(chǔ)介質(zhì)的接口并允許提供與所請(qǐng)求的服務(wù)質(zhì)量(QoS)相匹配的傳輸服務(wù)。
由MEPG-4完全指定說明的FlexMux層22包括一個(gè)用于插入數(shù)據(jù)(一個(gè)或多個(gè)原始流插入一個(gè)FlexMux流中)和允許標(biāo)識(shí)用于已被多路復(fù)用的數(shù)據(jù)的不同信道的多用性工具。
Access Unit層28考慮到在原始流中的存取單元(視頻或音頻幀，場(chǎng)景描述指令，…)的標(biāo)識(shí)和時(shí)基的恢復(fù)。因此它既傳送時(shí)基信息也傳送這些原始流的時(shí)基標(biāo)識(shí)存取單元。然而，可注意到終端的MPEG-4解復(fù)用器的每一層必須連續(xù)地處理整個(gè)流。
本發(fā)明的第一目的是提出一個(gè)這種解復(fù)用器的更通用實(shí)現(xiàn)方案，并允許與其后的解碼器完整地集成。
為此，本發(fā)明涉及一種諸如在說明書的導(dǎo)言中所述的設(shè)備，而且該設(shè)備的特征更具體地在于，所述比特流被再分為所述多媒體對(duì)象的編碼標(biāo)識(shí)的可單獨(dú)訪問部分，而在該設(shè)備中實(shí)施的所有解復(fù)用操作在解碼操作之前，在將所述部分進(jìn)一步再分為更小的基本數(shù)據(jù)實(shí)體之后，被連續(xù)提供給所述小數(shù)據(jù)實(shí)體。
本發(fā)明的另一個(gè)目的是，更具體地，提供一個(gè)允許維持一個(gè)完全服從MPEG-4的體系結(jié)構(gòu)的解復(fù)用器。
為此目的，本發(fā)明涉及一個(gè)解復(fù)用設(shè)備，其中所述比特流遵循MPEG-4標(biāo)準(zhǔn)并被再分為所謂的存取單元，所述解復(fù)用操作被連續(xù)提供給更小的被稱為這些存取單元的SL分組的數(shù)據(jù)段。
更確切地，被提供給該連續(xù)數(shù)據(jù)結(jié)構(gòu)的每一個(gè)的解復(fù)用例程的主要步驟如下(a)讀取并格式化緩存；
(b)析取一個(gè)存取單元的段；(c)測(cè)試是否可以由前面析取的段完整再建一個(gè)存取單元；(d)將每一個(gè)完整的存取單元傳送到一個(gè)輸出緩存或文件；(e)重復(fù)步驟(a)至(d)直至在解復(fù)用器的輸入端沒有出現(xiàn)數(shù)據(jù)為止。
本發(fā)明的特征和優(yōu)點(diǎn)將以結(jié)合下面描述和附圖的形式更詳細(xì)地解釋，其中-圖1顯示了一個(gè)基于對(duì)象的多媒體場(chǎng)景的示例，如根據(jù)MPEG-4標(biāo)準(zhǔn)加工的；-圖2示出了一個(gè)MPEG-4終端結(jié)構(gòu)，它允許在傳輸和/或存儲(chǔ)相應(yīng)的MPEG-4編碼數(shù)據(jù)后處理和再建一個(gè)音視頻交互場(chǎng)景；-圖3顯示了一個(gè)在接收機(jī)端的MPEG-4終端的主要部件；-圖4示出了一個(gè)根據(jù)本發(fā)明，在解復(fù)用器中實(shí)施的步驟；雖然本發(fā)明可以被實(shí)施與一個(gè)更寬范圍的應(yīng)用領(lǐng)域，但下面將以MPEG-4標(biāo)準(zhǔn)為例進(jìn)行描述。根據(jù)MEPG-4說明，多媒體對(duì)象的標(biāo)識(shí)可以在獨(dú)立的原始流中由源實(shí)體傳送到目的實(shí)體。一個(gè)被稱為同步層，或SynLayer，或SL的特定層允許是原始流數(shù)據(jù)來適于通信并因此也提供定時(shí)和同步信息。該層規(guī)定了每一原始流的封裝，即將每一原始流分為一個(gè)或多個(gè)存取單元，該存取單元為一個(gè)多媒體對(duì)象的編碼表示的單獨(dú)可訪問部分，并且是定時(shí)信息可施加于其上的數(shù)據(jù)實(shí)體。一個(gè)存取單元可以自己分為所謂SL分組的更小基本數(shù)據(jù)實(shí)體，灌溉SL分組包括一個(gè)可配置頭標(biāo)和一個(gè)有效載荷。
在至今所提出的實(shí)現(xiàn)方案中，MPEG-4解復(fù)用器的每一層連續(xù)處理整個(gè)流，諸如在歐洲專利申請(qǐng)No.98400160.2(PHF98505)中所述的。根據(jù)本發(fā)明，如果對(duì)于MEPG-4解復(fù)用器所接收的數(shù)據(jù)的每一片執(zhí)行解復(fù)用操作，則可以獲得一個(gè)具有實(shí)時(shí)性能的MPEG-4終端?；镜?，圖4所示出的解復(fù)用例程的不同步驟如下所述(a)初始化TranMux和FlexMux音視頻對(duì)象；(b)讀取一個(gè)大小與一個(gè)有效載荷長(zhǎng)度相對(duì)應(yīng)的緩存(例如，對(duì)于一個(gè)MPEG-2傳輸流分組的有效載荷長(zhǎng)度，該大小為184字節(jié))；(c)然后，所述緩存(已被讀取)被該TransMux層格式化為FlexMux Protocol Data Unit(FMPDU)；(d)該FlexMux層接收所述FMPDU并提取相應(yīng)的Synchronization Layer Protocol Data Unit(或SLPDU，這樣一個(gè)SLPDU通常表示一個(gè)存取單元的一個(gè)段，如上所述)；(e)下一個(gè)步驟所以測(cè)試是否已有存取單元由一個(gè)前面所述SLPDU段完全再建？(e1)如果一個(gè)存取單元仍未完全再建，則該MPEG-4將數(shù)據(jù)存入本地緩存并再啟動(dòng)對(duì)于另一個(gè)輸入分組的處理過程；(e2)如果已有一個(gè)完整的包括上述所有的SLPDUs的存取單元，則將其傳送給一個(gè)輸出緩存或?qū)懭胛募?br> 然后，所述處理過程被再初始化直至在解復(fù)用器的輸入端沒有出現(xiàn)數(shù)據(jù)為止。
所述的解復(fù)用設(shè)備可以很容易地集成在一個(gè)可編程多媒體處理器中，諸如由Philips公司所生產(chǎn)的參考標(biāo)號(hào)TM1000(TriMedia)所指定的處理器，在所述處理器上，其結(jié)構(gòu)完全遵循MPEG-4標(biāo)準(zhǔn)。
權(quán)利要求
1.一種用于將對(duì)應(yīng)于多媒體對(duì)象的以比特流形式可用的編碼數(shù)據(jù)解復(fù)用的設(shè)備，其特征在于，所述比特流被再分為所述多媒體對(duì)象的編碼表示的可單獨(dú)訪問部分，而在而在該設(shè)備中實(shí)施的所有解復(fù)用操作在解碼操作之前，在將所述部分進(jìn)一步再分為更小的基本數(shù)據(jù)實(shí)體之后，被連續(xù)提供給所述小數(shù)據(jù)實(shí)體。
2.權(quán)利要求1的設(shè)備，其中，所述比特流遵循于MPEG-4標(biāo)準(zhǔn)并被再分為所謂的存取單元，所述解復(fù)用操作連續(xù)提供給這些存取單元的被稱為SL-分組的更小數(shù)據(jù)段。
3.權(quán)利要求2的設(shè)備，其特征在于，所述解復(fù)用操作在解復(fù)用設(shè)備的元件被初始化之后，根據(jù)下述例程實(shí)施例(a)讀取并格式化緩存；(b)析取一個(gè)存取單元的段；(c)測(cè)試是否可以由前面析取的段完整再建一個(gè)存取單元；(d)將每一個(gè)完整的存取單元傳送到一個(gè)輸出緩存或文件；(e)重復(fù)步驟(a)至(d)直至在解復(fù)用器的輸入端沒有出現(xiàn)數(shù)據(jù)為止。
全文摘要
本發(fā)明涉及一個(gè)用于將對(duì)應(yīng)于多媒體對(duì)象的編碼數(shù)據(jù)解復(fù)用的設(shè)備。該數(shù)據(jù)被組成為一個(gè)被分為可單獨(dú)訪問部分的比特流—例如對(duì)于遵循MPEG－4標(biāo)準(zhǔn)數(shù)據(jù)流的存取單元—該可單獨(dú)訪問部分被再分為更小的數(shù)據(jù)實(shí)體—在所述例子中為SL－分組—其中所有的解復(fù)用操作被施于其上。所述操作主要是對(duì)于在解復(fù)用器設(shè)備的輸入端接收的所有數(shù)據(jù):讀取并格式化緩存;析取一個(gè)存取單元的連續(xù)段;漸進(jìn)地再建一個(gè)完整存取單元;將每一個(gè)完整的存取單元傳送到一個(gè)輸出緩存或文件。
文檔編號(hào)H04N7/24GK1274506SQ99801158
公開日2000年11月22日 申請(qǐng)日期1999年7月10日 優(yōu)先權(quán)日1998年7月17日
發(fā)明者L·赫爾曼 申請(qǐng)人:皇家菲利浦電子有限公司