專利名稱:元數(shù)據(jù)再生、分發(fā)、檢索裝置、元數(shù)據(jù)再生成條件設(shè)定裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及將包含運(yùn)動(dòng)圖像和音頻的多媒體"內(nèi)容"分割成多個(gè) 場(chǎng)景,對(duì)每個(gè)分割的場(chǎng)景生成元數(shù)據(jù)的元數(shù)據(jù)編輯裝置、元數(shù)據(jù)再生 裝置、元數(shù)據(jù)分發(fā)裝置、元數(shù)據(jù)檢索裝置、元數(shù)據(jù)再生成條件設(shè)定裝 置、"內(nèi)容"分發(fā)裝置和元數(shù)據(jù)分發(fā)方法。
背景技術(shù):
在已有的運(yùn)動(dòng)圖像管理裝置中,在將圖像分割成多個(gè)場(chǎng)景后,對(duì) 各場(chǎng)景再生所需的區(qū)間信息、場(chǎng)景號(hào)碼和作為代表場(chǎng)景的圖像的集合的索引進(jìn)行編輯,由生成大于等于一個(gè)的索引的部件;將表示檢索目 的的標(biāo)題賦予各索引的部件;當(dāng)檢索時(shí),用標(biāo)題檢索索引,按照?qǐng)鼍?號(hào)碼的順序一個(gè)接一個(gè)地再生索引的場(chǎng)景的部件構(gòu)成,以排列必要場(chǎng) 景的方式編輯索引,能夠只再生必要的場(chǎng)景(例如,請(qǐng)參照日本特開(kāi) 2001-028722號(hào)專利公報(bào)(第1頁(yè),圖1))。但是,在上述已有的運(yùn)動(dòng)圖像管理裝置中,因?yàn)橹徊贿^(guò)是由進(jìn)行 各場(chǎng)景的再生所需的區(qū)間信息、場(chǎng)景號(hào)碼和代表場(chǎng)景的圖像生成索 引,所以存在著不能夠管理到視頻數(shù)據(jù)具有的分層性等的視頻數(shù)據(jù)的 結(jié)構(gòu)那樣的問(wèn)題。又,當(dāng)檢索登記的圖像時(shí),因?yàn)橛觅x予索引的標(biāo)題進(jìn)行,所以存 在著為了得到適當(dāng)?shù)臋z索結(jié)果,必須輸入適當(dāng)?shù)臉?biāo)題那樣的問(wèn)題。
本發(fā)明就是為了解決上述問(wèn)題提出的,本發(fā)明的目的是除了得到 場(chǎng)景的區(qū)間信息和標(biāo)題外,還能夠生成作為視頻數(shù)據(jù)等的"內(nèi)容"具 有的結(jié)構(gòu)等的索引信息的元數(shù)據(jù)的元數(shù)據(jù)編輯裝置。又,本發(fā)明的目的是得到能夠用由元數(shù)據(jù)編輯裝置生成的元數(shù) 據(jù),只匯集并再生用戶想看的場(chǎng)景,并用在元數(shù)據(jù)中描述的特征量等, 檢索想看的場(chǎng)景的元數(shù)據(jù)再生裝置、元數(shù)據(jù)分發(fā)裝置、元數(shù)據(jù)檢索裝 置、元數(shù)據(jù)再生成條件設(shè)定裝置、元數(shù)據(jù)分發(fā)裝置和元數(shù)據(jù)分發(fā)方法。發(fā)明內(nèi)容與本發(fā)明有關(guān)的元數(shù)據(jù)編輯裝置設(shè)置了將包含運(yùn)動(dòng)圖像、音頻中 的至少一個(gè)的多媒體"內(nèi)容"分割成多個(gè)場(chǎng)景,對(duì)每個(gè)分割的場(chǎng)景生成 表示場(chǎng)景的開(kāi)始位置和結(jié)束位置的場(chǎng)景的區(qū)間信息元數(shù)據(jù)的場(chǎng)景分割單元;根據(jù)來(lái)自上述場(chǎng)景分割單元的場(chǎng)景的區(qū)間信息元數(shù)據(jù),進(jìn)行 上述多媒體"內(nèi)容"的各場(chǎng)景的分層編輯,生成描述上述多媒體"內(nèi)容" 的分層結(jié)構(gòu)的場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)的場(chǎng)景描述編輯單元;和統(tǒng)合上述 場(chǎng)景的區(qū)間信息元數(shù)據(jù)和上述場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù),生成按照預(yù)定格 式描述上述多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu)的元數(shù)據(jù)的元數(shù)據(jù)描述單元。 又,與本發(fā)明有關(guān)的元數(shù)據(jù)分發(fā)裝置設(shè)置了解析描述元數(shù)據(jù)中包 含的描述符的種類和內(nèi)容的元數(shù)據(jù)最佳化提示信息的提示信息解析 單元;通過(guò)根據(jù)上述被分析后的元數(shù)據(jù)最佳化提示信息和關(guān)于元數(shù)據(jù) 再生成的條件,解析描述包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體 "內(nèi)容"的內(nèi)容和結(jié)構(gòu)的元數(shù)據(jù),再生成第2元數(shù)據(jù)的元數(shù)據(jù)解析/再生 成單元;和將由上述元數(shù)據(jù)解析/再生成單元再生成的第2元數(shù)據(jù)分發(fā)給客戶終端的元數(shù)據(jù)分發(fā)單元。進(jìn)一步,與本發(fā)明有關(guān)的元數(shù)據(jù)分發(fā)方法包含著解析描述元數(shù)據(jù)中包含的描述符的種類的元數(shù)據(jù)最佳化提示信息的步驟;通過(guò)根據(jù)上 述被分析后的元數(shù)據(jù)最佳化提示信息和關(guān)于元數(shù)據(jù)再生成的條件,解 析描述包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié) 構(gòu)的元數(shù)據(jù),再生成第2元數(shù)據(jù)的步驟;和將由上述再生成的第2元 數(shù)據(jù)分發(fā)給客戶終端的步驟。
圖l是表示與本發(fā)明的實(shí)施例l有關(guān)的元數(shù)據(jù)編輯裝置的構(gòu)成的 方框圖。圖2是表示作為與本發(fā)明的實(shí)施例l有關(guān)的元數(shù)據(jù)編輯裝置的編 輯對(duì)象的一個(gè)例子的新聞視頻的圖。圖3是表示與本發(fā)明的實(shí)施例1有關(guān)的元數(shù)據(jù)編輯裝置的場(chǎng)景分 割單元的場(chǎng)景的區(qū)間信息元數(shù)據(jù)的一個(gè)例子的圖。圖4是表示與本發(fā)明的實(shí)施例1有關(guān)的元數(shù)據(jù)編輯裝置的場(chǎng)景描 述編輯單元的場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)的一個(gè)例子的圖。圖5是表示與本發(fā)明的實(shí)施例1有關(guān)的元數(shù)據(jù)編輯裝置的"內(nèi) 容,,再生/顯示單元、用戶輸入單元的畫(huà)面圖像例的圖。圖6是表示與本發(fā)明的實(shí)施例2有關(guān)的元數(shù)據(jù)編輯裝置的構(gòu)成的 方框圖。圖7是用于說(shuō)明與本發(fā)明的實(shí)施例2有關(guān)的元數(shù)據(jù)編輯裝置的工 作的圖。圖8是表示與本發(fā)明的實(shí)施例3有關(guān)的元數(shù)據(jù)再生裝置的構(gòu)成的 方框圖。圖9是用于說(shuō)明與本發(fā)明的實(shí)施例3有關(guān)的元數(shù)據(jù)再生裝置的工 作的圖。圖10是表示與本發(fā)明的實(shí)施例4有關(guān)的"內(nèi)容"分發(fā)系統(tǒng)的構(gòu)成 的方框圖。圖ll是表示從與本發(fā)明的實(shí)施例4有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器的 元數(shù)據(jù)解析單元輸出的"內(nèi)容"(新聞視頻例)的結(jié)構(gòu)信息的圖。圖12是表示由與本發(fā)明的實(shí)施例4有關(guān)的元數(shù)據(jù)分發(fā)系統(tǒng)的元 數(shù)據(jù)再生單元再構(gòu)成后的"內(nèi)容"的結(jié)構(gòu)例的圖。圖13是表示與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器的構(gòu)
成的方框圖。圖14是表示用于說(shuō)明由與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā) 服務(wù)器產(chǎn)生的元數(shù)據(jù)最佳化提示信息的視頻"內(nèi)容"的 一個(gè)例子的 圖。圖15是表示當(dāng)用由與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù) 器產(chǎn)生的MPEG-7時(shí)的元數(shù)據(jù)的描述例的圖。圖16是表示與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器用的 元數(shù)據(jù)最佳化提示信息的格式例的圖。圖17是表示與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器用的元數(shù)據(jù)最佳化提示信息的圖。圖18是表示與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器的元 數(shù)據(jù)解析/再生成單元的工作的操作程序圖。圖19是表示與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器的元 數(shù)據(jù)解析/再生成單元的工作的操作程序圖。圖20是表示與本發(fā)明的實(shí)施例6有關(guān)的元數(shù)據(jù)檢索服務(wù)器的構(gòu) 成的方框圖。圖21是表示與本發(fā)明的實(shí)施例6有關(guān)的元數(shù)據(jù)檢索服務(wù)器的元 數(shù)據(jù)解析單元的工作的操作程序圖。圖22是表示與本發(fā)明的實(shí)施例7有關(guān)的客戶終端的構(gòu)成的方框圖。圖23是表示與本發(fā)明的實(shí)施例8有關(guān)的"內(nèi)容,,分發(fā)服務(wù)器的構(gòu) 成的方框圖。
具體實(shí)施方式
下面,我們根據(jù)
與本發(fā)明的實(shí)施例l和2有關(guān)的元數(shù)據(jù)編輯裝置、 與實(shí)施例3有關(guān)的元數(shù)據(jù)再生裝置、 與實(shí)施例4有關(guān)的"內(nèi)容"分發(fā)系統(tǒng)、 與實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器、 與實(shí)施例6有關(guān)的元數(shù)據(jù)檢索服務(wù)器、 與實(shí)施例7有關(guān)的客戶終端、和 與實(shí)施例8有關(guān)的"內(nèi)容,,分發(fā)服務(wù)器。實(shí)施例1在實(shí)施例1中,我們說(shuō)明將包含運(yùn)動(dòng)圖像和音頻的多媒體"內(nèi)容" 分割成多個(gè)場(chǎng)景,生成場(chǎng)景的分層結(jié)構(gòu)描述和包含各場(chǎng)景的特征量的 元數(shù)據(jù)(索引信息)的元數(shù)據(jù)編輯裝置。我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例1有關(guān)的元數(shù)據(jù)編輯裝置。圖1是表示與本發(fā)明的實(shí)施例1有關(guān)的元數(shù)據(jù)編輯裝置的 構(gòu)成的方框圖。此外,在各圖中,相同的標(biāo)號(hào)表示相同或相當(dāng)?shù)牟糠?。在圖1中,元數(shù)據(jù)編輯裝置100備有"內(nèi)容"再生/顯示單元2、 場(chǎng)景分割單元3、縮略像生成單元4、場(chǎng)景描述編輯單元5、文本 信息賦予單元6、特征提取單元7、用戶輸入單元8和元數(shù)據(jù)描述單 元9。"內(nèi)容,,再生/顯示單元2再生/顯示由視頻數(shù)據(jù)和音頻數(shù)據(jù)等構(gòu)成 的編輯對(duì)象的多媒體"內(nèi)容"IO。場(chǎng)景分割單元3將"內(nèi)容"分割成多 個(gè)場(chǎng)景。縮略像生成單元4提取場(chǎng)景的代表幀作為縮略像。 場(chǎng)景描述編輯單元5通過(guò)由場(chǎng)景分割單元3分割的場(chǎng)景的分組化、場(chǎng) 景的結(jié)合、場(chǎng)景的刪除、場(chǎng)景的關(guān)系信息的生成等分層地編輯場(chǎng)景。 文本信息賦予單元6將各種文本信息附加在各場(chǎng)景上。特征提取單元 7提取場(chǎng)景的特征。又,用戶輸入單元8將來(lái)自用戶的指示信息作為用戶輸入信息 ll輸出到"內(nèi)容"再生/顯示單元2、場(chǎng)景分割單元3、縮略像生 成單元4、場(chǎng)景描述編輯單元5和文本信息賦予單元6。進(jìn)一步,元數(shù)據(jù)描述單元9將由場(chǎng)景分割單元3、縮略像生 成單元4、場(chǎng)景描述編輯單元5、文本信息賦予單元6和特征提取單 元7輸出的場(chǎng)景的區(qū)間信息元數(shù)據(jù)12、場(chǎng)景的縮略像信息元數(shù)據(jù) 13、場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)14、文本信息元數(shù)據(jù)15和特征描述元數(shù)據(jù) 16統(tǒng)合起來(lái),生成按照規(guī)定的格式描述多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu)的 元數(shù)據(jù)17。下面,我們一面參照附圖一面說(shuō)明與本實(shí)施例l有關(guān)的元數(shù)據(jù)編 輯裝置的工作。圖2是表示作為與本實(shí)施例l有關(guān)的元數(shù)據(jù)編輯裝置 的編輯對(duì)象的一個(gè)例子的新聞視頻的構(gòu)成的圖。我們將編輯圖2所示的構(gòu)成的新聞視頻的情形作為例子進(jìn)行說(shuō)明。首先,元數(shù)據(jù)編輯裝置100的"內(nèi)容"再生/顯示單元2,當(dāng)通過(guò) 網(wǎng)絡(luò)等輸入存儲(chǔ)在"內(nèi)容,,存儲(chǔ)單元(圖中未畫(huà)出)中的視頻"內(nèi)容" 等的多媒體"內(nèi)容"IO時(shí),為了用于編輯地再生/顯示它們。當(dāng)元數(shù)據(jù)編輯裝置100的用戶一面觀看該再生圖像, 一面通過(guò)用 戶輸入單元8輸入作為場(chǎng)景的切出位置,即場(chǎng)景開(kāi)始位置和結(jié)束位置 時(shí),場(chǎng)景分割單元3生成顯示從用戶輸入的場(chǎng)景開(kāi)始位置和結(jié)束位置 的場(chǎng)景的區(qū)間信息元數(shù)據(jù)12。圖3是表示與本實(shí)施例l有關(guān)的元數(shù)據(jù)編輯裝置的場(chǎng)景分割單元 的場(chǎng)景的區(qū)間信息元數(shù)據(jù)的一個(gè)例子的圖。該圖3所示的區(qū)間信息元數(shù)據(jù)12表示從圖2所示的新聞視頻生 成的例子。如圖3所示,由場(chǎng)景分割單元3,對(duì)于從新聞視頻"內(nèi)容,, 切出的"新聞?wù)?、"國(guó)內(nèi)新聞"和"國(guó)際新聞"等的各場(chǎng)景,生成表示 場(chǎng)景開(kāi)始位置和結(jié)束位置的區(qū)間信息的場(chǎng)景的區(qū)間信息元數(shù)據(jù)12。在場(chǎng)景描述編輯單元5中,當(dāng)具有通過(guò)用戶輸入單元8來(lái)自用戶 的場(chǎng)景編輯的指示時(shí),根據(jù)來(lái)自場(chǎng)景分割單元3的場(chǎng)景的區(qū)間信息元 數(shù)據(jù)12,進(jìn)行由場(chǎng)景分割單元3連續(xù)地切出的場(chǎng)景的分層編輯,輸出 場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)14。所謂的場(chǎng)景的分層編輯指的是例如場(chǎng)景的分 組化、場(chǎng)景的再分割、場(chǎng)景的結(jié)合、場(chǎng)景的刪除。所謂場(chǎng)景的分組化 指的是,例如,從圖2所示的新聞視頻,例如圖4所示地將以"國(guó)內(nèi) 新聞"、"國(guó)際新聞、"經(jīng)濟(jì)新聞"等的某種特定特征關(guān)聯(lián)的場(chǎng)景匯集成 一個(gè)"新聞"組。又,所謂場(chǎng)景的再分割指的是將一個(gè)場(chǎng)景分割成多個(gè) 場(chǎng)景。所謂的場(chǎng)景的結(jié)合指的是匯集多個(gè)場(chǎng)景成為一個(gè)場(chǎng)景。
圖4是表示與本實(shí)施例l有關(guān)的元數(shù)據(jù)編輯裝置的場(chǎng)景描述編輯 單元的場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)的一個(gè)例子的圖。該圖4所示的場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)14描述作為在場(chǎng)景描述編輯 單元5中的編輯結(jié)果,生成的視頻"內(nèi)容"的分層結(jié)構(gòu)。在圖4中, 在場(chǎng)景描述編輯單元5中,通過(guò)場(chǎng)景的分組化、場(chǎng)景的再分割、場(chǎng)景 的結(jié)合等的場(chǎng)景的編輯,將稱為"新聞"的場(chǎng)景編輯成"新聞?wù)?、"新 聞"、"特輯"、"體育"等,進(jìn)一步將該"新聞"分層地編輯成"國(guó)內(nèi)新聞"、 "國(guó)際新聞、"經(jīng)濟(jì)新聞,,顯示出來(lái)。而且,將在場(chǎng)景描述編輯單元5中生成的例如圖4所示的元數(shù)據(jù) 14輸出到元數(shù)據(jù)描述單元9。另一方面,在縮略像生成單元4中,根據(jù)來(lái)自場(chǎng)景分割單元 3的場(chǎng)景的區(qū)間信息元數(shù)據(jù)12,從在場(chǎng)景分割單元3中切出的各場(chǎng)景 中生成代表幀作為縮略像,將生成的縮略圖信息作為縮略像 信息元數(shù)據(jù)13輸出到元數(shù)據(jù)描述單元9,登記在元數(shù)據(jù)描述單元9中。 這里,用戶也能夠通過(guò)用戶輸入單元8,進(jìn)行縮略圖選擇,但是也能 夠自動(dòng)地將起始幀和固定時(shí)間間隔的多個(gè)幀作為代表幀,或自動(dòng)檢測(cè) 場(chǎng)景變換點(diǎn),將這些幀作為代表幀??s略像信息元數(shù)據(jù)13成為 視頻"內(nèi)容"中的縮略圖的位置信息(幀號(hào)碼或時(shí)間)、或者,縮略 像的URL等的所處位置信息。又,在特征提取單元7中,根據(jù)來(lái)自場(chǎng)景分割單元3的場(chǎng)景的區(qū) 間信息元數(shù)據(jù)12,從各場(chǎng)景中,提取運(yùn)動(dòng)、顏色、或包含在場(chǎng)景內(nèi)的 物體的形狀等場(chǎng)景具有的視覺(jué)特征量。將提取的特征量作為特征描述 元數(shù)據(jù)16,輸出到元數(shù)據(jù)描述單元9,并登記在元數(shù)據(jù)描述單元9中。又,在文本信息賦予單元6中,根據(jù)來(lái)自場(chǎng)景分割單元3的場(chǎng)景 的區(qū)間信息元數(shù)據(jù)12,用戶將標(biāo)題、簡(jiǎn)介、關(guān)鍵字、評(píng)述、場(chǎng)景的重 要度等的各種文本信息賦予各場(chǎng)景。文本信息的賦予是當(dāng)用戶通過(guò)用 戶輸入單元8輸入時(shí),通過(guò)解析"內(nèi)容"中包含的音頻信息和字幕, 自動(dòng)地賦予的情形。將文本信息,作為文本信息元數(shù)據(jù)15,輸出到元 數(shù)據(jù)描述單元9,并登記在元數(shù)據(jù)描述單元9中。 圖5表示與本實(shí)施例1有關(guān)的元數(shù)據(jù)編輯裝置的"內(nèi)容"再生/ 顯示單元和用戶輸入單元8的畫(huà)面圖像例。在圖5中,視頻再生畫(huà)面 Gl,與在"內(nèi)容,,再生/顯示單元2中的畫(huà)面圖像例相當(dāng),在該視頻再 生畫(huà)面Gl中,再生/顯示編輯用的"內(nèi)容"。在圖5中,雖然沒(méi)有明 示,但是備有"再生"、"停止"、"回巻","快進(jìn)"、"發(fā)送幀"再生用的 指示按鈕等通常的視頻再生裝置中備有的用戶接口。而且,在該視頻 再生畫(huà)面Gl的下方顯示出場(chǎng)景分割指示畫(huà)面G2。該場(chǎng)景分割指示畫(huà) 面G2,例如,具有幻燈片形式, 一面觀看在視頻再生畫(huà)面Gl中顯示 的圖像, 一面用戶能夠指示在視頻再生畫(huà)面Gl中顯示的圖像場(chǎng)景的 開(kāi)始位置和結(jié)束位置。又,場(chǎng)景分割指示畫(huà)面G2能夠同時(shí)在場(chǎng)景的 開(kāi)始位置和結(jié)束位置之間,指示縮略圖的位置。這里,當(dāng)由場(chǎng)景分割 指示畫(huà)面G2指定縮略圖的位置時(shí),縮略像生成單元4從視頻"內(nèi) 容"的指定位置的幀生成縮略像。又,由場(chǎng)景分割指示畫(huà)面G2指定位置的縮略像,作為場(chǎng)景 的分割信息,在場(chǎng)景分割信息顯示畫(huà)面G3中顯示出來(lái)。在該場(chǎng)景分 割信息顯示畫(huà)面G3中,除了縮略像外,如圖3所示,也能夠?qū)?每個(gè)場(chǎng)景顯示表示場(chǎng)景的開(kāi)始位置和結(jié)束位置的信息。接著,在樹(shù)形結(jié)構(gòu)生成指示/顯示畫(huà)面G4中,向用戶指示場(chǎng)景編 輯。 一面用戶觀看在場(chǎng)景分割信息顯示畫(huà)面G3中顯示出來(lái)的縮略圖 圖像等的場(chǎng)景分割信息, 一面生成表示視頻"內(nèi)容"具有的分層結(jié)構(gòu) 的樹(shù)形。作為操作方法,例如,當(dāng)進(jìn)行場(chǎng)景的分組化時(shí),在樹(shù)形上追加新 的節(jié)點(diǎn),將想要分組化的場(chǎng)景追加在該節(jié)點(diǎn)上。場(chǎng)景的追加操作,可 以考慮在場(chǎng)景分割信息顯示畫(huà)面G3上選擇想要追加的場(chǎng)景,通過(guò)拖 拽,在節(jié)點(diǎn)上追加場(chǎng)景等的方法。通過(guò)在場(chǎng)景分割信息顯示畫(huà)面G3、 樹(shù)形結(jié)構(gòu)生成指示/顯示畫(huà)面G4中提供用戶輸入單元8作為用于選擇 場(chǎng)景、經(jīng)過(guò)文本信息賦予單元6將文本信息賦予該場(chǎng)景的用戶接口 , 能夠輸入對(duì)于場(chǎng)景的文本信息。元數(shù)據(jù)描述單元9將由場(chǎng)景分割單元3、縮略像生成單元4、
場(chǎng)景描述編輯單元5、文本信息賦予單元6和特征提取單元7輸出的 各種元數(shù)據(jù)統(tǒng)合起來(lái),生成按照規(guī)定的描述格式描述的元數(shù)據(jù)文件。 元數(shù)據(jù)的規(guī)定的描述格式也能夠用獨(dú)自規(guī)定的格式進(jìn)行描述,但是在 本實(shí)施例1中,使用由ISO標(biāo)準(zhǔn)化的MPEG-7。該MPEG-7規(guī)定描 述"內(nèi)容"的結(jié)構(gòu)和特征的格式,具有XML文件格式和二進(jìn)制格式。從而,如果根據(jù)本實(shí)施例1的元數(shù)據(jù)編輯裝置100,則因?yàn)樵O(shè)置 了分層編輯場(chǎng)景的場(chǎng)景描述編輯單元5和從場(chǎng)景提取特征的特征提取 單元7,所以能夠生成描述視頻數(shù)據(jù)等的"內(nèi)容,,具有的分層結(jié)構(gòu)和各 場(chǎng)景的特征量的元數(shù)據(jù)。此外,假定輸入到"內(nèi)容"再生/顯示單元2的多媒體"內(nèi)容"IO, 有從在網(wǎng)絡(luò)上的"內(nèi)容,,服務(wù)器(圖中未畫(huà)出)取得的情形、從在元 數(shù)據(jù)編輯裝置100內(nèi)的"內(nèi)容"存儲(chǔ)單元(圖中未畫(huà)出)取得的情形 和從CD和DVD等的存儲(chǔ)媒體(圖中未畫(huà)出)取得的情形等的各種 情形。同樣,假定將從元數(shù)據(jù)描述單元9輸出的元數(shù)據(jù),有存儲(chǔ)在網(wǎng) 絡(luò)上的"內(nèi)容"服務(wù)器(圖中未畫(huà)出)中的情形、存儲(chǔ)在元數(shù)據(jù)編輯 裝置內(nèi)的元數(shù)據(jù)存儲(chǔ)單元(圖中未畫(huà)出)中的情形和與"內(nèi)容,,一起 存儲(chǔ)在CD和DVD等的存儲(chǔ)媒體(圖中未畫(huà)出)中的情形等。又,在本實(shí)施例1中,設(shè)置了場(chǎng)景描述編輯單元5和特征提取單 元7兩者并進(jìn)行了說(shuō)明,但是不限于此,當(dāng)然既可以只設(shè)置場(chǎng)景描述 編輯單元5,也可以只設(shè)置特征提取單元7。實(shí)施例2在上述實(shí)施例1中,我們說(shuō)明全部通過(guò)手動(dòng)進(jìn)行場(chǎng)景分割的情 形,但是在本實(shí)施例2中,我們說(shuō)明以備有自動(dòng)檢測(cè)場(chǎng)景變換點(diǎn)的場(chǎng) 景變換檢測(cè)單元為特征的數(shù)據(jù)編輯裝置。我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例2有關(guān)的元數(shù)據(jù) 編輯裝置。圖6是表示與本發(fā)明的實(shí)施例2有關(guān)的元數(shù)據(jù)編輯裝置的 構(gòu)成的方框圖。在圖6中,元數(shù)據(jù)編輯裝置100A備有"內(nèi)容"再生/顯示單元2、場(chǎng)景分割單元3、縮略像生成單元4、場(chǎng)景描述編輯單元5、文本 信息賦予單元6、特征提取單元7、用戶輸入單元8、元數(shù)據(jù)描述單元 9和場(chǎng)景變換檢測(cè)單元39。此外,標(biāo)號(hào)40是自動(dòng)檢測(cè)的場(chǎng)景開(kāi)始位 置信息。下面,我們一面參照附圖一面說(shuō)明與本實(shí)施例2有關(guān)的元數(shù)據(jù)編 輯裝置的工作。圖7是用于說(shuō)明與本發(fā)明的實(shí)施例2有關(guān)的元數(shù)據(jù)編輯裝置的工 作的圖。除了場(chǎng)景變換檢測(cè)單元39和場(chǎng)景分割單元3以外的工作都與上 述實(shí)施例l相同。這里我們說(shuō)明實(shí)施例2特有的工作。場(chǎng)景變換檢測(cè)單元39自動(dòng)地進(jìn)行場(chǎng)景變換、切去點(diǎn)檢測(cè)。場(chǎng)景 變換檢測(cè)是,例如,根據(jù)幀間象素差分、幀間顏色和亮度的直方圖差 分等進(jìn)行的。場(chǎng)景分割單元3根據(jù)在場(chǎng)景變換檢測(cè)單元39中檢測(cè)出 的場(chǎng)景變換點(diǎn),決定場(chǎng)景開(kāi)始位置和結(jié)束位置。這里,我們將編輯對(duì)象的"內(nèi)容"是新聞視頻的情形作為例子詳 細(xì)述說(shuō)場(chǎng)景變換檢測(cè)單元39和場(chǎng)景分割單元3的處理。我們以用顏色直方圖作為用于場(chǎng)景變換檢測(cè)的特征量的情形為 例進(jìn)行說(shuō)明。在場(chǎng)景變換檢測(cè)檢測(cè)單元39中,對(duì)每一個(gè)幀算出顏色直方圖。 作為表色系,具有HSV、 RGB、 YCbCr等,但是這里,用HSV色空 間。該HSV色空間由色調(diào)(H)、色飽和度(S)、亮度(V)這樣3 個(gè)要素構(gòu)成。算出各要素的直方圖。接著,從求得的直方圖,例如根 據(jù)下列的(公式l),算出幀間的直方圖差分。我們假定從場(chǎng)景的開(kāi) 始幀算起的N個(gè)幀(例如N-3)屬于同一場(chǎng)景,即,沒(méi)有場(chǎng)景變換點(diǎn)。 此外,作為場(chǎng)景的初期特征量,根據(jù)下列的(公式2),求得最初的 N個(gè)幀間的直方圖差分的平均(mean)和標(biāo)準(zhǔn)偏差(sd )。<formula>formula see original document page 18</formula>(公式i) 其中,sumi:幀i和幀i-l的直方圖間差分和 Hj(h):色調(diào)的直方圖,bin_H:直方圖的要素?cái)?shù) Si(h):色飽和度的直方圖,bin—S:直方圖的要素?cái)?shù) Vi(h):亮度的直方圖,bin—V:直方圖的要素?cái)?shù)lU-i臺(tái) '(公式2 )其中,mean:幀間的直方圖差分的平均 sd:幀間的直方圖差分的標(biāo)準(zhǔn)偏差而且,N+l幀及其以后,將直方圖的幀間差分比mean+lsd大 的幀作為場(chǎng)景變換點(diǎn),作為新場(chǎng)景的開(kāi)始位置候補(bǔ)?,F(xiàn)在考慮如果得到多個(gè)場(chǎng)景的開(kāi)始位置候補(bǔ),則接著,如新聞視 頻那樣,插入由新聞的切換等決定的模式的圖像的情形。新聞視頻,在新聞的切換中,例如,插入由播音員和背景的演播 室設(shè)置、說(shuō)明的文字(字幕)構(gòu)成的圖像等、決定的模式的圖像的情 形是很多的。從而,預(yù)先登記這些決定的模式的圖像(稱為樣板圖像)、 或描述樣板圖像的特征量的元數(shù)據(jù)。所謂樣板圖像的特征量可以舉出 樣板圖像的顏色直方圖、或者,運(yùn)動(dòng)圖案(在新聞切換中播音員寫(xiě)的 部分具有少量的運(yùn)動(dòng)等)等。在預(yù)先登記樣板圖像的情形中,例如圖7所示,當(dāng)與場(chǎng)景變換點(diǎn) 對(duì)應(yīng)的圖像與樣板圖像匹配,類似度高時(shí),將該場(chǎng)景變換點(diǎn)作為場(chǎng)景 的開(kāi)始位置進(jìn)行登記。作為類似度的匹配,具有幀間差分和幀間的顏 色直方圖差分等。又,在預(yù)先登記樣板圖像的特征量的情形中,當(dāng)從與場(chǎng)景變換點(diǎn) 對(duì)應(yīng)的圖像提取特征量,與樣板圖像的特征量匹配,類似度高時(shí),將 該場(chǎng)景變換點(diǎn)作為場(chǎng)景的開(kāi)始位置進(jìn)行登記。將場(chǎng)景的開(kāi)始位置的信息輸出到場(chǎng)景分割單元3。在場(chǎng)景分割單元3中,根據(jù)由場(chǎng)景變換檢測(cè)單元39自動(dòng)檢測(cè)出 的場(chǎng)景開(kāi)始位置信息,決定場(chǎng)景開(kāi)始位置和結(jié)束位置。此外,在本實(shí) 施例2的場(chǎng)景分割單元3中,與上述實(shí)施例l同樣,也能夠根據(jù)來(lái)自 用戶的指示,決定場(chǎng)景開(kāi)始位置和結(jié)束位置。在場(chǎng)景分割單元3中,也能夠?qū)⒚枋鰣?chǎng)景的開(kāi)始位置和結(jié)束位置 的場(chǎng)景的區(qū)間信息元數(shù)據(jù)12輸出到場(chǎng)景變換檢測(cè)單元39,用該場(chǎng)景 變換檢測(cè)單元39,檢測(cè)在該場(chǎng)景中包含的場(chǎng)景變換點(diǎn)。在場(chǎng)景描述編輯單元5中,能夠根據(jù)來(lái)自場(chǎng)景分割單元3的場(chǎng)景 的區(qū)間信息元數(shù)據(jù)12,再分割和統(tǒng)合由場(chǎng)景變換檢測(cè)單元39自動(dòng)檢 測(cè)出的場(chǎng)景。此外,場(chǎng)景描述編輯單元5的詳細(xì)情況與上述實(shí)施例1 相同。從而,如果根據(jù)與本實(shí)施例2有關(guān)的元數(shù)據(jù)編輯裝置100,則與 上述實(shí)施例l相同,能夠生成描述視頻數(shù)據(jù)等的"內(nèi)容"具有的分層 結(jié)構(gòu)和各場(chǎng)景的特征量的元數(shù)據(jù),并且通過(guò)設(shè)置場(chǎng)景變換檢測(cè)單元39,可以自動(dòng)檢測(cè)"內(nèi)容"的場(chǎng)景變換點(diǎn)。 實(shí)施例3在本實(shí)施例中,我們說(shuō)明利用由上述實(shí)施例1和2的元數(shù)據(jù)編輯 裝置生成的元數(shù)據(jù),進(jìn)行圖像的概要再生和檢索等的元數(shù)據(jù)再生裝 置。我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例3有關(guān)的元數(shù)據(jù) 再生裝置。圖8是表示與本發(fā)明的實(shí)施例3有關(guān)的元數(shù)據(jù)再生裝置的 構(gòu)成的方框圖。在圖8中,元數(shù)據(jù)編輯裝置200備有元數(shù)據(jù)解析單元19、結(jié)構(gòu) 顯示單元20、縮略像顯示單元21、用戶輸入單元22、檢索單元 23、檢索結(jié)果顯示單元24、概要生成單元25、概要結(jié)構(gòu)顯示單元26 和"內(nèi)容,,再生單元27。
元數(shù)據(jù)解析單元19對(duì)描述了關(guān)于"內(nèi)容"具有的分層的場(chǎng)景結(jié) 構(gòu)和各場(chǎng)景的縮略圖的信息、各場(chǎng)景的特征量等的元數(shù)據(jù)28的解析。結(jié)構(gòu)顯示單元20顯示從元數(shù)據(jù)解析結(jié)果取得的場(chǎng)景結(jié)構(gòu)29,即"內(nèi) 容"的分層結(jié)構(gòu)??s略像顯示單元21顯示從元數(shù)據(jù)解析結(jié)果取得 的縮略像信息30。用戶輸入單元22進(jìn)行檢索和再生等的指示。檢索單元23根據(jù)來(lái) 自用戶的檢索指示(檢索條件31)和從元數(shù)據(jù)取得的場(chǎng)景的特征量與 文本信息32進(jìn)行檢索。檢索結(jié)果顯示單元24顯示檢索結(jié)果33。概要 生成單元25根據(jù)來(lái)自用戶的概要生成指示(概要生成條件34 )生成 概要。概要結(jié)構(gòu)顯示單元26顯示生成概要的"內(nèi)容"結(jié)構(gòu)38。"內(nèi)容" 再生單元27根據(jù)概要信息35、"內(nèi)容"再生指示36、再生的"內(nèi)容"37 再生/顯示"內(nèi)容"。下面,我們一面參照附圖一面說(shuō)明與本實(shí)施例3有關(guān)的元數(shù)據(jù)再 生裝置的工作。首先,元數(shù)據(jù)解析單元19將描述關(guān)于"內(nèi)容"具有的分層的場(chǎng)景 結(jié)構(gòu)和各場(chǎng)景的縮略圖的信息、各場(chǎng)景的特征量等的元數(shù)據(jù)28作為 輸入,進(jìn)行元數(shù)據(jù)的解析。在本實(shí)施例3中,因?yàn)橛蒙鲜鰧?shí)施例1、 2的元數(shù)據(jù)描述單元9 生成的由MPEG-7規(guī)定的格式描述該元數(shù)據(jù)28,所以元數(shù)據(jù)既可以 是用XML描述的文本文件,也可以是用二進(jìn)制格式進(jìn)行編碼的二進(jìn) 制文件。因此,元數(shù)據(jù)解析單元19,如果用XML描述元數(shù)據(jù)28,則具 有進(jìn)行XML文件解析的XML服務(wù)器的功能。又,如果用二進(jìn)制格 式對(duì)元數(shù)據(jù)28進(jìn)行編碼,則具有進(jìn)行元數(shù)據(jù)28解碼的解碼器功能。結(jié)構(gòu)顯示單元20,輸入元數(shù)據(jù)解析單元19的解析結(jié)果,顯示"內(nèi) 容"的分層的場(chǎng)景結(jié)構(gòu)29。例如,如圖4所示,與各場(chǎng)景的標(biāo)題一起 樹(shù)形顯示"內(nèi)容"的場(chǎng)景結(jié)構(gòu)。縮略像顯示單元21輸入元數(shù)據(jù)解析單元19的解析結(jié)果(縮 略像信息30),顯示"內(nèi)容"的縮略像一覽表。
檢索單元23,根據(jù)通過(guò)用戶輸入單元22的來(lái)自用戶的檢索指示, 檢索"內(nèi)容"中包含的場(chǎng)景。這時(shí),由用戶輸入單元22,根據(jù)關(guān)鍵字 和取樣圖像的提示等,輸入檢索條件。由檢索單元23,根據(jù)元數(shù)據(jù)中 描述的場(chǎng)景的特征量和場(chǎng)景標(biāo)題等的文本信息32,檢索與由用戶提示 的檢索條件(關(guān)鍵字和取樣圖像的特征)31 —致的場(chǎng)景。當(dāng)由檢索單元23進(jìn)行的檢索結(jié)束時(shí),檢索結(jié)果顯示單元24輸入 檢索單元23的檢索結(jié)果33,顯示出檢索結(jié)果。作為檢索結(jié)果的顯示 方法,例如,顯示與檢索條件一致的場(chǎng)景的縮略像。又,概要生成單元25根據(jù)通過(guò)用戶輸入單元22輸入的來(lái)自用戶 的概要生成指示,生成"內(nèi)容,,的概要。這時(shí),由用戶輸入單元22, 輸入生成概要的"內(nèi)容"的再生時(shí)間和用戶嗜好等的信息。例如,當(dāng) "內(nèi)容"是新聞視頻時(shí),輸入將新聞中的體育作為主要的用戶想看的信 息、或者,將1小時(shí)新聞概括成20分鐘的用戶想看的信息等的用戶 嗜好信息。又,由概要生成單元25,根據(jù)元數(shù)據(jù)中描述的場(chǎng)景的再生 時(shí)間和場(chǎng)景的標(biāo)題等的文本信息32,生成與概要條件一致的概要信息 35。該概要信息35是,例如,在生成概要的"內(nèi)容,,中包含的場(chǎng)景的 再生清單,是記述了描述"內(nèi)容,,的URL等的位置信息以及該"內(nèi)容,, 中的想要再生的場(chǎng)景的開(kāi)始位置和結(jié)束位置的清單。又,由"內(nèi)容"再生/顯示單元27,根據(jù)概要信息35中包含的"內(nèi) 容"的位置信息,特定對(duì)象"內(nèi)容",根據(jù)概要信息35中包含的場(chǎng)景 清單,進(jìn)行再生場(chǎng)景的取得/再生/顯示。又,作為別的例子,也可以 考慮分層地描述概括概要信息的場(chǎng)景結(jié)構(gòu)的情形。圖9是表示分層地描述生成概要的場(chǎng)景結(jié)構(gòu)的一個(gè)例子的圖。圖 9(a)表示原始"內(nèi)容"的場(chǎng)景結(jié)構(gòu)的例子。對(duì)于各場(chǎng)景,附加在0.0-1.0 范圍內(nèi)的重要度。l.O意味著重要度最高,O.O意味著重要度最低。重 要度是,例如,根據(jù)用戶嗜好計(jì)算的。例如,當(dāng)預(yù)先登記關(guān)于球隊(duì)A 的足球賽的場(chǎng)景,特別是必然要看的比賽結(jié)果和得分場(chǎng)景那樣的用戶 嗜好時(shí),在各場(chǎng)景上附加反應(yīng)用戶嗜好的重要度。而且,在圖9(a)中,只用重要度最高的場(chǎng)景生成概要,生成
概要的場(chǎng)景結(jié)構(gòu)如圖9(b)所示。此外,各場(chǎng)景具有包含該場(chǎng)景的"內(nèi) 容"的URL等的位置信息和該場(chǎng)景的"內(nèi)容"內(nèi)的位置信息(開(kāi)始位 置和結(jié)束位置)等的元數(shù)據(jù)。將關(guān)于生成概要的場(chǎng)景結(jié)構(gòu)38的信息 傳送給概要結(jié)構(gòu)顯示單元26,該概要結(jié)構(gòu)顯示單元26例如以圖9( b ) 所示的樹(shù)形形式顯示生成概要的場(chǎng)景結(jié)構(gòu)。又,當(dāng)用戶通過(guò)用戶輸入單元22從在結(jié)構(gòu)顯示單元20或概要結(jié) 構(gòu)顯示單元26中顯示的場(chǎng)景結(jié)構(gòu)、以及縮略像顯示單元21和檢 索結(jié)果顯示單元24中顯示的各場(chǎng)景的縮略圖中選擇想要再生的大于 等于一個(gè)的場(chǎng)景時(shí),能夠在"內(nèi)容"再生/顯示單元27中再生/顯示"內(nèi) 容"中包含的場(chǎng)景。從而,如果根據(jù)與本實(shí)施例3有關(guān)的元數(shù)據(jù)編輯裝置200,則能 夠用由上述實(shí)施例1、 2中說(shuō)明的元數(shù)據(jù)編輯裝置生成的元數(shù)據(jù),只 匯集并再生用戶想看的場(chǎng)景,或者用在元數(shù)據(jù)中描述特征量,檢索想 看的場(chǎng)景。又,在本實(shí)施例3中,"內(nèi)容,,再生/顯示單元27是在元數(shù)據(jù)編 輯裝置200內(nèi),但是"內(nèi)容"再生/顯示單元也可以在別的裝置內(nèi)。這 可以考慮為,例如,關(guān)于場(chǎng)景結(jié)構(gòu)與縮略像的顯示等、元數(shù)據(jù)再 生的操作和顯示是在便攜式電話和便攜式信息終端等中進(jìn)行的,關(guān)于 多媒體"內(nèi)容"的再生的處理和顯示是在通過(guò)網(wǎng)絡(luò)與便攜式電話和便 攜式信息終端等連接的終端(例如PC等)中進(jìn)行的情形。實(shí)施例4在本實(shí)施例4中,我們說(shuō)明向客戶終端分發(fā)"內(nèi)容,,的元數(shù)據(jù)的 元數(shù)據(jù)分發(fā)服務(wù)器(元數(shù)據(jù)分發(fā)裝置)和與客戶終端的終端能力相應(yīng) 地可伸縮地構(gòu)成并分發(fā)該"內(nèi)容"的"內(nèi)容"分發(fā)服務(wù)器。我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例4有關(guān)的"內(nèi)容,, 分發(fā)系統(tǒng)。圖IO是表示與本發(fā)明的實(shí)施例4有關(guān)的"內(nèi)容"分發(fā)系統(tǒng) 的構(gòu)成的方框圖。在圖10中,"內(nèi)容"分發(fā)系統(tǒng)300備有元數(shù)據(jù)分發(fā)服務(wù)器400、
各種客戶終端481 48n和"內(nèi)容"分發(fā)服務(wù)器500。元數(shù)據(jù)分發(fā)服務(wù)器400由元數(shù)據(jù)存儲(chǔ)單元41、元數(shù)據(jù)解析單元 42、終端能力判定單元43、元數(shù)據(jù)再生單元44和元數(shù)據(jù)分發(fā)單元45 構(gòu)成。在元數(shù)據(jù)存儲(chǔ)單元41中,存儲(chǔ)著例如上述實(shí)施例1、 2的元數(shù)據(jù) 編輯裝置生成的元數(shù)據(jù)。元數(shù)據(jù)解析單元42對(duì)描述"內(nèi)容"的結(jié)構(gòu)和 特征的元數(shù)據(jù)49進(jìn)行解析。終端能力判定單元43根據(jù)關(guān)于客戶終端 的性能的信息51,判定客戶終端的終端能力。元數(shù)據(jù)再生單元44根 據(jù)元數(shù)據(jù)解析結(jié)果50,與客戶終端的終端能力相應(yīng)地再構(gòu)成"內(nèi)容", 再生成描述該"內(nèi)容,,的元數(shù)據(jù)52。元數(shù)據(jù)分發(fā)單元45將在元數(shù)據(jù)再 生單元44中再生成的元數(shù)據(jù)53分發(fā)給各種客戶終端481~48n。此外,也可以將元數(shù)據(jù)存儲(chǔ)單元41設(shè)置在本實(shí)施例4的元數(shù)據(jù) 分發(fā)服務(wù)器400的外面。這時(shí),元數(shù)據(jù)分發(fā)服務(wù)器400通過(guò)網(wǎng)絡(luò)(圖 中未畫(huà)出)等從元數(shù)據(jù)存儲(chǔ)單元41輸入元數(shù)據(jù)49。又,"內(nèi)容,,分發(fā)服務(wù)器500由"內(nèi)容"存儲(chǔ)單元46和"內(nèi)容" 分發(fā)單元47構(gòu)成。"內(nèi)容"存儲(chǔ)單元46存儲(chǔ)"內(nèi)容"55。"內(nèi)容,,分發(fā)單元47與來(lái)自 客戶終端481 48n的"內(nèi)容"分發(fā)要求54相應(yīng)地分發(fā)"內(nèi)容"56。與上述元數(shù)據(jù)分發(fā)服務(wù)器400的情形相同,也可以將"內(nèi)容"存 儲(chǔ)單元46設(shè)置在"內(nèi)容"分發(fā)服務(wù)器500的外面。這時(shí),"內(nèi)容"分 發(fā)服務(wù)器500通過(guò)網(wǎng)絡(luò)(圖中未畫(huà)出)輸入"內(nèi)容"數(shù)據(jù)55。下面,我們一面參照附圖一面說(shuō)明與本實(shí)施例4有關(guān)的"內(nèi)容" 分發(fā)系統(tǒng)的工作。首先,在元數(shù)據(jù)分發(fā)服務(wù)器400 —側(cè),元數(shù)據(jù)解析單元42對(duì)存 儲(chǔ)在由元數(shù)據(jù)存儲(chǔ)單元41中的元數(shù)據(jù)進(jìn)行解析。元數(shù)據(jù)解析單元42 的工作與上述實(shí)施例3的"內(nèi)容"再生裝置200的元數(shù)據(jù)解析單元19 相同。元數(shù)據(jù)解析單元42通過(guò)對(duì)元數(shù)據(jù)進(jìn)行解析,取得關(guān)于各"內(nèi) 容"的結(jié)構(gòu)和特征的信息。圖11是表示從與本實(shí)施例4有關(guān)的元數(shù)據(jù)分發(fā)服務(wù)器的元數(shù)據(jù) 解析單元輸出的"內(nèi)容"(例如新聞視頻)的結(jié)構(gòu)信息的圖。在圖11 中,用樹(shù)形表示"內(nèi)容"的分層的場(chǎng)景結(jié)構(gòu)。樹(shù)形的各節(jié)點(diǎn),與各個(gè) 場(chǎng)景對(duì)應(yīng),將各個(gè)場(chǎng)景信息對(duì)應(yīng)地賦予各節(jié)點(diǎn)。所謂的場(chǎng)景信息指的 是作為場(chǎng)景的標(biāo)題、摘要、場(chǎng)景開(kāi)始位置和結(jié)束位置的時(shí)間信息、場(chǎng) 景的縮略圖、代表幀、縮略圖鏡頭、代表鏡頭、顏色和運(yùn)動(dòng)等視覺(jué)上 的特征量等的場(chǎng)景特征。此外,在圖11中,在各種場(chǎng)景信息中,只 圖示場(chǎng)景的標(biāo)題。這里,假定客戶終端為終端能力不同的各種信息家電設(shè)備。所謂 的終端能力指的是通信速度、處理速度和可以再生/顯示的圖像格式、圖像分辨率、用戶輸入功能等。例如,假定客戶終端481是在通信速 度、處理速度、顯示性能、用戶輸入功能上具有充分性能的PC(個(gè) 人計(jì)算機(jī))。又,假定客戶終端482是便攜式電話,假定其它的客戶 終端是PDA等。從各客戶終端481~48n發(fā)送與各個(gè)終端性能有關(guān)的 信息。終端能力判定單元43解析與從各客戶終端481~48n發(fā)送的終端 性能有關(guān)的信息51,決定可以分發(fā)的圖像格式、最大圖像分辨率、"內(nèi) 容"的長(zhǎng)度等,輸出到"內(nèi)容"再生成單元44。例如,在原始"內(nèi)容,, 是用MPEG-2進(jìn)行編碼的圖像分辨率大的視頻"內(nèi)容"的情形中,在 具有充分性能的客戶終端481中,能夠再生原始"內(nèi)容"。又,該客 戶終端481具有上述實(shí)施例3中說(shuō)明的可以進(jìn)行圖像的概要再生和檢 索的功能。另一方面,在客戶終端482中,只可以再生用MPEG-4 進(jìn)行編碼的短的視頻鏡頭,并且可以顯示的最大圖像分辨率也很小。在"內(nèi)容"再生成單元44中,與來(lái)自終端能力判定單元43的各 客戶終端481 48n的終端性能相應(yīng)地再構(gòu)成"內(nèi)容",再生成描述其 結(jié)構(gòu)和內(nèi)容的元數(shù)據(jù)52,輸出到元數(shù)據(jù)分發(fā)單元45。例如,因?yàn)閷?原始的元數(shù)據(jù)原封不動(dòng)地分發(fā)給客戶終端481,所以不進(jìn)行"內(nèi)容,, 的再構(gòu)成。另一方面,因?yàn)閷?duì)于客戶終端482,只具有短的視頻鏡頭 的再生功能,所以不能夠再生全部場(chǎng)景。從而,用重要場(chǎng)景的短的視 頻鏡頭再構(gòu)成"內(nèi)容"。
圖12是表示由與本實(shí)施例4有關(guān)的元數(shù)據(jù)分發(fā)系統(tǒng)的元數(shù)據(jù)再 生單元再構(gòu)成后的"內(nèi)容"的結(jié)構(gòu)例的圖。如圖12所示,從各新聞場(chǎng) 景中,提取重要的場(chǎng)景,只用該場(chǎng)景的代表鏡頭或代表幀進(jìn)行構(gòu)成。 又,因?yàn)榭蛻艚K端482不具有上述實(shí)施例3中說(shuō)明的檢索功能,所以 在場(chǎng)景的各種信息中,不需要將用于檢索的場(chǎng)景的特征量描述在元數(shù) 據(jù)中。因此,元數(shù)據(jù)再生單元44再生成只描述再構(gòu)成的場(chǎng)景結(jié)構(gòu)和 該場(chǎng)景的代表鏡頭或代表幀的位置信息的元數(shù)據(jù),并輸出到元數(shù)據(jù)分 發(fā)單元45。該元數(shù)據(jù)分發(fā)單元45將由元數(shù)據(jù)再生單元44生成的元數(shù)據(jù)53 分發(fā)給客戶終端481~48n。各客戶終端481~48n對(duì)由元數(shù)據(jù)分發(fā)單元45分發(fā)的元數(shù)據(jù)53 進(jìn)行解析,取得"內(nèi)容"的樹(shù)形結(jié)構(gòu)信息。各客戶終端481~48n的用 戶,當(dāng)選擇想要再生的場(chǎng)景時(shí),從各客戶終端481 48n將選出的場(chǎng)景 的位置信息發(fā)送給"內(nèi)容"分發(fā)服務(wù)器500的"內(nèi)容"分發(fā)單元47。由"內(nèi)容"分發(fā)服務(wù)器500的"內(nèi)容,,分發(fā)單元47,取得從各客 戶終端481 48n發(fā)送的場(chǎng)景的位置信息,從"內(nèi)容"存儲(chǔ)單元46取得 對(duì)應(yīng)的"內(nèi)容"55,分發(fā)給客戶終端481 48n。在客戶終端481的情形 中,發(fā)送場(chǎng)景的開(kāi)始位置和結(jié)束位置,分發(fā)與原始"內(nèi)容"的對(duì)應(yīng)的 場(chǎng)景。又,在客戶終端482的情形中,發(fā)送場(chǎng)景的代表鏡頭的所在位 置信息(URI等)。此外,在客戶終端482中不可能再生/顯示代表鏡 頭的圖像格式、圖像分辨率和圖像文件大小等的情形中,由"內(nèi)容" 分發(fā)單元47,進(jìn)行格式變換和圖像分辨率變換、減小文件大小的"內(nèi) 容,,概要等,并進(jìn)行發(fā)送。從而,如果根據(jù)本實(shí)施例的元數(shù)據(jù)分發(fā)服務(wù)器400,則可以與各 客戶終端481~48n的能力相應(yīng)地再生成元數(shù)據(jù),分發(fā)給各客戶終端。此外,在圖10中,表示分別構(gòu)成的元數(shù)據(jù)分發(fā)服務(wù)器400和"內(nèi) 容,,分發(fā)服務(wù)器500,但是本發(fā)明不限于此,也可以將"內(nèi)容"分發(fā)服 務(wù)器設(shè)置在元數(shù)據(jù)分發(fā)服務(wù)器中,或者將元數(shù)據(jù)分發(fā)服務(wù)器設(shè)置在 "內(nèi)容,,分發(fā)服務(wù)器中。又,當(dāng)然也可以將元數(shù)據(jù)分發(fā)服務(wù)器和"內(nèi)容"
分發(fā)服務(wù)器設(shè)置在同一服務(wù)器內(nèi)。如果這樣做,則因?yàn)?內(nèi)容"分發(fā)單元47能夠從顧客判定單元43簡(jiǎn)單地知道各客戶終端481~48n的能 力,所以可以與各客戶終端481 48n的能力相應(yīng)地再構(gòu)成格式變換等 的"內(nèi)容",分發(fā)給各客戶終端481~48n。又,在該實(shí)施例4中,我們說(shuō)明了存儲(chǔ)在元數(shù)據(jù)存儲(chǔ)單元41中 的元數(shù)據(jù)是例如上述實(shí)施例1、 2的元數(shù)據(jù)編輯裝置生成的元數(shù)據(jù)的 情形,但是不限于此,當(dāng)然也可以存儲(chǔ)上述實(shí)施例1、 2的元數(shù)據(jù)編 輯裝置以外的裝置生成的元數(shù)據(jù)。實(shí)施例5在本實(shí)施例5中,我們說(shuō)明上述實(shí)施例4中說(shuō)明的元數(shù)據(jù)分發(fā)服 務(wù)器的別的例子。由上述實(shí)施例4的元數(shù)據(jù)分發(fā)服務(wù)器,根據(jù)從客戶 終端發(fā)送的終端信息,進(jìn)行元數(shù)據(jù)的再生。在本實(shí)施例5中,我們說(shuō) 明以備有為了進(jìn)行更適當(dāng)?shù)脑獢?shù)據(jù)的再生成,用作為用于元數(shù)據(jù)的再生成的提示信息的元數(shù)據(jù)最佳化提示信息,進(jìn)行元數(shù)據(jù)的再生成的元 數(shù)據(jù)解析/再生成單元為特征的元數(shù)據(jù)分發(fā)服務(wù)器(元數(shù)據(jù)分發(fā)裝置)。我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù) 分發(fā)服務(wù)器。圖13是表示與本發(fā)明的實(shí)施例5有關(guān)的元數(shù)據(jù)分發(fā)服 務(wù)器的構(gòu)成的方框圖。在圖13中,元數(shù)據(jù)分發(fā)服務(wù)器400A備有提示信息解析單元61、 元數(shù)據(jù)解析/再生成單元63和元數(shù)據(jù)分發(fā)單元45。提示信息解析單元61解析元數(shù)據(jù)最佳化提示信息60并輸出它的 結(jié)果。元數(shù)據(jù)解析/再生成單元63,根據(jù)被解析出的元數(shù)據(jù)最佳化提 示信息62、關(guān)于客戶終端的性能的信息、或者,關(guān)于用戶嗜好等的元 數(shù)據(jù)再生成的條件65,解析描述"內(nèi)容"的結(jié)構(gòu)和特征的元數(shù)據(jù)49, 輸出再構(gòu)成的元數(shù)據(jù)64。元數(shù)據(jù)分發(fā)單元45將元數(shù)據(jù)53分發(fā)給客戶 終端。在元數(shù)據(jù)存儲(chǔ)單元41 (請(qǐng)參照?qǐng)D10)中,存儲(chǔ)著描述"內(nèi)容"的 結(jié)構(gòu)和特征的元數(shù)據(jù)49和用于再生成該元數(shù)據(jù)49的提示信息的元數(shù)
據(jù)最佳化提示信息60。所謂用于再生成元數(shù)據(jù)49的元數(shù)據(jù)最佳化提 示信息60指的是在該元數(shù)據(jù)49中,描述包含多少什么種類的信息, 或元數(shù)據(jù)49的概要和復(fù)雜度的信息。下面,我們一面參照附圖一面說(shuō)明與本實(shí)施例5有關(guān)的元數(shù)據(jù)分 發(fā)服務(wù)器的工作。我們將具有圖14所示的結(jié)構(gòu)的視頻"內(nèi)容"作為例子,詳細(xì)述說(shuō) 元數(shù)據(jù)最佳化提示信息60。視頻"內(nèi)容,,(Root) ( Soccer game program (足球賽節(jié)目)) 大致由2個(gè)場(chǎng)景(Scenel、 Scene2)的前半場(chǎng)和后半場(chǎng)構(gòu)成,前半場(chǎng)的場(chǎng)景進(jìn)一步由多個(gè)場(chǎng)景(Scenel-1、 Scenel-2......Scenel-n )(球門(mén)場(chǎng)景、角球場(chǎng)景等)構(gòu)成。在圖14中,用樹(shù)形結(jié)構(gòu)表示場(chǎng)景間的 時(shí)間上的分層結(jié)構(gòu)。在對(duì)應(yīng)的元數(shù)據(jù)49中描述著這種"內(nèi)容"的時(shí)間上的分層結(jié)構(gòu), 即場(chǎng)景間的時(shí)間關(guān)系和各場(chǎng)景的開(kāi)始時(shí)間與長(zhǎng)度。又,對(duì)于各場(chǎng)景, 除了與分層的層次對(duì)應(yīng)地該場(chǎng)景具有的特征(例如,顏色直方圖和運(yùn) 動(dòng)的復(fù)雜性)夕卜,還描述著標(biāo)題、簡(jiǎn)介、類型、注釋等的文本信息、 重要度等等。此外,在本實(shí)施例5中,作為元數(shù)據(jù)的描述格式,用由 ISO標(biāo)準(zhǔn)化的MPEG-7。圖15表示用MPEG-7時(shí)的元數(shù)據(jù)的描述例。在MPEG-7中,將 各場(chǎng)景描述在稱為"視頻段"的單元中。在各視頻段中,描述著時(shí)間信 息(場(chǎng)景的開(kāi)始點(diǎn)和長(zhǎng)度)、標(biāo)題、概要、類型等。此外,存在著與 視頻段的分層相應(yīng)地描述在視頻段內(nèi)的信息不同的情形。在圖15的 例子中,在層次2和層次3的視頻段中描述著重要度,但是在層次4 中不描述重要度。又,只在層次4的視頻段內(nèi)描述著顏色和運(yùn)動(dòng)的特 征量。通過(guò)遞歸地描述視頻段能夠表現(xiàn)場(chǎng)景間的時(shí)間上的分層關(guān)系。在 圖15的描述例中,通過(guò)稱為"時(shí)間分割"的描述,描述著由時(shí)間上分 割一個(gè)視頻段的多個(gè)視頻段構(gòu)成的情形。在MPEG-7中,也能夠同樣 地描述"內(nèi)容"具有的空間上的分層結(jié)構(gòu)。這時(shí),代替稱為"時(shí)間分割"
的描述,用表示由空間上分割 一個(gè)視頻段的多個(gè)視頻段構(gòu)成的"空間 分割"的描述。
用于再生成元數(shù)據(jù)49的元數(shù)據(jù)最佳化提示信息60是描述該元數(shù) 據(jù)49中包含的信息(描述符)的種類和內(nèi)容的信息。從而,在元數(shù) 據(jù)最佳化提示信息60中,對(duì)于圖15的元數(shù)據(jù),包含著表現(xiàn)"內(nèi)容" 具有的時(shí)間上的分層結(jié)構(gòu)的描述符("時(shí)間分割,,)、表現(xiàn)顏色直方圖 和運(yùn)動(dòng)的復(fù)雜性的描述符、表現(xiàn)標(biāo)題、簡(jiǎn)介、類型、重要度的描述符。 又,作為表示描述"內(nèi)容"和復(fù)雜性的指標(biāo),視頻段的分層結(jié)構(gòu)的深度 最大為4(層次1 層次4)。重要度取5個(gè)離散的值({0.0, 0.25, 0.5, 0.75, 1.0})。作為該重要度的觀點(diǎn),描述著以"TeamA (球隊(duì)A),, 的觀點(diǎn)觀看時(shí)的重要度和以"TeamB (球隊(duì)B )"的觀點(diǎn)觀看時(shí)的重要 度。又,也包含著描述重要度的分層位置(描述在視頻段的哪個(gè)層次 上)。
圖16表示元數(shù)據(jù)最佳化提示信息60的格式例。在圖16表示的 元數(shù)據(jù)最佳化提示信息60中,包含著元數(shù)據(jù)文件信息和元數(shù)據(jù)構(gòu)成 要素信息。
元數(shù)據(jù)文件信息描述元數(shù)據(jù)文件的所在位置、元數(shù)據(jù)文件大小、 元數(shù)據(jù)文件格式(表示XML格式、二進(jìn)制格式等的文件格式)、語(yǔ) 法文件信息(規(guī)定元數(shù)據(jù)語(yǔ)法的語(yǔ)法文件的所在位置)、表示包含(出 現(xiàn))在元數(shù)據(jù)中的要素?cái)?shù)的出現(xiàn)要素?cái)?shù)等、用于預(yù)測(cè)處理元數(shù)據(jù)所需 的資源(進(jìn)行元數(shù)據(jù)的存儲(chǔ)/解析所需的存儲(chǔ)器大小和解析元數(shù)據(jù)所需 的處理系統(tǒng)(S/W)等)的信息。此外,例如,當(dāng)用XML描述元數(shù) 據(jù)時(shí),規(guī)定該描述格式(語(yǔ)法)的DTD文件和schema文件等與規(guī)定 元數(shù)據(jù)文件的格式的語(yǔ)法文件相當(dāng),而語(yǔ)法文件信息描述DTD文件 和schema文件等的語(yǔ)法文件的所在位置。
所謂的元數(shù)據(jù)構(gòu)成要素信息是描述構(gòu)成元數(shù)據(jù)的描述符的種類 及其內(nèi)容的信息。在該元數(shù)據(jù)構(gòu)成要素信息中,包含著在元數(shù)據(jù)中包 含的描述符的名稱、該描述符在元數(shù)據(jù)內(nèi)出現(xiàn)的頻度(次數(shù))、該描 述符是否包含在語(yǔ)法上可以包含的全部描述符的描述(完全描述性)、
或當(dāng)遞歸地描述該描述符時(shí),在該描述符持有的時(shí)間或空間中的分層
性(深度最大值)。例如,在圖15所示的元數(shù)據(jù)描述例中,因?yàn)?視 頻段"是遞歸地描述的描述符,最大具有4分層的結(jié)構(gòu),所以"視頻段" 描述符具有的分層深度最大為4。
進(jìn)一步,關(guān)于在遞歸地描述的描述符內(nèi)包含的描述符,該描述符 出現(xiàn)的出現(xiàn)位置(分層層次)也是提示信息。例如,"重要度"是包含 在"視頻段"內(nèi)的描述符,但是當(dāng)包含在小于等于層次3的"視頻段"內(nèi), 即,不包含在層次4的視頻段內(nèi)時(shí),"重要度"出現(xiàn)的位置最大達(dá)到3。 此外,這樣,也能夠用分層層次指定出現(xiàn)位置,但是當(dāng)將ID分發(fā)給 包含"重要度,,的"視頻段,,或"視頻段,,自身時(shí),也可以描述出現(xiàn)位置作 為ID的清單。又,在具有值的描述符的情形中,描述符的類型和描 述符可以取得的值的范圍也是一個(gè)提示信息。例如,當(dāng)分別從 "TeamA"、 "TeamB"的觀點(diǎn)出發(fā),用5個(gè)離散的值({0.0, 0.25, 0.5, 0.75, 1.0})表現(xiàn)重要度時(shí),重要度可以取得的值是具有浮動(dòng)小數(shù)點(diǎn) 的類型的清單{0.0, 0.25, 0.5, 0.75, 1.0}。對(duì)于每個(gè)作為元數(shù)據(jù)的構(gòu) 成要素的描述符重復(fù)進(jìn)行以上的描述。
圖17表示按照?qǐng)D16的格式描述的元數(shù)據(jù)最佳化提示信息的一個(gè) 例子。我們看到在圖17所示的元數(shù)據(jù)最佳化提示信息60的一個(gè)例子 中,包含著元數(shù)據(jù)文件信息、和稱為"視頻段"與"標(biāo)題"的元數(shù)據(jù)構(gòu)成 要素信息。
下面,我們用圖13說(shuō)明使用元數(shù)據(jù)最佳化提示信息60進(jìn)行元數(shù) 據(jù)的再生成的方法。
由提示信息解析單元61,解析用規(guī)定格式描述的元數(shù)據(jù)最佳化 提示信息60。由元數(shù)據(jù)解析/再生成單元63中,使用從提示信息解析 單元61輸出的被分析后的元數(shù)據(jù)最佳化提示信息62,進(jìn)行元數(shù)據(jù)49 的解析,根據(jù)關(guān)于元數(shù)據(jù)再生成的條件65輸出再生成的元數(shù)據(jù)64。
圖18表示由使用被解析的元數(shù)據(jù)最佳化提示信息62的元數(shù)據(jù)解 析/再生成單元63實(shí)施的元數(shù)據(jù)的解析方法的一個(gè)例子。在該例子中, 只從原始的元數(shù)據(jù)49提取具有重要度大于等于0.5的特征的視頻段,
再生成只用關(guān)于提取的視頻段的描述構(gòu)成的元數(shù)據(jù)。
首先,元數(shù)據(jù)解析/再生成單元63根據(jù)用于元數(shù)據(jù)再生成的條件 65,特定再生成所需的元數(shù)據(jù)(步驟S1)。這里,因?yàn)橹惶崛【哂兄?要度大于等于0.5的特征的視頻段,所以"重要度"和"視頻段"是再生 成所需的描述符。
其次,根據(jù)被分析后的元數(shù)據(jù)最佳化提示信息62,判定在元數(shù) 據(jù)49中是否包含在步驟S1特定的描述符(以下,將描述符"重要度" 作為例子進(jìn)行說(shuō)明)(步驟S2)。
當(dāng)在元數(shù)據(jù)中包含"重要度"描述符時(shí),進(jìn)行元數(shù)據(jù)的解析(步驟 S3 ),當(dāng)不包含"重要度"描述符時(shí),結(jié)束元數(shù)據(jù)的解析處理(步驟S4 )。
又,當(dāng)在被分析后的元數(shù)據(jù)最佳化提示信息62中指定"重要度" 的出現(xiàn)位置為直到分層結(jié)構(gòu)的層次3時(shí),在結(jié)束直到層次3的視頻段 的解析的時(shí)刻(步驟S5),不進(jìn)行大于等于層次4的分層的解析,結(jié) 束解析處理(步驟S6 )。
此外,需要時(shí)為了進(jìn)行別的元數(shù)據(jù)49的解析,重復(fù)步驟S1以后 的處理。又,當(dāng)在元數(shù)據(jù)最佳化提示信息62中指定"重要度"描述符 的出現(xiàn)次數(shù)為20時(shí),在結(jié)束20個(gè)"重要度"描述符的解析的時(shí)刻(步 驟S5),結(jié)束元數(shù)據(jù)的解析(步驟S6)。進(jìn)一步,在步驟S4或步驟 S6結(jié)束元數(shù)據(jù)的解析處理后,需要時(shí)為了進(jìn)行別的元數(shù)據(jù)的解析,重 復(fù)步驟Sl以后的處理。
圖19表示使用被分析后的元數(shù)據(jù)最佳化提示信息62的元數(shù)據(jù)的 解析方法的別的例子。在該例子中,只提取包含"標(biāo)題"描述符的視頻 段,再生成元數(shù)據(jù)。在元數(shù)據(jù)中是否包含"標(biāo)題"描述符的判定與圖18 的例子相同。
元數(shù)據(jù)解析/再生成單元63,當(dāng)在元數(shù)據(jù)中包含"標(biāo)題"描述符時(shí), 判定是否是與在元數(shù)據(jù)最佳化提示信息中描述的出現(xiàn)位置的ID —致 的視頻段(步驟S13)。
當(dāng)不與ID—致時(shí),因?yàn)槭遣话?標(biāo)題"描述符的視頻段,所以 跳過(guò)該視頻段的描述的解析(步驟S16)。
當(dāng)與ID—致時(shí),為了取得"標(biāo)題"描述符,進(jìn)行該視頻段的描述 的解析(步驟S15)。
接著,當(dāng)結(jié)束對(duì)與出現(xiàn)位置的ID—致的全部視頻段的解析時(shí)(步 驟S17),因?yàn)樵诖艘陨希谠獢?shù)據(jù)內(nèi)不存在包含"標(biāo)題,,描述符的視 頻段,所以結(jié)束解析處理(步驟S18)。
此外,為了需要時(shí)進(jìn)行別的元數(shù)據(jù)的解析,重復(fù)步驟S11以后的 處理。輸出用通過(guò)以上的解析處理提取的描述符再構(gòu)成的元數(shù)據(jù)64。
由元數(shù)據(jù)分發(fā)單元45,將再構(gòu)成的元數(shù)據(jù)64分發(fā)給各種客戶終。
此外,雖然沒(méi)有圖示出來(lái),但是因?yàn)樵谠獢?shù)據(jù)再生后,元數(shù)據(jù)文 件的所在位置和元數(shù)據(jù)文件大小、出現(xiàn)在元數(shù)據(jù)中的要素?cái)?shù)、關(guān)于元 數(shù)據(jù)構(gòu)成要素的信息也發(fā)生變化,所以也可以再生成與再生成后的元 數(shù)據(jù)對(duì)應(yīng)的元數(shù)據(jù)最佳化提示信息。
如上所述,至今為了再生成元數(shù)據(jù),必需解析元數(shù)據(jù)中包含的全 部描述符,但是在本實(shí)施例5中,因?yàn)槭褂妹枋鲈谠獢?shù)據(jù)49中包含 的描述符的清單和描述符的出現(xiàn)位置、出現(xiàn)次數(shù)等的元數(shù)據(jù)最佳化提 示信息60,解析元數(shù)據(jù)49的描述符,所以能夠省去用于再生成元數(shù) 據(jù)的元數(shù)據(jù)49自身的解析,又,因?yàn)楦鶕?jù)出現(xiàn)位置和出現(xiàn)次數(shù),能 夠省去與再生成條件不一致的描述符的解析,所以能夠減少伴隨著元 數(shù)據(jù)的解析和再生成的處理費(fèi)用(處理量和存儲(chǔ)器使用量等)。
實(shí)施例6
在上述實(shí)施例5中,我們說(shuō)明了用為了元數(shù)據(jù)再生成的元數(shù)據(jù)最 佳化提示信息60,減少伴隨著元數(shù)據(jù)的解析和再生成的處理費(fèi)用的元 數(shù)據(jù)分發(fā)服務(wù)器,但是在本實(shí)施例6中,我們說(shuō)明用元數(shù)據(jù)最佳化提 示信息,減少伴隨著元數(shù)據(jù)的檢索的處理的元數(shù)據(jù)檢索服務(wù)器(元數(shù) 據(jù)檢索裝置)。
我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例6有關(guān)的元數(shù)據(jù) 檢索服務(wù)器。圖20是表示與本發(fā)明的實(shí)施例6有關(guān)的元數(shù)據(jù)檢索服
務(wù)器的構(gòu)成的方框圖。
在圖20中,元數(shù)據(jù)檢索服務(wù)器600備有提示信息解析單元61、 元數(shù)據(jù)解析單元71和檢索單元73。
因?yàn)樘崾拘畔⒔馕鰡卧?1與上述實(shí)施例5相同,所以省略對(duì)它 的說(shuō)明。元數(shù)據(jù)解析單元71,用被分析后的元數(shù)據(jù)最佳化提示信息 62和檢索條件70,能夠用很少的處理費(fèi)用高效率地解析描述"內(nèi)容" 的結(jié)構(gòu)和特征的膨大的元數(shù)據(jù)49。檢索單元73利用元數(shù)據(jù)的解析結(jié) 果72,檢索適合于檢索條件的"內(nèi)容"。
下面,我們 一 面參照附圖 一 面說(shuō)明與本實(shí)施例6有關(guān)的元數(shù)據(jù)檢 索服務(wù)器的工作。
圖21是表示與本實(shí)施例6有關(guān)的元數(shù)據(jù)檢索服務(wù)器的元數(shù)據(jù)解 析單元的工作的操作程序圖。
元數(shù)據(jù)解析單元71,用與各元數(shù)據(jù)對(duì)應(yīng)的元數(shù)據(jù)最佳化提示信 息62進(jìn)行大于等于一個(gè)的元數(shù)據(jù)的解析。所謂元數(shù)據(jù)的解析,這里 指的是從元數(shù)據(jù)提取檢索所需的特征描述。例如,當(dāng)給出視頻段的顏 色特征量作為檢索條件,檢索具有接近該視頻段的特征的視頻段時(shí), 需要提取具有與顏色有關(guān)的特征描述的視頻段。在圖15所示的元數(shù) 據(jù)例子中,因?yàn)樵趯哟?的視頻段上附加顏色的特征描述("顏色直 方圖,,),所以提取與層次4的視頻段有關(guān)的描述。
元數(shù)據(jù)解析單元71,解析檢索條件70,特定對(duì)檢索有效的描述 符(步驟S21)。存在著作為檢索條件給出按照在MPEG-7中規(guī)定的 描述的特征量的情形和給出圖像與關(guān)鍵字的情形等。當(dāng)作為按照 MPEG-7的描述的特征量(例如顏色配置信息)給出檢索條件時(shí),該 描述符(顏色配置信息)成為對(duì)檢索有效的描述符。又,作為關(guān)鍵字 給出檢索條件時(shí),文本形式的描述符(標(biāo)題、簡(jiǎn)述、注釋等)成為對(duì) 檢索有效的描述符。
下面,參照元數(shù)據(jù)最佳化提示信息62,判定選出的描述符是否 包含在元數(shù)據(jù)49中(步驟S22 )。當(dāng)用于檢索的描述符不包含在元數(shù) 據(jù)49中時(shí),結(jié)束該元數(shù)據(jù)49的解析處理(步驟S24),需要時(shí)進(jìn)行
別的元數(shù)據(jù)49的解析。
當(dāng)選出的描述符包含在元數(shù)據(jù)49中時(shí),進(jìn)行該元數(shù)據(jù)的解析(步 驟S23)。關(guān)于元數(shù)據(jù)的解析方法,與上述實(shí)施例5的情形相同,用 元數(shù)據(jù)最佳化提示信息62高效率地進(jìn)行圖18和圖19所示的元數(shù)據(jù) 解析處理(步驟S25 S26)。通過(guò)以上的處理,由元數(shù)據(jù)解析單元71 提取檢索所需的特征描述。
由檢索單元73,利用由元數(shù)據(jù)解析單元71輸出的元數(shù)據(jù)的解析 結(jié)果(檢索所需的特征描述),檢索適合于檢索條件的"內(nèi)容"。在 上述例子中,因?yàn)橛稍獢?shù)據(jù)解析單元71輸出與具有顏色的特征描述 ("顏色直方圖")的視頻段有關(guān)的描述,所以判定與作為檢索條件給 出的顏色特征量(直方圖)的適合性,作為檢索結(jié)果74輸出適合的 視頻段的信息(例如"時(shí)間信息")。
如以上那樣,在本實(shí)施例6中,因?yàn)槭褂迷獢?shù)據(jù)最佳化提示信息 60,解析元數(shù)據(jù)49,所以能夠省去用于元數(shù)據(jù)再生成的元數(shù)據(jù)49自 身的解析。又,因?yàn)楦鶕?jù)出現(xiàn)位置和出現(xiàn)次數(shù),能夠省去檢索不需要 的描述符的解析,所以能夠減少伴隨著元數(shù)據(jù)的檢索的處理費(fèi)用(處 理量和存儲(chǔ)器使用量等)。
實(shí)施例7
在上述實(shí)施例5或?qū)嵤├?中,我們說(shuō)明了利用元數(shù)據(jù)最佳化提 示信息的服務(wù)器一側(cè),但是在本實(shí)施例7中,我們說(shuō)明利用元數(shù)據(jù)最 佳化提示信息的客戶終端(元數(shù)據(jù)再生成條件設(shè)定裝置)。
我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例7有關(guān)的客戶終 端。圖22是表示與本發(fā)明的實(shí)施例7有關(guān)的客戶終端的構(gòu)成的方框 圖。
在圖22中,客戶終端48A備有提示信息解析單元80、元數(shù)據(jù)再 生成條件設(shè)定單元82。
此外,在圖22中,在客戶終端48A中備有的功能中,只表示與 利用元數(shù)據(jù)最佳化提示信息60設(shè)定用于元數(shù)據(jù)再生成的條件的部件
有關(guān)的部分。下面,我們 一 面參照附圖 一 面說(shuō)明與本實(shí)施例7有關(guān)的客戶終端 的工作。提示信息解析單元80進(jìn)行以規(guī)定的格式描述的元數(shù)據(jù)最佳化提 示信息60的解析。因?yàn)樵撎崾拘畔⒔馕鰡卧?0與上迷實(shí)施例5相同, 所以省略對(duì)它的詳細(xì)i兌明。元數(shù)據(jù)再生成條件設(shè)定單元82,根據(jù)由提示信息解析單元80輸 出的解析結(jié)果81,進(jìn)行元數(shù)據(jù)再生成的條件設(shè)定83。所謂的條件設(shè) 定指的是,例如,從元數(shù)據(jù)最佳化提示信息60中包含的描述符的種 類中選擇客戶終端48A不需要的描述符。當(dāng)客戶終端48A不備有用 特征量的檢索功能時(shí),不需要表現(xiàn)顏色直方圖和運(yùn)動(dòng)的復(fù)雜性等的特 征量的描述符。作為條件設(shè)定的別的例子,當(dāng)描述"內(nèi)容"的場(chǎng)景關(guān)系的分層結(jié)構(gòu) 越深,元數(shù)據(jù)的復(fù)雜性越增加時(shí),根據(jù)在元數(shù)據(jù)最佳化提示信息60 中的描迷的分層結(jié)構(gòu)的深度的最大值,在客戶終端設(shè)定可以處理的分 層結(jié)構(gòu)的深度。又,在別的例子中,根據(jù)元數(shù)據(jù)最佳化提示信息60 中描述的重要度可以取得的值的信息,設(shè)定用戶著眼的觀點(diǎn)和選擇的 場(chǎng)景的重要度的閾值。如上所述,當(dāng)分別從"TeamA"、 "TeamB"的觀點(diǎn)出發(fā),重要度 取5個(gè)離散的值({0.0, 0.25, 0.5, 0.75, 1.0})時(shí),能夠進(jìn)行只選擇 從"TeamA,,的觀點(diǎn)具有大于等于0.5的重要度的場(chǎng)景等的設(shè)定。將由元數(shù)據(jù)再生成條件設(shè)定單元82設(shè)定的用于元數(shù)據(jù)再生成的 條件83發(fā)送給元數(shù)據(jù)分發(fā)服務(wù)器。在元數(shù)據(jù)分發(fā)服務(wù)器一側(cè),根據(jù) 用于元數(shù)據(jù)再生成的條件和客戶終端的終端性能,再構(gòu)成元數(shù)據(jù)。例 如,當(dāng)原始的元數(shù)據(jù)的分層結(jié)構(gòu)的深度的最大值為4,在元數(shù)據(jù)再生 成條件中,設(shè)定在客戶終端可以處理的分層結(jié)構(gòu)的深度為2時(shí),以使 分層結(jié)構(gòu)的深度的最大值為2的方式,再構(gòu)成元數(shù)據(jù)的結(jié)構(gòu)。又,當(dāng)在元數(shù)據(jù)再生成條件中,只選擇并i殳定從"TeamA"的觀 點(diǎn),重要度大于等于0.5的場(chǎng)景時(shí),再生只由與同一條件一致的場(chǎng)景
構(gòu)成的元數(shù)據(jù)。與上述實(shí)施例5相同能夠用元數(shù)據(jù)最佳化提示信息高 效率地進(jìn)行元數(shù)據(jù)再生成。如以上那樣,在本實(shí)施例7中,因?yàn)槟軌蚴褂迷獢?shù)據(jù)最佳化提示 信息60設(shè)定用于元數(shù)據(jù)再生成的條件,所以能夠與客戶終端和應(yīng)用 相應(yīng)地生成適合的元數(shù)據(jù)。實(shí)施例8在上述實(shí)施例5或?qū)嵤├?中,我們說(shuō)明了用元數(shù)據(jù)最佳化提示 信息再生成元數(shù)據(jù),分發(fā)再生成的元數(shù)據(jù)的服務(wù)器,但是在本實(shí)施例 8中,我們說(shuō)明用元數(shù)據(jù)最佳化提示信息解析元數(shù)據(jù),利用解析結(jié)果 再生成適合于客戶終端和用戶嗜好的元數(shù)據(jù)并進(jìn)行分發(fā)的"內(nèi)容"分 發(fā)服務(wù)器("內(nèi)容"分發(fā)裝置)。我們一面參照附圖一面說(shuō)明與本發(fā)明的實(shí)施例8有關(guān)的"內(nèi)容,, 分發(fā)服務(wù)器。圖23是表示與本發(fā)明的實(shí)施例8有關(guān)的"內(nèi)容"分發(fā)服 務(wù)器的構(gòu)成的方框圖。在圖23中,"內(nèi)容"分發(fā)服務(wù)器500A備有提示信息解析單元61、 元數(shù)據(jù)解析單元86和"內(nèi)容"再構(gòu)成/分發(fā)單元88。下面,我們一面參照附圖一面說(shuō)明與本實(shí)施例8有關(guān)的"內(nèi)容" 分發(fā)服務(wù)器的工作。因?yàn)樘崾拘畔⒔馕鰡卧?1的工作與上述實(shí)施例5相同,所以省 略對(duì)它的說(shuō)明。元數(shù)據(jù)解析單元86,使用從提示信息解析單元61輸出的被分析 后的元數(shù)據(jù)最佳化提示信息62,進(jìn)行元數(shù)據(jù)49的解析,提取與客戶 終端有關(guān)的信息、或者,與用戶嗜好等的"內(nèi)容"再構(gòu)成有關(guān)的條件 85 —致的描述。使用提示信息的解析方法具有與上述實(shí)施例5相同之 處,但是與實(shí)施例5不同之處不是使用提取的描述再生成元數(shù)據(jù),而 是再構(gòu)成"內(nèi)容"這一點(diǎn)。將由該元數(shù)據(jù)解析單元86提取的描述,即 被分析后的元數(shù)據(jù)87輸出到"內(nèi)容"再構(gòu)成/分發(fā)單元88。"內(nèi)容"再構(gòu)成/分發(fā)單元88,根據(jù)由元數(shù)據(jù)解析單元86提取的描 述,再構(gòu)成"內(nèi)容"89。這里,我們用上述實(shí)施例5中述說(shuō)的例子進(jìn) 行說(shuō)明。在實(shí)施例5的例子中,只從元數(shù)據(jù)49提取具有重要度大于 等于0.5的特征的視頻段,再生成只由與提取的視頻段有關(guān)的描述構(gòu) 成的元數(shù)據(jù)。在本實(shí)施例8中,只從元數(shù)據(jù)49提取具有重要度大于等于0.5 的特征的視頻段,再生成并分發(fā)只由與提取的視頻段對(duì)應(yīng)的場(chǎng)景構(gòu)成 的"內(nèi)容"90。因?yàn)樵谂c提取的視頻段有關(guān)的描述中,描述了對(duì)應(yīng)的 "內(nèi)容"的所在位置和在該視頻段的"內(nèi)容"內(nèi)的位置(時(shí)間信息), 所以也能夠從"內(nèi)容"切出對(duì)應(yīng)的場(chǎng)景,再構(gòu)成一個(gè)"內(nèi)容"90,并分 發(fā)再構(gòu)成的"內(nèi)容"卯,但是也能夠從"內(nèi)容,,切出對(duì)應(yīng)的場(chǎng)景,順次 地分發(fā)切出的場(chǎng)景。如以上那樣,在與本實(shí)施例8有關(guān)的"內(nèi)容"分發(fā)服務(wù)器500A 中,因?yàn)槭褂妹枋鲈獢?shù)據(jù)49中包含的描述符的清單和描述符的出現(xiàn) 位置、出現(xiàn)次數(shù)等的元數(shù)據(jù)最佳化提示信息60,解析元數(shù)據(jù)49,所 以能夠省去用于元數(shù)據(jù)再生成的元數(shù)據(jù)49自身的解析,又,因?yàn)楦?據(jù)出現(xiàn)位置和出現(xiàn)次數(shù),能夠省去與再生成條件不一致的描述符的解 析,所以能夠減少伴隨著當(dāng)再生成并分發(fā)適合于客戶終端和用戶嗜好 的"內(nèi)容"時(shí)的元數(shù)據(jù)的解析和"內(nèi)容"的再構(gòu)成的處理費(fèi)用(處理量 和存儲(chǔ)器使用量等)。本發(fā)明,如以上說(shuō)明的那樣,因?yàn)閷\(yùn)動(dòng)圖像和音頻的多媒 體"內(nèi)容"分割成多個(gè)場(chǎng)景,編輯分割成多個(gè)的場(chǎng)景,生成描述多媒體 "內(nèi)容"的分層結(jié)構(gòu)的場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù),所以能夠生成描述包含視 頻數(shù)據(jù)等的多媒體"內(nèi)容"具有的分層結(jié)構(gòu)的元數(shù)據(jù)。
權(quán)利要求
1.一種元數(shù)據(jù)再生裝置,其特征在于它備有,對(duì)描述包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體“內(nèi)容”的內(nèi)容和結(jié)構(gòu)的元數(shù)據(jù)進(jìn)行解析的元數(shù)據(jù)解析單元;根據(jù)從上述元數(shù)據(jù)解析單元的解析結(jié)果取得的上述元數(shù)據(jù)中描述的場(chǎng)景的視覺(jué)特征量,從上述元數(shù)據(jù)檢索與預(yù)定的檢索條件一致的場(chǎng)景的檢索單元;和根據(jù)從上述元數(shù)據(jù)解析單元的解析結(jié)果取得的上述元數(shù)據(jù)中描述的預(yù)定信息,生成與預(yù)定的概要生成條件一致的上述多媒體“內(nèi)容”的概要信息的概要生成單元。
2. —種元數(shù)據(jù)分發(fā)裝置,其特征在于它備有, 對(duì)描述包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu)的元數(shù)據(jù)進(jìn)行解析的元數(shù)據(jù)解析單元;根據(jù)關(guān)于客戶終端的性能的信息,判定上述客戶終端的能力的終 端能力判定單元;根據(jù)上述元數(shù)據(jù)解析單元的元數(shù)據(jù)解析結(jié)果,與上述判定的客戶 終端的能力相應(yīng)地再構(gòu)成上述多媒體"內(nèi)容",再生成描述其內(nèi)容的第 2元數(shù)據(jù)的元數(shù)據(jù)再生成單元;和將由上述元數(shù)據(jù)再生成單元再生成的第2元數(shù)據(jù)分發(fā)給上述客 戶終端的元數(shù)據(jù)分發(fā)單元。
3. —種元數(shù)據(jù)分發(fā)裝置,其特征在于它備有, 對(duì)描述包含在元數(shù)據(jù)中的描述符的種類的提示信息進(jìn)行解析的提示信息解析單元;根據(jù)上述被分析后的提示信息和關(guān)于元數(shù)據(jù)再生成的條件,解析 描述包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu) 的元數(shù)據(jù),再生成第2元數(shù)據(jù)的元數(shù)據(jù)解析/再生成單元;和將由上述元數(shù)據(jù)解析/再生成單元再生成的第2元數(shù)據(jù)分發(fā)給客 戶終端的元數(shù)據(jù)分發(fā)單元。
4. 一種元數(shù)據(jù)檢索裝置,其特征在于它備有, 對(duì)描述了元數(shù)據(jù)中包含的描述符的種類和內(nèi)容的提示信息進(jìn)行解析的提示信息解析單元;根據(jù)上述被分析后的提示信息和檢索條件,對(duì)描述包含運(yùn)動(dòng)圖 像、音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu)的元數(shù)據(jù)進(jìn)行解 析的元數(shù)據(jù)解析單元;和利用上述元數(shù)據(jù)的解析結(jié)果,檢索適合于上述檢索條件的"內(nèi) 容"的檢索單元。
5. —種元數(shù)據(jù)再生成條件設(shè)定裝置,其特征在于它備有, 對(duì)描述了元數(shù)據(jù)中包含的描述符的種類和內(nèi)容的提示信息進(jìn)行解析的提示信息解析單元;和根據(jù)上述被分析后的提示信息,設(shè)定用于對(duì)描述包含運(yùn)動(dòng)圖像、 音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu)的元數(shù)據(jù)進(jìn)行再生 成的條件的元數(shù)據(jù)再生成條件設(shè)定單元。
6. —種"內(nèi)容"分發(fā)裝置,其特征在于它備有, 對(duì)描述了元數(shù)據(jù)中包含的描述符的種類和內(nèi)容的提示信息進(jìn)行解析的提示信息解析單元;根據(jù)上述被分析后的提示信息和關(guān)于"內(nèi)容"再構(gòu)成的條件,從描 述了包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu) 的元數(shù)據(jù),提取與上述"內(nèi)容"再構(gòu)成有關(guān)的條件一致的描述的元數(shù)據(jù) 解析單元;和根據(jù)上述提取的描述,再構(gòu)成"內(nèi)容"并分發(fā)給客戶終端的"內(nèi)容" 再構(gòu)成/分發(fā)單元。
7. —種元數(shù)據(jù)分發(fā)方法,其特征在于它包含, 對(duì)描述了元數(shù)據(jù)中包含的描述符的種類的提示信息進(jìn)行解析的步驟;根據(jù)上述被分析后的提示信息和關(guān)于元數(shù)據(jù)再生成的條件,解析 描述包含運(yùn)動(dòng)圖像、音頻中的至少一個(gè)的多媒體"內(nèi)容"的內(nèi)容和結(jié)構(gòu) 的元數(shù)據(jù),再生成第2元數(shù)據(jù)的步驟;和 將由上述再生成的第2元數(shù)據(jù)分發(fā)給客戶終端的步驟。
8. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)文件的所在位置和表示元數(shù)據(jù)中包含的要素?cái)?shù)的出現(xiàn)要素?cái)?shù)。
9. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)文件的大小、元數(shù)據(jù)文件的格式和語(yǔ)法文件信息。
10. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符的名稱。
11. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符出現(xiàn)的頻度。
12. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符的完全描述性。
13. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符具有的時(shí)間分層性。
14. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符具有的空間分層性。
15. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符出現(xiàn)的出現(xiàn)位置。
16. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符的類型。
17. 根據(jù)權(quán)利要求7所述的元數(shù)據(jù)分發(fā)方法,其特征在于 上述提示信息描述元數(shù)據(jù)中包含的描述符的可以取得的范圍。
18. —種元數(shù)據(jù)再生成裝置,該元數(shù)據(jù)再生成裝置從由描述"內(nèi) 容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè)或多個(gè)描述符構(gòu)成的元數(shù)據(jù), 只提取適合于元數(shù)據(jù)接收裝置的能力和通信環(huán)境、用戶要求中的某一 個(gè)的描述進(jìn)行再構(gòu)成,其特征在于它備有,對(duì)描述了元數(shù)據(jù)中包含的描述符的名稱或識(shí)別符的提示信息進(jìn) 行解析的提示信息解析部件;和用被分析后的上述提示信息,判斷在元數(shù)據(jù)中是否包含再生成后 的元數(shù)據(jù)所需的每一個(gè)描述的元數(shù)據(jù)解析部件。
19. 根據(jù)權(quán)利要求18所述的元數(shù)據(jù)再生成裝置,其特征在于它備有,對(duì)描述了元數(shù)據(jù)中包含的描述符的出現(xiàn)位置和出現(xiàn)頻度的提示 信息進(jìn)行解析的部件;和用被分析后的上述提示信息,判斷是否全部解析了與出現(xiàn)位置對(duì) 應(yīng)的描述符或者是否結(jié)束了與出現(xiàn)頻度相當(dāng)?shù)慕馕龅脑獢?shù)據(jù)解析部 件。
20. 根據(jù)權(quán)利要求18所述的元數(shù)據(jù)再生成裝置,其特征在于它備有,在再生成元數(shù)據(jù)后,再生成與已經(jīng)再生成的元數(shù)據(jù)對(duì)應(yīng)的提示信 息的部件。
21. —種元數(shù)據(jù)分發(fā)裝置,該元數(shù)據(jù)分發(fā)裝置分發(fā)從元數(shù)據(jù)只提 取適合于元數(shù)據(jù)接收裝置的能力和通信環(huán)境、用戶要求中的某一個(gè)的 描述的元數(shù)據(jù)進(jìn)行再構(gòu)成,其特征在于它備有,對(duì)描述了元數(shù)據(jù)中包含的描述符的名稱或識(shí)別符的提示信息進(jìn) 行解析的提示信息解析部件;和用被分析后的上述提示信息,判斷在元數(shù)據(jù)中是否包含再生成后 的元數(shù)據(jù)所需的描述的元數(shù)據(jù)解析部件。
22. 根據(jù)權(quán)利要求21所述的元數(shù)據(jù)分發(fā)裝置,其特征在于它備有,對(duì)描述了元數(shù)據(jù)中包含的描述符的出現(xiàn)位置和出現(xiàn)頻度的提示 信息進(jìn)行解析的部件;和用被分析后的上述提示信息,判斷是否全部解析了與出現(xiàn)位置對(duì) 應(yīng)的描述符或者是否結(jié)束了與出現(xiàn)頻度相當(dāng)?shù)慕馕龅脑獢?shù)據(jù)解析部 件。
23. —種"內(nèi)容"檢索裝置,該"內(nèi)容"檢索裝置用元數(shù)據(jù)檢索"內(nèi) 容",其特征在于它備有, 對(duì)描述了元數(shù)據(jù)中包含的描述符的名稱或識(shí)別符的提示信息進(jìn)行解析的提示信息解析部件;和用被分析后的上述提示信息,判斷是否包含用于檢索的描述符的 元數(shù)據(jù)解析部件。
24.根據(jù)權(quán)利要求23所述的"內(nèi)容"檢索裝置,其特征在于它備有,對(duì)描述了元數(shù)據(jù)中包含的描述符的出現(xiàn)位置和出現(xiàn)頻度的提示 信息進(jìn)行解析的部件;和用被分析后的上述提示信息,判斷是否全部解析了與出現(xiàn)位置對(duì) 應(yīng)的描述符或者是否結(jié)束了與出現(xiàn)個(gè)數(shù)相當(dāng)?shù)慕馕龅脑獢?shù)據(jù)解析部 件。
25,一種再生成條件設(shè)定裝置,其特征在于它備有,取得根據(jù)以下8中提示信息描述方法中的任意一項(xiàng)提示信息描 述方法生成的提示信息和與元數(shù)據(jù)再生成有關(guān)的外部條件,解析取得 的提示信息的部件;和用被分析后的上述提示信息和與上述元數(shù)據(jù)再生成有關(guān)的外部 條件,設(shè)定與元數(shù)據(jù)再生成有關(guān)的條件的部件,其中所述提示信息描述方法包括第1提示信息描述方法,描述元數(shù)據(jù)中包含的描述符的名稱或識(shí) 別符,作為對(duì)由描述"內(nèi)容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè)或多個(gè) 描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作時(shí)的提示信息;第2提示信息描迷方法,描述元數(shù)據(jù)中包含的各描述符可以取得 的值的范圍,作為對(duì)由描述"內(nèi)容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè) 或多個(gè)描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作時(shí)的提示信息;第3提示信息描述方法,描述元數(shù)據(jù)中包含的描述符的出現(xiàn)個(gè)數(shù) 和出現(xiàn)位置,作為對(duì)由描述"內(nèi)容,,的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè) 或多個(gè)描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作時(shí)的提示信息;第4提示信息描述方法,用描述符固有的識(shí)別符或描述符出現(xiàn)的 分層結(jié)構(gòu)的深度的最大值描述元數(shù)據(jù)中包含的各描述符的出現(xiàn)位置; 第5提示信息描述方法,當(dāng)分層地構(gòu)成元數(shù)據(jù)中包含的描述符 時(shí),描述分層結(jié)構(gòu)的描述符的深度的最大值,作為對(duì)由描述"內(nèi)容"的 有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè)或多個(gè)描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作 時(shí)的提示信息;第6提示信息描述方法,描述元數(shù)據(jù)中包含的描述符的出現(xiàn)個(gè)數(shù) 的總和,作為對(duì)由描述"內(nèi)容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè)或多 個(gè)描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作時(shí)的提示信息;第7提示信息描述方法,描述規(guī)定元數(shù)據(jù)的語(yǔ)法的語(yǔ)法文件的所 在位置,作為對(duì)由描述"內(nèi)容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè)或多 個(gè)描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作時(shí)的提示信息;第8提示信息描述方法,描述指示對(duì)照規(guī)定元數(shù)據(jù)的語(yǔ)法的語(yǔ)法 文件被判斷為持有子要素的描述符實(shí)際上是否包含元數(shù)據(jù)內(nèi)的每個(gè) 子要素的信息,作為對(duì)由描述"內(nèi)容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一 個(gè)或多個(gè)描述符構(gòu)成的元數(shù)據(jù)進(jìn)行操作時(shí)的提示信息。
26. —種"內(nèi)容"再生成裝置,該"內(nèi)容"再生成裝置再生成大于等 于一個(gè)的內(nèi)容以成為適合于內(nèi)容接收裝置的能力和通信環(huán)境、用戶要 求中的某一個(gè)的內(nèi)容,其特征在于它備有,對(duì)描述了由描述"內(nèi)容"的有意義內(nèi)容、結(jié)構(gòu)、特征的一個(gè)或多個(gè) 描述符構(gòu)成的元數(shù)據(jù)中包含的描述符的名稱或識(shí)別符的提示信息進(jìn) 行解析的提示信息解析部件;和用被分析后的上述提示信息,判斷是否包含了再生"內(nèi)容"所需的 描述的元數(shù)據(jù)解析部件。
27. —種元數(shù)據(jù)再生成方法,該元數(shù)據(jù)再生成方法從元數(shù)據(jù),只 提取適合于內(nèi)容接收裝置的能力和通信環(huán)境、用戶要求中的某一個(gè)的 描述進(jìn)行再構(gòu)成,其特征在于它包含,對(duì)描述了元數(shù)據(jù)中包含的描述符的名稱或識(shí)別符的提示信息進(jìn) 行解析,用被分析后的上述提示信息,判斷在元數(shù)據(jù)中是否包含再生 成后的元數(shù)據(jù)所需的描述。
28. —種"內(nèi)容"再生成方法,該"內(nèi)容"再生成方法將大于等于 一個(gè)的"內(nèi)容"再生成為適合于內(nèi)容接收裝置的能力和通信環(huán)境、用戶要求中的某一個(gè)的"內(nèi)容",其特征在于它包含,對(duì)元數(shù)據(jù)中包含的描述符的名稱或識(shí)別符的提示信息進(jìn)行解析, 用被分析后的上述提示信息,判斷是否包含了再生"內(nèi)容"所需的描 述。
29.根據(jù)權(quán)利要求19所述的元數(shù)據(jù)再生成裝置,其特征在于還包括在再生成元數(shù)據(jù)之后,再生成對(duì)應(yīng)于再生成的元數(shù)據(jù)的提示信息 的部件。
全文摘要
將包含運(yùn)動(dòng)圖像和音頻的多媒體“內(nèi)容”分割成多個(gè)場(chǎng)景,對(duì)每個(gè)分割的場(chǎng)景生成元數(shù)據(jù)。除了場(chǎng)景的區(qū)間信息和標(biāo)題外,還能夠生成包含描述上述“內(nèi)容”的分層結(jié)構(gòu)的場(chǎng)景結(jié)構(gòu)信息元數(shù)據(jù)的元數(shù)據(jù)。又,為了再生成更適當(dāng)?shù)脑獢?shù)據(jù),用描述包含在上述元數(shù)據(jù)中的描述符的種類的元數(shù)據(jù)最佳化提示信息,進(jìn)行元數(shù)據(jù)的再生成。
文檔編號(hào)G06F17/30GK101132528SQ20071016221
公開(kāi)日2008年2月27日 申請(qǐng)日期2003年3月20日 優(yōu)先權(quán)日2002年4月12日
發(fā)明者乙井研二, 關(guān)口俊一, 守屋芳美, 小川文伸, 山田悅久, 淺井光太郎, 西川博文, 黑田慎一 申請(qǐng)人:三菱電機(jī)株式會(huì)社