專利名稱：用于識(shí)別運(yùn)動(dòng)圖像內(nèi)容中包含的靜止圖像的裝置和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及內(nèi)容捜索裝置、內(nèi)容捜索方法和程序。更具體而言，本發(fā)明涉及以更易理解的方式顯示在運(yùn)動(dòng)圖像內(nèi)容中搜索圖像的結(jié)果以供用戶確認(rèn)的內(nèi)容捜索裝置、內(nèi)容搜索方法和程序。
背景技術(shù)：
下文中提出了ー些針對(duì)圖像(運(yùn)動(dòng)圖像)內(nèi)容的圖像搜索的技木。當(dāng)要顯示針對(duì)圖像內(nèi)容的圖像搜索的結(jié)果時(shí)，慣常的做法是顯示通過(guò)搜索獲得的內(nèi)容的第一幀的圖像以及該內(nèi)容的代表圖像?；蛘?，如果作為捜索的結(jié)果從內(nèi)容中檢測(cè)到與搜索圖像相對(duì)應(yīng)的幀，則顯示這些幀。
另外，存在這樣的技術(shù)，即，給定搜索結(jié)果的列表，允許檢索到的內(nèi)容被選擇性再現(xiàn)以供圖像確認(rèn)，比如在例如日本專利申請(qǐng)?jiān)缙诠?003-289487中描述的那種。另外，在編輯內(nèi)容的處理中，沿著時(shí)間軸指示內(nèi)容的音頻信號(hào)的波形的時(shí)間線顯示近年來(lái)已被用于讓用戶更好地認(rèn)識(shí)到被編輯的內(nèi)容的時(shí)間長(zhǎng)度和再現(xiàn)位置。

發(fā)明內(nèi)容
然而，如果從搜索通常獲得多個(gè)結(jié)果，則傳統(tǒng)的技術(shù)不會(huì)使得捜索結(jié)果能夠作為運(yùn)動(dòng)圖像被相互比較。結(jié)果，很難或者不可能基于搜索結(jié)果來(lái)比較檢索到的內(nèi)容的內(nèi)部包含什么。例如，根據(jù)傳統(tǒng)技木，縮略圖或代表圖像作為搜索結(jié)果被顯示。用戶在比較這些縮略圖或代表圖像所代表的多個(gè)內(nèi)容時(shí)，除了從視覺(jué)上相互比較來(lái)自多個(gè)搜索結(jié)果的這些縮略圖或代表圖像以外，別無(wú)選擇。另外，根據(jù)傳統(tǒng)技術(shù)，包括作為搜索的結(jié)果獲得的圖像的每個(gè)內(nèi)容可被再現(xiàn)以供確認(rèn)。然而，很難或者不可能同時(shí)再現(xiàn)多個(gè)搜索結(jié)果以便比較。技術(shù)方案本發(fā)明是鑒于上述情況而作出的，并且提供了用于以更易理解的方式顯示在運(yùn)動(dòng)圖像內(nèi)容中捜索的結(jié)果以供用戶確認(rèn)的布置。根據(jù)ー個(gè)實(shí)施例，提供了用于識(shí)別ー個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的ー個(gè)或多個(gè)靜止圖像的裝置。該裝置包括識(shí)別單元，該識(shí)別単元被配置為識(shí)別運(yùn)動(dòng)圖像內(nèi)容中包括的具有與一個(gè)或多個(gè)特定特征很相像的至少ー個(gè)特征的ー個(gè)或多個(gè)靜止圖像。顯示控制器被配置為使得在與運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的時(shí)間線上顯示運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的位置。優(yōu)選地，識(shí)別單元識(shí)別每個(gè)運(yùn)動(dòng)圖像內(nèi)容中的包含具有與特定特征很相像的特征的靜止圖像的場(chǎng)景；并且所述識(shí)別出的場(chǎng)景被顯示。在ー個(gè)有利的實(shí)施例中，不同的運(yùn)動(dòng)圖像內(nèi)容被同時(shí)顯示。在另ー實(shí)施例中，顯示控制器使得在共同的時(shí)間線軸上對(duì)齊顯示運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像所位于的位置。在另ー實(shí)施例中，運(yùn)動(dòng)圖像內(nèi)容包括與運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的音頻信息，并且顯示控制器使得顯示運(yùn)動(dòng)圖像內(nèi)容的各個(gè)場(chǎng)景中的音頻信息的信號(hào)波形的時(shí)間線。在另ー實(shí)施例中，顯示控制器使得顯示與運(yùn)動(dòng)圖像內(nèi)容之中的各個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的標(biāo)記，該標(biāo)記表示各個(gè)運(yùn)動(dòng)圖像內(nèi)容中的場(chǎng)景的持續(xù)時(shí)間。有利地，顯示控制器使得運(yùn)動(dòng)圖像內(nèi)容被再現(xiàn)，并且使得沿著上述時(shí)間線顯示表示運(yùn)動(dòng)圖像內(nèi)容的當(dāng)前再現(xiàn)位置的移動(dòng)滑塊。作為ー個(gè)特征，多個(gè)運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像被同時(shí)顯示。
本發(fā)明的有利效果 從而，可以以更易理解的方式顯示在運(yùn)動(dòng)圖像內(nèi)容中搜索的結(jié)果以供用戶確認(rèn)。


圖I是示出作為本發(fā)明的一個(gè)實(shí)施例的內(nèi)容搜索裝置的典型結(jié)構(gòu)的框圖。圖2是示出典型搜索圖像的示意圖。圖3是示出搜索結(jié)果的典型顯示畫(huà)面的示意圖。圖4是示出在圖3的畫(huà)面上再現(xiàn)的內(nèi)容的典型畫(huà)面的示意圖。圖5是示出從圖4的狀態(tài)起隨著時(shí)間的流逝進(jìn)ー步產(chǎn)生的內(nèi)容的典型畫(huà)面的示意圖。圖6是示出反復(fù)再現(xiàn)的所選場(chǎng)景的典型畫(huà)面的示意圖。圖7是僅提取和顯示包括與搜索圖像相似的圖像的場(chǎng)景的典型畫(huà)面的示意圖。圖8是說(shuō)明典型內(nèi)容輸入處理的流程圖。圖9是說(shuō)明典型捜索結(jié)果顯示處理的流程圖。圖10是示出個(gè)人計(jì)算機(jī)的典型結(jié)構(gòu)的框圖。
具體實(shí)施例方式參考附圖，圖I是示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的內(nèi)容捜索裝置的典型結(jié)構(gòu)的框圖。此內(nèi)容捜索裝置10是讓多個(gè)運(yùn)動(dòng)圖像內(nèi)容被存儲(chǔ)在媒體存檔庫(kù)22中并且搜索存儲(chǔ)的內(nèi)容以尋找包括輸入搜索圖像的內(nèi)容的裝置。如圖I中所示，內(nèi)容捜索裝置10包括內(nèi)容輸入部21、媒體存檔庫(kù)22、圖像處理部23、元數(shù)據(jù)數(shù)據(jù)庫(kù)24以及圖像特征量數(shù)據(jù)庫(kù)25。另外，內(nèi)容捜索裝置10包括捜索圖像輸入部31、圖像特征量提取部32、搜索部33以及搜索結(jié)果輸出部34。內(nèi)容輸入部21接收內(nèi)容數(shù)據(jù)的輸入。如上所述，內(nèi)容是根據(jù)需要可包括聲音和字幕的運(yùn)動(dòng)圖像內(nèi)容。例如，這些內(nèi)容可以是作為要廣播的TV節(jié)目的一部分被編輯的內(nèi)容。媒體存檔庫(kù)22存儲(chǔ)從內(nèi)容輸入部21輸入的內(nèi)容數(shù)據(jù)。例如，媒體存檔庫(kù)22存儲(chǔ)配備有用于標(biāo)識(shí)各個(gè)內(nèi)容的標(biāo)識(shí)信息的大量?jī)?nèi)容數(shù)據(jù)并且允許根據(jù)需要檢索和輸出數(shù)據(jù)。圖像處理部23分析從內(nèi)容輸入部21提供來(lái)的內(nèi)容數(shù)據(jù)并且從所提供的內(nèi)容中提取元數(shù)據(jù)。在此上下文中，元數(shù)據(jù)通常指的是關(guān)于內(nèi)容的場(chǎng)景變化點(diǎn)的信息，和關(guān)于提供后文所述的時(shí)間線顯示所必要的時(shí)間點(diǎn)的信息，以及文件名和數(shù)據(jù)大小。另外，元數(shù)據(jù)可包括諸如內(nèi)容中的音頻信號(hào)的波形之類的信息。圖像處理部23提取的元數(shù)據(jù)用于如后文所述基于時(shí)間線顯示的內(nèi)容。例如，圖像處理部23提取的元數(shù)據(jù)與內(nèi)容標(biāo)識(shí)信息相對(duì)應(yīng)地被存儲(chǔ)在元數(shù)據(jù)數(shù)據(jù)庫(kù)24中。另外，圖像處理部23分析從內(nèi)容輸入部21提供來(lái)的內(nèi)容數(shù)據(jù)，并且從所提供的內(nèi)容中提取圖像特征量。在此上下文中，圖像特征量是在后文所述的搜索部33執(zhí)行的處理中用來(lái)獲得與搜索圖像的相似度的信息。例如，在構(gòu)成內(nèi)容的一部分的單幀靜止圖像被分割成多個(gè)預(yù)定區(qū)域的情況下，可利用構(gòu)成圖像特征量的信息來(lái)描述這些區(qū)域中的每ー個(gè)的代表色。又例如，圖像特征量可以是由單幀靜止圖像的像素值的直方圖形成的信息。作為另一示例，圖像特征量可由在捜索部33進(jìn)行的處理中提供與搜索圖像的相似度的任何其他信息構(gòu)成。
圖像處理部23提取的圖像特征量通常與內(nèi)容標(biāo)識(shí)信息和幀號(hào)相對(duì)應(yīng)地被存儲(chǔ)到圖像特征量數(shù)據(jù)庫(kù)25中。搜索圖像輸入部31接收作為靜止圖像的搜索圖像的輸入。例如，搜索圖像可以是由用戶選擇的任何圖像。搜索圖像被輸入，由此媒體存檔庫(kù)22被捜索以尋找存儲(chǔ)的內(nèi)容中與輸入的搜索圖像相似的那些圖像。與圖像處理部23 —祥，圖像特征量提取部32從通過(guò)捜索圖像輸入部31輸入的搜索圖像中提取ー個(gè)或多個(gè)特定的圖像特征。捜索部33根據(jù)預(yù)定的原則將圖像特征量提取部32從搜索圖像中提取的圖像特征量(即ー個(gè)或多個(gè)特定的圖像特征)與存儲(chǔ)在圖像特征量數(shù)據(jù)庫(kù)25中的圖像特征量相比較。通過(guò)該比較，捜索部33以數(shù)值的形式計(jì)算一方面的搜索圖像的圖像特征量與另一方面的存儲(chǔ)在圖像特征量數(shù)據(jù)庫(kù)25中的構(gòu)成每個(gè)內(nèi)容的每個(gè)單幀靜止圖像的圖像特征量之間的相似度。例如，搜索部33確定具有與搜索圖像的圖像特征量的相似度高于預(yù)定閾值的圖像特征量的靜止圖像。捜索部33隨后向捜索結(jié)果輸出部34提供從中檢測(cè)到這些靜止圖像的內(nèi)容的標(biāo)識(shí)信息以及這些圖像的幀號(hào)，從而識(shí)別出內(nèi)容中與捜索圖像很相像的靜止圖像。如果從單個(gè)內(nèi)容中檢測(cè)到多個(gè)擁有與搜索圖像的圖像特征量的相似度高于預(yù)定閾值的圖像特征量的靜止圖像，則搜索部33通常向捜索結(jié)果輸出部34提供具有最高相似度的靜止圖像的幀號(hào)。以上述方式，捜索部33確定從中檢測(cè)到與搜索圖像具有高相似度的靜止圖像的幀(即，與搜索圖像相似的靜止圖像的幀)的內(nèi)容，并且將這些內(nèi)容通知給搜索結(jié)果輸出部34。基于從搜索部33提供來(lái)的關(guān)于內(nèi)容的標(biāo)識(shí)信息，捜索結(jié)果輸出部34從元數(shù)據(jù)數(shù)據(jù)庫(kù)24中檢索出內(nèi)容的元數(shù)據(jù)。并且搜索結(jié)果輸出部34包括顯示控制器以基于從搜索部33饋送來(lái)的靜止圖像的幀號(hào)和檢索到的元數(shù)據(jù)來(lái)生成用于顯示搜索結(jié)果的顯示數(shù)據(jù)。從搜索結(jié)果輸出部34輸出的顯示數(shù)據(jù)通常被發(fā)送到未示出的顯示設(shè)備以便作為圖像來(lái)顯示，如后文所述。在替換實(shí)施例中，顯示設(shè)備可被包括在捜索結(jié)果輸出部34中。接下來(lái)說(shuō)明內(nèi)容捜索裝置10如何顯示搜索的結(jié)果的示例。圖2是示出通過(guò)搜索圖像輸入部31輸入的典型搜索圖像(靜止圖像)的示意圖。此示例構(gòu)成指示導(dǎo)彈及其發(fā)射臺(tái)的圖像。
搜索圖像可被布置為被顯示在顯示設(shè)備上或者不被顯示在其上。圖3是基于從搜索結(jié)果輸出部34輸出的顯示數(shù)據(jù)在未示出的顯示設(shè)備上顯示的典型畫(huà)面的示意圖。圖3指示了當(dāng)在圖2的搜索圖像通過(guò)搜索圖像輸入部31輸入的情況下在媒體存檔庫(kù)22中存儲(chǔ)的內(nèi)容中執(zhí)行了搜索時(shí)顯示的畫(huà)面的示例。圖3中所示的畫(huà)面具有捜索結(jié)果顯示區(qū)域51。此示例示出了指示七個(gè)內(nèi)容的捜索結(jié)果顯示區(qū)域51，從這七個(gè)內(nèi)容中檢測(cè)到了與圖2的搜索圖像具有高相似度的靜止圖像。并且搜索結(jié)果顯示區(qū)域51具有區(qū)域51-1至51-7，其中每ー個(gè)顯示關(guān)于上述七個(gè)內(nèi)容中的姆ー個(gè)的信息。區(qū)域51-1顯不關(guān)于第一內(nèi)容的信息。
靜止圖像顯示區(qū)域52-1是顯示從第一內(nèi)容中檢測(cè)到的與搜索圖像具有高相似度的靜止圖像的區(qū)域。在靜止圖像顯示區(qū)域52-1中的靜止圖像上方示出的標(biāo)注“4113889.asf ”是標(biāo)識(shí)第一內(nèi)容的標(biāo)識(shí)信息。時(shí)間線顯示區(qū)域53-1是提供關(guān)于第一內(nèi)容的時(shí)間線顯示的區(qū)域。在圖中，水平方向?qū)?yīng)于內(nèi)容的時(shí)間軸。在此上下文中，關(guān)于內(nèi)容的時(shí)間線顯示是在以使得用戶可從視覺(jué)上認(rèn)識(shí)到內(nèi)容的時(shí)間長(zhǎng)度以及內(nèi)容內(nèi)的場(chǎng)景和幀的時(shí)間位置的方式顯示給定內(nèi)容時(shí)提供的。并且，雖然關(guān)于內(nèi)容的時(shí)間線顯示涉及以某種方式顯示所涉內(nèi)容，但這并不意味著該內(nèi)容將被作為運(yùn)動(dòng)圖像再現(xiàn)和顯示。例如，給定內(nèi)容的時(shí)間線顯示意味著表示該內(nèi)容或其成分的圖形、波形、符號(hào)等等被沿著時(shí)間軸顯示。時(shí)間線顯示區(qū)域53-1中顯示的倒三角符號(hào)61-1指示在靜止圖像顯示區(qū)域52-1中顯示的第一內(nèi)容的該靜止圖像幀的時(shí)間位置。時(shí)間線顯示區(qū)域53-1中示出的波形顯示區(qū)域62-1是顯示第一內(nèi)容中包括的聲音的信號(hào)波形的區(qū)域?；蛘?，波形顯示區(qū)域62-1可顯示圖像的波形。又或者，時(shí)間線顯示區(qū)域53-1可被布置為不包括波形顯示區(qū)域62-1。時(shí)間線顯示區(qū)域53-1中示出的場(chǎng)景顯示區(qū)域63-1是顯示第一內(nèi)容中的場(chǎng)景的表示的區(qū)域。場(chǎng)景顯示區(qū)域63-1以寬度(即長(zhǎng)度)對(duì)應(yīng)于所涉場(chǎng)景的時(shí)間長(zhǎng)度的矩形的形式顯示第一內(nèi)容中的每個(gè)場(chǎng)景的表示。也就是說(shuō)，可看到場(chǎng)景顯示區(qū)域63-1顯示三個(gè)矩形，這意味著第一內(nèi)容由三個(gè)場(chǎng)景構(gòu)成。每個(gè)場(chǎng)景的開(kāi)始點(diǎn)和結(jié)束點(diǎn)是基于從元數(shù)據(jù)數(shù)據(jù)庫(kù)24檢索到的元數(shù)據(jù)中包括的場(chǎng)景變化點(diǎn)信息來(lái)確定的。每個(gè)場(chǎng)景的開(kāi)始點(diǎn)和結(jié)束點(diǎn)隨后用于在場(chǎng)景顯示區(qū)域63-1中顯示與所涉場(chǎng)景相對(duì)應(yīng)的矩形。場(chǎng)景顯示區(qū)域63-1中的每個(gè)矩形是以代表相應(yīng)場(chǎng)景的顏色顯示的。給定場(chǎng)景的代表色通常可被確定為與構(gòu)成所涉場(chǎng)景內(nèi)的所有幀的像素值之中的最大數(shù)目的像素值相對(duì)應(yīng)的顔色。或者，每個(gè)場(chǎng)景的代表色可按某種其他適當(dāng)方式來(lái)確定。簡(jiǎn)言之，適合于所關(guān)注的場(chǎng)景的任何顔色可被為該場(chǎng)景的代表色。例如，可通過(guò)在生成顯示數(shù)據(jù)時(shí)分析相應(yīng)內(nèi)容的數(shù)據(jù)來(lái)確定給定場(chǎng)景的代表色。作為另ー示例，可預(yù)先確定每個(gè)場(chǎng)景的代表色并將其包括在相關(guān)元數(shù)據(jù)中。類似地，區(qū)域51-2顯示關(guān)于第二內(nèi)容的信息。也就是說(shuō)，靜止圖像顯示區(qū)域52-2顯示從第二內(nèi)容中檢測(cè)到的與搜索圖像具有高相似度的靜止圖像。時(shí)間線顯示區(qū)域53-2是提供第二內(nèi)容的時(shí)間線顯示的區(qū)域。
另外，區(qū)域51-3至51-7以與區(qū)域51_1和51_2相同的方式分別顯示關(guān)于第三至第七內(nèi)容的信息。在接下來(lái)的描述中，只要無(wú)需區(qū)分各個(gè)區(qū)域或符號(hào)，各個(gè)靜止圖像顯示區(qū)域可被統(tǒng)稱為靜止圖像顯示區(qū)域52 ;各個(gè)時(shí)間線顯示區(qū)域可類似地被統(tǒng)稱為時(shí)間線顯示區(qū)域53 ；并且各個(gè)符號(hào)也可被統(tǒng)稱為符號(hào)61。如圖3中所示，時(shí)間線顯示區(qū)域53-1至53-7在水平方向上具有相同長(zhǎng)度。并且在時(shí)間線顯示區(qū)域53-1至53-7中，符號(hào)61-1至61-7在圖3的水平方向上具有相同位置。也就是說(shuō)，這些符號(hào)在時(shí)間線顯示區(qū)域的共同軸上對(duì)齊，從而描繪了與捜索圖像很相像的靜止圖像幀在各個(gè)內(nèi)容的場(chǎng)景中的位置。 也就是說(shuō)，搜索結(jié)果輸出部34如下確定各個(gè)顯示區(qū)域的顯示位置。在第一至第七內(nèi)容中，從其開(kāi)始時(shí)間直到符號(hào)61的時(shí)間長(zhǎng)度最長(zhǎng)的內(nèi)容的開(kāi)始位置與時(shí)間線顯示區(qū)域53的最左側(cè)位置對(duì)齊。在圖3中，第四內(nèi)容的開(kāi)始位置與時(shí)間線顯示區(qū)域53的最左側(cè)位置對(duì)齊。另外，在第一至第七內(nèi)容中，從其結(jié)束時(shí)間直到符號(hào)61的時(shí)間長(zhǎng)度最長(zhǎng)的內(nèi)容的結(jié)束位置與時(shí)間線顯示區(qū)域53的最右側(cè)位置對(duì)齊。在圖3中，第四和第五內(nèi)容的結(jié)束位置與時(shí)間線顯示區(qū)域53的最右側(cè)位置對(duì)齊。由于搜索部33已經(jīng)如上所述確定了與搜索圖像具有高相似度的靜止圖像的幀號(hào)，所以可以確定從給定內(nèi)容的開(kāi)始時(shí)間或結(jié)束時(shí)間到符號(hào)61的時(shí)間長(zhǎng)度。并且，基于第四和第五內(nèi)容的時(shí)間長(zhǎng)度，確定水平方向上時(shí)間線顯示區(qū)域53的單位長(zhǎng)度所對(duì)應(yīng)的時(shí)間。例如，搜索結(jié)果輸出部34將圖3中顯示的符號(hào)61的水平方向上的位置定義為時(shí)間線顯示區(qū)域53的中心。這進(jìn)而確定了區(qū)域51-1至51-7中顯示的波形顯示區(qū)域62和場(chǎng)景顯示區(qū)域63的位置。并且搜索結(jié)果輸出部34生成用于顯示如圖3中所示那樣的圖像的顯示數(shù)據(jù)。在此示例中，時(shí)間線顯示區(qū)域53的波形顯示區(qū)域62中顯示的波形被示為是與時(shí)間軸一致地顯示的。或者，可以以某種其他適當(dāng)?shù)姆绞教峁﹥?nèi)容的時(shí)間線顯示。例如，時(shí)間線顯示區(qū)域53如上所述可被布置為不包括波形顯示區(qū)域62。簡(jiǎn)言之，只需要以使得用戶可容易認(rèn)識(shí)到其時(shí)間軸的方式來(lái)顯示內(nèi)容。并且圖3中所示的按鈕71通常被用作構(gòu)成⑶I的一部分的捜索開(kāi)始按鈕。例如，在圖2中所示的捜索圖像輸入之后，操作按鈕71將執(zhí)行對(duì)與輸入的搜索圖像具有高相似度的靜止圖像的捜索。也就是說(shuō)，圖3的畫(huà)面是在用戶操作了按鈕71后顯示的畫(huà)面。圖3中所示的按鈕72通常構(gòu)成⑶I的一部分并且用于發(fā)出在圖3中的區(qū)域51_1至51-7中再現(xiàn)內(nèi)容的命令。類似地，圖3中的按鈕73通常用作停止通過(guò)操作按鈕72而開(kāi)始的內(nèi)容的再現(xiàn)的按鈕。如果在圖3的狀態(tài)中按鈕72被操作，則區(qū)域51-1至51_7中的內(nèi)容開(kāi)始被再現(xiàn)，這使得圖4中所示的畫(huà)面被顯示。隨著在圖4的畫(huà)面上開(kāi)始內(nèi)容的再現(xiàn)，指示再現(xiàn)位置的移動(dòng)滑塊64出現(xiàn)在時(shí)間線顯示區(qū)域53中?；瑝K64通常被顯示為紅色的矩形框。隨著時(shí)間流逝，滑塊移動(dòng)，并且其長(zhǎng)度在圖4的水平方向上増大。滑塊64的最右側(cè)位置表示內(nèi)容的當(dāng)前再現(xiàn)位置。在圖4的示例中，從內(nèi)容再現(xiàn)開(kāi)始以來(lái)只經(jīng)過(guò)了較短的時(shí)間，從而只有第四內(nèi)容的運(yùn)動(dòng)圖像正被再現(xiàn)。也就是說(shuō)，滑塊64-4被顯示為重疊在波形顯示區(qū)域62-4中出現(xiàn)的波形上?；瑝K64-4的最右側(cè)位置大致位于場(chǎng)景顯示區(qū)域63-4中顯示的最左側(cè)矩形的中心。同時(shí)，滑塊64-1至64-3和64-5至64_7的最右側(cè)位置尚未到達(dá)場(chǎng)景顯示區(qū)域63_1至63_3和63-5至63-7中分別顯示的最左側(cè)矩形。也就是說(shuō)，與顯示區(qū)域51-1至51_3和51_5至51-7相關(guān)聯(lián)的第一至第三和第五至第七內(nèi)容的再現(xiàn)尚未開(kāi)始。從而，在圖4的示例中，只有第四內(nèi)容的運(yùn)動(dòng)圖像當(dāng)前正被再現(xiàn)；被再現(xiàn)的圖像被顯示在再現(xiàn)圖像顯示區(qū)域54-4中。也就是說(shuō)，再現(xiàn)圖像顯示區(qū)域54-4顯示通過(guò)再現(xiàn)第四內(nèi)容而獲得的運(yùn)動(dòng)圖像。由于在圖4的示例中內(nèi)容已經(jīng)開(kāi)始被再現(xiàn)，所以按鈕72充當(dāng)在被操作時(shí)暫時(shí)停止內(nèi)容再現(xiàn)的“暫?！卑粹o。隨著從如圖4中所示顯示的畫(huà)面的狀態(tài)起更多時(shí)間流逝，圖5中所示的畫(huà)面出現(xiàn)。 在圖5的示例中，隨著從內(nèi)容再現(xiàn)開(kāi)始以來(lái)更多的時(shí)間流逝，滑塊64被示為在水平方向上比圖4中更長(zhǎng)。與此相伴，在圖5的示例中除了第四內(nèi)容以外第二和第三內(nèi)容現(xiàn)在也被再現(xiàn)。也就是說(shuō)，滑塊64-2至64-4被示為分別重疊在波形顯示區(qū)域62_2至62_4中顯示的波形上。并且滑塊64-2至64-4的最右側(cè)位置各自位于場(chǎng)景顯示區(qū)域63-2至63_4中顯示的矩形之一上。從而，在圖5的示例中，第二至第四內(nèi)容的運(yùn)動(dòng)圖像被再現(xiàn)。再現(xiàn)圖像被顯示在再現(xiàn)圖像顯示區(qū)域54-2至54-4中。也就是說(shuō)，再現(xiàn)圖像顯示區(qū)域54-2至54_4分別顯示通過(guò)再現(xiàn)第二至第四內(nèi)容而獲得的運(yùn)動(dòng)圖像。隨著從顯示圖4的畫(huà)面的狀態(tài)以來(lái)更多的時(shí)間流逝，滑塊64在圖5的水平方向上進(jìn)ー步移動(dòng)。然后，第五、第六、第一和第七內(nèi)容開(kāi)始被ー個(gè)接ー個(gè)地再現(xiàn)。從而，再現(xiàn)圖像顯示區(qū)域54-5、54-6、54-1和54_7顯示通過(guò)再現(xiàn)相應(yīng)內(nèi)容而獲得的運(yùn)動(dòng)圖像。也就是說(shuō)，不同的運(yùn)動(dòng)圖像內(nèi)容被同時(shí)顯示。并且，當(dāng)滑塊64的最右側(cè)位置在圖5的垂直方向上與符號(hào)61 —致時(shí)，靜止圖像顯示區(qū)域52中示出的圖像被顯示在再現(xiàn)圖像顯示區(qū)域54中，因?yàn)槊總€(gè)內(nèi)容中的該圖像現(xiàn)在正被再現(xiàn)。這使得用戶可以選擇性地查看第一至第七內(nèi)容是如何被編輯的以及它們的與搜索圖像具有高相似度的圖像是如何被顯示的。也就是說(shuō)，用戶不僅能夠確認(rèn)對(duì)象圖像(即，與搜索圖像相似的圖像)位于內(nèi)容中的何處，而且能夠以運(yùn)動(dòng)圖像的形式比較每個(gè)對(duì)象圖像前后的圖像。另外，在顯示內(nèi)容捜索裝置10執(zhí)行的捜索的結(jié)果的畫(huà)面上，用戶可選擇時(shí)間線顯示區(qū)域53的場(chǎng)景顯示區(qū)域63中的矩形，這使得與所選矩形相對(duì)應(yīng)的場(chǎng)景被反復(fù)再現(xiàn)。如上所述，場(chǎng)景顯示區(qū)域63中的每個(gè)矩形是對(duì)應(yīng)于所涉內(nèi)容的相關(guān)場(chǎng)景來(lái)顯示的。例如，假定用戶希望反復(fù)再現(xiàn)包括關(guān)于第二內(nèi)容的靜止圖像顯示區(qū)域52-2中顯示的圖像的場(chǎng)景。在此情況下，用戶選擇時(shí)間線顯示區(qū)域53-2的場(chǎng)景顯示區(qū)域63-2中顯示的矩形之中從左側(cè)起的第五個(gè)矩形。基于在圖5的垂直方向上符號(hào)61-2的位置，可以看出在靜止圖像顯示區(qū)域52-2中顯示的圖像被包括在第二內(nèi)容的第五場(chǎng)景中。在該情況下，顯示圖6中所示的畫(huà)面。在圖6的示例中，在時(shí)間線顯示區(qū)域53-2的場(chǎng)景顯示區(qū)域63-2中顯示的矩形之中，選擇并突出從左側(cè)起的第五矩形63-2a。這使得再現(xiàn)圖像顯示區(qū)域54-2將與矩形63-2a相對(duì)應(yīng)的場(chǎng)景的運(yùn)動(dòng)圖像從所涉場(chǎng)景的開(kāi)始時(shí)間到結(jié)束時(shí)間反復(fù)顯示。這里假定場(chǎng)景顯示區(qū)域63中的每個(gè)矩形被顯示為⑶I的一部分并且用戶通常操作未示出的指點(diǎn)設(shè)備等 來(lái)選擇場(chǎng)景顯示區(qū)域63中的任何矩形。在該情況下，不僅第二內(nèi)容，而且第一以及第三至第七內(nèi)容也被反復(fù)再現(xiàn)。也就是說(shuō)，再現(xiàn)圖像顯示區(qū)域54將所有內(nèi)容中與矩形63-2a相對(duì)應(yīng)的那些場(chǎng)景的運(yùn)動(dòng)圖像從每個(gè)場(chǎng)景的開(kāi)始時(shí)間顯示到結(jié)束時(shí)間。例如，在第一內(nèi)容的情況下，在再現(xiàn)圖像顯示區(qū)域54-1中反復(fù)顯示從第二場(chǎng)景的中途點(diǎn)到第三場(chǎng)景的中途點(diǎn)的運(yùn)動(dòng)圖像。另外，在第三內(nèi)容的情況下，在再現(xiàn)圖像顯示區(qū)域54-3中反復(fù)顯示從第六場(chǎng)景的開(kāi)頭附近經(jīng)過(guò)整個(gè)第七場(chǎng)景直到第八場(chǎng)景的中途點(diǎn)的運(yùn)動(dòng)圖像。如上所述，無(wú)論從哪個(gè)內(nèi)容中選擇了哪個(gè)場(chǎng)景，捜索結(jié)果顯示區(qū)域51中顯示的所有內(nèi)容都被再現(xiàn)。在圖6的示例中，滑塊64的最右側(cè)位置位于符號(hào)61的稍右側(cè)。因此，在靜止圖像顯示區(qū)域52中示出的圖像之后立即再現(xiàn)的圖像被顯示在再現(xiàn)圖像顯示區(qū)域54中。在此情況下，正被發(fā)射的導(dǎo)彈的圖像被顯示在再現(xiàn)圖像顯示區(qū)域54中。在圖6的示例中，從場(chǎng)景顯示區(qū)域63-2中顯示的矩形之中選擇從左側(cè)起的第五矩形，從而所有內(nèi)容在與符號(hào)61相對(duì)應(yīng)的位置被再現(xiàn)。從而，靜止圖像顯示區(qū)域52-1至52-7中顯示的圖像分別被包括在再現(xiàn)圖像顯示區(qū)域54-1至54-7中反復(fù)再現(xiàn)的運(yùn)動(dòng)圖像中。利用此布置，用戶能夠通過(guò)關(guān)注各個(gè)內(nèi)容的目標(biāo)圖像來(lái)以運(yùn)動(dòng)圖像的形式比較性地查看各個(gè)內(nèi)容。另外，內(nèi)容捜索裝置10可從內(nèi)容中僅提取包括與搜索圖像相似的圖像的場(chǎng)景。例如，通過(guò)對(duì)內(nèi)容捜索裝置10的未示出的操作部進(jìn)行操作，用戶可發(fā)出顯示包括與搜索圖像相似的圖像的場(chǎng)景的列表的命令。圖7是顯示包括與搜索圖像相似的圖像的場(chǎng)景的列表的典型畫(huà)面的示意圖。這是當(dāng)例如作為利用圖2中的圖像作為搜索圖像在內(nèi)容中捜索的結(jié)果顯示圖3的畫(huà)面時(shí)出現(xiàn)的典型畫(huà)面。也就是說(shuō)，圖7的示例中的搜索圖像和捜索結(jié)果與以上參考圖3所述的那些相同。在圖7中，垂直排列的區(qū)域101-1至101-7顯示第一至第七內(nèi)容中的包括與目標(biāo)或搜索圖像相似的圖像的那些場(chǎng)景。這里，區(qū)域101-1至101-7的水平方向?qū)?yīng)于場(chǎng)景的時(shí)間軸。各個(gè)場(chǎng)景被顯示為長(zhǎng)度反映每個(gè)場(chǎng)景的時(shí)間長(zhǎng)度的矩形112-1至112-7。在圖7中，區(qū)域102-1至102-7顯示從各個(gè)內(nèi)容中檢測(cè)到的作為與搜索圖像具有高相似度的圖像的靜止圖像。也就是說(shuō)，區(qū)域102-1至102-7中顯示的圖像與圖3中的靜止圖像顯示區(qū)域52-1至52-7中顯示的那些相同。在圖7中，倒三角符號(hào)111-1至111-7指向矩形112-1至112-7所表示的場(chǎng)景中的特定位置。這樣由符號(hào)指示的位置包括在區(qū)域102-1至102-7中顯示的圖像。如圖7中所示，矩形112-1至112-7各自是以使得符號(hào)111-1至111-7在圖的垂直方向上處于相同位置的方式來(lái)顯示的。例如，在區(qū)域101-1至101-7中顯示的場(chǎng)景中，從其開(kāi)始時(shí)間直到符號(hào)111的時(shí)間長(zhǎng)度最長(zhǎng)的場(chǎng)景的開(kāi)始位置與區(qū)域101的最左側(cè)位置對(duì)齊。在此情況下，從最上方起的第ニ和第三場(chǎng)景的開(kāi)始位置與區(qū)域101的最左側(cè)位置對(duì)齊。另外，在區(qū)域101-1至101-7中顯示的場(chǎng)景中，從其結(jié)束時(shí)間直到符號(hào)111的時(shí)間長(zhǎng)度最長(zhǎng)的場(chǎng)景的結(jié)束位置與區(qū)域101的最右側(cè)位置對(duì)齊。在此情況下，從最上方起的第六場(chǎng)景的結(jié)束位置與區(qū)域101的最右側(cè)位置對(duì)齊。并且，與從其開(kāi)始時(shí)間直到符號(hào)111的時(shí)間長(zhǎng)度最長(zhǎng)的場(chǎng)景相對(duì)應(yīng)的矩形112-2的最左側(cè)邊緣112_2a被突出顯示，其方式通常是利用特定的顔色(例如紅色)。類似地，與從其結(jié)束時(shí)間直到符號(hào)111的時(shí)間長(zhǎng)度最長(zhǎng)的場(chǎng)景相對(duì)應(yīng)的矩形112-6的最右側(cè)邊緣112-6b被突出顯示，其方式通常是利用特定的顔色(例如藍(lán)色)。當(dāng)如上所述給出顯示時(shí)，用戶可容易地比較整個(gè)場(chǎng)景的時(shí)間長(zhǎng)度、場(chǎng)景的從開(kāi)始時(shí)間直到顯示目標(biāo)圖像的點(diǎn)(即直到符號(hào)111)的時(shí)間長(zhǎng)度，以及場(chǎng)景的從顯示目標(biāo)圖像的點(diǎn)直到結(jié)束時(shí)間的時(shí)間長(zhǎng)度。通過(guò)上述比較，通常當(dāng)要利用蓄積在媒體存檔庫(kù)22中的內(nèi)容數(shù)據(jù)編輯新內(nèi)容吋，容易檢測(cè)適當(dāng)?shù)膱?chǎng)景。另外，可以通過(guò)比如刪除很有可能彼此重疊的場(chǎng)景來(lái)高效地管理媒 體存檔庫(kù)22。另外，即使最后一刻改變了廣播時(shí)間表，也容易確認(rèn)要廣播哪個(gè)內(nèi)容。過(guò)去，當(dāng)顯示在內(nèi)容中進(jìn)行圖像捜索的結(jié)果時(shí)，慣常的做法是顯示作為搜索的結(jié)果獲得的每個(gè)內(nèi)容的第一幀的圖像或者代表圖像。在從內(nèi)容中檢測(cè)到與搜索圖像相對(duì)應(yīng)的幀的情況下，顯示這些幀的圖像。然而，在從搜索獲得多個(gè)結(jié)果的情況下，很難或者不可能利用傳統(tǒng)技術(shù)以運(yùn)動(dòng)圖像的形式比較這些結(jié)果。因此，不可能或者至少很難基于搜索的結(jié)果來(lái)比較內(nèi)容的內(nèi)部包含什么。例如，當(dāng)傳統(tǒng)上作為搜索的結(jié)果顯示縮略圖或代表圖像時(shí)，用戶除了通過(guò)視覺(jué)上查看源于多個(gè)捜索結(jié)果的這些縮略圖或代表圖像來(lái)比較這些內(nèi)容的內(nèi)部包含什么以外，別無(wú)選擇。另外，雖然傳統(tǒng)技術(shù)允許了再現(xiàn)包含從搜索獲得的圖像的每個(gè)內(nèi)容以用于確認(rèn)，但極難同時(shí)比較構(gòu)成作為運(yùn)動(dòng)圖像顯示的多個(gè)內(nèi)容的多個(gè)搜索結(jié)果。與之不同，根據(jù)本發(fā)明，如以上參考圖3至7所述，在運(yùn)動(dòng)圖像內(nèi)容中搜索圖像的結(jié)果可作為多個(gè)運(yùn)動(dòng)圖像內(nèi)容被同時(shí)確認(rèn)。因此，在運(yùn)動(dòng)圖像內(nèi)容中捜索的結(jié)果被以更易理解的方式顯示來(lái)供用戶確認(rèn)。接下來(lái)參考圖8的流程圖說(shuō)明圖I中的內(nèi)容捜索裝置10執(zhí)行的典型內(nèi)容輸入處理。在步驟S21中，內(nèi)容輸入部21接收內(nèi)容數(shù)據(jù)的輸入。如上所述，輸入的內(nèi)容是根據(jù)需要可包括聲音和字幕的運(yùn)動(dòng)圖像內(nèi)容。例如，這些內(nèi)容是作為要廣播的TV節(jié)目的一部分被編輯的內(nèi)容。在步驟S22中，圖像處理部23分析在步驟S21中從內(nèi)容輸入部21提供來(lái)的內(nèi)容數(shù)據(jù)。在步驟S23中，圖像處理部23基于步驟S22中的分析的結(jié)果提取元數(shù)據(jù)。在此上下文中，元數(shù)據(jù)通常指的是關(guān)于內(nèi)容的場(chǎng)景變化點(diǎn)的信息，和關(guān)于提供后文所述的時(shí)間線顯示所必要的時(shí)間點(diǎn)的信息，以及文件名和數(shù)據(jù)大小。在步驟S24中，元數(shù)據(jù)數(shù)據(jù)庫(kù)24存儲(chǔ)在步驟S23中提取的元數(shù)據(jù)。元數(shù)據(jù)通常是與內(nèi)容標(biāo)識(shí)信息相對(duì)應(yīng)地存儲(chǔ)的。在步驟S25中，圖像處理部23基于步驟S22中的分析提取圖像特征量(例如，特定的特征)。在此上下文中，圖像特征量是在捜索部33執(zhí)行的處理中用來(lái)獲得與搜索圖像的相似度的信息。例如，在構(gòu)成內(nèi)容的一部分的單幀靜止圖像被分割成多個(gè)預(yù)定區(qū)域的情況下，可利用構(gòu)成圖像特征量的信息來(lái)描述這些區(qū)域中的每ー個(gè)的代表色。作為另ー示例，圖像特征量可以是由單幀靜止圖像的像素值的直方圖形成的信息。在步驟S26中，圖像特征量數(shù)據(jù)庫(kù)25存儲(chǔ)在步驟S25中提取的圖像特征量。圖像特征量通常是與內(nèi)容標(biāo)識(shí)信息和幀號(hào)相對(duì)應(yīng)地存儲(chǔ)的。在步驟S27中，媒體存檔庫(kù)22存儲(chǔ)在步驟S21中接收到輸入的內(nèi)容的數(shù)據(jù)。通常，媒體存檔庫(kù)22將內(nèi)容數(shù)據(jù)與用于標(biāo)識(shí)各個(gè)內(nèi)容的標(biāo)識(shí)信息一起存儲(chǔ)。內(nèi)容如上所述被輸入并存儲(chǔ)到媒體存檔庫(kù)22中。接下來(lái)參考圖9的流程圖說(shuō)明圖I中的內(nèi)容捜索裝置10執(zhí)行的典型捜索結(jié)果顯示處理。
在步驟S41中，搜索圖像輸入部31接收作為靜止圖像的搜索圖像的輸入。搜索圖像可以是用戶選擇的任何圖像，并且被輸入以捜索媒體存檔庫(kù)22中存儲(chǔ)的內(nèi)容來(lái)尋找與所涉搜索圖像相似的圖像。在步驟S42中，從在步驟S41中通過(guò)搜索圖像輸入部31輸入的搜索圖像中，圖像特征量提取部32以與步驟S25中相同的方式提取圖像特征量。在步驟S44中，搜索部33根據(jù)預(yù)定的原則將在步驟S43中從搜索圖像中提取的圖像特征量與存儲(chǔ)在圖像特征量數(shù)據(jù)庫(kù)25中的圖像特征量相比較。通過(guò)該比較，捜索部33以數(shù)值的形式計(jì)算一方面的搜索圖像的圖像特征量與另一方面的存儲(chǔ)在圖像特征量數(shù)據(jù)庫(kù)25中的構(gòu)成每個(gè)內(nèi)容的每個(gè)單幀靜止圖像的圖像特征量之間的相似度。在步驟S45中，捜索部33確定具有與搜索圖像的圖像特征量的相似度通常高于預(yù)定閾值的圖像特征量的靜止圖像，并且確定關(guān)于從中檢測(cè)到這些靜止圖像的內(nèi)容的標(biāo)識(shí)信息以及這些靜止圖像的幀號(hào)。如果從單個(gè)內(nèi)容中檢測(cè)到多個(gè)擁有與搜索圖像的圖像特征量的相似度高于預(yù)定閾值的圖像特征量的靜止圖像，則搜索部33通常確定具有最高相似度的靜止圖像的幀號(hào)。以上述方式，媒體存檔庫(kù)22中存儲(chǔ)的內(nèi)容被搜索以尋找包括與在步驟S41中接收至IJ輸入的搜索圖像相似的圖像的那些內(nèi)容。在步驟S46中，搜索部33將步驟S45中的搜索的結(jié)果通知給搜索結(jié)果輸出部34。在此情況下，通常向捜索結(jié)果輸出部34提供關(guān)于包括與搜索圖像相似的靜止圖像的內(nèi)容的標(biāo)識(shí)信息以及這些靜止圖像的幀號(hào)。在步驟S47中，捜索結(jié)果輸出部34基于在步驟S46中提供的信息生成用于顯示搜索結(jié)果的顯示數(shù)據(jù)。例如，基于內(nèi)容標(biāo)識(shí)信息，搜索結(jié)果輸出部34從元數(shù)據(jù)數(shù)據(jù)庫(kù)24中讀取關(guān)于所涉內(nèi)容的元數(shù)據(jù)，并且基于靜止圖像的幀號(hào)和檢索到的元數(shù)據(jù)生成用于顯示捜索結(jié)果的顯示數(shù)據(jù)。從搜索結(jié)果輸出部34輸出的顯示數(shù)據(jù)通常被發(fā)送到顯示設(shè)備以便作為圖像來(lái)顯示，如后文所述。其結(jié)果是，例如以上參考圖3所述那樣的畫(huà)面被顯示在顯示設(shè)備上。以后，響應(yīng)于對(duì)顯示畫(huà)面等的⑶I操作，捜索結(jié)果輸出部34生成用于顯示例如圖4至7中所示那樣的畫(huà)面的適當(dāng)顯示數(shù)據(jù)。以上述方式，執(zhí)行搜索結(jié)果顯示處理。
在以上參考圖I所述的示例中，內(nèi)容搜索裝置10被說(shuō)明為包括內(nèi)容輸入部21和圖像處理部23?；蛘撸瑑?nèi)容搜索裝置10可被布置為不包括內(nèi)容輸入部21和圖像處理部23。也就是說(shuō)，只需要通過(guò)搜索各自預(yù)先存儲(chǔ)有數(shù)據(jù)的媒體存檔庫(kù)22、元數(shù)據(jù)數(shù)據(jù)庫(kù)24和圖像特征量數(shù)據(jù)庫(kù)25以尋找包括與搜索圖像相似的圖像的內(nèi)容，來(lái)生成顯示數(shù)據(jù)。并且，在以上描述中，用于顯示內(nèi)容捜索裝置10進(jìn)行的捜索的結(jié)果的顯示畫(huà)面被示為在內(nèi)容的時(shí)間軸被設(shè)定為對(duì)應(yīng)于圖的水平方向的情況下提供內(nèi)容的時(shí)間線顯示?；蛘?，內(nèi)容可按其時(shí)間軸被布置為對(duì)應(yīng)于圖的垂直方向的方式被示出在時(shí)間線顯示上。順便說(shuō)一下，上述一系列處理可用硬件或用軟件來(lái)執(zhí)行。在要執(zhí)行基于軟件的處理的情況下，構(gòu)成軟件的程序可安裝在諸如RAM或非易失性存儲(chǔ)器之類的非暫態(tài)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上，通過(guò)網(wǎng)絡(luò)或從記錄介質(zhì)安裝到包含在專用硬件中的計(jì)算機(jī)中。這種程序可從記錄介質(zhì)安裝到例如圖10中所示的通用計(jì)算機(jī)700那樣的計(jì)算機(jī)或者能夠基于安裝的程序執(zhí)行不同功能的類似設(shè)備中。在圖10中，CPU (中央處理單元)701根據(jù)存儲(chǔ)在ROM (只讀存儲(chǔ)器)702中的程序 或者按照從記錄部708加載到RAM (隨機(jī)訪問(wèn)存儲(chǔ)器)703中的程序執(zhí)行各種處理。另外，RAM 703可容納CPU 701執(zhí)行不同處理所必要的數(shù)據(jù)。CPU 70 U ROM 702和RAM 703經(jīng)由總線704互連。輸入/輸出接ロ 705也連接到總線704。輸入/輸出接ロ 705與通常由鍵盤(pán)和鼠標(biāo)構(gòu)成的輸入部706連接，并且與通常由諸如LCD (液晶顯示器)之類的顯示設(shè)備和揚(yáng)聲器組成的輸出部700連接。輸入/輸出接ロ705還與通常由硬盤(pán)形成的記錄部708連接并且與通常由調(diào)制解調(diào)器和/或諸如LAN卡之類的網(wǎng)絡(luò)接ロ卡構(gòu)成的通信部709連接。通信部709處理通過(guò)包括因特網(wǎng)在內(nèi)的網(wǎng)絡(luò)進(jìn)行的通信。驅(qū)動(dòng)器710也根據(jù)需要連接到輸入/輸出接ロ 705。諸如磁盤(pán)、光盤(pán)、磁光盤(pán)或半導(dǎo)體存儲(chǔ)器之類的可移除介質(zhì)711可附接到驅(qū)動(dòng)器710。從可移除介質(zhì)讀取的計(jì)算機(jī)程序根據(jù)需要被安裝到記錄部708中。在要用軟件執(zhí)行上述一系列處理的情況下，構(gòu)成軟件的程序是通過(guò)包括因特網(wǎng)在內(nèi)的網(wǎng)絡(luò)或從諸如可移除介質(zhì)711之類的記錄介質(zhì)安裝在存儲(chǔ)介質(zhì)上的。記錄介質(zhì)不僅是作為與圖10中所示的裝置本身分開(kāi)并且由磁盤(pán)(包括軟盤(pán)(注冊(cè)商標(biāo)))、光盤(pán)(包括⑶-ROM (致密盤(pán)-只讀存儲(chǔ)器)和DVD (數(shù)字多功能盤(pán)))、磁光盤(pán)(包括MD (袖珍盤(pán)；注冊(cè)商標(biāo)))或半導(dǎo)體存儲(chǔ)器構(gòu)成的各自容納程序的可移除介質(zhì)711被提供來(lái)向用戶分發(fā)程序的；而且還是以各自容納程序并預(yù)先被包含在用戶的裝置中的R0M702或記錄部708中的硬盤(pán)的形式被提供來(lái)向用戶分發(fā)程序的。在本說(shuō)明書(shū)中，上述一系列處理不僅包括以所示順序(即基于時(shí)序)執(zhí)行的處理，而且包括可并行或分別執(zhí)行而不一定按時(shí)間順序執(zhí)行的處理。應(yīng)當(dāng)理解，本發(fā)明在實(shí)現(xiàn)時(shí)不限于上述實(shí)施例，而是可有各種修改。例如，圖I中的內(nèi)容捜索裝置10的各種組件可在可連接到諸如因特網(wǎng)之類的網(wǎng)絡(luò)的ー個(gè)或多個(gè)設(shè)備或服務(wù)器中實(shí)現(xiàn)。上述的一些功能可在遠(yuǎn)離裝置10的地點(diǎn)處執(zhí)行。可對(duì)本發(fā)明進(jìn)行其他變化和替換，只要它們?cè)谒綑?quán)利要求或其等同物的范圍內(nèi)即可。
權(quán)利要求
1.一種用于識(shí)別一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的一個(gè)或多個(gè)靜止圖像的裝置，所述裝置包括 識(shí)別單元，該識(shí)別單元被配置為識(shí)別所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中包括的具有與一個(gè)或多個(gè)特定特征很相像的一個(gè)或多個(gè)特征的一個(gè)或多個(gè)靜止圖像；以及 顯示信息生成器，該顯示信息生成器被配置為生成用于使得在與所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的時(shí)間線上顯示在至少一個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的位置的信息。
2.如權(quán)利要求I所述的裝置，其中，所述識(shí)別單元將所述一個(gè)或多個(gè)特定特征與所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的靜止圖像的相應(yīng)特征相比較。
3.如權(quán)利要求I所述的裝置，其中，所述識(shí)別單元識(shí)別每個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中的包含具有與所述一個(gè)或多個(gè)特定特征很相像的特征的靜止圖像的場(chǎng)景；并且 其中，所述顯示信息生成器生成用于使得顯示所述識(shí)別出的場(chǎng)景的信息。
4.如權(quán)利要求I所述的裝置，其中，所述顯示信息生成器可操作來(lái)生成用于使得不同的運(yùn)動(dòng)圖像內(nèi)容被同時(shí)顯示的信息。
5.如權(quán)利要求I所述的裝置，其中，所述顯示信息生成器生成用于使得在共同的時(shí)間線軸上對(duì)齊地顯示所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中、所識(shí)別出的靜止圖像所位于的位置的信息。
6.如權(quán)利要求I所述的裝置，其中，所述運(yùn)動(dòng)圖像內(nèi)容包括與所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的音頻信息，并且其中，所述顯示信息生成器生成用于使得顯示各個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中的所述音頻信息的信號(hào)波形的時(shí)間線的信息。
7.如權(quán)利要求3所述的裝置，其中，所述顯示信息生成器生成用于使得顯示與所述運(yùn)動(dòng)圖像內(nèi)容之中的各個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的、表示所述各個(gè)運(yùn)動(dòng)圖像內(nèi)容中的場(chǎng)景的持續(xù)時(shí)間和/或顏色的標(biāo)記的信息。
8.如權(quán)利要求I所述的裝置，其中，所述顯示信息生成器生成用于使得所述運(yùn)動(dòng)圖像內(nèi)容被再現(xiàn)并且使得沿著所述時(shí)間線顯示表示所述運(yùn)動(dòng)圖像內(nèi)容的當(dāng)前再現(xiàn)位置的移動(dòng)滑塊的信息。
9.如權(quán)利要求I所述的裝置，其中，所述顯示信息生成器生成用于使得同時(shí)顯示多個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的信息。
10.如權(quán)利要求I所述的裝置，其中，所述顯示信息生成器生成用于使得所述運(yùn)動(dòng)圖像內(nèi)容被再現(xiàn)并且使得同時(shí)顯示所述運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的信息。
11.如權(quán)利要求I所述的裝置，其中，所述識(shí)別單元識(shí)別每個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中的、包含具有與所述一個(gè)或多個(gè)特定特征很相像的特征的靜止圖像的場(chǎng)景；并且 其中，所述顯示信息生成器生成用于使得在共同的時(shí)間線軸上對(duì)齊地顯示所述識(shí)別出的場(chǎng)景中的所識(shí)別出的靜止圖像的時(shí)間位置的信息。
12.一種用于識(shí)別一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的一個(gè)或多個(gè)靜止圖像的方法，所述方法包括 識(shí)別所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中包括的具有與一個(gè)或多個(gè)特定特征很相像的一個(gè)或多個(gè)特征的一個(gè)或多個(gè)靜止圖像；以及 使得在與所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的時(shí)間線上顯示在至少一個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的位置。
13.如權(quán)利要求12所述的方法，其中，通過(guò)將所述一個(gè)或多個(gè)特定特征與所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的靜止圖像的相應(yīng)特征相比較來(lái)識(shí)別所述一個(gè)或多個(gè)靜止圖像。
14.如權(quán)利要求12所述的方法，其中，每個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中的包含具有與所述一個(gè)或多個(gè)特定特征很相像的特征的靜止圖像的場(chǎng)景被識(shí)別；并且其中，所述識(shí)別出的場(chǎng)景被顯示。
15.如權(quán)利要求12所述的方法，其中，不同的運(yùn)動(dòng)圖像內(nèi)容被同時(shí)顯示。
16.如權(quán)利要求12所述的方法，還使得在共同的時(shí)間線軸上對(duì)齊地顯示所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中、所識(shí)別出的靜止圖像所位于的位置。
17.如權(quán)利要求12所述的方法，其中，所述運(yùn)動(dòng)圖像內(nèi)容包括與所述一個(gè)或多個(gè)運(yùn)動(dòng) 圖像內(nèi)容相關(guān)聯(lián)的音頻信息，并且所述方法還包括顯示各個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中的所述音頻信息的信號(hào)波形的時(shí)間線。
18.如權(quán)利要求14所述的方法，還包括顯示與所述運(yùn)動(dòng)圖像內(nèi)容之中的各個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的、表示所述各個(gè)運(yùn)動(dòng)圖像內(nèi)容中的場(chǎng)景的持續(xù)時(shí)間和/或顏色的標(biāo)記。
19.如權(quán)利要求12所述的方法，還包括再現(xiàn)所述運(yùn)動(dòng)圖像內(nèi)容，并且沿著所述時(shí)間線顯示移動(dòng)滑塊，所述移動(dòng)滑塊表示運(yùn)動(dòng)圖像內(nèi)容的當(dāng)前再現(xiàn)位置。
20.一種編碼有指令的非暫態(tài)計(jì)算機(jī)可讀介質(zhì)，所述指令當(dāng)被計(jì)算機(jī)讀取時(shí)執(zhí)行用于識(shí)別一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的一個(gè)或多個(gè)靜止圖像的方法，該方法包括 識(shí)別所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中包括的具有與一個(gè)或多個(gè)特定特征很相像的一個(gè)或多個(gè)特征的一個(gè)或多個(gè)靜止圖像；以及 使得在與所述一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的時(shí)間線上顯示至少一個(gè)所述運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的位置。
全文摘要
用于識(shí)別一個(gè)或多個(gè)運(yùn)動(dòng)圖像內(nèi)容中的一個(gè)或多個(gè)靜止圖像的裝置。識(shí)別單元被配置為識(shí)別運(yùn)動(dòng)圖像內(nèi)容中包括的具有與特定特征很相像的至少一個(gè)特征的一個(gè)或多個(gè)靜止圖像。顯示控制器被配置為使得在與運(yùn)動(dòng)圖像內(nèi)容相關(guān)聯(lián)的時(shí)間線上顯示至少一個(gè)運(yùn)動(dòng)圖像內(nèi)容中所識(shí)別出的靜止圖像的位置。
文檔編號(hào)G11B27/34GK102860031SQ20118001695
公開(kāi)日2013年1月2日 申請(qǐng)日期2011年4月4日 優(yōu)先權(quán)日2010年4月9日
發(fā)明者田中和政, 田中健司, 高橋義博 申請(qǐng)人:索尼公司