專利名稱：影像顯示裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種執(zhí)行動態(tài)圖像內(nèi)容(content)顯示的影像顯示裝置及方法。
背景技術(shù)：
PC中，檢索功能成為日常業(yè)務(wù)中廣泛使用的一般技術(shù)。例如，從因特 網(wǎng)上的Web網(wǎng)站上檢索涉及特定關(guān)鍵字的信息的Web檢索，為多數(shù)人所 使用。這些PC中的檢索功能一般是通過用戶輸入涉及構(gòu)成檢索對象的事物 的關(guān)鍵字從而得到檢索結(jié)果的、必需用戶自身主動地執(zhí)行的檢索方式。下 面，將該檢索方式稱為主動檢索方式。另外，TV或DVD記錄器、HDD記 錄器等AV設(shè)備也推進(jìn)IT化，可連接于因特網(wǎng)上。與之相伴，提供即便 AV設(shè)備也可采用與PC —樣的主動檢索方式的檢索功能。但是，由于AV設(shè)備的內(nèi)容保存能力的擴大或視頻點播(VOD)等服 務(wù)的擴大、與未保留在設(shè)備內(nèi)的設(shè)備間或因特網(wǎng)中存在的內(nèi)容的無縫性的 擴大等，用戶可訪問的內(nèi)容數(shù)急劇增加。另外，根據(jù)HDD記錄器的普及帶 來的用戶的內(nèi)容獲得、視聽風(fēng)格的變化，即從僅錄制想看內(nèi)容的風(fēng)格，向 首先錄制感興趣的內(nèi)容再從中取舍選擇、或者使用推薦服務(wù)或委托錄制服 務(wù)等非主動風(fēng)格的變化，伴隨著該變化，用戶可訪問的內(nèi)容包含用戶自身 未必把握的內(nèi)容，這都是有可能的。另一方面，如何從可從AV設(shè)備訪問的內(nèi)容群中高效地尋找到期望視 聽的內(nèi)容成為重要的課題。由于上述內(nèi)容獲得、視聽風(fēng)格的變化，用戶未 必把握全部內(nèi)容的實際內(nèi)容，即便使用主動的檢索功能檢索，也不能選定 將什么作為關(guān)鍵字來檢索才好，難以尋找到想求得的內(nèi)容。另外，AV設(shè)備 的用戶不一定是精通PC的用戶，難以認(rèn)為熟悉PC世界中一般的關(guān)鍵字輸 入型主動檢索。因此，現(xiàn)狀是AV設(shè)備中的主動檢索成為僅部分積極的用 戶才使用的功能，難以認(rèn)為是多數(shù)用戶方便使用的檢索方法。
作為該狀況的解決策略，考慮提供被動的檢索方式，而非主動的檢索 方式。這里，所謂被動的檢索方式是例如呈現(xiàn)與某個內(nèi)容有關(guān)聯(lián)的內(nèi)容并 讓用戶從中選擇的檢索方法。這不是使用關(guān)鍵字等積極地(主動地)搜索用戶 想看與期望的內(nèi)容，而是根據(jù)某個內(nèi)容，向用戶呈現(xiàn)該內(nèi)容與其它內(nèi)容之 間的關(guān)聯(lián)性，從而暗示地讓用戶執(zhí)行內(nèi)容檢索。即，用戶并不明示檢索地， 檢索自己感興趣的內(nèi)容。結(jié)果，用戶通過邊看各內(nèi)容間的關(guān)聯(lián)性的可視化結(jié)果，邊選擇可從AV設(shè)備訪問的多個內(nèi)容，可被動地尋找到某些想看的 內(nèi)容。這樣，認(rèn)為在內(nèi)容的被動檢索方式中，向用戶將內(nèi)容彼此的關(guān)聯(lián)性 加以可視化是非常重要的。另一方面，在照相領(lǐng)域中，提議可視化由數(shù)碼相機等拍攝到的大量圖 像間的關(guān)系的各種技術(shù)。例如，在專利文獻(xiàn)1中，公開了如下技術(shù)，即為 了表示多個圖像的時間系列的關(guān)系，按時間系列順序依次擴大圖像，該擴 大后的圖像從內(nèi)周側(cè)以時間系列的順序顯示為螺旋狀。專利文獻(xiàn)l:國際公開WO 00/33572號公報但是，AV設(shè)備為對象的TV或視頻等動態(tài)圖像由于其再現(xiàn)幀的圖像伴 隨著再現(xiàn)而依次變化，從而其關(guān)系性也動態(tài)變化，所以不能用以靜止圖像 為對象的專利文獻(xiàn)1的技術(shù)來應(yīng)對。發(fā)明內(nèi)容本發(fā)明鑒于上述情況而作出，其目的在于提供一種將動態(tài)圖像內(nèi)容間 的關(guān)聯(lián)性可視化的影像顯示裝置及方法。為了解決上述課題并實現(xiàn)本發(fā)明的目的，本發(fā)明的特征在于，具備 第1存儲部件，存儲多個動態(tài)圖像內(nèi)容；內(nèi)容選擇部件，從存儲在所述第1 存儲部件中的動態(tài)圖像內(nèi)容中，選擇處理對象動態(tài)圖像內(nèi)容；關(guān)聯(lián)內(nèi)容算 出部件，根據(jù)所述處理對象動態(tài)圖像內(nèi)容的特性、和存儲在所述第1存儲 部件中的該處理對象動態(tài)圖像內(nèi)容以外的其它動態(tài)圖像內(nèi)容的特性之間的 類似度，算出所述其它動態(tài)圖像內(nèi)容各自相對所述處理對象動態(tài)圖像內(nèi)容 的關(guān)聯(lián)度；內(nèi)容可視化部件，分別生成將所述處理對象動態(tài)圖像內(nèi)容以及 其它動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容；配置部件，在虛擬空間內(nèi)配 置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容，并且，在按照所述
其它動態(tài)圖像內(nèi)容各自的關(guān)聯(lián)度而從該配置位置離開的位置上，分別配置與所述其它動態(tài)圖像內(nèi)容的每個相對應(yīng)的可視化內(nèi)容；空間可視化部件， 將配置有所述可視化內(nèi)容的虛擬空間可視化為能夠顯示的狀態(tài)；和顯示部 件，顯示所述可視化后的虛擬空間。另外，本發(fā)明的特征在于，具備第1存儲部件，存儲多個動態(tài)圖像 內(nèi)容；內(nèi)容選擇部件，從存儲在所述第1存儲部件中的動態(tài)圖像內(nèi)容中， 選擇處理對象動態(tài)圖像內(nèi)容；關(guān)聯(lián)內(nèi)容算出部件，根據(jù)所述處理對象動態(tài) 圖像內(nèi)容的特性、和存儲在所述第1存儲部件中的該處理對象動態(tài)圖像內(nèi) 容以外的其它動態(tài)圖像內(nèi)容的特性之間的類似度，算出所述其它動態(tài)圖像 內(nèi)容各自相對所述處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；顯示內(nèi)容選擇部件， 根據(jù)由所述關(guān)聯(lián)內(nèi)容算出部件算出的關(guān)聯(lián)度，從所述其它動態(tài)圖像內(nèi)容中 選擇顯示對象動態(tài)圖像內(nèi)容；內(nèi)容可視化部件，分別生成將所述處理對象 動態(tài)圖像內(nèi)容以及所述顯示對象動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容； 配置部件，在虛擬空間內(nèi)配置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視 化內(nèi)容，并且，在按照所述顯示對象動態(tài)圖像內(nèi)容各自的關(guān)聯(lián)度而從該配 置位置離開的位置上，分別配置與該顯示對象動態(tài)圖像內(nèi)容的每個相對應(yīng) 的可視化內(nèi)容；空間可視化部件，將配置有所述可視化內(nèi)容的虛擬空間可 視化為能夠顯示的狀態(tài)；和顯示部件，顯示所述可視化后的虛擬空間。另外，本發(fā)明的特征在于，具備第1存儲部件，將對構(gòu)成動態(tài)圖像 的一系列幀中的某一幀或全部幀賦予了表示該各幀的特性的幀信息之后的 動態(tài)圖像內(nèi)容的每個，與表示該各動態(tài)圖像內(nèi)容的特性的內(nèi)容信息相對應(yīng) 地加以存儲；內(nèi)容選擇部件，從存儲在所述第1存儲部件中的動態(tài)圖像內(nèi) 容中，選擇處理對象動態(tài)圖像內(nèi)容；第1關(guān)聯(lián)度算出部件，根據(jù)與所述處 理對象動態(tài)圖像內(nèi)容相對應(yīng)的內(nèi)容信息、和與存儲在所述第1存儲部件中 的該處理對象動態(tài)圖像內(nèi)容以外的其它動態(tài)圖像內(nèi)容相對應(yīng)的內(nèi)容信息之 間的類似度，算出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān) 聯(lián)度；幀選擇部件，從所述處理對象動態(tài)圖像內(nèi)容中，選擇該動態(tài)圖像內(nèi) 容中包含的至少1個以上的幀，作為處理對象幀；第2關(guān)聯(lián)度算出部件， 根據(jù)賦予所述處理對象幀的幀信息、和賦予所述其它動態(tài)圖像內(nèi)容的幀的 幀信息之間的類似度，算出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài)圖像
內(nèi)容的關(guān)聯(lián)度；圖像解析部件，對所述處理對象幀以及構(gòu)成所述其它動態(tài) 圖像內(nèi)容的各幀中包含的圖像的圖像特性進(jìn)行解析；第3關(guān)聯(lián)度算出部件， 根據(jù)所述處理對象幀的圖像解析結(jié)果、和所述其它動態(tài)圖像內(nèi)容的幀的圖 像解析結(jié)果之間的類似度，算出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài) 圖像內(nèi)容的關(guān)聯(lián)度；關(guān)聯(lián)內(nèi)容算出部件，使用由所述第l關(guān)聯(lián)度算出部件、 第2關(guān)聯(lián)度算出部件、第3關(guān)聯(lián)度算出部件中的某一部件或全部部件所算 出的關(guān)聯(lián)度，算出所述其它動態(tài)圖像內(nèi)容各自相對所述處理對象動態(tài)圖像 內(nèi)容的綜合關(guān)聯(lián)度；顯示內(nèi)容選擇部件，根據(jù)由所述關(guān)聯(lián)內(nèi)容算出部件算 出的綜合關(guān)聯(lián)度，從所述其它動態(tài)圖像內(nèi)容中，選擇顯示對象動態(tài)圖像內(nèi) 容；內(nèi)容可視化部件，分別生成將所述處理對象動態(tài)圖像內(nèi)容以及所述顯 示對象動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容；配置部件，在虛擬空間內(nèi) 配置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容，并且，在按照所 述顯示對象動態(tài)圖像內(nèi)容各自的綜合關(guān)聯(lián)度而從該配置位置離開的位置 上，分別配置與該顯示對象動態(tài)圖像內(nèi)容的每個相對應(yīng)的可視化內(nèi)容；空 間可視化部件，將配置有所述可視化內(nèi)容的虛擬空間可視化為能夠顯示的 狀態(tài)；和顯示部件，顯示所述可視化后的虛擬空間。另外，本發(fā)明是一種影像顯示方法，由影像顯示裝置執(zhí)行，其特征在 于所述影像顯示裝置具備存儲部件，該存儲部件將對構(gòu)成動態(tài)圖像的一 系列幀中的某一幀或全部幀賦予了表示該各幀的特性的幀信息之后的動態(tài) 圖像內(nèi)容的每個，與表示該各動態(tài)圖像內(nèi)容的特性的內(nèi)容信息相對應(yīng)地加 以存儲；該影像顯示方法包括內(nèi)容選擇步驟，內(nèi)容選擇部件從所述存儲 部件中，選擇處理對象動態(tài)圖像內(nèi)容；第1關(guān)聯(lián)度算出步驟，第1關(guān)聯(lián)度 算出部件根據(jù)與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的內(nèi)容信息、和與存儲 在所述存儲部件中的該處理對象動態(tài)圖像內(nèi)容以外的其它動態(tài)圖像內(nèi)容相 對應(yīng)的內(nèi)容信息之間的類似度，算出其它動態(tài)圖像內(nèi)容各自相對處理對象 動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；幀選擇步驟，幀選擇部件從所述處理對象動態(tài)圖 像內(nèi)容中，選擇該動態(tài)圖像內(nèi)容中包含的至少1個以上的幀，作為處理對 象幀；第2關(guān)聯(lián)度算出步驟，第2關(guān)聯(lián)度算出部件根據(jù)賦予所述處理對象 幀的幀信息、和賦予所述其它動態(tài)圖像內(nèi)容的幀的幀信息之間的類似度， 算出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；圖像解
析步驟，圖像解析部件對所述處理對象幀以及構(gòu)成所述其它動態(tài)圖像內(nèi)容的各幀中包含的圖像的圖像特性進(jìn)行解析；第3關(guān)聯(lián)度算出步驟，第3關(guān) 聯(lián)度算出部件根據(jù)所述處理對象幀的圖像解析結(jié)果、和所述其它動態(tài)圖像 內(nèi)容的幀的圖像解析結(jié)果之間的類似度，算出其它動態(tài)圖像內(nèi)容各自相對 處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；關(guān)聯(lián)內(nèi)容算出步驟，關(guān)聯(lián)內(nèi)容算出部件 使用由所述第1關(guān)聯(lián)度算出步驟、第2關(guān)聯(lián)度算出步驟、第3關(guān)聯(lián)度算出 步驟中的某一步驟或全部步驟所算出的關(guān)聯(lián)度，算出所述其它動態(tài)圖像內(nèi) 容各自相對所述處理對象動態(tài)圖像內(nèi)容的綜合關(guān)聯(lián)度；顯示內(nèi)容選擇步驟， 顯示內(nèi)容選擇部件根據(jù)所述綜合關(guān)聯(lián)度，從所述其它動態(tài)圖像內(nèi)容中，選 擇顯示對象動態(tài)圖像內(nèi)容；內(nèi)容可視化步驟，內(nèi)容可視化部件分別生成將 所述處理對象動態(tài)圖像內(nèi)容以及所述顯示對象動態(tài)圖像內(nèi)容象征化之后的 可視化內(nèi)容；配置步驟，配置部件在虛擬空間內(nèi)配置與所述處理對象動態(tài) 圖像內(nèi)容相對應(yīng)的可視化內(nèi)容，并且，在按照所述顯示對象動態(tài)圖像內(nèi)容 各自的綜合關(guān)聯(lián)度而從該配置位置離開的位置上，分別配置與該顯示對象 動態(tài)圖像內(nèi)容的每個相對應(yīng)的可視化內(nèi)容；空間可視化步驟，空間可視化 部件將配置有所述可視化內(nèi)容的虛擬空間可視化為能夠顯示的狀態(tài)；和顯 示步驟，顯示部件顯示所述可視化后的虛擬空間。 發(fā)明效果根據(jù)本發(fā)明，可提供一種將動態(tài)圖像內(nèi)容間的關(guān)聯(lián)性可視化的影像顯 示裝置及方法。


圖1是表示第1實施方式的影像顯示裝置的構(gòu)成的圖。圖2是表示第1實施方式的關(guān)聯(lián)度算出處理的步驟的流程圖。圖3是表示第1實施方式的關(guān)聯(lián)內(nèi)容算出處理的步驟的流程圖。圖4-1是表示可視化內(nèi)容一例的圖。圖4-2是表示可視化內(nèi)容一例的圖。圖5是表示可視化后的虛擬空間一例的圖。圖6是表示可視化后的虛擬空間一例的圖。圖7是表示第1實施方式的可視化內(nèi)容群配置處理的步驟的流程圖。
圖8-1是表示配置在虛擬空間內(nèi)的可視化內(nèi)容的一例的圖。圖8-2是表示配置在虛擬空間內(nèi)的可視化內(nèi)容的一例的圖。圖9-1是表示配置位置的修正方法一例的圖。圖9-2是表示配置位置的修正方法一例的圖。圖9-3是表示配置位置的修正方法一例的圖。圖9-4是表示配置位置的修正方法一例的圖。圖9-5是表示配置位置的修正方法一例的圖。圖9-6是表示配置位置的修正方法一例的圖。圖IO是表示配置位置修正處理的步驟的流程圖。圖11是表示第1實施方式的空間可視化處理的步驟的流程圖。圖12是表示第1實施方式的影像顯示處理的步驟的流程圖。圖13-1是表示可視化后的虛擬空間一例的圖。圖13-2是表示可視化后的虛擬空間一例的圖。圖14是表示第1實施方式的變形例1的影像顯示裝置的構(gòu)成的圖。圖15是表示第1實施方式的變形例1的可視化內(nèi)容群配置部執(zhí)行的可視化內(nèi)容群配置處理的步驟的流程圖。圖16是表示第1實施方式的變形例2的影像顯示裝置的構(gòu)成圖。圖17-1是表示配置狀況解析結(jié)果一例的圖。圖17-2是表示配置狀況解析結(jié)果一例的圖。圖18-1是表示虛擬空間內(nèi)的配置范圍一例的圖。圖18-2是表示虛擬空間內(nèi)的配置范圍一例的圖。圖19是表示配置在虛擬空間內(nèi)的可視化內(nèi)容一例的圖。圖20是表示第1實施方式的變形例3的影像顯示裝置的構(gòu)成圖。圖21是表示第1實施方式的變形例4的影像顯示裝置的構(gòu)成圖。圖22是表示第1實施方式的變形例5的影像顯示裝置的構(gòu)成圖。圖23是表示第1實施方式的變形例6的影像顯示裝置的構(gòu)成圖。圖24是表示第1實施方式的變形例6的關(guān)聯(lián)內(nèi)容算出處理的步驟的流程圖。圖25是表示第1實施方式的變形例7的影像顯示裝置的構(gòu)成圖。 圖26是表示第1實施方式的變形例8的影像顯示裝置的構(gòu)成圖。
圖27是表示第1實施方式的變形例8的空間可視化處理的步驟的流程圖。圖28是表示第1實施方式的變形例9的影像顯示裝置的構(gòu)成圖。圖29是表示配置在虛擬空間內(nèi)的可視化內(nèi)容一例的圖。圖30是表示配置在虛擬空間內(nèi)的可視化內(nèi)容一例的圖。圖31是表示第2實施方式的影像顯示裝置的構(gòu)成圖。圖32是表示第2實施方式的變形例1的影像顯示裝置的構(gòu)成圖。圖33是表示第2實施方式的變形例2的影像顯示裝置的構(gòu)成圖。圖34是表示第2實施方式的變形例3的影像顯示裝置的構(gòu)成圖。圖35是表示第2實施方式的變形例4的影像顯示裝置的構(gòu)成圖。圖36是表示第3實施方式的影像顯示裝置的構(gòu)成圖。圖37是表示第3實施方式的變形例1的影像顯示裝置的構(gòu)成圖。圖38是表示第3實施方式的變形例2的影像顯示裝置的構(gòu)成圖。符號說明100影像顯示裝置 101影像顯示裝置 102影像顯示裝置 103影像顯示裝置 104影像顯示裝置 105影像顯示裝置 106影像顯示裝置 107影像顯示裝置 108影像顯示裝置 109影像顯示裝置 110影像顯示裝置 111影像顯示裝置 112影像顯示裝置 113影像顯示裝置 114影像顯示裝置 115影像顯示裝置116影像顯示裝置117影像顯示裝置11動態(tài)圖像數(shù)據(jù)庫12處理對象內(nèi)容選擇部13處理對象幀選擇部14內(nèi)容信息取得部15幀信息取得部16幀圖像解析部17關(guān)聯(lián)度算出部18關(guān)聯(lián)內(nèi)容算出部19顯示對象內(nèi)容選擇部20內(nèi)容可視化部21可視化內(nèi)容群配置部22空間可視化部23顯示部24配置履歷管理部25可視化內(nèi)容群配置部26配置狀況解析部27可視化內(nèi)容群配置部28第2配置狀況解析部29顯示對象內(nèi)容選擇部30第3配置狀況解析部31內(nèi)容可視化部32第4配置狀況解析部33顯示對象內(nèi)容加工部34內(nèi)容可視化部35可視化內(nèi)容群配置部36關(guān)聯(lián)內(nèi)容算出部37關(guān)聯(lián)性解析部38空間可視化部39配置運動插補部40空間可視化部41共同部分可視化部42可視化內(nèi)容群配置部43EPG信息取得管理部44調(diào)諧器45流信息取得管理部46內(nèi)容可視化部47盤驅(qū)動器48盤信息取得管理部49內(nèi)容可視化部50VOD取得部51VOD信息取得管理部52內(nèi)容可視化部53音樂數(shù)據(jù)取得部54音樂數(shù)據(jù)庫55音樂數(shù)據(jù)信息取得管理部56內(nèi)容可視化部57商品數(shù)據(jù)取得部58商品數(shù)據(jù)信息取得管理部59內(nèi)容可視化部60操作支援部61操作支援部62商品購入手續(xù)部63收費部具體實施方式
下面，參照附圖來詳細(xì)說明影像顯示裝置及方法的最佳實施方式。 [第1實施方式]首先，說明涉及本實施方式的影像顯示裝置100的硬件構(gòu)成。影像顯
示裝置100具備由CPU或GPU等構(gòu)成的控制部、由存儲各種程序或圖像 等的各種數(shù)據(jù)的ROM、 RAM、 HDD等構(gòu)成的存儲部、與外部裝置進(jìn)行通 信的通信部、和連接上述各部的總線(均未圖示)，并連接有顯示裝置及鍵盤 或鼠標(biāo)等輸入裝置(均未圖示)。顯示裝置是后述的顯示部23，是LCD等顯 示器件。操作裝置是具備輸入來自用戶的操作的操作鍵或操作按鈕、鼠標(biāo) 等的輸入器件。下面，說明影像顯示裝置100的功能構(gòu)成。圖1是示例本實施方式的 影像顯示裝置100的功能構(gòu)成的框圖。如圖1所示，影像顯示裝置100具 備動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理對象幀選擇部13、內(nèi) 容信息取得部14、幀信息取得部15、幀圖像解析部16、關(guān)聯(lián)度算出部17、 關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容可視化部20、可視化內(nèi) 容群配置部21、空間可視化部22與顯示部23。其中，處理對象內(nèi)容選擇部12、處理對象幀選擇部13、內(nèi)容信息取得 部14、幀信息取得部15、幀圖像解析部16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容 算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容可視化部20、可視化內(nèi)容群配置 部21與空間可視化部22是通過影像顯示裝置100的控制部執(zhí)行存儲在存 儲部中的各種程序來實現(xiàn)的功能部。動態(tài)圖像數(shù)據(jù)庫11是由存儲部實現(xiàn)的 功能部。動態(tài)圖像數(shù)據(jù)庫11是能夠存儲及管理至少一個以上動態(tài)圖像內(nèi)容的 數(shù)據(jù)庫。例如，若設(shè)影像顯示裝置100為HDD記錄器，則動態(tài)圖像數(shù)據(jù)庫 11是指存儲錄制了 TV節(jié)目等的動態(tài)圖像內(nèi)容、并且對所存儲的動態(tài)圖像 內(nèi)容加以管理的數(shù)據(jù)庫。這里，所謂^動態(tài)圖像內(nèi)容'是在時間系列上排列幀圖像的動態(tài)圖像 數(shù)據(jù)，例如是指TV節(jié)目或電影等的內(nèi)容。另外，存儲在動態(tài)圖像數(shù)據(jù)庫 11中的動態(tài)圖像內(nèi)容的保存形式不特別限定，例如存儲為使用已知的編解 碼器編碼后的文件。下面，將存儲在動態(tài)圖像數(shù)據(jù)庫11中的動態(tài)圖像內(nèi)容 稱為'內(nèi)容，(content)。動態(tài)圖像數(shù)據(jù)庫11對每個內(nèi)容關(guān)聯(lián)地存儲涉及該內(nèi)容的內(nèi)容信息。這 里，所謂'內(nèi)容信息'是表示各內(nèi)容固有的特性的信息群，包含各內(nèi)容的 標(biāo)題(title)或影像內(nèi)容的類型(genre)等。例如，在內(nèi)容是TV節(jié)目的情況下，
利用EPG等電子節(jié)目表，提供TV節(jié)目廣播日期時間或頻道、節(jié)目標(biāo)題、 節(jié)目概要、節(jié)目類型、演出者列表、制作者信息等信息(節(jié)目信息)。因此， 在可取得該EPG的情況下，也可將各內(nèi)容的節(jié)目信息存儲為內(nèi)容信息。另外，在VOD服務(wù)或因特網(wǎng)上的動態(tài)圖像共享服務(wù)的情況下，涉及內(nèi) 容的信息作為標(biāo)簽信息以事先嵌入的狀態(tài)分發(fā)。此時，動態(tài)圖像數(shù)據(jù)庫ll 將標(biāo)簽信息作為內(nèi)容信息，與內(nèi)容一起存儲。上述說明了內(nèi)容信息以事先設(shè)定的狀態(tài)加以提供的方式，但不限于此， 也可是將由用戶經(jīng)操作裝置輸入的信息作為內(nèi)容信息，與內(nèi)容相關(guān)聯(lián)地存 儲的方式。另外，設(shè)在動態(tài)圖像數(shù)據(jù)庫ll中存儲的任一或全部內(nèi)容中，以構(gòu)成內(nèi) 容的幀為單位，利用標(biāo)簽信息等形式，向各幀事先賦予涉及該幀的信息。 下面，將賦予幀的信息稱為幀信息。這里，所謂'幀信息'是表示各幀固 有的特性的信息群，包含各幀中所包含的圖像的標(biāo)題或類型等。g卩，上述 內(nèi)容信息是以內(nèi)容為單位的信息群，相反，幀信息是以幀為單位的信息群。作為幀信息，可以列舉例如幀中包含的圖像(后面將其稱為幀圖像)中映 出的演出者姓名等信息、所映出的場所或物、狀態(tài)、類型等表示人物或場 景的信息、(在動態(tài)圖像中存在章節(jié)的情況下的)章節(jié)標(biāo)題、章節(jié)內(nèi)容、以及 幀單位下的錄制信息或節(jié)目(的角(3—于一))標(biāo)題、子標(biāo)題、類型、內(nèi)容(的 角)概要、細(xì)節(jié)等。該幀信息也可由內(nèi)容的作者或分發(fā)者(例如電視臺或內(nèi)容制作公司)設(shè) 定，或由提供這種服務(wù)的公司或第三方(例如第三方的內(nèi)容視聽者、動態(tài)圖 像共享服務(wù)等用戶等)設(shè)定。另外，也可以是用戶自身經(jīng)操作裝置輸入的方 式。另外，作為其它方式，也可是如下方式，即通過在影像顯示裝置100 的內(nèi)部(或外部設(shè)備)中使用涉及幀信息賦予的規(guī)定算法，對存儲在動態(tài)圖像 數(shù)據(jù)庫11中的內(nèi)容的各幀自動賦予幀信息。具體而言，也可以是如下方式， 即由于可通過使用臉識別等公知技術(shù)來進(jìn)行人物推定，所以通過使用該技 術(shù)，執(zhí)行動態(tài)圖像中包含的任意幀中所映出的演出者的人物推定，將該推 定結(jié)果的人物名以標(biāo)簽信息的形式賦予給該幀，作為幀信息。上述說明的 情形不過是一例，該信息的內(nèi)容或信息的賦予方法不限于此。
另外，上述中示出對每幀賦予幀信息的實例，但不限于此。例如，也 可以是向構(gòu)成動態(tài)圖像的一系列幀中某一幀賦予幀信息的方式，或?qū)Χ鄠€ 幀賦予表示各幀的部分的一個幀信息的方式，或向一個幀賦予多個幀部分 的幀信息的方式。處理對象內(nèi)容選擇部12是從存儲在動態(tài)圖像數(shù)據(jù)庫11中的內(nèi)容群中 選擇一個內(nèi)容作為處理對象的內(nèi)容用的功能部。下面，將由處理對象內(nèi)容 選擇部12選擇出的內(nèi)容稱為'處理對象內(nèi)容'。處理對象內(nèi)容的選擇可采用各種方法。例如，也可以是在監(jiān)視動態(tài)圖 像數(shù)據(jù)庫11中存儲的各內(nèi)容的視聽狀態(tài)(再現(xiàn)狀態(tài))、且當(dāng)前的某個內(nèi)容處 于視聽狀態(tài)的情況下，選擇該正在視聽的內(nèi)容作為處理對象的內(nèi)容的方式， 或是在任一內(nèi)容均未處于視聽狀態(tài)的情況下，選擇最近視聽過的內(nèi)容作為 處理對象的內(nèi)容的方式。另外，也可以是在根據(jù)顯示部23中顯示的GUI等、由用戶經(jīng)操作裝 置選擇了特定內(nèi)容的情況下，選擇該內(nèi)容作為處理對象的內(nèi)容的方式。另外，也可以是事先準(zhǔn)備指定特定的關(guān)鍵字或用戶嗜好等的輪廓 (profile)信息沐圖示)、根據(jù)該輪廓信息的指定內(nèi)容自動選擇為處理對象的 內(nèi)容的方式。例如，作為輪廓信息，在指定為'足球節(jié)目'的情況下，處 理對象內(nèi)容選擇部12選擇動態(tài)圖像數(shù)據(jù)庫11中存儲的內(nèi)容群中、節(jié)目信 息等記述為'足球節(jié)目'的一個內(nèi)容，作為處理對象的內(nèi)容。另夕卜，也可以是如下方式，即，記錄對影像顯示裝置100的操作履歷， 作為履歷信息，根據(jù)該履歷信息，選擇用戶頻繁視聽的節(jié)目的內(nèi)容，作為 處理對象的內(nèi)容。處理對象幀選擇部13是從由處理對象內(nèi)容選擇部12選擇到的處理對 象內(nèi)容中，選擇該處理對象內(nèi)容中包含的至少1個以上的幀的功能部。下 面，將由處理對象幀選擇部13選擇到的幀稱為 <處理對象幀，。另外，處理對象幀選擇部13根據(jù)處理對象內(nèi)容的幀率(framerate)，對 處理對象幀的更新定時進(jìn)行計時，當(dāng)?shù)竭_(dá)更新定時時，更新處理對象幀。如上所述，處理對象內(nèi)容是TV節(jié)目或電影等的動態(tài)圖像數(shù)據(jù)。例如， 若設(shè)處理對象內(nèi)容是TV節(jié)目，則由于通常TV節(jié)目構(gòu)成為30幀/秒的動態(tài) 圖像，所以30分鐘的TV節(jié)目由54000個幀構(gòu)成。此時，處理對象幀選擇
部13從構(gòu)成處理對象內(nèi)容(30分鐘的TV節(jié)目)的54000個幀中，選擇至少 l個以上的幀。處理對象幀的選擇中可使用各種方法。例如，在由處理對象內(nèi)容選擇 部12選擇當(dāng)前正在視聽的內(nèi)容作為處理對象內(nèi)容的情況下，處理對象幀選 擇部13也可選擇到目前為止視聽過的最后的幀，作為處理對象幀。即，若 用戶再現(xiàn)某個內(nèi)容至中途，則用戶看到的最后的幀變?yōu)樘幚韺ο髱?。具體 而言，在用戶暫時停止內(nèi)容的情況下，因該暫時停止而成為當(dāng)前顯示的幀， 成為處理對象幀。也可以是在保持關(guān)于各內(nèi)容的視聽狀態(tài)(表示有無視聽或視聽的次數(shù)、 視聽到哪兒的信息等)的情況下，根據(jù)該視聽狀態(tài)選擇處理對象幀的方式。 例如，在用戶過去在視聽處理對象內(nèi)容到中途的情況下，可選擇結(jié)束視聽 的幀中任一幀(例如最后的幀)，作為處理對象幀。另外，也可以是如下方式， 即對于未視聽的處理對象內(nèi)容或曾視聽到最后的處理對象內(nèi)容而言，選擇 全部幀中的任一幀(例如開頭幀)，作為處理對象幀。另外，也可以是選擇由用戶經(jīng)操作裝置指定的幀，作為處理對象幀的 方式。另外，也可以是在輪廓信息中事先記入指定處理對象幀的信息，根 據(jù)該信息來選擇處理對象幀的方式?；蚴莾?nèi)容自身中包含指定處理對象幀 的信息，根據(jù)該信息來選擇處理對象幀的方式。上述中，作為處理對象幀，示出僅選擇一個幀的實例，但處理對象幀 的個數(shù)不限于此。也可從處理對象幀中同時選擇2幀以上，或使用稱為剪 輯(cut)檢測的技術(shù)，將處理對象內(nèi)容分割為特定的剪輯單位，選擇分割后 的剪輯中包含的多個幀。另外，也可使用該剪輯檢測技術(shù)，以分割后的剪 輯單位來選擇剪輯的開頭(或末尾)幀，作為處理對象幀。此時，也可選擇距當(dāng)前正在視聽的幀最近的剪輯的開頭(或末尾)幀，作 為處理對象幀。另外，也可設(shè)分割后的剪輯中包含的特征幀作為處理對象 幀，或從剪輯中的幀中隨機設(shè)為處理對象幀。這里，所謂'特征幀，是指 利用例如使用圖案識別等方法算出幀彼此的相關(guān)關(guān)系，算出相關(guān)最高(或最 低)的幀，算出幀的直方圖并算出其變化較大(或較小)的幀等方法求出的幀。 另外，此外的方法也可以任何基準(zhǔn)使用從多個幀中抽取特定幀的方法，該 方法也無妨。
內(nèi)容信息取得部14對應(yīng)于來自關(guān)聯(lián)度算出部17的指示內(nèi)容，從動態(tài) 圖像數(shù)據(jù)庫ll中取得與內(nèi)容相關(guān)聯(lián)存儲的內(nèi)容信息。例如，在節(jié)目信息作 為內(nèi)容信息與內(nèi)容相關(guān)聯(lián)存儲的情況下，內(nèi)容信息取得部14取得該內(nèi)容的 節(jié)目標(biāo)題或子標(biāo)題、廣播日期時間、頻道、類型、概要等信息。幀信息取得部15對應(yīng)于來自關(guān)聯(lián)度算出部17的指示內(nèi)容，從動態(tài)圖 像數(shù)據(jù)庫11中存儲的內(nèi)容中，取得賦予特定內(nèi)容內(nèi)的幀的幀信息。幀圖像解析部16對應(yīng)于來自關(guān)聯(lián)度算出部17的指示內(nèi)容，解析構(gòu)成 動態(tài)圖像數(shù)據(jù)庫11中存儲的特定內(nèi)容的至少1個以上的幀中包含的圖像的 圖像特性。具體而言，幀圖像解析部16通過使用圖像識別技術(shù)對幀中包含 的圖像進(jìn)行解析，執(zhí)行映出到該圖像的人物的確定、場所的確定、行動的 確定、狀況的確定、場景的構(gòu)造的確定等。幀圖像解析部16使用的圖像識別技術(shù)可使用公知的技術(shù)。例如，作為 圖像識別技術(shù)的實例，使用臉圖像識別技術(shù)，對圖像執(zhí)行正在攝影的事物 的特征點的算出等，判別該算出的特征點是否為臉的構(gòu)造(眼、鼻、口的位 置或構(gòu)造是否構(gòu)成臉)，從而可判定該圖像映出的事物是否是臉。另外，也可是不算出特征點，而使用稱為模板匹配的方法，判定圖像 上映出的事物是否是臉的方式。另外，也可是事先登記對某個特定人物的 臉附加特征的數(shù)據(jù)，判定圖像中是否拍了該人物的方式，也可以是使用對 多個人物的臉附加特征的數(shù)據(jù)，判定是否是圖像上映出的人，并在拍了的 情況下，識別其是誰的方式。幀圖像解析部16通過使用這種臉識別技術(shù)， 例如可判定為某個幀圖像中映出人物Hl與H2。另外，也可使用場景識別技術(shù)等，解析幀圖像是何場景構(gòu)造。例如， 通過計算圖像的亮度直方圖值，可解析圖像的亮度分布等。由此，可得到 圖像的對比度差等信息。即，可判別是暗的場景、是亮的場景、是畫面內(nèi) 變化大的場景、還是少的場景等。幀圖像解析部16通過使用這種場景識別 技術(shù)，例如可解析為某個幀圖像是舉行棒球的場景。關(guān)聯(lián)度算出部17根據(jù)由內(nèi)容信息取得部14、幀信息取得部15和幀圖 像解析部16的至少1個以上功能部取得的信息，算出彼此不同的兩個內(nèi)容 間的關(guān)聯(lián)度。下面，參照圖2，說明關(guān)聯(lián)度算出部17的動作。圖2是表示由關(guān)聯(lián)度
算出部17執(zhí)行的關(guān)聯(lián)度算出處理的步驟的流程圖。另外，作為該處理的前 提，設(shè)算出動態(tài)圖像數(shù)據(jù)庫ll中存儲的內(nèi)容C1與內(nèi)容C2之間的關(guān)聯(lián)度。首先，關(guān)聯(lián)度算出部17判定關(guān)聯(lián)度算出中是否利用內(nèi)容信息、即是否 利用內(nèi)容信息取得部14(步驟S101)。是否利用內(nèi)容信息，也可以是由用戶 經(jīng)操作裝置等指定的方式，或事先規(guī)定為未圖示的設(shè)定信息的方式。在步驟S101中，在判定為不利用內(nèi)容信息的情況下(步驟S101;否)， 直接移動到步驟S107的處理。另外，在步驟S101中，在判定為利用內(nèi)容 信息的情況下(步驟S101;是)，關(guān)聯(lián)度算出部17若決定構(gòu)成關(guān)聯(lián)度算出對 象的第一個內(nèi)容(內(nèi)容C1)(步驟S102)，則使用內(nèi)容信息取得部14取得與該 內(nèi)容C1關(guān)聯(lián)的內(nèi)容信息(內(nèi)容信息C11)(步驟S103)。這里，設(shè)構(gòu)成算出對 象的內(nèi)容Cl對應(yīng)于來自關(guān)聯(lián)內(nèi)容算出部18的指示來決定。接著，關(guān)聯(lián)度算出部17若決定構(gòu)成關(guān)聯(lián)度算出對象的第二個內(nèi)容(內(nèi) 容C2)(歩驟S104),則使用內(nèi)容信息取得部14取得與該內(nèi)容C2關(guān)聯(lián)的內(nèi) 容信息(內(nèi)容信息C21)(步驟S105)。這里，設(shè)構(gòu)成算出對象的內(nèi)容C2對應(yīng) 于來自關(guān)聯(lián)內(nèi)容算出部18的指示來決定。接著，關(guān)聯(lián)度算出部17根據(jù)步驟S103取得的內(nèi)容信息C11與步驟S105 取得的內(nèi)容信息C21之間的類似度，算出內(nèi)容C2相對內(nèi)容Cl的關(guān)聯(lián)度 RC(步驟S106)，移動到步驟S107的處理。這里，關(guān)聯(lián)度RC的算出可使用 下式(l)來算出。 [式l]關(guān)聯(lián)度及C-^;二 /a (Cl l("), C21(")) ……(1)在上式(1)中，N意味著由內(nèi)容信息取得部14能夠取得的內(nèi)容信息的總 數(shù)。另外，內(nèi)容信息Cll(n)、 C21(n)的'(n)'意味著由內(nèi)容信息取得部14 取得的第n個內(nèi)容信息。fa^(Cll(n)、 C21(n))是將內(nèi)容信息Cll(n)與C21(n) 的關(guān)聯(lián)度作為RCn返回的函數(shù)，Wan是表示加權(quán)的值(n-l、 ...、 N)。這里，作為內(nèi)容信息取得的信息如上所述覆蓋多個方面，但下面為了 簡化說明，設(shè)內(nèi)容信息是{錄制日期時間、內(nèi)容的標(biāo)題、頻道、類型、演出 者列表}等5個的集合(N-5)，這5個內(nèi)容信息從開頭起為11=1、 2.....5，
進(jìn)行說明。于是，C2相對內(nèi)容Cl的關(guān)聯(lián)度RC可用下述所示的5個關(guān)聯(lián)度 RCPRC5的加權(quán)線性和來表示。RC產(chǎn)fa"內(nèi)容信息Cll的錄制日期時間、內(nèi)容信息C21的錄制日期時間)RC2-fa2(內(nèi)容信息C11的標(biāo)題、內(nèi)容信息C21的標(biāo)題) RC^fa3(內(nèi)容信息C11的頻道、內(nèi)容信息C21的頻道) RC4-fa4(內(nèi)容信息C11的類型、內(nèi)容信息C21的類型) RC5-fas(內(nèi)容信息C11的演出者列表、內(nèi)容信息C21的演出者列表) fa,是例如錄制日期時間越近則取越大的值、越遠(yuǎn)則取越小的值的函數(shù)。 具體而言，例如可使用C01/lrec—data(CU)-rec—data(C21)哮關(guān)系式。這里， rec一data(x)是將x的錄制日期時間唯一整數(shù)化的函數(shù)，是將某個基準(zhǔn)日期時 間作為0，整數(shù)化為距此的經(jīng)過秒數(shù)等的函數(shù)。另外，COl為任意常數(shù)，pq 是表示X的大小的函數(shù)，典型地為絕對值。這里，示出在設(shè)f&(C11、 C12)=g(rec—data(Cll)-rec—data(C21》的情況 下，使用作為g(x)-C01/閃等函數(shù)的g，但不限于此。也可以是使用L2范 數(shù)(norm)等的g，例如g(x)=C01/|pq|。此時，|閃|取構(gòu)成x的各個要素之差 的平方和的平方根。另夕卜，g(x)也可使用S形(sigmoid)函數(shù)等，或使用y函數(shù)等。上述示例 了內(nèi)容信息C11與C12接近時取大的值的實例，但不限于此。也可構(gòu)成為 相反取小的值。也可使用在特定條件時取大的值的函數(shù)g。fa2例如由內(nèi)容信息Cll與C12的標(biāo)題字符串中包含同樣的字符串越 多、則取越大的值的函數(shù)來實現(xiàn)。例如，若Cll的標(biāo)題為"&V、 5， C21的標(biāo)題為"力、含5免二"，則之間的"5乏"這兩個字符包含于兩者 中。另一方面，在"fcV、5之:^"與"力、含〈^恕"的情況下，由于1個 字符包含于兩者中，所以前者的fe2值大。以上示出單純基于兩者中包含的字符數(shù)的比較的實例，但不限于此。 例如，也可再加入從開頭起的共同字符數(shù)多的一方取較大的值、或即便沒 有共同的字符、若包含同樣的概念則視為共同等條件。作為后者的實例， 例如將"棒球"與"baseball"視為同樣，在這些字符包含于各自中的情況
下，視為包含共同字符串。另外，在主要字符串相同、次要字符串不同的情況下，這些多是共同的系列的內(nèi)容，所以在這種情況下，也可使fa2的值更大等。例如，由于"& V";ife#2"與"feV"之:fett3"視為是相同電視劇內(nèi)容的不同集，所以 在這種情況下，將fa2的值變?yōu)?倍等。以上的說明只是一例，也可通過使 用模糊檢索等公知技術(shù)，或使用基于正規(guī)表現(xiàn)的檢索等的公知技術(shù)，執(zhí)行 比上述說明高的比較。fa3例如是在內(nèi)容信息Cll與C12的頻道相同的情況下取大的值的函 數(shù)?？梢詫崿F(xiàn)為在單純地頻道相同的情況下取值C02，否則取值0的函數(shù)。 這里，C02是任意常數(shù)。再擴展，在為同系列的頻道的情況下，也可取不 同的值。例如，也可取在相同系列電視臺的情況下，返回值C02/2的函數(shù)。 另外，也可取在同系列但廣播媒體不同的情況下，返回值C02/4的函數(shù)。 以上說明的方式不過是一例，也可使用任意函數(shù)。fa4例如是在內(nèi)容信息Cll與C21的類型相同的情況下取大的值的函 數(shù)。例如，C11與C21雙方均為 <體育'這一類型的情況下，取值C03， 否則取值O,并且，也可為在C21是C11的子類型的情況下，例如，CU 的類型為 <體育，，C21的類型為 <棒球'的情況下，取C03/2的函數(shù)。 另外，也可以是在盡管Cll的類型與C21的類型不直接相同、但作為雙方 的母類型相同的情況下，例如C11的類型為'棒球'，C21的類型為 <足 球'的情況下，由于雙方的母類型為'體育'，相同，所以取C03/4的函 數(shù)。以上說明的方式不過是一例，也可使用任意函數(shù)。fas與fa4—樣?？墒褂萌缦潞瘮?shù)例如在內(nèi)容信息C11與C21的登場 人物列表分別是'WW、 XX、 YY， 、 <XX、 YY、 ZZ，的情況下，共同 的登場人物為2人，所以取2xC04(這里，C04為任意常數(shù)值)，在無共同 登記人物的情況下，取0的函數(shù)。另外，由于登記人物中也包含組，所以 在某個登場人物KK為組XX的成員的情況下，當(dāng)存在<W、 WW、 XX，、 <KK、 YY、 ZZ，這樣的內(nèi)容信息Cll、 C21時，C11中組XX出演，艮口， 該成員KK也出演，C21中組XX不出演但作為成員的KK出演，所以在這 種情況下，也可返回C04/2。同樣，也可擴展成，在定義登場組或登場人物的關(guān)系的情況下，例如 組XX與組YY是相同所屬事務(wù)所等情況下，返回C04/4。此時，也可以 是人物與組間的關(guān)系或各人物、組所屬的所屬事務(wù)所間的關(guān)系在內(nèi)容信息 內(nèi)定義的方式，或事先存儲在動態(tài)圖像數(shù)據(jù)庫中的方式，或從外部服務(wù)器 (信息站點)取得的方式。以上示出對登場人物列表中登場的人不執(zhí)行關(guān)聯(lián)度區(qū)別的實例，但不 限于此。也可是利用登記人物列表中出現(xiàn)的順序來進(jìn)一步進(jìn)行加權(quán)的方式。 例如，在與內(nèi)容信息C11的第1個出來的人比較的情況下，算出的關(guān)聯(lián)度 不變，若為第2個，則關(guān)聯(lián)度為1/2，若為第3個，則為l/3這樣的對應(yīng)于 出現(xiàn)的順序使加權(quán)變化。另外，也可以是雙方均考慮內(nèi)容信息CU中的順 序與C21中的順序的方式。例如，在比較內(nèi)容信息Cll的第2個人物與內(nèi) 容信息C21的第3個人物的情況下，若為內(nèi)容信息Cl 1的第2個,則為1/2， 若為內(nèi)容信息C21的第3個，則為1/3，所以也可設(shè)總的關(guān)聯(lián)度為 1/2x1/3=1/6。另外，作為內(nèi)容信息，也可使用主演等信息，改變對主演者 的關(guān)聯(lián)度的加權(quán)。例如，在主演的情況下使算出的關(guān)聯(lián)度變?yōu)?倍，以這 樣的方式使加權(quán)變化。返回圖2，接著在步驟S107中，關(guān)聯(lián)度算出部17判定關(guān)聯(lián)度算出中 是否利用幀信息、即是否利用幀信息取得部15(步驟S107)。是否利用幀信 息也可與內(nèi)容信息一樣，為由用戶經(jīng)操作裝置設(shè)定的方式，或事先設(shè)定在 未圖示的設(shè)定信息中的方式。在歩驟S107中，在判定為不利用幀信息的情況下(步驟S107;否)，直 接移動到步驟S113的處理。另外，在步驟S107中，在判定為利用幀信息 的情況下(步驟S107;是)，關(guān)聯(lián)度算出部17若決定構(gòu)成關(guān)聯(lián)度算出對象的 第1個幀(幀F(xiàn)l)(步驟S108),則使用幀信息取得部15取得與該幀F(xiàn)l相關(guān) 聯(lián)的幀信息(幀信息F11)(步驟S109)。這里，幀F(xiàn)1根據(jù)從關(guān)聯(lián)內(nèi)容算出部 18輸入的信息來決定，但也可是上述內(nèi)容Cl中包含的一系列幀群中某一 幀。接著，若關(guān)聯(lián)度算出部17決定構(gòu)成關(guān)聯(lián)度算出對象的第2個幀(幀 F2)(步驟SllO)，則使用幀信息取得部15取得與該幀F(xiàn)2相關(guān)聯(lián)的幀信息(幀 信息F21)(步驟S111)。這里，幀F(xiàn)2根據(jù)從關(guān)聯(lián)內(nèi)容算出部18輸入的信息 來決定，但也可是上述內(nèi)容C2中包含的一系列幀群中的某一幀。
接著，關(guān)聯(lián)度算出部17根據(jù)步驟S109取得的幀信息Fll與步驟Sill 取得的幀信息F21之間的類似度，算出幀F(xiàn)1與幀F(xiàn)2之間的關(guān)聯(lián)度、即內(nèi) 容C2相對內(nèi)容Cl的關(guān)聯(lián)度RF之后(步驟Sl 12)，移動到步驟Sl 13的處理。 這里，關(guān)聯(lián)度RF的算出可使用下式(2)來算出。 [式2]關(guān)聯(lián)度及F-2T-,AXFll(")，F(xiàn)21(w))xw6" ...... (2)在上述式(2)中，N意味著幀信息取得部15能夠取得的幀信息的總數(shù)。 另外，幀信息Fll(n)、 F21(n)的'(n)，意味著由幀信息取得部15取得的第 n個幀信息。fbn(Fll(n)、 F21(n))是將幀信息Fll(n)與F21(n)之間的關(guān)聯(lián)度作為RFn返回的函數(shù)，Wbn是表示加權(quán)的值(n-l.....N)。這里，作為幀信息取得的信息如上所述覆蓋多個方面，但下面為了簡 化說明，設(shè)幀信息是(章節(jié)(角)標(biāo)題、章節(jié)(角)類型)這2個的集合(N-2)，這 2個幀信息從開頭起為11=1、 2，進(jìn)行說明。此時，幀F(xiàn)1與F2的關(guān)聯(lián)度RF與內(nèi)容信息的關(guān)聯(lián)度時一樣，可用下 述所示的2個關(guān)聯(lián)度RF,、 RF2的加權(quán)線性和來表示。RF產(chǎn)fb,(幀信息Fll的章節(jié)標(biāo)題、幀信息F21的章節(jié)標(biāo)題) RF產(chǎn)fb2(幀信息F11的章節(jié)類型、幀信息F21的章節(jié)類型) fb,、 fb2例如可以與步驟S106中的方法(分別對應(yīng)于fe2、 fa4)—樣的關(guān) 系式算出。返回圖2，關(guān)聯(lián)度算出部17判定關(guān)聯(lián)度算出中是否利用幀圖像解析信 息、即是否利用幀圖像解析部16(步驟S113)。是否利用幀圖像解析信息也 可與內(nèi)容信息一樣，為由用戶經(jīng)操作裝置設(shè)定的方式，或事先設(shè)定在未圖 示的設(shè)定信息中的方式。在步驟S113中，在判定為不利用幀圖像解析信息的情況下(步驟S113; 否)，直接移動到步驟S119的處理。另外，在步驟S113中，在判定為利用幀圖像解析信息的情況下(步驟 S113;是)，關(guān)聯(lián)度算出部17決定構(gòu)成關(guān)聯(lián)度算出對象的第1個幀(幀F(xiàn)1)(步 驟S114)，使用幀圖像解析部16，取得涉及該幀F(xiàn)1的幀圖像解析信息(幀 圖像解析信息G11)(步驟S115)。這里，幀F(xiàn)1根據(jù)從關(guān)聯(lián)內(nèi)容算出部18輸 入的信息來決定，但也可是與上述幀F(xiàn)1相同的幀。因此，在利用步驟S108 的處理已決定幀F(xiàn)1的情況下，也可省略步驟S114的處理。接著，關(guān)聯(lián)度算出部17決定構(gòu)成關(guān)聯(lián)度算出對象的第2個幀(幀F(xiàn)2)(步 驟S116)，使用幀信息取得部15取得涉及該幀F(xiàn)2的幀圖像解析信息(幀圖 像解析信息G21)(步驟S117)。這里，幀F(xiàn)2根據(jù)從關(guān)聯(lián)內(nèi)容算出部18輸入 的信息來決定，但也可是與上述幀F(xiàn)2相同的幀。因此，在利用步驟SllO 的處理已決定幀F(xiàn)2的情況下，也可省略步驟S116的處理。接著，關(guān)聯(lián)度算出部17根據(jù)步驟S115取得的幀圖像解析信息Gll與 步驟S117取得的幀圖像解析信息G21之間的類似度，算出幀F(xiàn)l與幀F(xiàn)2 之間的關(guān)聯(lián)度、即內(nèi)容C2相對內(nèi)容C1的關(guān)聯(lián)度RG之后(步驟S118)，移 動到步驟S119的處理。這里，關(guān)聯(lián)度RG的算出可使用下式(3)來算出。 [式3]關(guān)聯(lián)度及G-2二/c"(GH("),G"("))xwc" ……(3)在上述式(3)中，N意味著幀圖像解析部16能夠取得的幀圖像解析信息 的總數(shù)。另外，幀圖像解析信息Gll(n)、 G21(n)的意味著由幀圖像 解析部16取得的第n個幀圖像解析信息。ffcn(Gll(n)、 G21(n))是將幀圖像 解析信息Gll(n)與G21(n)之間的關(guān)聯(lián)度作為RG。返回的函數(shù)，Wc。是表示 加權(quán)的值(11=1、 ...、 N)。這里，作為幀圖像解析信息取得的信息如上所述覆蓋多個方面，但下 面為了簡化說明，設(shè)幀圖像解析信息是{臉識別信息、亮度直方圖信息}這2 個的集合(N-2)，這2個幀圖像解析信息從開頭起為n-l、 2，進(jìn)行說明。 此時，幀F(xiàn)l與F2的關(guān)聯(lián)度RG與內(nèi)容信息的關(guān)聯(lián)度和幀信息的關(guān)聯(lián)度時 一樣，可用下述所示的2個關(guān)聯(lián)度RG^ RG2的加權(quán)線性和來表示。 RG尸fd(幀F(xiàn)l的臉識別信息、幀F(xiàn)2的臉識別信息) RG2-fc2(幀F(xiàn)l的亮度直方圖信息、幀F(xiàn)12的亮度直方圖信息) 這里，fc,例如是用于算出幀F(xiàn)l的臉識別信息與幀F(xiàn)2的臉識別信息之 間的類似度的函數(shù)。作為臉識別信息，在抽取可確定所識別的個人的名字 或ID等的情況下，判定其是否相同，例如，可由如下函數(shù)等來實現(xiàn)若相同，則返回C05(任意常數(shù))，否則，則返回0的函數(shù)等來實現(xiàn)。在取得用 于臉識別的參數(shù)作為臉識別信息的情況下，比較該兩個參數(shù)，可進(jìn)一步判 定以何程度相似。參數(shù)的比較通常將兩個參數(shù)看作矢量，利用兩個矢量所 成的角度來判定。所成的角度越接近0，則兩個參數(shù)越相似，所成的角度越 大，則視為越不相似，所以若使用其倒數(shù)等，則在相似的情況下，輸出大 的值。fC2例如是用于算出亮度直方圖彼此的類似度的函數(shù)。簡單而言，通過合計亮度直方圖中各亮度值的差的大小來得到。具體而言，若設(shè)Hist(X)為 X的亮度直方圖，則可作為C06/(i;iHist(Fl)-Hist(F2)l)等求出。這里，C06 為任意常數(shù)。在亮度直方圖的差較小的情況下，認(rèn)為象素幀彼此的傾向類 似。上述示出算出關(guān)聯(lián)度RG的函數(shù)一例，但不限于此，只要是將兩個值 的相關(guān)關(guān)系表示為值，則可使用任意函數(shù)。返回圖2，接著在步驟S119中，關(guān)聯(lián)度算出部17通過使用下式(4)來 將此前算出的關(guān)聯(lián)度(RC、 RF、 RG)相加，從而算出C2相對內(nèi)容C1的綜 合關(guān)聯(lián)度R(步驟S119)，結(jié)束該處理。 [式4]關(guān)聯(lián)度R=wx *RC+wy *RF+wz *RG ......(4)這里，向關(guān)聯(lián)度RC中代入步驟S106算出的值，在步驟S101判定為 不利用內(nèi)容信息的情況下為O。同樣，向關(guān)聯(lián)度RF中代入步驟S112算出 的值，在步驟S107判定為不利用幀信息的情況下為0。另外，向關(guān)聯(lián)度RG 中代入步驟S118算出的值，在步驟S113判定為不利用幀圖像解析信息的 情況下為0。 wx、 wy、 wz為表示加權(quán)的系數(shù)。,返回圖1，關(guān)聯(lián)內(nèi)容算出部18通過使用關(guān)聯(lián)度算出部17，算出由處理 對象內(nèi)容選擇部12選擇的處理對象內(nèi)容、與存儲在動態(tài)圖像數(shù)據(jù)庫11中 的各內(nèi)容之間的關(guān)聯(lián)度，將與處理對象內(nèi)容關(guān)聯(lián)度高的內(nèi)容群與關(guān)聯(lián)度建 立對應(yīng)后列出(listup)。
下面，參照圖3，說明關(guān)聯(lián)內(nèi)容算出部18的動作。圖3是表示由關(guān)聯(lián) 內(nèi)容算出部18執(zhí)行的關(guān)聯(lián)內(nèi)容算出處理的步驟的流程圖。作為本處理的前 提，設(shè)處理對象內(nèi)容及處理對象幀由處理對象內(nèi)容選擇部12及處理對象幀 選擇部13選擇。首先，關(guān)聯(lián)內(nèi)容算出部18決定構(gòu)成動態(tài)圖像數(shù)據(jù)庫11中的檢索對象 的內(nèi)容條件(步驟S201)。這里，設(shè)存儲在動態(tài)圖像數(shù)據(jù)庫ll中的全部內(nèi)容 為檢索對象，但也可通過設(shè)定來縮小檢索對象的范圍。例如，也可對應(yīng)于 使用環(huán)境來縮小檢索對象的內(nèi)容的范圍，或僅將特定日期時間之后錄制的 內(nèi)容作為對象，或僅將特定類型的內(nèi)容作為對象，或僅將包含特定標(biāo)題的 內(nèi)容作為對象。另外，這些縮小范圍條件可以是由用戶經(jīng)操作裝置等輸入 的方式，也可以是作為設(shè)定信息事先設(shè)定的方式。接著，關(guān)聯(lián)內(nèi)容算出部18對與步驟S201決定的條件相對應(yīng)的全部檢 索對象的內(nèi)容，執(zhí)行是否執(zhí)行步驟S208的關(guān)聯(lián)度算出處理的判定(步驟5202) 。下面，將檢索對象的內(nèi)容稱為檢索對象內(nèi)容。在步驟S202中，在判定為處理全部檢索對象內(nèi)容的情況下(步驟S202; 是)，直接移動到步驟S209的處理。另一方面，在步驟S202中，在判定為 未對全部檢索對象內(nèi)容執(zhí)行關(guān)聯(lián)度算出處理的情況下(步驟S202;否)，關(guān) 聯(lián)內(nèi)容算出部18從檢索對象內(nèi)容中選擇一個未處理的檢索對象內(nèi)容(步驟5203) o接著，關(guān)聯(lián)內(nèi)容算出部18執(zhí)行關(guān)聯(lián)度算出中是否使用幀信息的判定(步 驟S204)。這里，是否使用幀信息的判定可以是事先確定為系統(tǒng)設(shè)定的方式， 也可以是由用戶經(jīng)操作裝置指示的方式。在步驟S204中，在判定為不使用幀信息的情況下(步驟S204;否)，直 接移動到步驟S208的處理。另一方面，在步驟S204中，在判定為使用幀 信息的情況下(步驟S204;是)，關(guān)聯(lián)內(nèi)容算出部18決定在檢索對象內(nèi)容中 選擇檢索對象幀的條件(步驟S205)。這里，作為選擇檢索對象幀的條件，也可將檢索對象內(nèi)容中包含的全 部幀設(shè)為檢索對象幀。另外，也可以是利用系統(tǒng)設(shè)定或來自用戶的輸入， 僅將特定幀設(shè)為檢索對象幀的方式。也可僅將開頭幀設(shè)為檢索幀，或僅將 從開頭起N個幀(N是系統(tǒng)設(shè)定或由用戶提供的幀數(shù))作為檢索幀。另外，
也可使用檢索對象內(nèi)容的章節(jié)分割結(jié)果，將章節(jié)的開頭幀的集合作為檢索 幀，或?qū)囟◣畔⒌膸献鳛闄z索幀。接著，關(guān)聯(lián)內(nèi)容算出部18判定是否對全部檢索對象幀執(zhí)行了后述的步 驟S208的關(guān)聯(lián)度算出處理，在判定為已處理的情況下(步驟S206;是)，再 次返回步驟S202的處理。另一方面，在步驟S206中，在判定為存在未處理的檢索對象幀的情況 下(步驟S206;否)，在步驟S203決定的檢索對象幀群中，選擇一個與步驟 S205決定的條件對應(yīng)的未處理的檢索對象幀(步驟S207)。接著，關(guān)聯(lián)內(nèi)容算出部18將處理對象內(nèi)容和處理對象幀設(shè)為內(nèi)容Cl 和內(nèi)容信息Cll，并且，將步驟S203選擇到的檢索對象內(nèi)容和步驟S207 選擇到的檢索對象幀作為內(nèi)容C2和內(nèi)容信息C21通知給關(guān)聯(lián)度算出部17， 由此在由關(guān)聯(lián)度算出部17執(zhí)行關(guān)聯(lián)度算出處理之后(步驟S208)，再次返回 步驟S206的處理。另外，步驟S208的關(guān)聯(lián)度算出處理與圖2所示的關(guān)聯(lián) 度算出處理一樣，所以省略說明。在步驟S208中，在使用幀信息的情況下，對一對處理對象內(nèi)容與檢索 對象內(nèi)容，算出與檢索對象幀的條件匹配的檢索對象幀數(shù)的與處理對象幀 的關(guān)聯(lián)度。關(guān)聯(lián)內(nèi)容算出部18例如按關(guān)聯(lián)度從高到低的順序，將其匯總成 一個，作為一對處理對象內(nèi)容與檢索對象內(nèi)容中的關(guān)聯(lián)度集合來管理。具 體而言，處理對象內(nèi)容與處理對象幀唯一，在對某個檢索對象內(nèi)容存在N 個與檢索對象幀的條件匹配的檢索對象幀的情況下，根據(jù)某個檢索對象內(nèi) 容，對處理對象內(nèi)容算出N個關(guān)聯(lián)度。將該N個關(guān)聯(lián)度的集合定義為各檢 索對象內(nèi)容對處理對象內(nèi)容的關(guān)聯(lián)度。之后，關(guān)聯(lián)內(nèi)容算出部18在步驟S209中，使用對此前算出的處理對 象內(nèi)容的M個(這里M是與步驟S201決定的條件匹配的內(nèi)容數(shù))關(guān)聯(lián)度， 生成處理對象內(nèi)容與存儲在動態(tài)圖像數(shù)據(jù)庫11中的檢索對象內(nèi)容群之間的 關(guān)聯(lián)度列表，在將其按關(guān)聯(lián)度從大到小的順序排列、作為一覽表管理之后 (步驟S209)，結(jié)束該處理。下面，總結(jié)上述關(guān)聯(lián)內(nèi)容算出部18的動作。設(shè)處理對象內(nèi)容為X，該 X中的處理對象幀為X(n)，檢索對象內(nèi)容的總數(shù)為M時，第m個檢索對 象內(nèi)容為Ym(m-0、 ...、 M-l)。并且，設(shè)檢索對象內(nèi)容Ym的第p個檢索
對象幀為Ym(p)(若設(shè)Pm為Ym的檢索對象幀數(shù)，則p-0、 ...、 Pm-l)。這 里，在使用幀信息的情況下，對于檢索對象內(nèi)容Ym，得到Pm-l個關(guān)聯(lián)度 值的集合{11(111，0)，...，11(110>111-1)}。 R(x，y)表示與檢索對象內(nèi)容x中的檢索對 象幀y的關(guān)聯(lián)度。艮P，檢索對象內(nèi)容的關(guān)聯(lián)度由(meYmKR(m，0),…，R(m^Pm-l)H表示， M個檢索對象內(nèi)容每1個中分別存在Pm個(m-O,...，M-l)關(guān)聯(lián)度(幀信息級 別(level))。此時，如下定義處理對象內(nèi)容中的檢索對象內(nèi)容m的關(guān)聯(lián)度 R(m)。R(m)=max(R(m,0), .. ，R(叫Pm誦1))這里，max是返回最大的函數(shù)。艮卩，反(111)為11(11150),...，11(111，？111-1)中的最大的關(guān)聯(lián)度。上述中設(shè)最大的關(guān)聯(lián)度為檢索對象內(nèi)容m中的關(guān)聯(lián)度，但不限于此。 例如，也可將作為平均值的R(m)-(R(m,0)+…+R(r^Pm-l))/Pm設(shè)為關(guān)聯(lián)度。 另外，也可將R(m，0),…，R(m^m-l)的中間值(中值)作為關(guān)聯(lián)度。此外的算 出方法也無妨。另外，在不使用幀信息的情況下，僅列出對m個的每個檢 索對象內(nèi)容的關(guān)聯(lián)度的值。返回圖1，顯示對象內(nèi)容選擇部19從關(guān)聯(lián)內(nèi)容算出部18列出的內(nèi)容 群中，選擇適合于規(guī)定條件的內(nèi)容，作為顯示對象內(nèi)容。另外，同時也選 擇由處理對象內(nèi)容選擇部12選擇的處理對象內(nèi)容，作為顯示對象內(nèi)容。這里，作為規(guī)定條件，可列舉例如內(nèi)容數(shù)。在由系統(tǒng)設(shè)定或用戶輸入 得到的限度內(nèi)容數(shù)為N個的情況下，在由關(guān)聯(lián)內(nèi)容算出部18列出的檢索對 象內(nèi)容數(shù)(算出了關(guān)聯(lián)度的檢索對象內(nèi)容數(shù))超過N的情況下，從關(guān)聯(lián)度的 值大的一方中選擇N個，作為顯示對象內(nèi)容群。規(guī)定的條件不限于內(nèi)容數(shù)。另外，可單一或復(fù)合地使用錄制日為特定日期以后的情況、或為特定 類型的情況等的縮小范圍條件。在使用這些縮小范圍條件的選擇中，可使 用內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部16取得的內(nèi)容信 息、幀信息、幀圖像解析信息中包含的1個以上的信息，不限于上述內(nèi)容 數(shù)、錄制日期時間、類型。作為結(jié)果，顯示對象內(nèi)容選擇部19在由處理對
象內(nèi)容選擇部12選擇的處理對象內(nèi)容及由關(guān)聯(lián)內(nèi)容算出部18列出的內(nèi)容 群中，選擇適合于規(guī)定條件的內(nèi)容，作為顯示對象內(nèi)容。內(nèi)容可視化部20使用由內(nèi)容信息取得部14取得的內(nèi)容信息、由幀信 息取得部15取得的幀信息、由幀圖像解析部16取得的幀圖像解析信息、 內(nèi)容中包含的幀圖像中的至少一個以上，執(zhí)行由顯示對象內(nèi)容選擇部19選 擇的顯示對象內(nèi)容的可視化。這里，所謂 <顯示對象內(nèi)容的可視化'是指 通過使用各顯示對象內(nèi)容及內(nèi)容信息來進(jìn)行象征化，從而以視覺上可識別 的狀態(tài)表示各顯示對象內(nèi)容。具體地，內(nèi)容可視化部20使用CG(計算機圖形)技術(shù)，例如圖4-l、圖 4-2所示，通過將對顯示對象內(nèi)容附加特征的各要素進(jìn)行布局處理(layout)， 執(zhí)行可視化。這里，圖4-1是表示可視化后的顯示對象內(nèi)容一例的圖。如圖所示， 在由矩形表現(xiàn)的背景A10上，重疊幀圖像All、節(jié)目標(biāo)題A12、錄制日期 時間A13、頻道名A14。這里，節(jié)目標(biāo)題A12、錄制日期時間A13、頻道 名A14從由內(nèi)容信息取得部14取得的內(nèi)容信息中抽取。此時，內(nèi)容可視化部20準(zhǔn)備大小與背景A10的顯示尺寸一致的板狀多 邊形，如圖4-l的布局那樣，將幀圖像All紋理映射至多邊形表面的一部 分(或全部)。這里，幀圖像All也可以用稱為縮略圖像的形式來表示。此 時，以與幀圖像All的顯示區(qū)域一致的形式縮小(或擴大)幀圖像。另外，節(jié)目標(biāo)題A12、錄制日期時間A13、頻道名A14等字符信息分 別生成將該字符可視化的圖像，作為紋理圖像，在規(guī)定的位置以規(guī)定的尺 寸將各紋理圖像紋理映射至多邊形表面的一部分。字符可視化提議各種方 法，但例如可使用采用CG技術(shù)中的陰影處理(〉工一y)技術(shù)將由矢量數(shù)據(jù) 表現(xiàn)的字符數(shù)據(jù)作為紋理數(shù)據(jù)來可視化(渲染)的公知技術(shù)(參照Yoshiyuki Kokojima, et al" Resolution-Independent Rendering of Deformable Vector Objects Using Graphics Hardware, Sketches, SIGGRAPH2006, 2006.等)來實 現(xiàn)。另外，幀圖像All可使用從內(nèi)容可視化部20的外部(例如處理對象幀 選擇部13)指定的幀序號，從動態(tài)圖像數(shù)據(jù)庫ll取得。并且，不僅以原樣 的狀態(tài)使用取得的幀圖像，也可通過剪裁其一部分，僅使用一部分，或執(zhí)
行擴大縮小等，用作不同分辨率的圖像。剪裁例如通過以想取得的圖像尺 寸來選擇幀圖像的信息量最大的范圍來指定。這可通過使用想取得的圖像 尺寸的窗來掃描幀圖像，算出該窗內(nèi)的平均信息量(工>卜口匕°一)，將平均 信息量最大的窗的部分決定為剪裁圖像來實現(xiàn)。上述只不過是一例，也可以任意基準(zhǔn)來執(zhí)行剪裁。另外，不僅利用放 大縮小來得到不同的分辨率，也可使用重定目標(biāo)(y夕一歹y夕')等技 術(shù)，生成不同分辨率的圖像而加以利用。所謂編寫是適應(yīng)地執(zhí)行分辨率變 換以最好地表示該幀圖像的特征的技術(shù)，正在研究開發(fā)各種技術(shù)。在本發(fā)明中，可適宜使用這些技術(shù)，利用其結(jié)果，作為幀圖像All。另外，幀圖像AI1使用從顯示對象內(nèi)容取得的章節(jié)信息等，取得任意 的章節(jié)開頭或從章節(jié)開頭起第任意幀等的幀圖像，使用該幀圖像。并且， 利用根據(jù)顯示對象內(nèi)容算出的熱烈(盛"9上W 9)程度等，使用最熱烈的幀的 幀圖像。這里，熱烈程度例如可采用使用顯示對象內(nèi)容的聲音信息，設(shè)保 持聲音波形大的電平的部分為熱烈之處等公知技術(shù)。在圖4-l中，作為可視化的要素，使用背景AIO、幀圖像All、節(jié)目 標(biāo)題A12、錄制日期時間A13、頻道名A14，但不限于此。例如圖4-2所示， 也可在背景A10上僅重疊幀圖像A11與節(jié)目標(biāo)題A12。另外，要素的布局 不限于圖4-l、圖4-2的實例，可任意布局。上述說明的字符可視化方法不過是一例，不限于此，可使用其它方法。 例如可以是背景A10由規(guī)定顏色涂布的方式，或是利用紋理映射貼附規(guī)定 圖像的方式。此時，例如使用內(nèi)容信息取得部14取得的內(nèi)容的類型信息， 如在其類型為體育的情況下，將背景A10涂藍(lán)，在其類型為電視機的情況 下，將背景A10涂黃這樣的根據(jù)內(nèi)容的種類來使顏色變化。若察看利用以上動作可視化的顯示對象內(nèi)容，則可一覽察看由圖像來 表現(xiàn)該內(nèi)容的類型、標(biāo)題名、錄制日期時間、頻道、內(nèi)容等實際內(nèi)容的縮 略。下面，將由內(nèi)容可視化部20可視化后的顯示對象內(nèi)容稱為'可視化內(nèi) 容，。可視化內(nèi)容群配置部21根據(jù)由關(guān)聯(lián)內(nèi)容算出部18算出的關(guān)聯(lián)度，將 由內(nèi)容可視化部20可視化后的可視化內(nèi)容群配置在虛擬的三維空間內(nèi)(下 面稱為虛擬空間)。
下面，參照圖5、圖6,說明由可視化內(nèi)容群配置部21配置在虛擬空 間內(nèi)的可視化內(nèi)容群。這里，圖5、 6是表示配置在虛擬空間內(nèi)的可視化內(nèi) 容群的實例圖，圖5表示從虛擬空間的上方(Z軸正側(cè)的遠(yuǎn)方)看的狀態(tài)，圖 6表示在與圖5相同的空間中且相同配置條件下、從虛擬空間的前方、即由 Y軸正側(cè)的遠(yuǎn)方稍靠Z軸正側(cè)看的狀態(tài)。在圖5、 6中，可視化內(nèi)容201或可視化內(nèi)容202表示由內(nèi)容可視化部 20生成的可視化內(nèi)容。這里，可視化內(nèi)容201是對應(yīng)于處理對象內(nèi)容的可 視化內(nèi)容，配置在由圓錐狀構(gòu)成的配置坐標(biāo)系的頂點。另外，可視化內(nèi)容 201以外的其它可視化內(nèi)容202是由顯示對象內(nèi)容選擇部19選擇為適合于 規(guī)定條件的內(nèi)容的顯示對象內(nèi)容的可視化內(nèi)容。可視化內(nèi)容群配置部21將 這些可視化內(nèi)容群配置在虛擬三維空間內(nèi)，所以通過改變觀察(渲染)虛擬空 間的視點(觀察視點)，如圖6所示，即便相同配置，看到的也不同。設(shè)觀察 視點可由用戶經(jīng)操作裝置變更到任意位置。下面，參照圖7、圖8-1、圖8-2說明基于可視化內(nèi)容群配置部21的可 視化內(nèi)容的配置動作。圖7是表示由可視化內(nèi)容群配置部21執(zhí)行的可視化內(nèi)容群配置處理的 步驟的流程圖。首先，可視化內(nèi)容群配置部21將對應(yīng)于處理對象內(nèi)容的可 視化內(nèi)容201配置在虛擬空間內(nèi)(步驟S301)。這里，處理對象內(nèi)容是由處 理對象內(nèi)容選擇部12選擇到的內(nèi)容，為關(guān)聯(lián)內(nèi)容算出部18算出的各個內(nèi) 容的關(guān)聯(lián)度的基準(zhǔn)。這里，可視化內(nèi)容201的配置位置例如配置在虛擬空間的原點 (x，y)-(O，O)上，同時，將該可視化內(nèi)容的法線方向配置為z軸，即法線矢量 =(0，0，1)。利用這樣的步驟，處理對象內(nèi)容(可視化內(nèi)容)被配置在圖8-l、圖 8-2所示的可視化內(nèi)容201的位置上。這里，圖8-1是從上方(Z軸正側(cè)的遠(yuǎn)方)觀察構(gòu)成配置對象的虛擬空間 的圖，圖中中央為原點(x，yMO，O)。如圖8-1所示，設(shè)在以原點(x,yMO,O) 為中心的XY平面中的各方位方向上，事先分配類型的種類。另外，圖8-2 是從正面(Y軸正側(cè)的遠(yuǎn)方)觀察構(gòu)成配置對象的虛擬空間的圖，圖中所示的 圓錐形狀的軸(虛線部)方向為Z軸。返回7，可視化內(nèi)容群配置部21判定是否配置了全部的配置對象內(nèi)
容(步驟S302)。這里，所謂'配置對象內(nèi)容'是指使用內(nèi)容可視化部20， 將由顯示對象內(nèi)容選擇部19選擇到的顯示對象內(nèi)容群的每個可視化之后的 可視化內(nèi)容。在步驟S302中，在判定為配置了全部的配置對象內(nèi)容的情況下(步驟 S302;是)，結(jié)束本處理。另一方面，在步驟S302中判定為存在未配置的 可視化內(nèi)容的情況下(步驟S302;否)，決定接著執(zhí)行配置的配置對象內(nèi)容涉 驟S303)。配置對象內(nèi)容的決定只要從未配置的配置對象內(nèi)容中任意選擇一 個即可。例如，也可以是選擇未配置的配置對象內(nèi)容中、由關(guān)聯(lián)內(nèi)容算出 部18得到的關(guān)聯(lián)度最大的配置對象內(nèi)容。接著，可視化內(nèi)容群配置部21從關(guān)聯(lián)內(nèi)容算出部18取得步驟S303決 定的配置對象內(nèi)容的關(guān)聯(lián)度(步驟S304)。之后，可視化內(nèi)容群配置部21從內(nèi)容可視化部20取得由步驟S303決 定的配置對象內(nèi)容的內(nèi)容信息、幀信息、幀圖像解析信息中使用的信息(步 驟S305)。下面，作為一例，說明使用內(nèi)容信息中包含的類型(類型信息)的 情況，但不限于此。可視化內(nèi)容群配置部21決定步驟S303決定的配置對象內(nèi)容的配置位 置(步驟S306)，并在該決定的位置上，配置配置對象內(nèi)容(步驟S307)。這里，步驟S306中的配置位置的決定利用以下的步驟來執(zhí)行。首先， 可視化內(nèi)容群配置部21根據(jù)配置對象內(nèi)容的內(nèi)容信息中包含的類型信息， 決定虛擬空間內(nèi)的XY平面上的配置位置。具體而言，可視化內(nèi)容群配置 部21比較配置對象內(nèi)容的類型信息與分配給XY平面中的各方位的類型信 息，將一致的方位決定為XY平面上的配置位置。在圖8-1中，示出將XY平面上的方位8分割的實例(方位Dl-D8)，事 先向分割后的各方位分配各不相同的類型信息的種類。例如，若涉及配置 對象內(nèi)容的類型信息為^綜藝(variety)'，則可視化內(nèi)容群配置部21將該 配置對象內(nèi)容在虛擬空間中的XY平面上的配置位置決定為方位D2。在圖8-l中，示出向該方位D2分配 <綜藝'、向方位D6分配'體育'、 向方位D8分配 <電視劇'的實例，但不限于此。另外，也可向方位方向分 配類型以外的種類。另外，向各方位的分配不限于是固定的，也可對應(yīng)于利用時的環(huán)境動 態(tài)地變化。例如，也可參照用戶過去的操作履歷(未圖示)，按頻繁視聽的節(jié) 目的類型的順序，向各方位分配。另外，也可利用由用戶經(jīng)操作裝置輸入 的指示信息，改變向各方位的分配。并且，向各方位分配的信息不限于是一個信息，例如也可以是向方位D1與方位D2分配類型、向方位D3分配 錄制日期時間等同時分配多種信息的方式。接著，可視化內(nèi)容群配置部21根據(jù)步驟S304取得的配置對象內(nèi)容的 關(guān)聯(lián)度，決定虛擬空間內(nèi)的Z軸上的配置位置。具體而言，如圖8-2所示， 在虛擬空間內(nèi)設(shè)置圓錐形狀的配置坐標(biāo)系，決定配置配置對象內(nèi)容的圓錐 臺在Z軸上的位置。這里，圓錐臺的中心與Z軸正交，配置Z軸上的值(Z 值)越大，則關(guān)聯(lián)度越大，Z值越小，則關(guān)聯(lián)度越小的內(nèi)容。例如，在將配置了對應(yīng)于處理對象內(nèi)容的可視化內(nèi)容201的位置設(shè)為 構(gòu)成上底面的圓錐臺B1，該圓錐臺B1的半徑為規(guī)定常數(shù)rl的情況下，算 出從該上底面在Z軸上的位置Zl、離開與關(guān)聯(lián)度大小相對應(yīng)的距離的Z軸 上的位置Z2(Z1>Z2)，在該位置上生成半徑r2(rKr2)的下底面(參照圖8-1、 8-2圓錐臺B2、 B3)。這里，半徑r2可根據(jù)位置Z2的值與圓錐形狀的配置 坐標(biāo)系求出。之后，可視化內(nèi)容群配置部21將生成的下底面在Z軸上的位置Z2設(shè) 為配置配置對象內(nèi)容的Z坐標(biāo)(Z值)，并且，將在先決定的XY面中的方位 (例如D2)與下底面之間的交點設(shè)為配置配置對象內(nèi)容的X、 X坐標(biāo)，從而 決定虛擬空間內(nèi)的配置對象內(nèi)容的配置位置。對應(yīng)于關(guān)聯(lián)度的圓錐臺在Z軸上的位置(Z值)，若設(shè)置上底面、下底面 時的參數(shù)(例如配置坐標(biāo)系(圓銜的高度或底面的半徑等)確定、從關(guān)聯(lián)度的 值變換為Z值的變換確定，則僅通過解簡單的幾何式，就可唯一決定。在 本實施方式中，設(shè)虛擬空間上設(shè)置的配置坐標(biāo)系的參數(shù)預(yù)先確定，但不限 于此，也可根據(jù)操作履歷或由用戶經(jīng)操作裝置輸入的指示信息來變更。另外，設(shè)與上述從Z1至Z2的導(dǎo)出相關(guān)的、對應(yīng)于關(guān)聯(lián)度的Z值的變 換式也預(yù)先確定。例如，可使用^Z2-C07X沃聯(lián)度的最大值-某個內(nèi)容的 關(guān)聯(lián)度)'等關(guān)系式來求出。這里，C07是任意常數(shù)。與Z2導(dǎo)出相關(guān)的關(guān) 系式不限于此，只要是可對應(yīng)于關(guān)聯(lián)度唯一導(dǎo)出Z2的關(guān)系式即可。另外，上述中設(shè)從關(guān)聯(lián)度至Z2的關(guān)系式為連續(xù)函數(shù)，但不限于此，例
如也可通過使用<Z值^ound(AX(關(guān)聯(lián)度值的最大值-某個內(nèi)容的關(guān)聯(lián)度 值))'等關(guān)系式，離散地決定Z值。這里，'romid，指四舍五入小數(shù)點以 下的函數(shù)。即，對幾個關(guān)聯(lián)度輸出相同Z值。另外，即便該關(guān)系式也可根 據(jù)操作履歷或由用戶經(jīng)操作裝置輸入的指示信息來變更。利用上述動作，例如關(guān)聯(lián)度為vl、類型信息為綜藝的可視化內(nèi)容在步 驟S307的處理中，作為圖8-l、圖8-2中的可視化內(nèi)容202a，配置在圓錐 臺B2的邊緣部。另外，關(guān)聯(lián)度值為v2(<vl)、類型為體育的可視化內(nèi)容作 為圖8-l、圖8-2所示的可視化內(nèi)容202c，配置在圓錐臺B3的邊緣部?？?視化內(nèi)容202b、 202d、 202e也一樣，配置在與各可視化內(nèi)容的類型及關(guān)聯(lián) 度相對應(yīng)的虛擬空間內(nèi)的位置上。通過如此配置，若如圖8-1所示，從上面看虛擬空間，則可容易地識 別可視化內(nèi)容202a與202c的類型是不同的。另外，如圖8-2所示，在從橫 向看虛擬空間的情況下，可容易地識別與可視化內(nèi)容202c相比，可視化內(nèi) 容202a這一方與可視化內(nèi)容201之間的關(guān)聯(lián)度大。返回圖7，接著在步驟S308中，可視化內(nèi)容群配置部21判定是否需 要修正已配置內(nèi)容的配置位置，在判定為不需要的情況下(步驟S308;否)， 再次返回到步驟S302的處理。這里，所謂 <已配置內(nèi)容'是指已配置于虛 擬空間內(nèi)的可視化內(nèi)容。例如，在使用圖8-l、 8-2中說明的配置方法(步驟S306中的具體例)的 情況下，若存在多個相同關(guān)聯(lián)度、相同類型的內(nèi)容，則將兩者配置在完全 相同的位置上。此時，在后階段的空間可視化部22可視化虛擬空間的情況 下，難以區(qū)別兩者。另外，即便在存在多個相同類型且具有較近的關(guān)聯(lián)度 的內(nèi)容的情況下，多個可視化內(nèi)容(的一部分)也同樣會重合，所以難以判別 可視化內(nèi)容各自的內(nèi)容。步驟S308的處理是用于消除這種狀況的處理，通過判定所配置的可視 化內(nèi)容之間的位置關(guān)系是否在規(guī)定值以內(nèi)，判斷是否需要執(zhí)行配置位置的 修正(步驟S308)。這里，設(shè)構(gòu)成判定基準(zhǔn)的'規(guī)定值'根據(jù)顯示時的可視 化內(nèi)容的大小、或后述的空間可視化部22中顯示虛擬空間時的視點方向， 動態(tài)變更其值。例如圖8-1所示，在以從上部看的狀態(tài)顯示虛擬空間時， 設(shè)判定各可視化內(nèi)容在XY坐標(biāo)下的二維位置關(guān)系，如圖8-2所示，在以
從側(cè)部看的狀態(tài)顯示虛擬空間時，設(shè)判定XYZ坐標(biāo)下的三維位置關(guān)系。 在步驟S308中，在判定為需要修正已配置內(nèi)容的配置位置的情況下(步驟S308;是)，可視化內(nèi)容群配置部21在執(zhí)行已配置內(nèi)容的配置位置的調(diào)整之后(步驟S309),移動到步驟S302的處理。步驟S309的修正方法可考慮多種，但下面說明幾個典型的修正方法。首先，作為第l個修正方法，可列舉圖9-l至圖9-6所示，使用事先確定了配置順序或其位置關(guān)系的位置修正信息(未圖示)，來修正已配置內(nèi)容的配置位置的方法。例如，設(shè)配置在虛擬空間內(nèi)的5個可視化內(nèi)容203a、 203b、 203c、 203d 為相同類型且具有較近的關(guān)聯(lián)度。此時，這些可視化內(nèi)容的配置位置局部 集中，所以例如會重合于圖9-l所示的可視化內(nèi)容203a的位置上。此時， 可通過根據(jù)位置修正信息，錯開各可視化內(nèi)容的配置位置，從而調(diào)整配置 位置，以使可視化內(nèi)容彼此不重合。這里，圖9-l示出根據(jù)位置修正信息，執(zhí)行沿橫向(圖中箭頭方向)錯開 重疊的可視化內(nèi)容的配置位置來進(jìn)行修正的實例。此時，將可視化內(nèi)容203b 的位置修正至可視化內(nèi)容203a的位置附近、在其之后，并且，將下一可視 化內(nèi)容203c修正至可視化內(nèi)容203b的位置附近，如此修正配置位置，使 得沿橫向可視化內(nèi)容彼此不重合。這里為了簡化說明，示出修正成可視化內(nèi)容彼此不重合的實例，但不 限于此。例如也可通過對位置修正信息事先確定可允許的重合量，如圖9-2 所示，在有允許范圍內(nèi)的重合的狀態(tài)下修正配置位置。另外，圖9-3示出根據(jù)位置修正信息，執(zhí)行沿縱向錯開重疊的可視化 內(nèi)容的配置位置來進(jìn)行修正的實例。并且，通過組合圖9-1與圖9-3的修正 模式，也可如圖94所示，以下面這樣的方式對位置修正信息設(shè)定修正， 即首先在修正成沿橫向配置N個之后，移動到下一列，再沿橫向配置N 個這樣的方式。圖9-5、圖9-6是執(zhí)行再稍復(fù)雜的配置的實例，也可對位置 修正信息設(shè)定成修正配置位置后的可視化內(nèi)容群看成為三角形或扇形等。上述說明的配置修正方法不過是一例，不限于此。也可修正配置位置， 使得修正后的所配置的可視化內(nèi)容群看成為圓形或橢圓形、菱形等任意幾 何形狀，即便看上去無秩序配置，但只要是可唯一確定配置方法的修正，
使用哪種配置模式均無妨。下面，作為第2個修正方法，可列舉使用隨機值(隨機數(shù))決定修正后的 配置位置的方法。這里，參照圖IO的流程圖，說明涉及使用隨機值的配置 位置修正的處理(配置位置修正處理)的步驟。首先，可視化內(nèi)容群配置部21判定是否對構(gòu)成修正對象的全部可視化 內(nèi)容決定了修正后的配置位置(步驟S401)。這里，在判定為對構(gòu)成修正對 象的全部可視化內(nèi)容決定了修正后的配置位置的情況下(步驟S401;是)， 本處理直接結(jié)束。另一方面，在步驟S401中，在判定為存在未處理的可視化內(nèi)容的情況 下(步驟S401;否)，將構(gòu)成修正對象的可視化內(nèi)容中未處理的一個可視化 內(nèi)容決定為修正對象(步驟S402)。接著，可視化內(nèi)容群配置部21隨機地算出修正對象的可視化內(nèi)容的位 置修正值(步驟S403)。接著，可視化內(nèi)容群配置部21分別算出將步驟S402 中算出的修正值設(shè)為配置位置的修正對象的可視化內(nèi)容、與已修正的可視 化內(nèi)容之間的重合區(qū)域的尺寸(步驟S404)。接著，可視化內(nèi)容群配置部21執(zhí)行步驟S404中算出的重合區(qū)域的尺 寸是否滿足規(guī)定基準(zhǔn)的判定(步驟S405)。這里，設(shè)事先確定閾值等規(guī)定基 準(zhǔn)，但也可以是由用戶經(jīng)操作裝置輸入的方式，或是根據(jù)操作履歷等變更 的方式。例如，若是將重合區(qū)域的尺寸設(shè)為0的基準(zhǔn)，則修正位置，使可視化 內(nèi)容彼此不重合。典型地，作為將重合區(qū)域的尺寸設(shè)為X以下等來提供。 這里，X可以是絕對的區(qū)域尺寸量，也可以是用可視化內(nèi)容區(qū)域的10%等 相對量來指示的方式。在歩驟S405中，在判定為不滿足基準(zhǔn)的情況下(步驟S405;否)，再次 返回到歩驟S402的處理。另外，在步驟S405中，在判定為滿足基準(zhǔn)的情 況下(步驟S405;是)，分別算出將步驟S402中算出的修正值設(shè)為配置位置 的修正對象的可視化內(nèi)容、與已修正的可視化內(nèi)容之間的距離(步驟S406)。 這里， <距離'為，例如將各可視化內(nèi)容的左上坐標(biāo)等特定部分定義為代 表可視化內(nèi)容的位置，并算出該位置彼此間的距離。接著，可視化內(nèi)容群配置部21判定步驟S406算出的距離是否滿足規(guī)
定的距離基準(zhǔn)(步驟S407)。這里，所謂 <距離基準(zhǔn)'是用于控制可視化內(nèi) 容間的距離的條件，例如，用于抑制過于遠(yuǎn)離的條件。對距離基準(zhǔn)事先確 定可允許的間隔距離的范圍，但不限于此，可使用由用戶經(jīng)操作裝置輸入 的值或操作履歷等變更。在步驟S407中，在判定為不滿足距離條件的情況下(步驟S407;否)， 再次返回到步驟S402的處理。另外，在步驟S407中，在判定為滿足距離 條件的情況下(步驟S407;是)，可視化內(nèi)容群配置部21在將以上處理中算 出的修正值決定為修正對象的可視化內(nèi)容的位置修正值之后(步驟S408)， 再次返回到步驟S401的處理。通過對全部修正對象的可視化內(nèi)容執(zhí)行以上處理，根據(jù)所決定的修正 值修正配置位置，從而可以在滿足特定基準(zhǔn)(重合量、距離)的范圍內(nèi)將可視 化內(nèi)容彼此隨機配置。作為第3個修正方法，可列舉使上述第1個與第2個方法組合的方法。 即，首先以第1個方法決定大體的修正位置，再由隨機值補正該位置的方 法?；陔S機值的補正方法可使用與上述配置位置決定處理(參照圖IO)— 樣的步驟。此時，距離基準(zhǔn)最好使用比第2個方法小的值。由此，相對于 第1個方法中可視化內(nèi)容統(tǒng)一地排列，第2個方法可打亂一定程度的程序 性后排列可視化內(nèi)容。由此，可實現(xiàn)宏觀上有秩序的、微觀上無秩序的配作為第4個修正方法，可列舉修正對象的可視化內(nèi)容群根據(jù)整體的基 準(zhǔn)來進(jìn)行配置位置的修正的方法。例如，分別使用彈簧模型(^才、千f》) 結(jié)合修正對象的可視化內(nèi)容群，求出由以該彈簧模型結(jié)合的可視化內(nèi)容群 形成的網(wǎng)絡(luò)中彈簧模型能量平衡的配置，將此設(shè)為各個修正位置。第1個方法執(zhí)行有秩序的配置，第2個方法執(zhí)行無秩序的配置，但第 4個方法是兼具這兩者優(yōu)點的方法。即，以單個來說是無秩序地進(jìn)行配置， 但從整體看，則是有秩序地進(jìn)行配置。就彈簧模型而言，提議了各種公知 技術(shù)，可使用這些方法。另外，不僅簡單的彈簧模型，也可以通過將可視化內(nèi)容群視為群眾， 使用群眾模擬技術(shù)等，決定可視化內(nèi)容群的配置，從而也可執(zhí)行配置位置 的修正。作為群眾模擬，例如可使用Boid模型等。以上說明的方法不過是
一例，不限于此，可自由使用。利用以上處理，例如在去除處理對象內(nèi)容的可視化內(nèi)容有5個的情況 下，利用各自的類型或關(guān)聯(lián)度值，將5個可視化內(nèi)容分別配置在虛擬空間 內(nèi)的圓錐臺邊緣部附近的位置上(圖8-l、圖8-1的可視化內(nèi)容202a 202e)。 另外，在原點位置配置處理對象內(nèi)容的可視化內(nèi)容(圖8-1、圖8-2的可視化 內(nèi)容201)。返回圖1，空間可視化部22使用關(guān)聯(lián)內(nèi)容算出部18算出的關(guān)聯(lián)度、 內(nèi)容可視化部20可視化時使用的信息、可視化內(nèi)容群配置部21的配置結(jié) 果信息中的任意一個以上，對由可視化內(nèi)容群配置部21決定了配置位置的 每個可視化內(nèi)容，實施圖像處理及CG處理，以規(guī)定的視點條件對包含可 視化內(nèi)容群的空間的狀態(tài)進(jìn)行可視化。下面，參照圖ll，說明空間可視化部22的動作。圖ll是表示由空間 可視化部22執(zhí)行的空間可視化處理的步驟的流程圖。首先，空間可視化部22執(zhí)行是否對全部可視化內(nèi)容執(zhí)行了步驟S502 的處理的判定(步驟S501)。這里，所謂'全部可視化內(nèi)容'是指由可視化 內(nèi)容群配置部21配置在虛擬空間中的可視化內(nèi)容群。在步驟S501中，在判定為處理了全部可視化內(nèi)容的情況下(步驟S501; 是)，移動到步驟S503的處理。另外，在步驟S501中，在判定為存在未處 理的可視化內(nèi)容的情況下(步驟S501;否)，空間可視化部22對未處理的每 個可視化內(nèi)容執(zhí)行CG處理、圖像處理(步驟S502)，再次返回到步驟S501。 在步驟S502的處理中，執(zhí)行各種CG處理和圖像處理。下面，舉出幾個實 例，說明具體的CG處理和圖像處理。作為圖像處理，例如可考慮對可視化內(nèi)容中包含的圖像幀(圖4中的 101)，對應(yīng)于其配置位置，適用模糊濾波器等。作為模糊濾波器，有高斯(力' 夕77y)濾波器、低通濾波器、平均值濾波器、中值濾波器等，但隨著可 視化內(nèi)容的配置位置、例如Z值來變更對這些圖像的適用程度。具體而言， Z值越小，則使模糊變得越強。由此，當(dāng)如圖5所示根據(jù)Z軸信息觀察空 間時，得到越是配置較遠(yuǎn)的可視化內(nèi)容，其圖像幀的部分越模糊的效果。 以上示出適用 <模糊'作為圖像處理的實例，但不限于此，可執(zhí)行任意的 CG處理?？蓪⑷我獾膱D像處理適用于可視化內(nèi)容的任意部分。
作為CG處理的實例，可列舉可視化內(nèi)容的半透明化?？梢暬瘍?nèi)容如 上所述，例如由CG多邊形來實現(xiàn)，但通過變更該多邊形頂點的參數(shù)、例 如a值，可使多邊形成為半透明。由此，即便在如圖5所示配置多個可視 化內(nèi)容群的情況下，也可得到隱藏在某個可視化內(nèi)容下的可視化內(nèi)容透過 可見的效果。以上示出執(zhí)行半透明化作為CG處理的實例，但不限于此， 可執(zhí)行任意的CG處理。接著，空間可視化部22設(shè)定空間可視化用的參數(shù)(步驟S503)。具體而 言，從何方向可視化虛擬空間，就CG而言，即執(zhí)行用于渲染虛擬空間的 相機(視點)位置或方向、范圍等參數(shù)的設(shè)定。另外，同時，若必要，貝他可 同時執(zhí)行空間渲染用光源的位置或光源的強度、范圍等參數(shù)設(shè)定。另外，在步驟S503的處理中，執(zhí)行渲染時的可視化范圍或如何渲染的 設(shè)定等。渲染的設(shè)定有各種方法，但例如使用陰影處理(〉工一夕')程序，事 先定義幾個渲染手法，從這些手法中，使用用戶輸入或系統(tǒng)設(shè)定值等來決 定使用的陰影程序，將其設(shè)定在GPU中。接著，空間可視化部22根據(jù)步驟S503設(shè)定的空間可視化用的參數(shù)， 通過渲染虛擬空間，執(zhí)行虛擬空間的可視化(步驟S504),結(jié)束本處理。具 體而言，根據(jù)步驟S503之前設(shè)定的CG參數(shù)，渲染CG空間。由此，由可 視化內(nèi)容群配置部21，將配置在虛擬空間內(nèi)的可視化內(nèi)容群的狀態(tài)可視化。另外，在步驟S504的處理時，例如若使用稱為體積陰影的CG技術(shù)， 則在可視化內(nèi)容前后重合的情況下，面前的內(nèi)容的影子可能落到深處的內(nèi) 容部分上。此時，在要落影子的內(nèi)容群的面前側(cè)設(shè)定燈，使用體積陰影技 術(shù)來附加影子。另外，可通過對渲染后的圖像作為后期效果(posteffect)進(jìn)行圖像處理， 實現(xiàn)同樣的效果。另外，在步驟S504中，除此之外，還可同時將可視化內(nèi) 容彼此的附屬信息可視化。例如圖8-l所示，同時渲染表示XY平面的各 方位的軸、或分配給各方位的類型名、圓錐臺的等值面等，重疊于在先的 可視化內(nèi)容群的渲染。并且，也可對以上得到的渲染圖像執(zhí)行基于后期效 果處理的圖像處理，或使用該渲染圖像，使用其它陰影程序，再執(zhí)行渲染， 得到新的渲染圖像。通過上述操作，生成從特定視點觀察布局后的可視化 內(nèi)容群的圖像。
返回圖1，顯示部23將空間可視化部22可視化后的虛擬空間顯示于 顯示畫面上。具體而言，顯示表示空間可視化部22的渲染結(jié)果的圖像。下面，參照圖12，說明該實施方式的影像顯示裝置100的整體動作。 圖12是表示影像顯示裝置100的各功能部執(zhí)行的影像顯示處理的步驟的流 程圖。首先，處理對象內(nèi)容選擇部12從存儲在動態(tài)圖像數(shù)據(jù)庫11中的內(nèi)容 群中，選擇處理對象內(nèi)容(步驟S601)。接著，處理對象幀選擇部13從步驟 S601選擇的處理對象內(nèi)容中包含的幀群中，選擇處理對象幀(步驟S602)。接著，關(guān)聯(lián)內(nèi)容算出部18執(zhí)行關(guān)聯(lián)內(nèi)容算出處理，生成表示處理對象 內(nèi)容與檢索對象內(nèi)容群之間的關(guān)聯(lián)度的一覽表(步驟S603)。步驟S603的關(guān) 聯(lián)內(nèi)容算出處理與圖3中說明的關(guān)聯(lián)內(nèi)容算出處理一樣，所以省略其說明。接著，顯示對象內(nèi)容選擇部19根據(jù)步驟S603生成的關(guān)聯(lián)度的一覽表， 將適用于規(guī)定條件的內(nèi)容與處理對象內(nèi)容一起選擇為顯示對象內(nèi)容時(步 驟S604)，則內(nèi)容可視化部20執(zhí)行這些各顯示對象內(nèi)容的可視化(步驟 S605)。接著，可視化內(nèi)容群配置部21通過對步驟S605中可視化了的各內(nèi)容 (可視化內(nèi)容)執(zhí)行可視化內(nèi)容群配置處理，在虛擬空間內(nèi)的規(guī)定位置上配置 各可視化內(nèi)容(步驟S606)。步驟S606的可視化內(nèi)容群配置處理與圖7中說 明的可視化內(nèi)容群配置處理一樣，所以省略其說明。接著，空間可視化部22通過執(zhí)行空間可視化處理，當(dāng)以規(guī)定的視點條 件渲染步驟S606中配置有可視化內(nèi)容群的虛擬空間時(步驟S607)，將該渲 染結(jié)果顯示于顯示部23中(步驟S608)。接著，處理對象幀選擇部13判定處理對象幀是否到達(dá)更新的定時(步 驟S609)。具體而言，在處理對象內(nèi)容是30幀/秒的幀率動態(tài)圖像的情況下， 更新定時以約33毫秒(IOOO毫秒/30幀)的間隔到來。在判定為超過該定時 的情況下(步驟S609;是)，作為更新的定時，前進(jìn)到步驟S610的處理。否 則，再次返回步驟S608,重復(fù)畫面顯示。即，在以不足更新定時的間隔執(zhí) 行顯示的情況下，顯示相同圖像。接著，在步驟S610中，處理對象幀選擇部13執(zhí)行是否需要處理對象 幀的更新的判定(步驟S610)。這里，是否需要更新的判定基準(zhǔn)不特別過問，
但在本實施方式中，在處理對象內(nèi)容中當(dāng)前的處理對象幀之后還存在幀的 情況下，即判定為存在未顯示的幀的情況下，判定為需要更新處理對象幀。在步驟S610中，在判定為需要更新處理對象幀的情況下(步驟S610; 是)，處理對象幀選擇部13更新處理對象幀之后(步驟S611)，再次返回步 驟S602的處理。這里，所謂處理對象幀的更新是指清除當(dāng)前的處理對象幀。通過返回到步驟S602的處理，處理對象幀選擇部13選擇步驟S611 中更新后的新的幀，作為處理對象幀。在本實施方式中，設(shè)上次未選擇為 處理對象幀的幀的一下幀，被選擇為更新后的處理對象幀。更新后的處理 對象幀的選擇方法不限于此。例如，在處理對象內(nèi)容被章節(jié)分割的情況下， 也可是選擇下一章節(jié)的開頭幀(或下一章節(jié)中包含的任意幀)的方式。另外， 在當(dāng)前幀是最終幀的情況下，也可是選擇開頭幀的方式。下面，通過執(zhí)行步驟S603 S608的處理，能夠觀察與更新后的處理對 象幀關(guān)聯(lián)性高的內(nèi)容群按其關(guān)聯(lián)性配置在虛擬空間中的狀態(tài)。即，若處理 對象幀變化，則關(guān)聯(lián)的內(nèi)容的選擇方式或虛擬空間內(nèi)的布局也變化，所以 能夠觀察空間的可視化與處理對象幀的轉(zhuǎn)變一起動態(tài)變化的情況。另一方面，在步驟S610中，在判定為不需要更新處理對象幀的情況下 (步驟S610;否)，處理對象內(nèi)容選擇部12判定是否需要更新處理對象內(nèi)容 (步驟S612)。在本實施方式中，設(shè)根據(jù)來自用戶的指示內(nèi)容來判定有無更 新的必要，例如在經(jīng)操作裝置，從用戶選擇其它內(nèi)容作為新的處理對象內(nèi) 容的情況下，判定為需要更新處理對象內(nèi)容。處理對象內(nèi)容的更新有無的判定不限于上述方式。例如，不僅用戶輸 入，還可考慮處理對象內(nèi)容選擇部12自動選擇處理對象內(nèi)容的情況。例如， 考慮自動選擇與當(dāng)前的處理對象內(nèi)容關(guān)聯(lián)度最高的內(nèi)容作為新的處理對象 內(nèi)容的情況。另外，還考慮去除當(dāng)前的處理對象內(nèi)容，自動選擇最近錄制 的內(nèi)容作為新的處理對象內(nèi)容的情況。即便在這種情況下，處理對象內(nèi)容 選擇部12也判定為需要更新處理對象內(nèi)容。在步驟S612中，在判定為不需要更新處理對象內(nèi)容的情況下(步驟 S612;否)，結(jié)束本處理。另一方面，在步驟S612中，在判定為需要更新 處理對象內(nèi)容的情況下(步驟S612;是)，處理對象內(nèi)容選擇部12更新當(dāng)前 的處理對象內(nèi)容(步驟S613)，返回到步驟S601的處理，從而選擇指示的內(nèi)
容，作為新的處理對象幀。這里，所謂處理對象內(nèi)容的更新是指清除當(dāng)前 的處理對象內(nèi)容。通過返回到步驟S601的處理，處理對象內(nèi)容選擇部12對應(yīng)于來自顯 示部23的指示，選擇所指示的內(nèi)容，作為新的處理對象幀。接著，通過執(zhí) 行步驟S602 S608的處理，能夠觀察與更新后的處理對象內(nèi)容關(guān)聯(lián)性高的 內(nèi)容群按其關(guān)聯(lián)性配置在虛擬空間中的狀態(tài)。即，若處理對象內(nèi)容變化，則關(guān)聯(lián)的內(nèi)容群的選擇方法或虛擬空間內(nèi)的布局也變化，所以能觀察空間 的可視化與處理對象內(nèi)容的轉(zhuǎn)變一起動態(tài)變化的情況。這樣，通過沿幀的時間系列的流動使處理對象幀依次轉(zhuǎn)變，處理對象 內(nèi)容自身被再現(xiàn)，所以例如圖8-1的中心部配置的可視化內(nèi)容201被再現(xiàn) 為動態(tài)圖像。另外，伴隨著再現(xiàn)的幀的轉(zhuǎn)變，與該動態(tài)圖像整體和/或該動 態(tài)圖像當(dāng)前的幀關(guān)聯(lián)度高的內(nèi)容群，作為可視化之后的內(nèi)容群(圖中的 202a 202e等)，以布局在可視化內(nèi)容201的周圍的狀態(tài)顯示于畫面上。圖13-1、圖13-2是用于說明影像顯示處理的動作的圖。如圖13-1所 示，例如在對應(yīng)于處理對象內(nèi)容的可視化內(nèi)容201中顯示涉及料理的幀圖 像的情況下，在可視化內(nèi)容201的周邊，沿周邊布局了與該處理對象幀關(guān) 聯(lián)度高的內(nèi)容群(例如料理節(jié)目等)。這里，切換可視化內(nèi)容201中顯示的幀，如圖13-2所示，當(dāng)顯示涉及 特定人物的幀圖像時，伴隨該幀的切換，將與表示該特定人物的處理對象 幀關(guān)聯(lián)度高的內(nèi)容群布局在可視化內(nèi)容201的周邊，所以為與圖13-1不同 的內(nèi)容群和布局。如上所述，根據(jù)本實施方式的影像顯示裝置100，可利用配置在虛擬 空間內(nèi)的可視化內(nèi)容間的位置關(guān)系，來表示處理對象內(nèi)容與顯示對象內(nèi)容 之間的關(guān)聯(lián)性，所以能將處理對象的動態(tài)圖像內(nèi)容與顯示對象的動態(tài)圖像 內(nèi)容之間的關(guān)聯(lián)性可視化。由此，用戶可容易地知道與處理對象內(nèi)容關(guān)聯(lián) 度高的內(nèi)容群以何種分布存在于動態(tài)圖像數(shù)據(jù)庫U中。在本實施方式中，設(shè)動態(tài)圖像數(shù)據(jù)庫11為設(shè)置在存儲裝置中的數(shù)據(jù) 庫，但不限于此。例如，用于數(shù)據(jù)存儲、取得的也不限于HDD，也可以是 DVD-RAM等其它存儲媒體。另外，動態(tài)圖像數(shù)據(jù)庫ll中的數(shù)據(jù)存儲、管 理用的存儲區(qū)域不限于單一的存儲區(qū)域，也可匯總存儲到HDD或DVD-RAM等多個存儲媒體的存儲區(qū)域中進(jìn)行存儲，各存儲區(qū)域不需要位 于同一設(shè)備內(nèi)部。另外，在構(gòu)成為能夠訪問經(jīng)通信部網(wǎng)絡(luò)連接的其它裝置 的動態(tài)圖像數(shù)據(jù)庫11的情況下，也可由自己裝置的動態(tài)圖像數(shù)據(jù)庫11與 其它裝置的動態(tài)圖像數(shù)據(jù)庫11構(gòu)成一個動態(tài)圖像數(shù)據(jù)庫11。 [第l實施方式的變形例l]下面，參照圖14，說明本實施方式的變形例1的影像顯示裝置101。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖14是表示影像顯示裝置101的功能構(gòu)成的框圖。如圖14所示，影 像顯示裝置101除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、空間可視化部22和顯示部23夕卜，還具備配置履歷管理部24 與可視化內(nèi)容群配置部25。配置履歷管理部24是由上述存儲部實現(xiàn)的功能部?？梢暬瘍?nèi)容群配置 部25是通過上述控制部執(zhí)行存儲在存儲部中的各種程序來實現(xiàn)的功能部。配置履歷管理部24將可視化內(nèi)容群配置部25決定的各可視化內(nèi)容的 內(nèi)容信息、與其配置位置和關(guān)聯(lián)度相對應(yīng)，并存儲管理為履歷信息。配置 履歷管理部24對應(yīng)于來自可視化內(nèi)容群配置部25的請求，讀出履歷信息， 并輸出到可視化內(nèi)容群配置部25。存儲的履歷信息的個數(shù)不特別過問，可 對應(yīng)于使用環(huán)境來任意設(shè)定?？梢暬瘍?nèi)容群配置部25具有與可視化內(nèi)容群配置部21 —樣的功能， 并且，參照由配置履歷管理部24存儲管理的履歷信息，在算出作為當(dāng)前配 置對象的可視化內(nèi)容的配置位置時利用。具體而言，例如在判定為與作為當(dāng)前配置對象的可視化內(nèi)容的內(nèi)容信 息一致、且關(guān)聯(lián)度為與配置履歷管理部24得到的1步驟之前的關(guān)聯(lián)度相同 或相近的值的情況下，不執(zhí)行配置位置的算出計算，將對應(yīng)于該關(guān)聯(lián)度而 存儲的配置位置設(shè)為該可視化內(nèi)容的配置位置。這里，是否是'相近值' 的判定可根據(jù)例如IXO-Xll〈e的關(guān)系式來判定。這里，X0是當(dāng)前配置對象 中某個可視化內(nèi)容的關(guān)聯(lián)度，XI是存儲在履歷信息中的關(guān)聯(lián)度(例如構(gòu)成 上次配置對象的可視化內(nèi)容的關(guān)聯(lián)度)，e為任意的小常數(shù)。s的值也可在后
述的影像顯示處理的每次重復(fù)中為不同的值。另外，可視化內(nèi)容群配置部25在判定為與作為當(dāng)前配置對象的可視化 內(nèi)容的內(nèi)容信息一致、且關(guān)聯(lián)度與配置履歷管理部24得到的1步驟之前的 關(guān)聯(lián)度不同的情況下，即判定為IXO-Xl一s的情況下，參照包含與作為當(dāng)前 配置對象的可視化內(nèi)容的內(nèi)容信息相同的內(nèi)容信息的履歷信息中、過去的 數(shù)個步驟的履歷信息中包含的配置位置，補正算出的配置位置。這里，補 正例如進(jìn)行插補，將過去數(shù)個步驟的配置位置考慮為時間系列數(shù)據(jù)，執(zhí)行 樣條(spline)插補等參數(shù)曲線插補，使其變平滑，當(dāng)前的配置位置大大離開 該插補曲線。以上只是一例，插補方法也可使用各種方法。下面，參照圖15，說明本實施方式的變形例1的可視化內(nèi)容的配置動 作。圖15是表示由可視化內(nèi)容群配置部25執(zhí)行的、可視化內(nèi)容群配置處 理的步驟的流程圖。首先，可視化內(nèi)容群配置部25將處理對象內(nèi)容配置在 虛擬空間內(nèi)(步驟S701)。接著，可視化內(nèi)容群配置部25判定是否配置了全部配置對象內(nèi)容(步 驟S702)。這里，所謂'配置對象內(nèi)容'是指使用內(nèi)容可視化部20將由顯 示對象內(nèi)容選擇部19選擇到的顯示對象內(nèi)容群的每個可視化之后的內(nèi)容。在歩驟S702中，在判定為配置了全部配置對象內(nèi)容的情況下(步驟 S702;是)，結(jié)束本處理。另一方面，在步驟S702中判定為存在未配置的 可視化內(nèi)容的情況下(步驟S702;否)，決定接著執(zhí)行配置的配置對象內(nèi)容(步 驟S703)。之后，可視化內(nèi)容群配置部25從關(guān)聯(lián)內(nèi)容算出部18取得由步驟S703 決定的配置對象內(nèi)容(可視化內(nèi)容)的關(guān)聯(lián)度(步驟S704)。接著，可視化內(nèi)容群配置部25取得步驟S703決定的可視化內(nèi)容的內(nèi) 容信息、幀信息、幀圖像解析信息中至少包含內(nèi)容信息的任一或全部信息 (步驟S705)。這些信息從內(nèi)容信息取得部14、幀信息取得部15、幀圖像解 析部16取得，可視化內(nèi)容群配置部25經(jīng)內(nèi)容可視化部20取得。之后，可視化內(nèi)容群配置部25參照由配置履歷管理部24存儲管理的 履歷信息，判定是否存在與步驟S705取得的內(nèi)容信息相同、且與步驟S704 取得的關(guān)聯(lián)度一致或相近值的履歷信息(步驟S706)。在歩驟S706中，在判定為不存在履歷信息的情況下(步驟S706;否)，
通過與上述圖7的步驟S306 —樣的處理，決定步驟S703決定的配置對象 內(nèi)容的配置位置(步驟S707)。在步驟S707中，可視化內(nèi)容群配置部25參 照包含與作為當(dāng)前配置對象的可視化內(nèi)容的內(nèi)容信息相同的內(nèi)容信息的履 歷信息中、過去的數(shù)個步驟的履歷信息中包含的配置位置，執(zhí)行算出的配 置位置的補正。之后，可視化內(nèi)容群配置部25將作為當(dāng)前配置對象的可視化內(nèi)容的內(nèi) 容信息、步驟S707決定的配置位置，與步驟S704取得的關(guān)聯(lián)度相對應(yīng)， 作為履歷信息存儲在配置履歷管理部24中之后(步驟S708)，移動到步驟 S710的處理。另一方面，在步驟S706中，在判定為存在與步驟S704取得的關(guān)聯(lián)度 一致或相近值的履歷信息的情況下(步驟S706;是)，從配置履歷管理部24 中讀出對應(yīng)于該關(guān)聯(lián)度存儲的配置位置，將該讀出的配置位置決定為本次 的配置對象內(nèi)容的配置位置之后(步驟S709)，移動到步驟S710的處理。接著在步驟S710中，可視化內(nèi)容群配置部25通過與上述圖7的步驟 S307—樣的處理，將配置對象內(nèi)容，配置在由步驟S707或步驟S709決定 的配置位置(步驟S710)。之后，可視化內(nèi)容群配置部25判定是否需要修正已配置內(nèi)容的配置位 置，在判定為不需要的情況下(步驟S711;否)，再次返回到步驟S702的處 理。另一方面，在步驟S7U中判定為需要修正已配置內(nèi)容的配置位置時(步 驟S711;是)，可視化內(nèi)容群配置部25在執(zhí)行已配置內(nèi)容的配置位置的修 正之后(步驟S712)，移動到步驟S702的處理。在執(zhí)行上述可視化內(nèi)容群配置處理的情況下，將上述影像顯示處理(參 照圖12)的步驟S609否時的循環(huán)目的地，設(shè)為步驟S606。步驟S606的可 視化內(nèi)容群配置處理執(zhí)行圖15所示的可視化內(nèi)容群配置處理。這樣，根據(jù)第1實施方式的變形例1的構(gòu)成，不僅可減輕可視化內(nèi)容 的配置位置算出的計算量，還可抑制對應(yīng)于處理對象幀變化而變化的各可 視化內(nèi)容的配置位置不連續(xù)地運動，配置在空間中的可視化內(nèi)容平滑運動 地觀看。具體而言，由于可算出不足幀的顯示定時(例如不足約33毫秒)的 可視化位置，所以可實現(xiàn)如下效果，即執(zhí)行反映了不足幀的更新定時的空 間可視化結(jié)果的畫面顯示，故可提高空間可視化結(jié)果的顯示率，顯示可平
滑地觀看。[第1實施方式的變形例2]下面，參照圖16，說明本實施方式的變形例2的影像顯示裝置102。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖16是表示影像顯示裝置102的功能構(gòu)成的框圖。如圖16所示，影 像顯示裝置102除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、空間可視化部22和顯示部23外，還具備配置狀況解析部26 與可視化內(nèi)容群配置部27。配置狀況解析部26與可視化內(nèi)容群配置部27是通過上述控制部執(zhí)行 存儲在存儲部中的各種程序來實現(xiàn)的功能部。配置狀況解析部26通過對可視化內(nèi)容群配置部27所決定的可視化內(nèi) 容群的配置位置狀況進(jìn)行解析，判定可視化內(nèi)容群的配置的偏倚狀態(tài)(例如 配置偏向特定范圍、特定范圍為過密狀態(tài)、過疏狀態(tài)等)，并將其結(jié)果反饋 到可視化內(nèi)容群配置部27。具體而言，通過解析按每個類型配置的可視化 內(nèi)容的量之比，算出每個類型下的配置數(shù)量為何比例，將其結(jié)果輸出到可 視化內(nèi)容群配置部27。另外，算出虛擬空間每單位區(qū)域的配置數(shù)，將其結(jié) 果輸出到可視化內(nèi)容群配置部27。可視化內(nèi)容群配置部27基本上執(zhí)行與第1實施方式的說明一樣的動 作，并且，使用從配置狀況解析部26輸入的配置狀況的解析結(jié)果反饋，變 更可視化內(nèi)容群的配置位置。在第1實施方式中，使用圖8-1說明了配置 位置的算出。下面，使用一樣的實例來說明可視化內(nèi)容群配置部27的動作。為了簡化說明，將類型設(shè)為A、 B、 C、 D這4種。若設(shè)配置狀況解析 部26中的配置狀況解析結(jié)果在類型A、 B、 C、 D下的可視化內(nèi)容的配置數(shù)之比為l: 1: 1: 1，則可視化內(nèi)容群配置部27如圖17-1所示，將由該比得到的各1/4的區(qū)域分別設(shè)為類型A、 B、 C、 D的配置范圍。另外，若設(shè)類型A、 B、 C、 D下的可視化內(nèi)容的配置數(shù)之比為3: 2: 1: 2，則可視化內(nèi)容群配置部27如圖17-2所示，將由該比得到的各個3/8、 1/4、 1/8、 1/4的區(qū)域分別設(shè)為類型A、 B、 C、 D的配置范圍。具體而言，
可視化內(nèi)容群配置部27如配置在各區(qū)域內(nèi)那樣，執(zhí)行圖7的步驟S306的 配置位置決定和步驟S309的配置位置修正。在不利用配置狀況解析部26和可視化內(nèi)容群配置部27執(zhí)行配置位置 修正的情況下，若可視化內(nèi)容群中存在相對于類型的差別，則在配置后的 虛擬空間中，產(chǎn)生可視化內(nèi)容非常過密地配置的部分、和基本上未配置的 部分。由此，產(chǎn)生難以看到非常過密地配置的部分的可視化內(nèi)容的問題。 但是，如上所述，若與配置內(nèi)容的量一致地適應(yīng)地變化配置范圍，則可消 除這種問題，即便可視化內(nèi)容的類型傾向中存在差別，也可始終容易看到 地加以配置。另外，也可變更使用作為配置狀況解析部26中的配置狀況解析結(jié)果而 被反饋的'可視化內(nèi)容的單位配置量'而算出的配置。這里，所謂 <可視 化內(nèi)容的單位配置量'是表示虛擬空間中的每單位區(qū)域配置多少可視化內(nèi) 容的數(shù)值(密度)。密度大的地方過密配置，小的地方過疏配置。因此，例如若空間定義該配置量(配置密度)的倒數(shù)，并求出該空間的重 心點，則該空間中密度的平衡點(重心點)確定。將該平衡量作為原點，沿虛 擬空間中XY平面的方位方向繪制出類型的實例示于圖18-2中。圖18-1是 用于與圖18-2對比的圖，表示將圓錐臺B1、 B2、 B3的中央設(shè)為原點的默 認(rèn)狀態(tài)(對應(yīng)于圖8-l、 8-2的狀態(tài))。在如此錯開原點之后，通過執(zhí)行可視化內(nèi)容的配置位置算出、修正等， 向解析結(jié)果的反饋前過密的部分分配比以前大的配置位置(參照圖18-2的 類型B的配置范圍)。此時，例如圖19所示，將圓錐的原點三維地從原點 位置移動到算出的重心點來實現(xiàn)。由此，消除以前變得過密配置而難以觀 看的部分，可整體地容易觀看。上述說明的重心的算出方法只是一例。也可在空間中定義該配置量(配 置密度)的倒數(shù)，當(dāng)求出該空間的重心點時，投影到XY平面上，執(zhí)行二維 的重心計算，在該重心位置合用最初的Z值。另夕卜，也可以一定程度的幅 度將Z值離散值化，對該離散值化后的每個幅度分別算出重心位置。這樣，根據(jù)第1實施方式的變形例2的構(gòu)成，當(dāng)可視化虛擬空間時， 可減輕配置的可視化內(nèi)容過密的部分，實現(xiàn)該部分的可視化內(nèi)容的實際內(nèi) 容容易觀看的效果。以上說明的基于比(比例)的方法、基于密度倒數(shù)的重心 點的方法只是一例，不限于此。只要是可使用配置狀況的解析結(jié)果消除空 間配置時的過密、過疏等配置的配置位置修正方法，則均可同樣使用。[第1實施方式的變形例3]下面，參照圖20,說明本實施方式的變形例3的影像顯示裝置103。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖20是表示影像顯示裝置103的功能構(gòu)成的框圖。如圖20所示，影 像顯示裝置103除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、內(nèi)容可視化部20、可視化內(nèi)容 群配置部2K空間可視化部22和顯示部23外，還具備第2配置狀況解析 部28與顯示對象內(nèi)容選擇部29。第2配置狀況解析部28與顯示對象內(nèi)容選擇部29是通過上述控制部 執(zhí)行存儲在存儲部中的各種程序來實現(xiàn)的功能部。第2配置狀況解析部28通過對可視化內(nèi)容群配置部21所決定的可視 化內(nèi)容群的配置位置狀況進(jìn)行解析，判定可視化內(nèi)容群的配置的偏倚狀態(tài) (配置偏向特定范圍、特定范圍為過密狀態(tài)、過疏狀態(tài)等)，并將其結(jié)果反饋 到顯示對象內(nèi)容選擇部29。具體的動作與第1實施方式的變形例2的影像 顯示裝置102之配置狀況解析部26 —樣。顯示對象內(nèi)容選擇部29執(zhí)行基本上與第1實施方式的說明一樣的動 作。除此之外，存在伴隨第2配置狀況解析部28的追加的變更點。在第l 實施方式中，僅使用關(guān)聯(lián)內(nèi)容算出部18的結(jié)果，僅適合期望條件的內(nèi)容被 選擇為顯示對象內(nèi)容，但除此之外，根據(jù)由第2配置狀況解析部28的解析 結(jié)果得到的可視化內(nèi)容群配置后的空間的過密、過疏狀況，限制過密部分 中配置的可視化內(nèi)容。顯示對象內(nèi)容選擇部29在第2配置狀況解析部28的解析結(jié)果為虛擬 空間中的配置密度(每單位區(qū)域的配置數(shù))超過規(guī)定量的情況下，根據(jù)預(yù)先確 定的限定數(shù)，限制配置在其空間周邊的可視化內(nèi)容數(shù)。使用關(guān)聯(lián)內(nèi)容算出 部18得到的關(guān)聯(lián)度來限制可視化內(nèi)容數(shù)，從關(guān)聯(lián)度大的一方起，對超過限 定數(shù)的內(nèi)容，從顯示對象內(nèi)容選擇部29的選擇對象中去除。具體而言，將虛擬空間分割成幾個塊，根據(jù)第2配置狀況解析部28得 到的配置密度，算出該塊單位下的配置密度。之后，計數(shù)該塊中配置的可 視化內(nèi)容數(shù)，對于超過限定數(shù)的，執(zhí)行從關(guān)聯(lián)度低的一方起舍棄的處理。 設(shè)構(gòu)成指標(biāo)的1艮定數(shù)'作為設(shè)定信息事先存儲。另外，該限定數(shù)也可是 利用由用戶經(jīng)操作裝置輸入的值或操作履歷等變更的方式。這樣，根據(jù)第1實施方式的變形例3的構(gòu)成，通過對應(yīng)于配置密度調(diào) 整可視化內(nèi)容的配置，可減輕可視化內(nèi)容過密的部分，所以實現(xiàn)當(dāng)可視化 虛擬空間時、可視化內(nèi)容的實際內(nèi)容容易觀看的效果。 [第1實施方式的變形例4]下面，參照圖21，說明本實施方式的變形例4的影像顯示裝置104。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖21是表示影像顯示裝置104的功能構(gòu)成的框圖。如圖21所示，影 像顯示裝置104除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部B、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、可視 化內(nèi)容群配置部21、空間可視化部22和顯示部23外，還具備第3配置狀 況解析部30與內(nèi)容可視化部31 。第3配置狀況解析部30與內(nèi)容可視化部31是通過上述控制部執(zhí)行存 儲在存儲部中的各種程序來實現(xiàn)的功能部。第3配置狀況解析部30通過對可視化內(nèi)容群配置部21所決定的可視 化內(nèi)容群的配置位置狀況進(jìn)行解析，判定可視化內(nèi)容群的配置的偏倚狀態(tài) (例如配置偏向特定范圍、特定范圍為過密狀態(tài)、過疏狀態(tài)等)，并將結(jié)果反 饋到內(nèi)容可視化部31。具體的動作與第1實施方式的變形例2的影像顯示 裝置102中的配置狀況解析部26 —樣。內(nèi)容可視化部31具有與上述內(nèi)容可視化部20—樣的功能，并且，接 收從第3配置狀況解析部30得到的配置狀況解析結(jié)果的反饋，執(zhí)行多個可 視化內(nèi)容的合并(7—-)，作為新的一個可視化內(nèi)容重新生成。具體而言，當(dāng)來自第3配置狀況解析部30的反饋結(jié)果為存在以過密狀 況配置的兩個(以上)可視化內(nèi)容時，在其滿足規(guī)定條件的情況下，合并這兩 個(以上)可視化內(nèi)容，再構(gòu)成為一個可視化內(nèi)容。這里，構(gòu)成是否合并的判定指標(biāo)的 <規(guī)定條件'可對應(yīng)于使用環(huán)境來
任意設(shè)定。例如，可將節(jié)目標(biāo)題具有近似性作為條件，此時，節(jié)目標(biāo)題的一部分(或全部)相同、是相同電視劇的第N集與第M集、是相同電視劇的 重播、是相同電視劇的續(xù)集等成為條件。另外，也可將錄制日期時間存在 近似性作為條件，此時，錄制日相同、或是相近日期時間、或是相同的周 幾、或是相同時間段、或是在過去1周中錄制等成為條件。另外，也可將 錄制頻道存在近似性作為條件，此時，是相同頻道、同系列的頻道等成為 條件。另外，也可將演出者信息存在近似性作為條件，此時，是某個演出 者X出演的節(jié)目、或是屬于某個組的人物出演的節(jié)目、或是屬于同一事務(wù) 所的人物出演的節(jié)目、或是相同類型的演出者出演的節(jié)目等成為條件。另 外，也可將類型中存在近似性作為條件，此時，是相同足球節(jié)目、體育的 類型不同、但兩者均為體育節(jié)目等成為條件。在滿足規(guī)定條件的情況下，合并多個可視化內(nèi)容，再構(gòu)成為一個可視 化內(nèi)容。此時，適當(dāng)加工使用圖4-l、圖4-2說明的背景A10、幀圖像All、 節(jié)目標(biāo)題A12、錄制日期時間A13、頻道名A14等。例如，在存在節(jié)目標(biāo)題的近似性的情況下，將節(jié)目標(biāo)題的共同部分匯 集為一個，對其附加非共同部分。具體地，在存在某個電視劇X的1集、2 集、3集的情況下，如'電視劇X(第1集 第3集)，等所示加工節(jié)目標(biāo)題 A12的部分。另夕卜，在錄制日期時間存在近似性的情況下，例如將錄制日 期時間A13加工為^昨天錄制，，同時，將節(jié)目標(biāo)題A12加工為'節(jié)目A、 節(jié)目B、節(jié)目C'，將頻道名A14加工成^頻道X、頻道Y、頻道Z，等。 這里，節(jié)目A、 B、 C是滿足昨天錄制的條件的節(jié)目，其頻道分別設(shè)為X、 Y、 Z。在(存在演出者信息的近似性'的情況下，同樣如^演出者X的演 出節(jié)目(電視劇X、綜藝Y、音樂節(jié)目Z)'等所示加工節(jié)目標(biāo)題A12的部分。另外，類型存在近似性時也一樣，例如'體育節(jié)目(足球X、棒球Y、 棒球Z)'等所示加工節(jié)目標(biāo)題A12的部分。同時，對錄制日期時間A13 或頻道名A14也如上所述加工。另外，就背景A10而言，執(zhí)行變?yōu)椴煌?色、變?yōu)椴煌y等加工，以便知道合并這一情況。例如，作為類型A是 紅背景，類型B是藍(lán)背景，執(zhí)行合并兩者變?yōu)閺募t到藍(lán)的漸變背景等加工， 或使用完全不同的顏色或圖案。另外，就幀圖像A11而言，將多個幀圖像合并成一個。具體而言，從 多個幀圖像中，以某一基準(zhǔn)(例如信息量最多的圖像(例如可使用直方圖等來 判斷)選擇一個，設(shè)為幀圖像，排列多個幀圖像，設(shè)為一個幀圖像，制作混 合多個幀圖像的鑲嵌圖像，并設(shè)為一個幀圖像，抽取多個幀圖像中各個圖 像內(nèi)的任意部分，將其混合后，生成新的圖像等。另外，以上合并用的加 工只是一例，實際上不限于此，只要實現(xiàn)適當(dāng)合并各種信息變?yōu)橐粋€即可。這樣，根據(jù)第1實施方式的變形例4的構(gòu)成，通過合并虛擬空間內(nèi)過 密部分上配置的可視化內(nèi)容，可消除該部分的過密狀態(tài)，所以實現(xiàn)容易觀 看可視化內(nèi)容的實際內(nèi)容的效果。 [第1實施方式的變形例5]下面，參照圖22，說明本實施方式的變形例5的影像顯示裝置105。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖22是表示影像顯示裝置105的功能構(gòu)成的框圖。如圖22所示，影 像顯示裝置105除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、空間 可視化部22和顯示部23外，還具備第4配置狀況解析部32、顯示對象內(nèi) 容加工部33、內(nèi)容可視化部34與可視化內(nèi)容群配置部35。第4配置狀況解析部32、顯示對象內(nèi)容加工部33、內(nèi)容可視化部34 與可視化內(nèi)容群配置部35是通過上述控制部執(zhí)行存儲在存儲部中的各種程 序來實現(xiàn)的功能部。第4配置狀況解析部32通過對可視化內(nèi)容群配置部21所決定的可視 化內(nèi)容群的配置位置狀況進(jìn)行解析，判定可視化內(nèi)容群的配置的偏倚狀態(tài) (例如配置偏向特定范圍、特定范圍為過密狀態(tài)、過疏狀態(tài)等)，并將結(jié)果反 饋到顯示對象內(nèi)容加工部33。具體的動作與第1實施方式的變形例2的影 像顯示裝置102的配置狀況解析部26 —樣。顯示對象內(nèi)容加工部33接收來自第4配置狀況解析部32的反饋，加 工從顯示對象內(nèi)容選擇部19得到的構(gòu)成顯示對象的內(nèi)容群。具體而言，若 接收來自第4配置狀況解析部32的反饋，則加工配置過密部分的顯示對象 內(nèi)容群，將多個顯示對象內(nèi)容的信息匯集成一個。涉及加工的動作與上述 內(nèi)容可視化部31—樣。
內(nèi)容可視化部34接收由顯示對象內(nèi)容加工部33加工的顯示對象內(nèi)容 群，執(zhí)行用于可視化各顯示對象內(nèi)容的動作。涉及可視化的動作與上述內(nèi) 容可視化部20 —樣?？梢暬瘍?nèi)容群配置部35根據(jù)關(guān)聯(lián)內(nèi)容算出部18算出的關(guān)聯(lián)度，將從 內(nèi)容可視化部34得到的可視化內(nèi)容群配置在虛擬空間內(nèi)。向虛擬空間內(nèi)的 配置方法與上述可視化內(nèi)容群配置部21 —樣。這樣，根據(jù)第1實施方式的變形例5的構(gòu)成，通過合并虛擬空間內(nèi)過 密部分上配置的可視化內(nèi)容所對應(yīng)的顯示對象內(nèi)容，可消除該部分的過密 狀態(tài)，所以實現(xiàn)容易觀看可視化內(nèi)容的實際內(nèi)容的效果。 [第1實施方式的變形例6]下面，參照圖23,說明本實施方式的變形例6的影像顯示裝置106。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖23是表示影像顯示裝置106的功能構(gòu)成的框圖。如圖23所示，影 像顯示裝置106除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、顯示對象內(nèi)容選擇部19、內(nèi)容可視化部20、可視化 內(nèi)容群配置部2K空間可視化部22和顯示部23外，還具備關(guān)聯(lián)內(nèi)容算出 部36。關(guān)聯(lián)內(nèi)容算出部36是通過上述控制部執(zhí)行存儲在存儲部中的各種程 序來實現(xiàn)的功能部。關(guān)聯(lián)內(nèi)容算出部36具有與關(guān)聯(lián)內(nèi)容算出部18—樣的功能，并且，將 列出的內(nèi)容中、從關(guān)聯(lián)度高的內(nèi)容開始的規(guī)定個數(shù)的內(nèi)容，登記在處理對 象內(nèi)容列表中。另外，關(guān)聯(lián)內(nèi)容算出部36對登記在處理對象內(nèi)容列表中的 內(nèi)容的每個，賦予用于作為處理對象內(nèi)容而依次處理的處理次數(shù)。即，關(guān) 聯(lián)內(nèi)容算出部36對應(yīng)于該處理次數(shù)的值，將登記在處理對象內(nèi)容列表中的 內(nèi)容依次設(shè)為處理對象內(nèi)容。也可將表示相同值的處理次數(shù)賦予多個內(nèi)容，例如在存在多個關(guān)聯(lián)度 為同值的內(nèi)容的情況下，向這些內(nèi)容賦予表示相同值的處理次數(shù)。另外， 賦予的處理次數(shù)的值將關(guān)聯(lián)度最高的設(shè)為，在關(guān)聯(lián)度下降的同時，升 序賦予處理次數(shù)的值，但不限于此例。 下面，參照圖24來說明關(guān)聯(lián)內(nèi)容算出部36的動作。圖24是表示關(guān)聯(lián) 內(nèi)容算出部36執(zhí)行的關(guān)聯(lián)內(nèi)容算出處理的步驟的流程圖。作為本處理的前 提，設(shè)處理對象內(nèi)容及處理對象幀是由處理對象內(nèi)容選擇部12和處理對象 幀選擇部13選擇的。另外，內(nèi)容可視化部20還根據(jù)該處理對象內(nèi)容及處 理對象幀，算出處理對象內(nèi)容與其它內(nèi)容之間的關(guān)聯(lián)度。并且，關(guān)聯(lián)內(nèi)容 算出部36根據(jù)由內(nèi)容可視化部20算出的關(guān)聯(lián)度，已生成上述處理對象內(nèi) 容列表。首先，在步驟S801中，關(guān)聯(lián)內(nèi)容算出部36從處理對象內(nèi)容列表中， 選擇對應(yīng)于當(dāng)前處理次數(shù)的一個內(nèi)容，作為處理對象內(nèi)容(步驟S801)。接著，關(guān)聯(lián)內(nèi)容算出部36使用處理對象幀選擇部13，從步驟S801選 擇的處理對象內(nèi)容中選擇處理對象幀(步驟S802)。接著，關(guān)聯(lián)內(nèi)容算出部36決定構(gòu)成檢索對象的內(nèi)容的條件時(步驟 S803),對與該條件對應(yīng)的全部檢索對象內(nèi)容執(zhí)行是否執(zhí)行步驟S810的關(guān) 聯(lián)度算出處理的判定(步驟S804)。下面，將檢索對象的內(nèi)容稱為檢索對象 內(nèi)容。在步驟S804中，在判定為對全部檢索對象內(nèi)容執(zhí)行了步驟S810的關(guān) 聯(lián)度算出處理的情況下(步驟S804;是)，直接移動到步驟S811的處理。另 一方面，在步驟S804中，在判斷為未對全部檢索對象內(nèi)容執(zhí)行關(guān)聯(lián)度算出 處理的情況下(步驟S804;否)，關(guān)聯(lián)內(nèi)容算出部36從檢索對象內(nèi)容中選擇 一個未處理的檢索對象內(nèi)容(步驟S805)。接著，關(guān)聯(lián)內(nèi)容算出部36執(zhí)行在關(guān)聯(lián)度算出中是否使用幀信息的判定 (步驟S806)。這里，是否使用幀信息的判定可事先確定為設(shè)定信息，或由 來自用戶的指定來決定。在歩驟S806中，在判定為不使用幀信息的情況下(步驟S806;否)，直 接移動到步驟S810的處理。另一方面，在步驟S806中，在判定為使用幀 信息的情況下(步驟S806;是)，決定從檢索對象內(nèi)容中選擇檢索對象幀的 條件(步驟S807)。接著，關(guān)聯(lián)內(nèi)容算出部36判定是否對全部檢索對象幀執(zhí)行了步驟S810 的關(guān)聯(lián)度算出處理，在判定為處理了的情況下(步驟S808;是)，再次返回 到步驟S804的處理。
另一方面，在步驟S808中，在判定為存在未處理的檢索對象幀的情況 下(步驟S808;否)，在與步驟S807決定的條件匹配的檢索對象幀群中，選 擇一個未處理的檢索對象幀(步驟S809)。接著，關(guān)聯(lián)內(nèi)容算出部36通過向關(guān)聯(lián)度算出部17通知處理對象內(nèi)容、 處理對象幀、檢索對象內(nèi)容和檢索對象幀，使關(guān)聯(lián)度算出部17執(zhí)行關(guān)聯(lián)度 算出處理之后(步驟S810)，再次返回到步驟S808的處理。步驟S810的關(guān) 聯(lián)度算出處理與圖2所示的關(guān)聯(lián)度算出處理一樣，但執(zhí)行考慮了對應(yīng)于處 理次數(shù)的加權(quán)后的關(guān)聯(lián)度的算出。具體而言，對于圖2所示的關(guān)聯(lián)度算出處理算出的關(guān)聯(lián)度R,通過算 出下式(5)，導(dǎo)出變更后的關(guān)聯(lián)度R'。這里，N表示總的處理次數(shù)(成為結(jié)束 條件的處理次數(shù))，Rn,m表示第n次處理次數(shù)中的第m個處理對象內(nèi)容的關(guān) 聯(lián)度。即，處理次數(shù)越大，則其加權(quán)值越小。以上的算出方法是一例，不 限于此。[式5]<formula>formula see original document page 57</formula>(5)接著，在步驟S811中，關(guān)聯(lián)內(nèi)容算出部36通過從處理對象內(nèi)容列表 中刪除構(gòu)成本次處理對象內(nèi)容的內(nèi)容，更新處理對象內(nèi)容列表(步驟S811)。接著，關(guān)聯(lián)內(nèi)容算出部36參照處理對象內(nèi)容列表中登記的內(nèi)容，判定 是否存在對應(yīng)于當(dāng)前處理次數(shù)的內(nèi)容(步驟S812)。這里，在判定為存在對 應(yīng)于處理次數(shù)的內(nèi)容的情況下(步驟S812;是)，再次返回到步驟S801的處 理。另一方面，在步驟S812中，在判定為不存在對應(yīng)于處理次數(shù)的內(nèi)容的 情況下(步驟S812;否)，通過對當(dāng)前的處理次數(shù)加1，更新處理次數(shù)之后(步 驟S813)，判定處理次數(shù)是否滿足結(jié)束條件(步驟S814)。這里，所謂'處理次數(shù)的結(jié)束條件'是指使步驟S801 步驟S814的 循環(huán)處理結(jié)束時、構(gòu)成基準(zhǔn)的處理次數(shù)的值。作為結(jié)束條件，例如也可是 向賦予處理對象內(nèi)容列表的各內(nèi)容列表的最大處理次數(shù)加1之后的值。另 外，也可以是事先設(shè)定的值，或是由用戶經(jīng)操作裝置輸入的方式。
在步驟S814中，在判定為處理次數(shù)不滿足結(jié)束條件的情況下(步驟 S814;否)，再次返回到步驟S801的處理。另外，在步驟S814中，在判定 為處理次數(shù)滿足結(jié)束條件的情況下(步驟S814;是)，移動到步驟S815的處 理。之后，關(guān)聯(lián)內(nèi)容算出部36在步驟S815中，使用對此前算出的處理對 象內(nèi)容的M個(這里M是與步驟S803決定的條件匹配的內(nèi)容數(shù))的關(guān)聯(lián)度， 生成處理對象內(nèi)容與動態(tài)圖像數(shù)據(jù)庫11中存儲的檢索對象內(nèi)容群之間的關(guān) 聯(lián)度列表，在將其作為按關(guān)聯(lián)度從大到小的順序重新排列的一覽表加以管 理之后(步驟S815)，結(jié)束本處理。利用以上的處理，對于一個處理對象內(nèi)容，從動態(tài)圖像數(shù)據(jù)庫ll中選 擇涉及演出者的關(guān)聯(lián)性高(算出高關(guān)聯(lián)度)的內(nèi)容群{(:}，并且，在將(Q中 包含的各個內(nèi)容設(shè)為處理對象的情況下，再從動態(tài)圖像數(shù)據(jù)庫11中選擇涉 及各個出演的演出者的關(guān)聯(lián)性高的內(nèi)容群。具體而言，若設(shè)某個處理對象內(nèi)容C中有出演的演出者A，則在關(guān)聯(lián) 內(nèi)容算出部18執(zhí)行的關(guān)聯(lián)內(nèi)容算出處理(參照圖3)中，得到演出者P1出演 (或與演出者A的關(guān)聯(lián)性高)的內(nèi)容群(CliH)，...，1^，相反，在關(guān)聯(lián)內(nèi)容算出 部36執(zhí)行的關(guān)聯(lián)內(nèi)容算出處理中，除該結(jié)果外，在內(nèi)容C1。中出現(xiàn)演出者 P2的情況下，進(jìn)一步從動態(tài)圖像數(shù)據(jù)庫11中得到演出者P2出演的內(nèi)容群 {C2i|i=0，.."n}。另外，同樣，在內(nèi)容Cli中出現(xiàn)演出者P3的情況下，得到演出者P3 出演的內(nèi)容群{0坫=0,...，11}，以連鎖的方式得到關(guān)聯(lián)度高的內(nèi)容群。艮P， 若第1實施方式相當(dāng)于關(guān)聯(lián)度的1次檢索，則可將該第1實施方式的變形 例6的情況視為進(jìn)行2次檢索。這樣，根據(jù)第1實施方式的變形例6的構(gòu)成，不僅僅將與處理對象內(nèi) 容關(guān)聯(lián)性高的內(nèi)容可視化，還能夠?qū)⑴c這些內(nèi)容具有關(guān)聯(lián)性的其它內(nèi)容可 視化。由此，不僅可確認(rèn)與處理對象內(nèi)容具有強的關(guān)聯(lián)性的可視化內(nèi)容的 實際內(nèi)容，還可實現(xiàn)能夠確認(rèn)間接地關(guān)聯(lián)這樣的具有弱的關(guān)聯(lián)性的內(nèi)容的 實際內(nèi)容之效果。[第1實施方式的變形例7]下面，參照圖25，說明本實施方式的變形例7的影像顯示裝置107。
對與上述影像顯示裝置IOO—樣的構(gòu)成附加相同符號，省略其說明。圖25是表示影像顯示裝置107的功能構(gòu)成的框圖。如圖25所示，影 像顯示裝置107除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、顯示對象內(nèi)容選擇部19、內(nèi)容可視化部20、可視化 內(nèi)容群配置部21和顯示部23夕卜，還具備關(guān)聯(lián)性解析部37與空間可視化部 38。關(guān)聯(lián)性解析部37與空間可視化部38是通過上述控制部執(zhí)行存儲在存 儲部中的各種程序來實現(xiàn)的功能部。關(guān)聯(lián)性解析部37對關(guān)聯(lián)內(nèi)容算出部18算出的關(guān)聯(lián)度與可視化內(nèi)容群 配置部21中的配置狀況進(jìn)行綜合解析，將其結(jié)果反饋到空間可視化部38。 具體而言，關(guān)聯(lián)性解析部37根據(jù)對各可視化內(nèi)容算出的關(guān)聯(lián)度與各可視化 內(nèi)容的配置位置，解析虛擬空間內(nèi)的配置的分布(過疏或過密化等)，將該解 析結(jié)果傳遞到空間可視化部38?？臻g可視化部38執(zhí)行與上述空間可視化部22—樣的動作，并且，接 收來自關(guān)聯(lián)性解析部37的反饋，變更可視化虛擬空間時的渲染參數(shù)，或變 更可視化時的渲染方法。具體而言，空間可視化部38根據(jù)來自關(guān)聯(lián)性解析 部37的反饋信息，在過密配置的可視化內(nèi)容多的情況下，通過改變可視化 用的透視臺的參數(shù)，調(diào)整虛擬空間的范圍，從而使可視化空間的坐標(biāo)標(biāo)度 (scale)變化，結(jié)果，執(zhí)行即便過密配置也可容易看到的渲染。例如，在從Z軸方向的視點位置觀察可視化內(nèi)容群的情況下，在Z軸 方向的可視化內(nèi)容的分散小的情況下，在可覆蓋其的范圍內(nèi)盡可能變窄Z 緩沖器的近面與遠(yuǎn)面的間隔，容易看到，在分散大的情況下，則可以說相 反。另外，在分散大的情況下，盡可能將視野角取得寬則容易看到。另外， 可根據(jù)配置狀況來決定容易觀看的視點。例如，采用盡可能減小可視化內(nèi) 容彼此的重合的視點等。另外，在所配置的可視化內(nèi)容多的情況下，增加 渲染時的光源的光量，使其中高低變化(乂 y八y)變強。這樣，通過對應(yīng)于解析狀況，適當(dāng)變更遮光的方法、陰影的生成方法 等，可執(zhí)行容易觀看的可視化。并且，在決定某個視點條件之后，為了容 易從該視點方向觀看，可對每個可視化內(nèi)容變形多邊形的CG模型(幾何模 型)，或變更多邊形的姿勢。例如從某個視點方向看的情況下，若構(gòu)成可視化內(nèi)容的多邊形(代表該多邊形的部分)的法線方向與視線矢量所成的角度接近90度，則該可視化 內(nèi)容的多邊形面基本上看不到。在這種情況下，若向視點方向旋轉(zhuǎn)多邊形 模型后所成角度比90度小，則可容易看到。同樣的效果也可通過變更形成 多邊形的幾何形狀，對多邊形的一部分(或全部)，使與視點方向所成的角度 變小來實現(xiàn)。就多邊形的姿勢變更或變形而言，可使用CG技術(shù)的一般方 法。這樣，根據(jù)第1實施方式的變形例7的構(gòu)成，當(dāng)可視化虛擬空間時， 減輕配置的可視化內(nèi)容過密的部分，實現(xiàn)該部分的可視化內(nèi)容的實際內(nèi)容 容易觀看的效果。[第1實施方式的變形例8]下面，參照圖26，說明本實施方式的變形例8的影像顯示裝置108。 對與上述影像顯示裝置IOO—樣的構(gòu)成附加相同符號，省略其說明。圖26是表示影像顯示裝置108的功能構(gòu)成的框圖。如圖26所示，影 像顯示裝置108除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、顯示對象內(nèi)容選擇部19、內(nèi)容可視化部20、可視化 內(nèi)容群配置部21和顯示部23外，還具備配置運動插補部39與空間可視化 部40。配置運動插補部39與空間可視化部40是通過上述控制部執(zhí)行存儲在 存儲部中的各種程序來實現(xiàn)的功能部。配置運動插補部39是用于執(zhí)行插補、以使由可視化內(nèi)容群配置部21 算出的可視化內(nèi)容群的配置信息在多個可視化間隔中能平滑地進(jìn)行動畫的 功能部。如上所述，由圖12所示的流程圖來表示第1實施方式的影像顯示裝置 100的整體動作。此時，畫面中依次顯示的是基于由可視化內(nèi)容群配置部 21算出的可視化內(nèi)容群配置的畫面可視化的結(jié)果。因此，可視化內(nèi)容群配 置部21中，在某個定時算出的可視化內(nèi)容的配置位置與下一定時算出的相 同可視化內(nèi)容的配置位置大不相同的情況下，該可視化內(nèi)容不連續(xù)(不平滑 地)運動顯示。本變形例旨在消除該問題。上述問題源于以下情況，即在畫面顯示間隔比空間可視化處理的執(zhí) 行間隔小的情況下，在空間可視化執(zhí)行完成前的期間，相同的空間可視化 結(jié)果顯示繼續(xù)，在下一定時突然變異到不同的空間可視化結(jié)果。因此，配 置運動插補部39算出根據(jù)前一個空間可視化結(jié)果(可視化內(nèi)容群的位置信 息)插補各可視化內(nèi)容的配置位置的插補位置，以使得在畫面顯示間隔(例如60幀每秒)期間，當(dāng)前的空間可視化結(jié)果平滑地轉(zhuǎn)變。另外，配置運動插補 部39根據(jù)算出的插補位置，變更虛擬空間內(nèi)配置的各可視化內(nèi)容的配置位 置。具體而言，當(dāng)設(shè)前一個可視化內(nèi)容群中包含的某個可視化內(nèi)容的位置 為(xO,yO，zO)，由可視化內(nèi)容群配置部21本次算出的相同可視化內(nèi)容的位置 為(xl，yl，zl)，用于畫面顯示的幀率為60幀每秒時，第n幀的插補位置 (xn，yn，zn)可使用下式(6)算出。其中，t=n/60(n=l，...，60)。(xn，yn，zn)=(t(xl-xO)，t(yl-yO)，t(zl-zO)) ...... (6)示出由上述式(6)來進(jìn)行線性插補的實例，但不限于此。即便是使用2 次曲線或3次曲線等的插補也無妨。例如，不僅前一個，還可使用前幾個 的位置信息，執(zhí)行2次樣條曲線插補。上面說明了位置插補，但位置以外的信息不同的情況下插補方法也一 樣。例如，在姿勢信息不同的情況下，只要以同樣的方法(線性插補、樣條 曲線插補等)進(jìn)行插補以使兩者的法線矢量(或方向矢量等)平滑變化即可。 配置運動插補部39向空間可視化部40輸出相當(dāng)于插補數(shù)的n組(后述的插 補幀位置的量)的、將對虛擬空間內(nèi)配置的各可視化內(nèi)容算出的插補位置作 為1組而變更了配置位置后的虛擬空間(下面稱為1組虛擬空間)?？梢暬瘍?nèi) 容群配置部21配置的幀(相當(dāng)于第0幀)也以原樣不變的狀態(tài)輸出到空間可 視化部40。空間可視化部40對由配置運動插補部39配置的可視化內(nèi)容的每個， 實施圖像處理及CG處理，以規(guī)定的視點位置為基準(zhǔn)，可視化虛擬空間。 另外，對可視化內(nèi)容實施的圖像處理及CG處理的內(nèi)容與上述空間可視化
部22 —樣。下面，參照圖27，說明空間可視化部40的動作。圖27是表示由空間 可視化部40執(zhí)行的空間可視化處理的步驟的流程圖。首先，空間可視化部40當(dāng)從配置運動插補部39輸入利用1組的插補 位置變更了配置位置后的1組的虛擬空間時(步驟S901),執(zhí)行對該虛擬空 間內(nèi)配置的全部可視化內(nèi)容是否執(zhí)行步驟S903的處理的判定(步驟S902)。 這里，所謂^全部可視化內(nèi)容'是指由配置運動插補部39(對于第0幀，為 可視化內(nèi)容群配置部21 )配置在虛擬空間中的可視化內(nèi)容群。在步驟S卯2中，在判定為處理了全部可視化內(nèi)容的情況下(步驟S902; 是)，移動到步驟S904的處理。另外，在步驟S902中，在判定為存在未處 理的可視化內(nèi)容的情況下(步驟S902;否)，空間可視化部40對未處理的可 視化內(nèi)容執(zhí)行CG處理、圖像處理(步驟S903),再次返回到步驟S902。接著，空間可視化部40設(shè)定空間可視化用的參數(shù)(步驟S904)。具體而 言，執(zhí)行從何方向?qū)μ摂M空間進(jìn)行可視化、或?qū)G而言的用于渲染虛擬 空間的相機(視點)位置或方向、范圍等參數(shù)的設(shè)定。同時，在必要時，也可 同時執(zhí)行空間渲染用光源的位置或光源的強度、范圍等參數(shù)設(shè)定。接著，空間可視化部40根據(jù)步驟S904設(shè)定的空間可視化用的參數(shù)， 渲染虛擬空間，從而執(zhí)行虛擬空間的可視化，且將結(jié)果輸出到顯示部23(步 驟S905)。接著，空間可視化部40判定是否對全部插補幀位置執(zhí)行了步驟S901 S905的處理(步驟S906)。這里，所謂^插補幀位置'是指配置運動揷補部 39執(zhí)行插補的顯示畫面幀——即例如畫面顯示為60幀每秒、空間可視化間 隔為1幀每秒的情況下，0、 1/60、 2/60...、 1秒(60/60)之前的全部顯示畫面 幀的位置(例如第n個位置為n/60秒后的幀)。在步驟S卯6中，在判定為存在未處理的插補幀位置的情況下(步驟 S906;否)，空間可視化部40更新插補幀位置(例如第n個位置的情況下， 11=11+1)之后(步驟S907)，移動到步驟S901的處理。另夕卜，在步驟S906中， 在判定為在全部插補幀位置執(zhí)行了處理的情況下(步驟S906;是)，結(jié)束本 處理。在每次從配置運動插補部39輸入一系列的幀(例如在幀率為60的情 況下為60幀)時，執(zhí)行本處理。
這樣，根據(jù)第1實施方式的變形例8的構(gòu)成，即便在畫面顯示間隔比 虛擬空間的可視化間隔小的情況下，也可利用插補來表示中途的可視化結(jié) 果，所以可平滑地顯示各可視化內(nèi)容的可視化結(jié)果。 [第1實施方式的變形例9]下面，參照圖28，說明本實施方式的變形例9的影像顯示裝置109。 對與上述影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。圖26是表示影像顯示裝置109的功能構(gòu)成的框圖。如圖28所示，影 像顯示裝置109除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、空間可視化部22和顯示部23外，還具備共同部分可視化部 41與可視化內(nèi)容群配置部42。共同部分可視化部41與可視化內(nèi)容群配置部42是通過上述控制部執(zhí) 行存儲在存儲部中的各種程序來實現(xiàn)的功能部。共同部分可視化部41使用內(nèi)容可視化部20可視化用的信息與空間可 視化部22的可視化結(jié)果，抽取兩個以上的可視化內(nèi)容的共同信息，生成由 共同信息構(gòu)成的新的可視化內(nèi)容，并將其追加到可視化內(nèi)容群配置部42。下面，參照圖29、 30，說明共同部分可視化部41的具體動作例。這 里，圖29、 30是表示配置可視化內(nèi)容的虛擬空間中的XY平面一例的圖。圖29中，若設(shè)將H己錄片Z(第1集)，(圖29的301a)、 H己錄片Z(第 2集)'(圖29的301b)、'記錄片Z(第3集)，(圖29的301c)這3個可視化 內(nèi)容配置在接近的位置上，則共同部分可視化部41抽取這些接近的可視化 內(nèi)容彼此的共同部分，例如H己錄片Z'。抽取方法與第1實施方式的變 形例4中的內(nèi)容可視化部31的說明一樣。共同部分可視化部41使用抽取的共同部分，生成新的可視化內(nèi)容。這 里，可視化內(nèi)容的生成方法與內(nèi)容可視化部20—樣，但可視化時的要素或 布局等也可不同。例如，也可生成表示共同部分的附加信息(參照圖30的 302),作為可視化內(nèi)容。以上使用標(biāo)題名的實例作為共同部分，但只是一例，也可從幀圖像、 錄制日、類型等各種信息中抽取一個以上共同部分來使用。
可視化內(nèi)容群配置部42具有與可視化內(nèi)容群配置部21 —樣的功能， 并且，在從共同部分可視化部41接收了新生成的可視化內(nèi)容(附加信息)的 情況下，將該新的可視化內(nèi)容配置在用于抽取可視化內(nèi)容彼此的共同部分 的可視化內(nèi)容群附近。這里，圖30表示將使用可視化內(nèi)容301a、 301b、 301c 的共同部分生成的新的可視化內(nèi)容302配置在301a、 301b、 301c附近(例如 這些可視化內(nèi)容的重心點)的實例。新生成的可視化內(nèi)容(附加信息)的配置位置不限于圖30的實例，也可 布局在任意位置，但最好配置成不被用于抽取共同部分的可視化內(nèi)容群遮 蔽。這樣，根據(jù)第1實施方式的變形例9的構(gòu)成，可合并顯示表示兩個以 上可視化內(nèi)容的共同部分的新的可視化內(nèi)容。由此，可將表示兩個以上可 視化內(nèi)容的共同部分的新的可視化內(nèi)容用作表示多個可視化內(nèi)容的大分類 或中分類的指標(biāo)，可讓用戶識別空間地可視化之后的可視化內(nèi)容的分組(可 視化內(nèi)容的大分類或中分類)。例如，在圖30的情況下，即便未看到可視化內(nèi)容301a、 301b、 301c 各自的內(nèi)容，用戶也可通過觀察可視化內(nèi)容302，直觀地識別為是涉及 <記 錄片Z'的可視化內(nèi)容。 [第2實施方式]在上述第1實施方式中，將存儲在動態(tài)圖像數(shù)據(jù)庫11中的內(nèi)容設(shè)為處 理對象，但在本實施方式中，說明從其它媒體取得內(nèi)容的方式。向與上述 影像顯示裝置100—樣的構(gòu)成附加相同符號，省略其說明。首先，說明涉及本實施方式的影像顯示裝置110的硬件構(gòu)成。影像顯 示裝置110具備由CPU或GPU等構(gòu)成的控制部、由存儲各種程序或圖像 等的各種數(shù)據(jù)的ROM、 RAM、 HDD等構(gòu)成的存儲部、與外部裝置進(jìn)行通 信的通信部、由用于接收廣播的天線或調(diào)諧器等構(gòu)成的接收部、可讀出記 錄在CD-ROM等記錄媒體中的信息的媒體讀出部、和連接上述各部的總線 (均未圖示)，并且連接顯示裝置及鍵盤或鼠標(biāo)等輸入裝置(均未圖示)。下面，說明影像顯示裝置110的功能構(gòu)成。圖31是示例第2實施方式 的影像顯示裝置110的功能構(gòu)成的框圖。如圖31所示，影像顯示裝置IIO 除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理對象幀選擇部13、
內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部16、關(guān)聯(lián)度算出部 17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、可視化內(nèi)容群配置部21、 空間可視化部22與顯示部23夕卜，還具備EPG信息取得管理部43、調(diào)諧器 44、流信息取得管理部45與內(nèi)容可視化部46。
其中，EPG信息取得管理部43、流信息取得管理部45與內(nèi)容可視化 部46是通過影像顯示裝置110的控制部執(zhí)行存儲在存儲部中的各種程序來 實現(xiàn)的功能部。調(diào)諧器44是由接收部實現(xiàn)的功能部。
EPG信息取得管理部43用于從管理分發(fā)EPG(電子節(jié)目表)的外部服務(wù) 器取得EPG信息并進(jìn)行管理。這里，設(shè)EPG中包含涉及從現(xiàn)在至未來某 個時刻(例如1周之后)廣播的節(jié)目的信息。
具體而言，從連接于因特網(wǎng)等網(wǎng)絡(luò)上的服務(wù)提供者的服務(wù)器裝置，經(jīng) 通信部取得TV、 CATV、 CS廣播、BS廣播等的EPG，將該EPG作為內(nèi) 容信息(廣播日期時間、頻道、程序、節(jié)目標(biāo)題、子標(biāo)題、節(jié)目概要、演出 者列表)，存儲在存儲部中。
另外，EPG信息取得管理部43檢索關(guān)聯(lián)于內(nèi)容信息的圖像或動態(tài)圖像 等信息，若經(jīng)通信部取得這些關(guān)聯(lián)的信息，則將這些信息作為內(nèi)容與對應(yīng) 的內(nèi)容(EPG)關(guān)聯(lián)后，存儲在存儲部中。這里，關(guān)聯(lián)于內(nèi)容的圖像等信息有 時從服務(wù)提供者(或廣播者)直接提供，有時從第3方的從業(yè)者作為其它服務(wù) 提供。另外，也可使用圖像檢索站點等，取得將內(nèi)容信息作為檢索鍵進(jìn)行 圖像檢索得到的結(jié)果圖像。
EPG信息取得管理部43中的信息存儲方法基于動態(tài)圖像數(shù)據(jù)庫11中 的管理方法。即，動態(tài)圖像數(shù)據(jù)庫11管理利用錄制作業(yè)等取得的現(xiàn)有(過 去)的內(nèi)容，相反，EPG信息取得管理部43可管理還未取得的未來的內(nèi)容。 也可是將EPG信息取得管理部43取得的內(nèi)容和內(nèi)容信息存儲在動態(tài)圖像 數(shù)據(jù)庫ll中的方式。
調(diào)諧器44用于解釋流分發(fā)的內(nèi)容。具體而言，將從TV天線分發(fā)的地 面波TV內(nèi)容的數(shù)據(jù)解釋為內(nèi)容。另外，將使用BS、 CS天線接收到的數(shù) 據(jù)解釋(解碼)為BS廣播內(nèi)容、CS廣播內(nèi)容。CATV也一樣，將各個分發(fā) 數(shù)據(jù)解釋(解碼)為內(nèi)容。
流信息取得管理部45取得并管理從調(diào)諧器44得到的流分發(fā)的內(nèi)容，
并且還一起取得并管理涉及該內(nèi)容的信息(內(nèi)容信息)。具體而言，取得經(jīng)調(diào)
諧器44取得的地面波TV廣播、BS、 CS廣播、CATV廣播等內(nèi)容，并且， 將涉及該內(nèi)容的信息作為內(nèi)容信息(廣播日期時間、頻道、類型、節(jié)目標(biāo)題、 子標(biāo)題、節(jié)目概要、演出者列表等)取得管理。內(nèi)容信息也可從由EPG信息 取得管理部43取得的EPG取得。
動態(tài)圖像數(shù)據(jù)庫11管理已利用錄制作業(yè)等取得的現(xiàn)有內(nèi)容，EPG信息 取得管理部43管理還未取得的未來的內(nèi)容，相反，流信息取得管理部45 可管理當(dāng)前分發(fā)中的內(nèi)容。也可將由流信息取得管理部45取得的內(nèi)容及內(nèi) 容信息存儲在動態(tài)圖像數(shù)據(jù)庫11中。
在本實施方式中，處理對象內(nèi)容選擇部12、內(nèi)容信息取得部14、關(guān)聯(lián) 內(nèi)容算出部18的動作與第1實施方式一樣，但除存儲在動態(tài)圖像數(shù)據(jù)庫11 中的內(nèi)容群外，還將由EPG信息取得管理部43和流信息取得管理部45管 理的內(nèi)容群設(shè)為處理對象。
內(nèi)容可視化部46具有與內(nèi)容可視化部20 —樣的功能，并且，使用EPG 信息取得管理部43或流信息取得管理部45管理的內(nèi)容及內(nèi)容信息，執(zhí)行 由顯示對象內(nèi)容選擇部19選擇的顯示對象內(nèi)容的可視化。
內(nèi)容可視化部46根據(jù)取得源的信息的種類來變更可視化方法或布局 構(gòu)成等。例如，若是來自TV天線的地面波TV廣播，則同時配置可使人明 白這一情況的 <表示TV的圖標(biāo)'、將背景變?yōu)樘厥獾谋尘?、改變配置?素來區(qū)別等。
如上所述，在第1實施方式的影像顯示裝置100中，僅存儲在動態(tài)圖 像數(shù)據(jù)庫11中的內(nèi)容為對象，在虛擬空間中將處理對象內(nèi)容與其它內(nèi)容群 之間的關(guān)聯(lián)性可視化。即，可僅知道已錄制的內(nèi)容的關(guān)聯(lián)性。
相反，在第2實施方式的影像顯示裝置110中，無縫處理利用EPG(電 子節(jié)目表)得到的內(nèi)容信息、流分發(fā)內(nèi)容的信息、由動態(tài)圖像數(shù)據(jù)庫11得 到的內(nèi)容信息的全部，可知道這些全部內(nèi)容的關(guān)聯(lián)性。即，第1實施方式 的影像顯示裝置100以過去的內(nèi)容為關(guān)聯(lián)性可視化對象，相反，第2實施 方式的影像顯示裝置IIO可以過去、現(xiàn)在、未來的全部內(nèi)容為關(guān)聯(lián)性可視 化對象。
如上所述，根據(jù)本實施方式的影像顯示裝置110，由于可動態(tài)地可視
化某個內(nèi)容(處理對象內(nèi)容)與過去、現(xiàn)在、未來的其它內(nèi)容群之間的關(guān)聯(lián)性， 所以用戶可容易地確認(rèn)媒體不同的更多內(nèi)容間的關(guān)聯(lián)性。
下面，參照圖32，說明本實施方式的變形例1的影像顯示裝置111。 對與上述影像顯示裝置110—樣的構(gòu)成附加相同符號，省略其說明。
圖32是表示影像顯示裝置111的功能構(gòu)成的框圖。如圖32所示，影 像顯示裝置111除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、可視化內(nèi)容群配置部21、空間可視化部22、顯示部23、 EPG 信息取得管理部43、調(diào)諧器44及流信息取得管理部45外，還具備盤驅(qū)動 器47、盤信息取得管理部48與內(nèi)容可視化部49。
盤驅(qū)動器47是由上述媒體讀出部實現(xiàn)的功能部。另外，盤信息取得管 理部48與內(nèi)容可視化部49是通過上述控制部執(zhí)行存儲在存儲部中的各種 程序來實現(xiàn)的功能部。
盤驅(qū)動器47例如是讀入DVD盤、HD-DVD盤、藍(lán)光光盤、VideoCD
盤等保存動態(tài)圖像數(shù)據(jù)的盤媒體用的驅(qū)動器裝置。
盤信息取得管理部48將從盤驅(qū)動器47得到的數(shù)據(jù)解釋為內(nèi)容，并且， 取得并管理該內(nèi)容的信息。具體而言，例如從使用盤驅(qū)動器47讀入的DVD 盤中，取得其中保存的動態(tài)圖像數(shù)據(jù)，作為內(nèi)容，并且，取得涉及該動態(tài) 圖像數(shù)據(jù)的信息(類型、標(biāo)題、子標(biāo)題、節(jié)目概要、演出者列表、章節(jié)信息 等)，作為內(nèi)容信息，并將這些信息建立關(guān)聯(lián)而管理。也可將由盤信息取得 管理部48取得的內(nèi)容及內(nèi)容信息存儲在動態(tài)圖像數(shù)據(jù)庫11中。
在本實施方式的變形例1中，處理對象內(nèi)容選擇部12、內(nèi)容信息取得 部14、關(guān)聯(lián)內(nèi)容算出部18的動作與第1實施方式一樣，但除存儲在動態(tài)圖 像數(shù)據(jù)庫11中的內(nèi)容群、由EPG信息取得管理部43及流信息取得管理部 45管理的內(nèi)容群外，還將盤信息取得管理部48管理的內(nèi)容群也設(shè)為處理對
內(nèi)容可視化部49具有與內(nèi)容可視化部46—樣的功能，并且，使用盤 信息取得管理部48中管理的內(nèi)容及內(nèi)容信息，執(zhí)行由顯示對象內(nèi)容選擇部
19選擇的顯示對象內(nèi)容的可視化。
內(nèi)容可視化部49根據(jù)取得源的信息的種類來變更可視化方法或布局 構(gòu)成等。例如，若是從DVD得到的電影，則同時配置可使人明白這一情況 的'表示DVD的圖標(biāo)'、將背景變?yōu)樘厥獾谋尘?、改變配置要素來區(qū)別等。
這樣，根據(jù)本實施方式的變形例1的構(gòu)成，除可視化過去、現(xiàn)在、未 來的內(nèi)容群的關(guān)聯(lián)性外，還可無縫處理DVD等記錄媒體中保存的電影等內(nèi) 容，所以用戶可容易地確認(rèn)媒體不同的更多內(nèi)容間的關(guān)聯(lián)性。 [第2實施方式的變形例2]
下面，參照圖33，說明本實施方式的變形例2的影像顯示裝置112。 對與上述影像顯示裝置110—樣的構(gòu)成附加相同符號，省略其說明。
圖33是表示影像顯示裝置112的功能構(gòu)成的框圖。如圖33所示，影 像顯示裝置112除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、可視化內(nèi)容群配置部21、空間可視化部22、顯示部23、 EPG 信息取得管理部43、調(diào)諧器44及流信息取得管理部45夕卜，還具備VOD 取得部50、 VOD信息取得管理部51與內(nèi)容可視化部52。
VOD取得部50是由上述媒體讀取部實現(xiàn)的功能部。另外，VOD信息 取得管理部51與內(nèi)容可視化部52是通過上述控制部執(zhí)行存儲在存儲部中 的各種程序來實現(xiàn)的功能部。
VOD取得部50從分發(fā)動態(tài)圖像數(shù)據(jù)的服務(wù)器取得動態(tài)圖像數(shù)據(jù)。具 體而言，例如從經(jīng)因特網(wǎng)執(zhí)行動態(tài)圖像數(shù)據(jù)提供的服務(wù)事業(yè)者，通過執(zhí)行 購入手續(xù)等規(guī)定手續(xù)，取得動態(tài)圖像數(shù)據(jù)。在動態(tài)圖像數(shù)據(jù)免費的情況下， 也可不履行購入手續(xù)而直接下載動態(tài)圖像數(shù)據(jù)。
VOD信息取得管理部51將從VOD取得部50得到的動態(tài)圖像數(shù)據(jù)解 釋為內(nèi)容，并且，取得并管理涉及該內(nèi)容的內(nèi)容信息。具體而言，例如將 經(jīng)因特網(wǎng)取得的內(nèi)容存儲在存儲部中，并且，將經(jīng)VOD取得部50取得的、 涉及該內(nèi)容的信息(類型、標(biāo)題、子標(biāo)題、節(jié)目概要、演出者列表等)作為內(nèi) 容信息，建立對應(yīng)而存儲。也可將由VOD信息取得管理部51取得的內(nèi)容 及內(nèi)容信息存儲在動態(tài)圖像數(shù)據(jù)庫11中。
在本實施方式的變形例2中，處理對象內(nèi)容選擇部12、內(nèi)容信息取得 部14、關(guān)聯(lián)內(nèi)容算出部18的動作與第1實施方式一樣，但除存儲在動態(tài)圖 像數(shù)據(jù)庫11中的內(nèi)容群、由EPG信息取得管理部43及流信息取得管理部 45管理的內(nèi)容群外，還將VOD信息取得管理部51管理的內(nèi)容群也設(shè)為處 理對象。
內(nèi)容可視化部52具有與內(nèi)容可視化部46 —樣的功能，并且，使用VOD 信息取得管理部51中管理的內(nèi)容及內(nèi)容信息，執(zhí)行由顯示對象內(nèi)容選擇部 19選擇的顯示對象內(nèi)容的可視化。
內(nèi)容可視化部52根據(jù)取得源的信息類型來變更可視化方法或布局構(gòu) 成等。例如，若是從外部VOD服務(wù)器得到的動態(tài)圖像數(shù)據(jù)，則同時配置可 使人明白這一情況的圖標(biāo)、將背景變?yōu)樘厥獾谋尘?、改變配置要素來區(qū)別 等。
這樣，根據(jù)本實施方式的變形例2的構(gòu)成，除可視化過去、現(xiàn)在、未 來的內(nèi)容的關(guān)聯(lián)性外，還可無縫處理從VOD服務(wù)器取得的內(nèi)容，所以用戶 可容易地確認(rèn)媒體不同的更多內(nèi)容間的關(guān)聯(lián)性。 [第2實施方式的變形例3]
下面，參照圖34，說明本實施方式的變形例3的影像顯示裝置113。 對與上述影像顯示裝置110—樣的構(gòu)成附加相同符號，省略其說明。
圖34是表示影像顯示裝置113的功能構(gòu)成的框圖。如圖34所示，影 像顯示裝置113除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、可視化內(nèi)容群配置部21、空間可視化部22、顯示部23、 EPG 信息取得管理部43、調(diào)諧器44及流信息取得管理部45外，還具備音樂數(shù) 據(jù)取得部53、音樂數(shù)據(jù)庫54、音樂數(shù)據(jù)信息取得管理部55與內(nèi)容可視化 部56。
音樂數(shù)據(jù)取得部53是由上述通信部的功能部。另外，音樂數(shù)據(jù)庫54 是由上述存儲部實現(xiàn)的功能部。音樂數(shù)據(jù)信息取得管理部55與內(nèi)容可視化 部56是通過上述控制部執(zhí)行存儲在存儲部中的各種程序來實現(xiàn)的功能部。
音樂數(shù)據(jù)取得部53從分發(fā)音樂數(shù)據(jù)的外部服務(wù)器取得音樂數(shù)據(jù)，存儲
在音樂數(shù)據(jù)庫54中。具體而言，例如從經(jīng)因特網(wǎng)提供音樂數(shù)據(jù)的服務(wù)事業(yè) 者，通過執(zhí)行購入手續(xù)等規(guī)定手續(xù)，取得音樂數(shù)據(jù)。在音樂數(shù)據(jù)免費的情 況下，也可不履行購入手續(xù)而直接下載音樂數(shù)據(jù)。音樂數(shù)據(jù)庫54是能存儲并取得至少一個以上音樂數(shù)據(jù)的數(shù)據(jù)庫?；?上，僅處理的媒體不同，與動態(tài)圖像數(shù)據(jù)庫ll為一樣的構(gòu)成。音樂數(shù)據(jù)例 如以WAV形式、MP3形式、AIFF形式等形式保存。音樂數(shù)據(jù)中，對應(yīng)地 存儲了專輯的標(biāo)題、藝術(shù)家名、曲名、作詞者名、作曲者名、編曲者名、 參加藝術(shù)家列表、概要等文本信息。另外，也可將封套照片、藝術(shù)家照片 等圖像數(shù)據(jù)或促銷視頻片段等動態(tài)圖像數(shù)據(jù)與該信息對應(yīng)地存儲。音樂數(shù)據(jù)信息取得管理部55取得從音樂數(shù)據(jù)取得部53和/或音樂數(shù)據(jù) 庫54得到的音樂數(shù)據(jù)，作為內(nèi)容，并且，取得涉及該音樂數(shù)據(jù)的信息(文 本信息等)，作為內(nèi)容信息，將它們建立關(guān)聯(lián)而管理。更詳細(xì)而言，取得涉 及音樂數(shù)據(jù)的信息中、圖像數(shù)據(jù)或動態(tài)圖像數(shù)據(jù)，作為內(nèi)容，將涉及構(gòu)成 這些數(shù)據(jù)的圖像(或幀圖像)的信息處理為幀信息。另外，取得幀信息以外的 信息，作為內(nèi)容信息。也可將由音樂數(shù)據(jù)信息取得管理部55取得的內(nèi)容及 內(nèi)容信息存儲在動態(tài)圖像數(shù)據(jù)庫11中。在本實施方式的變形例3中，處理對象內(nèi)容選擇部12、內(nèi)容信息取得 部14、關(guān)聯(lián)內(nèi)容算出部18的動作與第1實施方式一樣，但除存儲在動態(tài)圖 像數(shù)據(jù)庫ll中的內(nèi)容群、由EPG信息取得管理部43及流信息取得管理部 45管理的內(nèi)容群外，還將音樂數(shù)據(jù)信息取得管理部55管理的內(nèi)容群也設(shè)為 處理對象。內(nèi)容可視化部56具有與內(nèi)容可視化部46—樣的功能，并且，使用音 樂數(shù)據(jù)信息取得管理部55中管理的內(nèi)容及內(nèi)容信息，執(zhí)行顯示對象內(nèi)容的 可視化。內(nèi)容可視化部56根據(jù)取得源的信息種類來變更可視化方法或布局構(gòu) 成等。例如，同時配置可明白是音樂數(shù)據(jù)的'表示CD或音符等的圖標(biāo)'、 將背景變?yōu)樘厥獾谋尘?、改變配置要素來區(qū)別等。這樣，根據(jù)本實施方式的變形例3的構(gòu)成，除可視化過去、現(xiàn)在、未 來的內(nèi)容的關(guān)聯(lián)性外，還可將音樂數(shù)據(jù)無縫處理為內(nèi)容，所以能可視化無 區(qū)別地處理全部內(nèi)容的關(guān)聯(lián)性。
以上使用'音樂數(shù)據(jù)，等非動態(tài)圖像內(nèi)容進(jìn)行說明，但不限于此，也 可使用同樣的方法無縫地處理各種非動態(tài)圖像內(nèi)容。
下面，參照圖35，說明本實施方式的變形例4的影像顯示裝置114。 對與上述影像顯示裝置110—樣的構(gòu)成附加相同符號，省略其說明。
圖35是表示影像顯示裝置114的功能構(gòu)成的框圖。如圖35所示，影 像顯示裝置114除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、可視化內(nèi)容群配置部2K空間可視化部22、顯示部23、 EPG 信息取得管理部43、調(diào)諧器44及流信息取得管理部45外，還具備商品數(shù) 據(jù)取得部57、商品數(shù)據(jù)信息取得管理部58與內(nèi)容可視化部59。
商品數(shù)據(jù)取得部57是由上述通信部實現(xiàn)的功能部。另外，商品數(shù)據(jù)信 息取得管理部58與內(nèi)容可視化部59是通過上述控制部執(zhí)行存儲在存儲部 中的各種程序來實現(xiàn)的功能部。
商品數(shù)據(jù)取得部57從執(zhí)行Web銷售或通信銷售的站點(外部服務(wù)器) 取得涉及商品的數(shù)據(jù)。具體而言，例如從經(jīng)因特網(wǎng)銷售商品的服務(wù)事業(yè)者， 取得商品的目錄數(shù)據(jù)。目錄數(shù)據(jù)的取得例如可以是接收在服務(wù)事業(yè)者側(cè)變 為商品數(shù)據(jù)取得部57容易取得的形式的數(shù)據(jù)，或也可以是商品數(shù)據(jù)取得部 57解釋事業(yè)者的商品閱覽Web頁的源代碼(由HTML語言或XML語言記 述)并取得的方式。
商品數(shù)據(jù)信息取得管理部58經(jīng)商品數(shù)據(jù)取得部57取得商品數(shù)據(jù)，作 為內(nèi)容，并且，取得涉及該商品數(shù)據(jù)的信息，作為內(nèi)容信息，將其建立關(guān) 聯(lián)而管理。這里，所謂涉及商品數(shù)據(jù)的信息是示為商品數(shù)據(jù)固有特征的信 息，例如商品名、規(guī)格、銷售時期、價格、銷售者、型號、商品概要等文 本信息、或商品照片等圖像數(shù)據(jù)、促銷視頻片段等動態(tài)圖像數(shù)據(jù)等。
更詳細(xì)而言，例如取得涉及商品數(shù)據(jù)的信息中的圖像數(shù)據(jù)或動態(tài)圖像 數(shù)據(jù)，作為內(nèi)容，將涉及構(gòu)成這些數(shù)據(jù)的圖像(或幀圖像)的信息處理為幀信 息。另外，將幀信息以外的信息作為內(nèi)容信息取得。也可將由商品數(shù)據(jù)信 息取得管理部58取得的內(nèi)容及內(nèi)容信息存儲在動態(tài)圖像數(shù)據(jù)庫11中。
在本實施方式的變形例4中，處理對象內(nèi)容選擇部12、內(nèi)容信息取得 部14、關(guān)聯(lián)內(nèi)容算出部18的動作與第1實施方式一樣，但除存儲在動態(tài)圖 像數(shù)據(jù)庫11中的內(nèi)容群、由EPG信息取得管理部43及流信息取得管理部 45管理的內(nèi)容群外,還將商品數(shù)據(jù)信息取得管理部58管理的內(nèi)容群也設(shè)為 處理對象。內(nèi)容可視化部59具有與內(nèi)容可視化部46—樣的功能，并且，使用商 品數(shù)據(jù)信息取得管理部58中管理的內(nèi)容及內(nèi)容信息，執(zhí)行顯示對象內(nèi)容的 可視化。內(nèi)容可視化部59根據(jù)取得源的信息種類來變更可視化方法或布局構(gòu) 成等。例如，同時配置可明白是商品數(shù)據(jù)的'表示是Web銷售的圖標(biāo)'等、 將背景變?yōu)樘厥獾谋尘啊⒏淖兣渲靡貋韰^(qū)別、將Web頁的渲染結(jié)果變?yōu)?縮略圖像等。這樣，根據(jù)本實施方式的變形例4的構(gòu)成，除可視化過去、現(xiàn)在、未 來的內(nèi)容的關(guān)聯(lián)性外，還可無縫處理^Web銷售或通信銷售中的商品'這 樣完全不同的對象，可與關(guān)聯(lián)性一起，同時將全部影像媒體和與其關(guān)聯(lián)的 商品數(shù)據(jù)可視化。在本變形例中，以Web銷售的商品數(shù)據(jù)為例進(jìn)行說明，但不限于此， 也可同樣處理任意的物理對象。 [第3實施方式]在本實施方式中，說明具備支援用戶操作輸入的操作支援部60的影像 顯示裝置。向與上述影像顯示裝置100 —樣的構(gòu)成附加相同符號，省略其 說明。首先，說明涉及本實施方式的影像顯示裝置115的硬件構(gòu)成。影像顯 示裝置115具備由CPU或GPU等構(gòu)成的控制部、由存儲各種程序或圖像 等的各種數(shù)據(jù)的ROM、 RAM、 HDD等構(gòu)成的存儲部、與外部裝置進(jìn)行通 信的通信部、由用于接收廣播的天線或調(diào)諧器等構(gòu)成的接收部、和連接上 述各部的總線(均未圖示)，并且連接顯示裝置及鍵盤或鼠標(biāo)等輸入裝置(均 未圖示)。下面，說明影像顯示裝置115的功能構(gòu)成。圖36是示例第3實施方式 的影像顯示裝置115的功能構(gòu)成的框圖。如圖36所示，影像顯示裝置115
除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理對象幀選擇部13、 內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部16、關(guān)聯(lián)度算出部 17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容可視化部20、可視 化內(nèi)容群配置部21、空間可視化部22與顯示部23夕卜，還具備操作支援部 60。其中，操作支援部60是通過影像顯示裝置115的控制部執(zhí)行存儲在存 儲部中的各種程序來實現(xiàn)的功能部。操作支援部60根據(jù)來自用戶的輸入，承擔(dān)影像顯示裝置115的操作。 具體而言，若使用鼠標(biāo)或遙控器等操作裝置(未圖示)從用戶執(zhí)行操作，則將 該信息輸入操作支援部60。下面，說明使用鼠標(biāo)作為操作裝置的實例。用戶通過將顯示部23的畫面中出現(xiàn)的鼠標(biāo)游標(biāo)作為依托，操作鼠標(biāo)， 從而將該鼠標(biāo)的位置信息輸入操作支援部60。操作支援部60向空間可視化 部22發(fā)送該鼠標(biāo)的位置信息，傳遞在空間可視化部22的對應(yīng)位置顯示鼠 標(biāo)游標(biāo)的意思。另外，操作支援部60使用從可視化內(nèi)容群配置部21得到的可視化內(nèi) 容群的配置位置信息和從空間可視化部22得到的渲染用視點信息等，確定 存在于當(dāng)前的鼠標(biāo)位置(鼠標(biāo)游標(biāo)位置)下的可視化內(nèi)容。具體而言，使用放 射線跟蹤(ray trace)技術(shù)，從鼠標(biāo)游標(biāo)位置(畫面空間狀的鼠標(biāo)坐標(biāo)位置)向 虛擬空間內(nèi)的視點矢量方面發(fā)射放射線，確定該放射線交叉的可視化內(nèi)容 中、從視點看的情況下正確位于最靠近面前的可視化內(nèi)容。這可通過對從 視點觀看三維直線與可視化內(nèi)容的三維交點的全部可視化內(nèi)容使用簡單的 幾何運算來計算求出。另外，操作支援部60還對應(yīng)于來自用戶的操作內(nèi)容，向空間可視化部 22提供執(zhí)行不同可視化的指示。具體而言，在用戶執(zhí)行基于鼠標(biāo)左點擊按 鈕按下等的決定操作的情況下，操作支援部60對處理對象內(nèi)容選擇部12 執(zhí)行選擇存在于鼠標(biāo)游標(biāo)位置下的可視化內(nèi)容作為新的處理對象內(nèi)容的通 知。若選擇新的處理對象內(nèi)容，則利用各功能部，移動到表示以該新的處 理對象內(nèi)容為中心的關(guān)聯(lián)性的空間可視化。即，是指從原來的內(nèi)容中心的 關(guān)聯(lián)度可視化，移動到新的內(nèi)容中心的關(guān)聯(lián)度可視化。另外，操作支援部60在由用戶對關(guān)于處理對象內(nèi)容顯示的特定幀圖像
執(zhí)行了決定操作的情況下，對處理對象幀選擇部13執(zhí)行將該幀圖像選擇為 新的處理對象幀的通知。若選擇新的處理對象幀，則利用各功能部，移動 到表示以該新的處理對象幀為中心的關(guān)聯(lián)性的空間可視化。即，是指從以 原來的幀為中心的關(guān)聯(lián)度可視化，移動到以新的幀為中心的關(guān)聯(lián)度可視化。并且，對應(yīng)于用戶的決定操作，對顯示對象內(nèi)容選擇部19執(zhí)行選擇構(gòu) 成顯示對象的內(nèi)容的通知?？臻g可視化部22執(zhí)行空間可視化的結(jié)果是存在 多個顯示對象內(nèi)容的情況下，由于可視化內(nèi)容群配置部21的配置，關(guān)聯(lián)度 低的可視化內(nèi)容有時會被關(guān)聯(lián)度高的可視化內(nèi)容遮蔽，難以看到。例如圖 8-1所示從上面看虛擬空間的情況下，在可視化內(nèi)容202a的下面存在可視 化內(nèi)容202d，在可視化內(nèi)容202a遮蔽可視化內(nèi)容202d的大部分區(qū)域的情 況下，可視化內(nèi)容202d的內(nèi)容基本上無法看到。對顯示對象內(nèi)容選擇部19的選擇指示在這種情況下有用，顯示對象內(nèi) 容選擇部19根據(jù)來自操作支援部60的通知內(nèi)容，改變顯示對象內(nèi)容的選 擇方式。此時，例如不僅僅選擇關(guān)聯(lián)度高的上位幾個，還可選擇特定的有 效范圍，以便僅選擇關(guān)聯(lián)度為規(guī)定值以下、規(guī)定值以上的內(nèi)容等。該選擇 不限于在虛擬空間內(nèi)為均勻的，也可在用戶選擇特定區(qū)域的情況下，僅在 該區(qū)域內(nèi)如上所述改變選擇方法。通過用戶以可視化內(nèi)容單位進(jìn)行選擇，也可不選擇遮蔽其內(nèi)容的內(nèi)容。 操作支援部60通過用戶使用鼠標(biāo)等操作部，利用拖拉等作業(yè)選擇特定的矩 形，或以可視化內(nèi)容單位使用鼠標(biāo)等選擇，或使用設(shè)定畫面等決定關(guān)聯(lián)度 的有效范圍，從而實現(xiàn)以上動作。并且，用戶也可通過鼠標(biāo)的右點擊等操作，從該空間的可視化狀態(tài)， 移動到當(dāng)前處理對象內(nèi)容在畫面整體中的再現(xiàn)狀態(tài)。即，是指從關(guān)聯(lián)度的 可視化畫面移動到通常的整個畫面的影像視聽狀態(tài)。另外，用戶通過從通 常的整個畫面的影像視聽狀態(tài)，執(zhí)行鼠標(biāo)的右點擊等操作，選擇當(dāng)前視聽 中的內(nèi)容及幀，作為處理對象內(nèi)容及處理對象幀，使用影像顯示裝置115 的各功能部，也可移動到關(guān)聯(lián)性的可視化畫面。操作支援部60執(zhí)行上述移 動用的管理或指示。如上所述，根據(jù)第3實施方式的影像顯示裝置115，由于可對應(yīng)于來 自用戶的操作內(nèi)容，給予指示以便在空間可視化部22中執(zhí)行不同的可視化，
所以用戶可交互地操作影像顯示裝置的顯示內(nèi)容。即，根據(jù)第3實施方式 的影像顯示裝置115,用戶可邊自由地選擇內(nèi)容，邊交互地執(zhí)行內(nèi)容視聽、 以該內(nèi)容為中心的關(guān)聯(lián)性的可視化結(jié)果的享受等作業(yè)。在本實施方式中，示出使用鼠標(biāo)的實例，但不限于此，例如也可使用 遙控器或鍵盤等。本實施方式可與上述第1實施方式和第2實施方式組合。例如，在與 第1實施方式的變形例8組合的情況下，如下所示是有效的。如第3實施方式中說明的那樣，用戶通過使用鼠標(biāo)等，可從通常的影 像視聽推移到可視化關(guān)聯(lián)性的畫面。另外，在可視化關(guān)聯(lián)性的畫面中，選 擇利用鼠標(biāo)操作配置的內(nèi)容群中的任意內(nèi)容，將該內(nèi)容設(shè)為可視化的中心 (即新的處理對象內(nèi)容)。此時，若組合第1實施方式的變形例8，則可以平滑的動畫來顯示利 用用戶操作選擇的內(nèi)容轉(zhuǎn)變到可視化中心的狀態(tài)。此時，最好對應(yīng)于與本 實施方式的關(guān)系，執(zhí)行用于動畫插補的、配置運動插補部39中配置位置的 插補值的算出方法。具體而言，當(dāng)算出插補值時，最好為比其它任何可視 化內(nèi)容群都靠面前而看到的、即未被其它任何可視化內(nèi)容群遮蔽的可視化 位置的插補位置。例如，在視點為Z軸上方的情況下，可通過將配置用Z軸變?yōu)榕渲迷?最面前的可視化內(nèi)容之前來實現(xiàn)。視點為其它位置的情況也一樣。另外， 以使用稱為放射線跟蹤的方法等，將光線從視點放射到插補位置算出對象 的可視化內(nèi)容，存在與該光線交叉的其它可視化內(nèi)容的情況下，變?yōu)楸冉?叉的其它可視化內(nèi)容中、比距視點最靠前的還在前面的插補位置也可對應(yīng)。如上所述，根據(jù)本實施方式的影像顯示裝置115，通過用戶經(jīng)操作裝 置操作所顯示的虛擬空間內(nèi)的可視化內(nèi)容，可使其顯示內(nèi)容變化，所以可 在提高影像顯示裝置的操作性的同時，對期望的內(nèi)容，將與其它內(nèi)容之間 的關(guān)聯(lián)性可視化。[第3實施方式的變形例1]下面，參照圖37，說明本實施方式的變形例1的影像顯示裝置116。 對與上述影像顯示裝置114、影像顯示裝置115—樣的構(gòu)成附加相同符號， 省略其說明。
圖37是表示影像顯示裝置116的功能構(gòu)成的框圖。如圖37所示，影 像顯示裝置116除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、可視化內(nèi)容群配置部21、空間可視化部22、顯示部23、 EPG 信息取得管理部43、調(diào)諧器44、流信息取得管理部45、商品數(shù)據(jù)取得部 57、商品數(shù)據(jù)信息取得管理部58與內(nèi)容可視化部59夕卜，還具備操作支援 部61與商品購入手續(xù)部62。操作支援部61與商品購入手續(xù)部62是通過上述控制部執(zhí)行存儲在存 儲部中的各種程序來實現(xiàn)的功能部。操作支援部61除第3實施方式說明的功能外，還在用戶選擇由商品數(shù) 據(jù)信息取得管理部58管理的數(shù)據(jù)作為可視化的內(nèi)容數(shù)據(jù)的情況下，讓用戶 執(zhí)行是否購入該數(shù)據(jù)表示的商品的選擇，將選擇結(jié)果輸出到商品購入手續(xù) 部62。選擇例如通過顯示表現(xiàn)是否購入商品的消息的GUI畫面、利用鼠標(biāo) 來選擇其中配置的'是'、 <否'按鈕來實現(xiàn)。商品購入手續(xù)部62根據(jù)由操作支援部61處理后的用戶輸入，執(zhí)行作 為商品數(shù)據(jù)取得部57的商品數(shù)據(jù)取得目的地的Web銷售或通信銷售站點 購入商品的手續(xù)。具體而言，商品購入手續(xù)部62若從操作支援部61接收 用戶選擇了商品購入的通知，則代替用戶代行作為商品數(shù)據(jù)取得部57的商 品數(shù)據(jù)取得目的地的Web銷售或通信銷售站點的商品購入手續(xù)。也可以中 途使用GUI畫面等，使用戶輸入購入所需要的用戶信息等。這樣，根據(jù)第3實施方式的變形例1的構(gòu)成，通過用戶從可視化的內(nèi) 容中選擇引起Web銷售、通信銷售的內(nèi)容，可輕松地購入該內(nèi)容所示的商 品。另外，在正在視聽某個動態(tài)圖像數(shù)據(jù)的情況下，該動態(tài)圖像數(shù)據(jù)中登 場的物等作為關(guān)聯(lián)性高的、引起Web銷售、通信銷售的內(nèi)容，配置在處理 對象內(nèi)容的周圍，所以可無需積極執(zhí)行商品檢索地購入位于當(dāng)前看到的影 像中的商品。另外，在本變形例中，為具備商品購入手續(xù)部62的方式，但也可具備 用于將用戶引導(dǎo)到構(gòu)成商品數(shù)據(jù)取得部57的商品數(shù)據(jù)取得目的地的Web 銷售或通信銷售站點的商品站點引導(dǎo)部(未圖示)，代替該商品購入手續(xù)部62。此時，商品站點引導(dǎo)部用于將用戶引導(dǎo)到作為商品數(shù)據(jù)取得部57的商 品數(shù)據(jù)取得目的地的Web銷售或通信銷售站點。具體而言，使用GUI等啟 動Web瀏覽器，其中顯示作為商品數(shù)據(jù)取得部57的商品數(shù)據(jù)取得目的地 的Web銷售或通信銷售站點的首頁或商品購入頁等。由此，用戶可容易地 尋找到Web銷售或通信銷售站點。 [第3實施方式的變形例2]下面，參照圖38，說明本實施方式的變形例2的影像顯示裝置117。 對與上述影像顯示裝置115、影像顯示裝置116—樣的構(gòu)成附加相同符號， 省略其說明。圖38是表示影像顯示裝置117的功能構(gòu)成的框圖。如圖38所示，影 像顯示裝置117除上述動態(tài)圖像數(shù)據(jù)庫11、處理對象內(nèi)容選擇部12、處理 對象幀選擇部13、內(nèi)容信息取得部14、幀信息取得部15、幀圖像解析部 16、關(guān)聯(lián)度算出部17、關(guān)聯(lián)內(nèi)容算出部18、顯示對象內(nèi)容選擇部19、內(nèi)容 可視化部20、可視化內(nèi)容群配置部21、空間可視化部22、顯示部23、 EPG 信息取得管理部43、調(diào)諧器44、流信息取得管理部45、商品數(shù)據(jù)取得部 57、商品數(shù)據(jù)信息取得管理部58、內(nèi)容可視化部59、操作支援部61與商 品購入手續(xù)部62外，還具備收費部63。收費部63是通過上述控制部執(zhí)行存儲在存儲部中的各種程序來實現(xiàn) 的功能部。收費部63在用戶使用商品購入手續(xù)部62購入商品的情況下，對該影 像顯示裝置117的提供者支付對商品購入引導(dǎo)的報酬。此時，影像顯示裝 置117的提供者與作為商品數(shù)據(jù)取得部57的商品數(shù)據(jù)取得目的地的Web 銷售或通信銷售站點的事業(yè)者事先訂立關(guān)于商品銷售的合同。這里，合同 內(nèi)容例如是在使用影像顯示裝置117的商品購入手續(xù)部62購入了商品的情 況下，對影像顯示裝置117的提供者支付勞務(wù)費作為對商品購入引導(dǎo)的報 酬等涉及報酬的協(xié)議。這樣，根據(jù)第3實施方式的變形例2的構(gòu)成，在用戶通過影像顯示裝 置117從Web銷售或通信銷售站點購入了商品的情況下，可實現(xiàn)該影像顯 示裝置117的提供者接收勞務(wù)費的服務(wù)。并且，通過組合該變形例與在先
說明的商品站點引導(dǎo)部(未圖示)，通過僅將用戶引導(dǎo)到作為商品數(shù)據(jù)取得部57的商品數(shù)據(jù)取得目的地的Web銷售或通信銷售站點的頁面，可提供向影 像顯示裝置117的提供者支付勞務(wù)費作為對商品站點引導(dǎo)的報酬的服務(wù)。以上說明了第1 第3實施方式，但本發(fā)明不限于此，在不脫離本發(fā) 明的精神的范圍內(nèi)，可進(jìn)行各種變更、置換、追加等。例如，可由計算機能執(zhí)行的程序來實現(xiàn)上述各實施方式中的處理，并 將該程序?qū)崿F(xiàn)為計算機可讀取的存儲媒體。作為本發(fā)明的存儲媒體，只要 是磁盤、光盤、磁光盤、半導(dǎo)體等可存儲程序且計算機或組裝系統(tǒng)可讀取 的存儲媒體，則其存儲形式可以是任意方式。另外，根據(jù)從存儲媒體安裝到計算機或組裝系統(tǒng)中的程序的指示，在 計算機上運行的OS或數(shù)據(jù)庫管理軟件、網(wǎng)絡(luò)等的中間件等也可執(zhí)行用于 實現(xiàn)本實施方式的各處理的一部分。并且，本發(fā)明中的存儲媒體不限于與計算機或組裝系統(tǒng)獨立的媒體， 也包含下載由LAN或因特網(wǎng)等傳遞的程序后存儲或暫時存儲的存儲媒體。另外，存儲媒體不限于一個，即便在從多個存儲媒體執(zhí)行本實施方式 的處理的情況下，也包含于本發(fā)明的存儲媒體中。本發(fā)明的計算機或組裝 系統(tǒng)根據(jù)存儲在存儲媒體中的程序，執(zhí)行上述各實施方式的各處理，由PC、 微處理器等一個構(gòu)成的裝置、多個裝置可以是網(wǎng)絡(luò)連接的系統(tǒng)等任一構(gòu)成。所謂本發(fā)明的計算機不限于PC,還包含信息處理設(shè)備中包含的運算處 理裝置、微控制器等，統(tǒng)稱可由程序?qū)崿F(xiàn)本申請發(fā)明的功能的設(shè)備、裝置。上述各實施方式中包含各種階段的發(fā)明，利用公開的多個構(gòu)成要件中 的適當(dāng)組合，抽取各種發(fā)明。例如，即便從上述各實施方式所示的全部構(gòu) 成要件中刪除幾個構(gòu)成要件，也可解決發(fā)明要解決的課題一欄中描述的課 題，得到發(fā)明效果欄中描述的效果的情況下，抽取該構(gòu)成作為本發(fā)明。
權(quán)利要求
1、一種影像顯示裝置，其特征在于，具備第1存儲部件，存儲多個動態(tài)圖像內(nèi)容；內(nèi)容選擇部件，從存儲在所述第1存儲部件中的動態(tài)圖像內(nèi)容中，選擇處理對象動態(tài)圖像內(nèi)容；關(guān)聯(lián)內(nèi)容算出部件，根據(jù)所述處理對象動態(tài)圖像內(nèi)容的特性、和存儲在所述第1存儲部件中的該處理對象動態(tài)圖像內(nèi)容以外的其它動態(tài)圖像內(nèi)容的特性之間的類似度，算出所述其它動態(tài)圖像內(nèi)容各自相對所述處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；內(nèi)容可視化部件，分別生成將所述處理對象動態(tài)圖像內(nèi)容以及其它動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容；配置部件，在虛擬空間內(nèi)配置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容，并且，在按照所述其它動態(tài)圖像內(nèi)容各自的關(guān)聯(lián)度而從該配置位置離開的位置上，分別配置與所述其它動態(tài)圖像內(nèi)容的每個相對應(yīng)的可視化內(nèi)容；空間可視化部件，將配置有所述可視化內(nèi)容的虛擬空間可視化為能夠顯示的狀態(tài)；和顯示部件，顯示所述可視化后的虛擬空間。
2、 一種影像顯示裝置，其特征在于，具備 第1存儲部件，存儲多個動態(tài)圖像內(nèi)容；內(nèi)容選擇部件，從存儲在所述第1存儲部件中的動態(tài)圖像內(nèi)容中，選 擇處理對象動態(tài)圖像內(nèi)容；關(guān)聯(lián)內(nèi)容算出部件，根據(jù)所述處理對象動態(tài)圖像內(nèi)容的特性、和存儲 在所述第1存儲部件中的該處理對象動態(tài)圖像內(nèi)容以外的其它動態(tài)圖像內(nèi) 容的特性之間的類似度，算出所述其它動態(tài)圖像內(nèi)容各自相對所述處理對 象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；顯示內(nèi)容選擇部件，根據(jù)由所述關(guān)聯(lián)內(nèi)容算出部件算出的關(guān)聯(lián)度，從 所述其它動態(tài)圖像內(nèi)容中選擇顯示對象動態(tài)圖像內(nèi)容；內(nèi)容可視化部件，分別生成將所述處理對象動態(tài)圖像內(nèi)容以及所述顯示對象動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容， 配置部件，在虛擬空間內(nèi)配置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的 可視化內(nèi)容，并且，在按照所述顯示對象動態(tài)圖像內(nèi)容各自的關(guān)聯(lián)度而從 該配置位置離開的位置上，分別配置與該顯示對象動態(tài)圖像內(nèi)容的每個相 對應(yīng)的可視化內(nèi)容；空間可視化部件，將配置有所述可視化內(nèi)容的虛擬空間可視化為能夠 顯示的狀態(tài)；和顯示部件，顯示所述可視化后的虛擬空間。
3、 一種影像顯示裝置，其特征在于，具備第1存儲部件，將對構(gòu)成動態(tài)圖像的一系列幀中的某一幀或全部幀賦 予了表示該各幀的特性的幀信息之后的動態(tài)圖像內(nèi)容的每個，與表示該各 動態(tài)圖像內(nèi)容的特性的內(nèi)容信息相對應(yīng)地加以存儲；內(nèi)容選擇部件，從存儲在所述第1存儲部件中的動態(tài)圖像內(nèi)容中，選 擇處理對象動態(tài)圖像內(nèi)容；第1關(guān)聯(lián)度算出部件，根據(jù)與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的內(nèi) 容信息、和與存儲在所述第1存儲部件中的該處理對象動態(tài)圖像內(nèi)容以外 的其它動態(tài)圖像內(nèi)容相對應(yīng)的內(nèi)容信息之間的類似度，算出其它動態(tài)圖像 內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；幀選擇部件，從所述處理對象動態(tài)圖像內(nèi)容中，選擇該動態(tài)圖像內(nèi)容 中包含的至少1個以上的幀，作為處理對象幀；第2關(guān)聯(lián)度算出部件，根據(jù)賦予給所述處理對象幀的幀信息、和賦予 給所述其它動態(tài)圖像內(nèi)容的幀的幀信息之間的類似度，算出其它動態(tài)圖像 內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；圖像解析部件，對所述處理對象幀以及構(gòu)成所述其它動態(tài)圖像內(nèi)容的 各幀中包含的圖像的圖像特性進(jìn)行解析；第3關(guān)聯(lián)度算出部件，根據(jù)所述處理對象幀的圖像解析結(jié)果、和所述 其它動態(tài)圖像內(nèi)容的幀的圖像解析結(jié)果之間的類似度，算出其它動態(tài)圖像 內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；關(guān)聯(lián)內(nèi)容算出部件，使用由所述第1關(guān)聯(lián)度算出部件、第2關(guān)聯(lián)度算 出部件、第3關(guān)聯(lián)度算出部件中的某一部件或全部部件所算出的關(guān)聯(lián)度，算出所述其它動態(tài)圖像內(nèi)容各自相對所述處理對象動態(tài)圖像內(nèi)容的綜合關(guān)聯(lián)度；顯示內(nèi)容選擇部件，根據(jù)由所述關(guān)聯(lián)內(nèi)容算出部件算出的綜合關(guān)聯(lián)度， 從所述其它動態(tài)圖像內(nèi)容中，選擇顯示對象動態(tài)圖像內(nèi)容；內(nèi)容可視化部件，分別生成將所述處理對象動態(tài)圖像內(nèi)容以及所述顯 示對象動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容；配置部件，在虛擬空間內(nèi)配置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的 可視化內(nèi)容，并且，在按照所述顯示對象動態(tài)圖像內(nèi)容各自的綜合關(guān)聯(lián)度 而從該配置位置離開的位置上，分別配置與該顯示對象動態(tài)圖像內(nèi)容的每 個相對應(yīng)的可視化內(nèi)容；空間可視化部件，將配置有所述可視化內(nèi)容的虛擬空間可視化為能夠 顯示的狀態(tài)；和顯示部件，顯示所述可視化后的虛擬空間。
4、 根據(jù)權(quán)利要求3所述的影像顯示裝置，其特征在于 所述虛擬空間是三維空間，所述配置部件根據(jù)構(gòu)成所述三維空間的一個坐標(biāo)系，在按照所述顯示 對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度而從與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可 視化內(nèi)容的配置位置離開的位置上，分別配置與該各顯示對象動態(tài)圖像內(nèi) 容相對應(yīng)的可視化內(nèi)容，并且，根據(jù)所述顯示對象動態(tài)圖像內(nèi)容各自的內(nèi) 容信息，在按所述動態(tài)圖像內(nèi)容的每個特性而區(qū)分的所述三維空間的其它 兩個坐標(biāo)系構(gòu)成的平面內(nèi)的規(guī)定區(qū)域中，分別配置與該顯示對象動態(tài)圖像 內(nèi)容的每個相對應(yīng)的可視化內(nèi)容。
5、 根據(jù)權(quán)利要求4所述的影像顯示裝置，其特征在于 所述配置部件向以與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容的配置位置為基準(zhǔn)的所述平面內(nèi)的各方位方向，分配所述動態(tài)圖像內(nèi)容的 各特性。
6、 根據(jù)權(quán)利要求1 4中任意一項所述的影像顯示裝置，其特征在于: 還具備受理部件，該受理部件受理下述選擇，該選擇是從由所述顯示部件顯示的虛擬空間內(nèi)存在的所述可視化內(nèi)容中選擇特定的可視化內(nèi)容的 選擇，所述內(nèi)容選擇部件選擇與所述選擇到的特定的可視化內(nèi)容相對應(yīng)的動 態(tài)圖像內(nèi)容，作為處理對象動態(tài)圖像內(nèi)容。
7、 根據(jù)權(quán)利要求1 5中任意一項所述的影像顯示裝置，其特征在于: 還具備配置履歷管理部件，該配置履歷管理部件將由所述配置部件配置在所述虛擬空間內(nèi)的可視化內(nèi)容在所述虛擬空間內(nèi)的配置位置、對應(yīng)于 該可視化內(nèi)容的動態(tài)圖像內(nèi)容的特性、和關(guān)聯(lián)度建立關(guān)聯(lián)地加以存儲，所述配置部件根據(jù)所述配置履歷管理部件，將所述動態(tài)圖像內(nèi)容的特 性相同且關(guān)聯(lián)度大致為相同值的動態(tài)圖像內(nèi)容的可視化內(nèi)容，配置在與該 特性以及關(guān)聯(lián)度建立了關(guān)聯(lián)而存儲的配置位置上。
8、 根據(jù)權(quán)利要求1 5中任意一項所述的影像顯示裝置，其特征在于 還具備解析部件，該解析部件對配置在所述虛擬空間內(nèi)的可視化內(nèi)容的偏倚狀態(tài)進(jìn)行解析，所述配置部件按照所述解析部件的解析結(jié)果，使構(gòu)成所述虛擬空間的 坐標(biāo)系偏倚。
9、 根據(jù)權(quán)利要求2 5中任意一項所述的影像顯示裝置，其特征在于還具備解析部件，該解析部件對配置在所述虛擬空間內(nèi)的可視化內(nèi)容 的偏倚狀態(tài)進(jìn)行解析，所述顯示內(nèi)容選擇部件按照所述解析部件的解析結(jié)果，限制從所述其 它動態(tài)圖像內(nèi)容中選擇的顯示對象動態(tài)圖像內(nèi)容的數(shù)量。
10、 根據(jù)權(quán)利要求1 5中任意一項所述的影像顯示裝置，其特征在于 還具備解析部件，該解析部件對配置在所述虛擬空間內(nèi)的可視化內(nèi)容的偏倚狀態(tài)進(jìn)行解析，所述內(nèi)容可視化部件按照所述解析部件的解析結(jié)果，合并處于偏倚狀 態(tài)的多個可視化內(nèi)容，生成新的一個可視化內(nèi)容。
11、 根據(jù)權(quán)利要求2 5中任意一項所述的影像顯示裝置，其特征在于: 還具備解析部件，對配置在所述虛擬空間內(nèi)的可視化內(nèi)容的偏倚狀態(tài)進(jìn)行解 析；和內(nèi)容加工部件，按照所述解析部件的解析結(jié)果，合并所述顯示對象內(nèi) 容，生成新的一個顯示對象內(nèi)容。
12、 根據(jù)權(quán)利要求2 5中任意一項所述的影像顯示裝置，其特征在于還具備關(guān)聯(lián)性解析部件，該關(guān)聯(lián)性解析部件根據(jù)由所述關(guān)聯(lián)內(nèi)容算出 部件算出的關(guān)聯(lián)度、和由所述配置部件配置所述可視化內(nèi)容的配置狀況， 對配置在所述虛擬空間內(nèi)的可視化內(nèi)容的偏倚狀態(tài)進(jìn)行解析，所述空間可視化部件按照所述關(guān)聯(lián)性解析部件的解析結(jié)果，變更與所 述虛擬空間的可視化有關(guān)的條件。
13、 根據(jù)權(quán)利要求2 5中任意一項所述的影像顯示裝置，其特征在于:還具備配置運動插補部件，該配置運動插補部件按所述顯示部件的每 個畫面顯示間隔，對配置在所述虛擬空間內(nèi)的各可視化內(nèi)容的配置位置進(jìn)行插補，所述顯示部件按每個所述顯示間隔，更新虛擬空間的顯示。
14、 根據(jù)權(quán)利要求1 5中任意一項所述的影像顯示裝置，其特征在于 還具備電子節(jié)目表管理部件，從分發(fā)電子節(jié)目表的服務(wù)器取得電子節(jié)目表， 將該電子節(jié)目表作為所述內(nèi)容信息進(jìn)行管理，并且，將與該電子節(jié)目表有 關(guān)系的動態(tài)圖像數(shù)據(jù)作為所述內(nèi)容信息進(jìn)行管理；接收部件，取得流分發(fā)的數(shù)據(jù)；和流管理部件，將由所述接收部件取得的數(shù)據(jù)作為所述動態(tài)圖像內(nèi)容進(jìn) 行管理，并且，將與該數(shù)據(jù)有關(guān)的信息作為所述內(nèi)容信息進(jìn)行管理。
15、 一種影像顯示方法，由影像顯示裝置執(zhí)行，其特征在于所述影像顯示裝置具備存儲部件，該存儲部件將對構(gòu)成動態(tài)圖像的一 系列幀中的某一幀或全部幀賦予了表示該各幀的特性的幀信息之后的動態(tài) 圖像內(nèi)容的每個，與表示該各動態(tài)圖像內(nèi)容的特性的內(nèi)容信息相對應(yīng)地加以存儲；該影像顯示方法包括內(nèi)容選擇步驟，內(nèi)容選擇部件從所述存儲部件中，選擇處理對象動態(tài) 圖像內(nèi)容；第1關(guān)聯(lián)度算出步驟，第1關(guān)聯(lián)度算出部件根據(jù)與所述處理對象動態(tài) 圖像內(nèi)容相對應(yīng)的內(nèi)容信息、和與存儲在所述存儲部件中的該處理對象動 態(tài)圖像內(nèi)容以外的其它動態(tài)圖像內(nèi)容相對應(yīng)的內(nèi)容信息之間的類似度，算出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；幀選擇步驟，幀選擇部件從所述處理對象動態(tài)圖像內(nèi)容中，選擇該動 態(tài)圖像內(nèi)容中包含的至少1個以上的幀，作為處理對象幀；第2關(guān)聯(lián)度算出步驟，第2關(guān)聯(lián)度算出部件根據(jù)賦予所述處理對象幀 的幀信息、和賦予所述其它動態(tài)圖像內(nèi)容的幀的幀信息之間的類似度，算 出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；圖像解析步驟，圖像解析部件對所述處理對象幀以及構(gòu)成所述其它動 態(tài)圖像內(nèi)容的各幀中包含的圖像的圖像特性進(jìn)行解析；第3關(guān)聯(lián)度算出步驟，第3關(guān)聯(lián)度算出部件根據(jù)所述處理對象幀的圖 像解析結(jié)果、和所述其它動態(tài)圖像內(nèi)容的幀的圖像解析結(jié)果之間的類似度， 算出其它動態(tài)圖像內(nèi)容各自相對處理對象動態(tài)圖像內(nèi)容的關(guān)聯(lián)度；關(guān)聯(lián)內(nèi)容算出步驟，關(guān)聯(lián)內(nèi)容算出部件使用由所述第1關(guān)聯(lián)度算出步 驟、第2關(guān)聯(lián)度算出步驟、第3關(guān)聯(lián)度算出步驟中的某一步驟或全部步驟 所算出的關(guān)聯(lián)度，算出所述其它動態(tài)圖像內(nèi)容各自相對所述處理對象動態(tài) 圖像內(nèi)容的綜合關(guān)聯(lián)度；顯示內(nèi)容選擇步驟，顯示內(nèi)容選擇部件根據(jù)所述綜合關(guān)聯(lián)度，從所述 其它動態(tài)圖像內(nèi)容中，選擇顯示對象動態(tài)圖像內(nèi)容；內(nèi)容可視化步驟，內(nèi)容可視化部件分別生成將所述處理對象動態(tài)圖像 內(nèi)容以及所述顯示對象動態(tài)圖像內(nèi)容象征化之后的可視化內(nèi)容；配置步驟，配置部件在虛擬空間內(nèi)配置與所述處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容，并且，在按照所述顯示對象動態(tài)圖像內(nèi)容各自的綜合關(guān)聯(lián)度而從該配置位置離開的位置上，分別配置與該顯示對象動態(tài)圖像 內(nèi)容的每個相對應(yīng)的可視化內(nèi)容；空間可視化步驟，空間可視化部件將配置有所述可視化內(nèi)容的虛擬空 間可視化為能夠顯示的狀態(tài)；和顯示步驟，顯示部件顯示所述可視化后的虛擬空間。
全文摘要
提供一種影像顯示裝置及方法，將動態(tài)圖像內(nèi)容間的關(guān)聯(lián)性可視化。使用內(nèi)容信息、幀信息、圖像特性中的任一或全部，算出其它動態(tài)圖像內(nèi)容相對處理對象動態(tài)圖像內(nèi)容的綜合關(guān)聯(lián)度，在虛擬空間中，將與根據(jù)該關(guān)聯(lián)度選擇到的顯示對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容，配置在按照關(guān)聯(lián)度而從與處理對象動態(tài)圖像內(nèi)容相對應(yīng)的可視化內(nèi)容的配置位置離開的位置上，并且顯示該虛擬空間。
文檔編號G09G5/14GK101398851SQ200810215750
公開日2009年4月1日 申請日期2008年9月9日 優(yōu)先權(quán)日2007年9月25日
發(fā)明者三原功雄, 關(guān)根真弘, 山內(nèi)康晉, 樋口靖和 申請人:株式會社東芝