專利名稱::影像摘要裝置的制作方法
技術(shù)領(lǐng)域:
:本發(fā)明涉及從影像信號抽取重要區(qū)間的影像,能夠?qū)嵤┲匾獏^(qū)間的影像的再生或者編輯的影像摘要裝置。
背景技術(shù):
:當前提出了通過檢測影像的切割點(cutpoint),將影像信號分割為鏡頭(shot)單位,從多個鏡頭中識別重要鏡頭的影像摘要裝置。重要鏡頭的判別處理如以下的非專利文獻1公開的那樣,例如大多使用像多數(shù)的影像處理方法或者聲音處理方法等那樣非常復雜的處理,難以進行實時的判別或者向便攜設(shè)備的搭載。另外,在進行實際分類的鏡頭的編輯或者再生時,大多使用稱為略圖的小圖像的一覽。在該略圖中,使用各鏡頭的代表圖像,作為代表圖像,大多使用各鏡頭的開頭圖像。然而,鏡頭的開頭圖像不一定就是代表性表示該鏡頭的圖像。因此,用戶即使觀看略圖的一覽,有時也不能判別自己希望視聽的鏡頭位于何處。非專利文獻l:「基于戲劇影像的心理內(nèi)容的摘要影像的生成J,電子情報通信學會論文志,D-II,Vol.J84-D-n,No.6,ppl122-1131,2001年,森山剛,坂內(nèi)正夫著現(xiàn)有的影像摘要裝置由于如以上那樣構(gòu)成,因此存在例如如果不實施像多數(shù)的影像處理方法或者聲音處理方法等那樣非常復雜的處理,則就不能辨別重要的鏡頭,難以進行實時判別或者向便攜設(shè)備的搭栽這樣的課題。另外,由于鏡頭的開頭圖像不一定就是代表性表示該鏡頭的圖像,因此存在有時即使用戶觀看略圖的一覽,也不能判別自己希望視聽的鏡頭位于何處這樣的課題。
發(fā)明內(nèi)容本發(fā)明是為解決上述那樣的課題而完成的,其目的在于得到不必實施復雜的處理而提高計算負荷,讓用戶能夠容易地把握重要的鏡頭的影像摘要裝置。本發(fā)明的影像摘要裝置設(shè)有在由切割點檢測單元檢測出了切割點的情況下,計算以該切割點的前一個切割點為起點的鏡頭的鏡頭長度的鏡頭長度計算單元,把由該鏡頭長度計算單元計算出的鏡頭長度作為判別材料,判別以前一個切割點為起點的鏡頭是否是重要鏡頭。由此,具有不必實施復雜處理而提高計算負荷,讓用戶能夠容易地把握重要的鏡頭的效果。圖l是表示本發(fā)明實施形態(tài)l的影像摘要裝置的結(jié)構(gòu)圖。圖2是表示本發(fā)明實施形態(tài)1的影像摘要裝置的切割點檢測部1的結(jié)構(gòu)圖。圖3是表示亮度值的變化或者切割點的說明圖。圖4是表示本發(fā)明實施形態(tài)1的影像摘要裝置的處理內(nèi)容的流程圖。圖5是表示本發(fā)明實施形態(tài)2的影像摘要裝置的結(jié)構(gòu)圖。圖6是表示本發(fā)明實施形態(tài)3的影像摘要裝置的結(jié)構(gòu)圖。圖7是在分割了影像內(nèi)容的各個分割范圍的每一個中存在重要鏡頭的情況下,表示該鏡頭所代表的范圍的說明圖。圖8是表示本發(fā)明實施形態(tài)4的影像摘要裝置的結(jié)構(gòu)圖。圖9是表示內(nèi)容的大的變化點的說明圖。圖10是表示本發(fā)明實施形態(tài)5的影像摘要裝置的結(jié)構(gòu)圖。圖11是表示本發(fā)明實施形態(tài)6的影像摘要裝置的結(jié)構(gòu)圖。圖12是表示本發(fā)明實施形態(tài)7的影像摘要裝置的結(jié)構(gòu)圖。圖13是表示本發(fā)明實施形態(tài)8的影像摘要裝置的結(jié)構(gòu)圖。圖14是表示本發(fā)明實施形態(tài)9的影像摘要裝置的結(jié)構(gòu)圖。圖15是表示本發(fā)明實施形態(tài)10的影像摘要裝置的結(jié)構(gòu)圖。圖16是表示本發(fā)明實施形態(tài)11的影像摘要裝置的結(jié)構(gòu)圖。圖17是表示鏡頭長度的對數(shù)正態(tài)分布的說明圖。圖18是表示鏡頭長度與影像內(nèi)容長度的關(guān)系的說明圖。圖19是表示本發(fā)明實施形態(tài)12的影像摘要裝置的結(jié)構(gòu)圖。圖20是表示本發(fā)明實施形態(tài)13的影像摘要裝置的結(jié)構(gòu)圖。圖21是表示本發(fā)明實施形態(tài)14的影像摘要裝置的結(jié)構(gòu)圖。圖22是表示本發(fā)明實施形態(tài)15的影像摘要裝置的結(jié)構(gòu)圖。圖23是表示本發(fā)明實施形態(tài)16的影像摘要裝置的結(jié)構(gòu)圖。圖24是表示本發(fā)明實施形態(tài)17的影像摘要裝置的結(jié)構(gòu)圖。圖25是表示本發(fā)明實施形態(tài)18的影像摘要裝置的結(jié)構(gòu)圖。圖26是表示本發(fā)明實施形態(tài)19的影像摘要裝置的結(jié)構(gòu)圖。圖27是表示本發(fā)明實施形態(tài)20的影像摘要裝置的結(jié)構(gòu)圖。圖28是表示本發(fā)明實施形態(tài)20的影像摘要裝置的AV切割點判定部121的結(jié)構(gòu)圖。圖29是表示本發(fā)明實施形態(tài)21的影像摘要裝置的結(jié)構(gòu)圖。圖30是表示本發(fā)明實施形態(tài)22的影像摘要裝置的結(jié)構(gòu)圖。圖31是表示本發(fā)明實施形態(tài)23的影像摘要裝置的結(jié)構(gòu)圖。圖32是表示本發(fā)明實施形態(tài)24的影像摘要裝置的結(jié)構(gòu)圖。圖33是表示本發(fā)明實施形態(tài)25的影像摘要裝置的結(jié)構(gòu)圖。圖34是表示本發(fā)明實施形態(tài)26的影像摘要裝置的結(jié)構(gòu)圖。具體實施例方式以下,為了更詳細地說明本發(fā)明,根據(jù)用于實施本發(fā)明的最佳形態(tài)。實施形態(tài)1圖l是表示本發(fā)明實施形態(tài)l的影像摘要裝置的結(jié)構(gòu)圖,圖中,切割點檢測部1在輸入影像信號時,實施檢測其影像的切割點的處理。另外,切割點檢測部1構(gòu)成切割點檢測單元。鏡頭長度計算部2在由切割點檢測部1檢測出了切割點的情況下,實施計算以該切割點的前一個切割點(前一個切割點是由切割點檢測部1前一次檢測出的切割點)為起點的鏡頭的鏡頭長度的處理。即,如果由切割點檢測部l檢測出切割點,則實施求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度,輸出到重要鏡頭判定部4的處理。鏡頭開始點緩沖器3是存儲鏡頭開始點的時刻的存儲器。另外,由鏡頭長度計算部2以及鏡頭開始點緩沖器3構(gòu)成鏡頭長度計算單元。在由鏡頭長度計算部2計算出的鏡頭長度比預先設(shè)定的閾值A(chǔ)長的情況下,重要鏡頭判定部4實施判定為以由切割點檢測部1檢測出的切割點的前一個切割點為起點的鏡頭是重要鏡頭,以前一個切割點為起點的鏡頭的下一個鏡頭是重要鏡頭,或者,以前一個切割點為起點的鏡頭和下一個鏡頭是重要鏡頭,輸出其判定結(jié)果的處理。另外,重要鏡頭判定部4構(gòu)成重要鏡頭判別單元。圖2是表示本發(fā)明實施形態(tài)1的影像摘要裝置的切割點檢測部1的結(jié)構(gòu)圖,圖中,特征量抽取部11在輸入影像信號時,實施從該影像信號抽取表示影像幀的特征的特征量的處理。另外,特征量抽取部11構(gòu)成特征量抽取單元。幀間距離計算部12使用預定的評價函數(shù),對由特征量抽取部11本次抽取出的當前幀的特征量和存儲在特征量緩沖器13中的前一個幀的特征量(由特征量抽取部11前一次抽取出的幀的特征量)進行比較,實施計算這些特征量之間的距離(非類似度)的處理。以下,把當前幀與前一個幀的特征量之間的距離稱為「幀間距離J。特征量緩沖器13存儲前一個幀的特征量,如果幀間距離計算部12計算出幀間距離,則為了在下一次幀間距離的計算中備用,把當前存儲的前一個幀的特征量更新為由特征量抽取部11本次抽取出的當前幀的特征量。另夕卜,由幀間距離計算部12以及特征量緩沖器13構(gòu)成距離計算單元。切割點判定用數(shù)據(jù)計算部14實施求出由幀間距離計算部12計算出的幀間距離的統(tǒng)計量,從該統(tǒng)計量計算切割點判定用的閾值Th,把切割點判定用的閾值Th輸出到切割點判定用數(shù)據(jù)緩沖器15的處理。切割點判定用數(shù)據(jù)緩沖器15是存儲由切割點判定用數(shù)據(jù)計算部4計算出的切割點判定用的閾值Th的存儲器。另外,由切割點判定用數(shù)據(jù)計算部14以及切割點判定用數(shù)據(jù)緩沖器15構(gòu)成閾值計算單元。切割點判定部16實施對由幀間距離計算部12計算出的幀間距離與存儲在切割點判定用數(shù)據(jù)緩沖器15中的切割點判定用的閾值Th進行比較,從其比較結(jié)果判別切割點的處理。另外,切割點判定部16構(gòu)成切割點判別單元。圖4是表示本發(fā)明實施形態(tài)1的影像處理裝置的處理內(nèi)容的流程圖。其次說明動作。切割點檢測部1在輸入影像信號時,實施檢測其影像的切割點的處理。以下,說明切割點檢測部1中的切割點的具體檢測處理內(nèi)容,而本實施形態(tài)1中的切割點檢測部1由于釆用與現(xiàn)有的檢測處理方法(例如,如果鄰接的幀的亮度比固定的閾值大,則把該幀的變化點檢測為切割點的方法日經(jīng)電子學No.8922005.1.31號51頁)不同的檢測處理方法,因此具有即使在輸入任何影像信號的情況下,也能正確地檢測切割點的特征。其中,切割點檢測部1只要能檢測影像的切割點即可,在不關(guān)心切割點的檢測精度的情況下,也可以使用現(xiàn)有的檢測處理方法來檢測影像的切割點。切割點檢測部1的特征量抽取部11在輸入影像信號時,從該影像信號抽取表示幀的特征的特征量(步驟ST1)。作為表示幀的特征的特征量,例如除了與過去的幀的差分以外,還可以舉出顏色的直方圖、顏色的配置信息、結(jié)構(gòu)信息、運動信息等,既可以使用某一個特征量,也可以使用多個特征量。如果特征量抽取部11抽取當前幀的特征量,則切割點檢測部1的幀間距離計算部12從特征量緩沖器13讀出前一個幀的特征量(由特征量抽取部11前一次抽取的幀的特征量)。而且,幀間距離計算部12利用預定的評價函數(shù),比較當前幀的特征量和前一個幀的特征量,計算作為它們的特征量之間距離(非類似度)的幀間距離(步驟ST2)。此外,幀間距離計算部12在計算出了幀間距離時,將特征量緩沖器13的存儲內(nèi)容更新為當前幀的特征量。如果幀間距離計算部12計算出幀間距離,則切割點檢測部1的切割點判定部16對該幀間距離與存儲在切割點判定用數(shù)據(jù)緩沖器15中的切割點判定用的閾值Th進行比較(步驟ST3)。切割點判定部16在該幀間距離比切割點判定用的閾值Th大的情況下,判定為是切割點,輸出表示該含義的判定結(jié)果(步驟ST4)。另一方面,在該幀間距離小于等于切割點判定用的閾值Th的情況下,判定為不是切割點,輸出表示該含義的判定結(jié)果(步驟ST5)。這里,切割點判定部16使用切割點判定用的閾值Th判別切割點,而例如也可以考慮鏡頭時間等來判別切割點。切割點檢測部1的切割點判定用數(shù)據(jù)計算部14在切割點判定部16的判定結(jié)果表示是切割點的含義的情況下,把切割點判定用數(shù)據(jù)緩沖器15的存儲內(nèi)容初始化為預定的值(步驟ST6)。另一方面,在切割點判定部16的判定結(jié)果表示不是切割點的含義的情況下,求出由幀間距離計算部12計算出的幀間距離的統(tǒng)計量,從該統(tǒng)計量計算切割點判定用的閾值Th,用該閾值Th更新切割點判定用數(shù)據(jù)緩沖器15的存儲內(nèi)容(步驟ST7)。具體地講,如以下那樣計算切割點判定用的閾值Th。實際的影像內(nèi)容由多個鏡頭構(gòu)成,難以考慮作為鏡頭劃分處的切割點的緊接之后的幀是切割點,認為鏡頭是多個幀連續(xù)的。這里,為了說明方便,把各鏡頭的第n-l個幀與第n個幀的距離記為Distn。當該距離Distn比某個閾值大時,認為第i個鏡頭中的第n個幀實際上是第(i+l)的最初的幀。即,認為第i個鏡頭中的第n個幀是切割點。其中,設(shè)第i個鏡頭的最初的幀是第0個幀。另外,上述的閾值適應性變動,設(shè)為Thin。切割點判定用數(shù)據(jù)計算部14在計算閾值Thin時,計算第i個鏡頭中的幀的距離的平均值avgi(Distn),同時計算幀的距離的分散值van(Distn)。如果計算出距離的平均值avgi(Distn)和距離的分散值van(Distn),則切割點判定用數(shù)據(jù)計算部14把距離的平均值avgi(Distn)和距離的分散值vari(Distn)代入到下述的式(1)中,計算閾值Thin。<formula>formulaseeoriginaldocumentpage15</formula>(1)在式(1)中,a是系數(shù)。另外,平均值avgi(Distn)以及分散值van(Distn)不是第i個鏡頭中的所有幀的平均值以及分散值,而是從第1到第n-l個幀的平均值以及分散值。在平均值或者分散值的計算中不使用第O個幀,從第l個幀開始在平均值或者分散值的計算中使用的理由是,因為第0個幀的距離Dist。表示與前面的鏡頭的最后幀的幀間距離。另外,在平均值或者分散值的計算中不使用第n個幀,在平均值或者分散值的計算中使用直到第n-1個為止的幀的理由是,因為對于所輸入的幀能夠立即判別是否是切割點。另外,平均值avgi(Distn)以及分散值vari(Distn)也可以不是準確的值而使用某個近似值。另外,系數(shù)a也能夠根據(jù)內(nèi)容的式樣(genre)等變更。如從以上所明確的那樣,切割點檢測部1即使在鏡頭內(nèi)有運動的情況下,也能夠通過統(tǒng)計地分析該運動,判別切割點和鏡頭內(nèi)的運動的變動,因此能夠適應性地設(shè)定切割點判定用的閾值Thi—n,其結(jié)果與現(xiàn)有的使用固定閾值的情況相比較,能夠提高切割點的檢測精度。其理由如下。在現(xiàn)有的檢測處理方法中,在切割點的檢測中使用幀內(nèi)的亮度值的變化,切割點檢測用的閾值是固定值。一般,難以預測接著當前鏡頭是否有鏡頭到來。在相似的鏡頭連續(xù)的情況下,例如,在同一個演播室內(nèi),在攝影機切換等情況下,即使是切割點,有時亮度值的變化也很小。另一方面,即使是同一個鏡頭,在有閃光或者人物的很大運動等的情況下,有時幀間的變化(亮度值的變化)很大。圖3是表示這種情況下的亮度值的變化的說明圖。因此,在現(xiàn)有的檢測處理方法中,如果設(shè)定大的閾值,則漏失變化小的切割點,如果設(shè)定小的閾值,則在變化大的鏡頭中有時錯誤地檢測出切割點。與此不同,在本實施形態(tài)1的切割點檢測部1中,除了單純的亮度值的差以外,還使用特征量來提高通用性。進而,在作為基于評價函數(shù)的評價結(jié)果的距離大的情況下作為切割點,而通過適應性地設(shè)定其閣值,如果是變化大的鏡頭,則閾值自動地增大,如果是變化小的鏡頭,則閾值自動地減小,從而能夠期待切割點檢測的大幅度精度提高和通用性的提高。另外,在本實施形態(tài)l中,在抽取特征量時,也可以不是從影像信號而是從壓縮了的圖像的編碼數(shù)據(jù)抽取特征量。另外,在計算幀間距離時,也不一定是鄰接的幀,也可以計算隔開兩個幀以上間隔的幀間的距離,謀求計算處理的高速化。在這樣隔開幀間隔進行距離的計算或者切割點的檢測時,也可以使用應用了時間壓縮的編碼影像中的幀內(nèi)編碼的幀。進而,在計算平均值以及分散值時,也可以對于接近當前幀的幀實施加權(quán)等處理,與鏡頭內(nèi)的變動狀況的時間變化相對應。鏡頭長度計算部2在切割點檢測部1中的切割點判定部16的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點檢測部1中的切割點判定部16的判定結(jié)果表示是切割點的含義的情況下,計算以該切割點的前一個切割點為起點的鏡頭的鏡頭長度(步驟ST8)。即,鏡頭長度計算部2由于能夠用第i個鏡頭的開始時刻與第(i+1)個鏡頭的開始時刻的差求出鏡頭的鏡頭長度,因此在切割點檢測部1中的切割點判定部16的判定結(jié)果表示是切割點的含義的情況下,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到重要鏡頭判定部4。另外,如果計算出鏡頭長度,則鏡頭長度計算部2把存儲在鏡頭開始點緩沖器3的存儲內(nèi)容更新為當前幀的時刻。重要鏡頭判定部4如果鏡頭長度計算部2計算出鏡頭長度,則對該鏡頭長度與預先設(shè)定的閾值A(chǔ)進行比較(步驟ST9)。而且,重要鏡頭判定部4在該鏡頭長度比預先設(shè)定的閾值A(chǔ)長的情況下,判定為以由切割點檢測部l檢測出的切割點的前一個切割點為起點的鏡頭是重要鏡頭,輸出其判定結(jié)果(步驟STIO)。這里,重要鏡頭判定部13判定為以前一個切割點為起點的鏡頭是重要鏡頭,而也可以判定為以前一個切割點為起點的鏡頭的下一個鏡頭是重要鏡頭,還可以判定為以前一個切割點為起點的鏡頭和下一個鏡頭這雙方是重要鏡頭。如從上述中明確的那祥,依據(jù)本實施形態(tài)l,設(shè)置了在切割點檢測部1中的切割點判定部16的判定結(jié)果表示是切割點的含義的情況下,計算以該切割點的前一個切割點為起點的鏡頭的鏡頭長度的鏡頭長度計算部2,把由該鏡頭長度計算部2計算出的鏡頭長度作為判別材料,判別以前一個切割點為起點的鏡頭是否是重要鏡頭,因此,例如能夠不必像多數(shù)的影像處理方法或者聲音處理方法那樣實施復雜的處理而提高計算負荷,起到用戶能夠容易地把握重要鏡頭的效果。在本實施形態(tài)l中,特別是在會話是主體內(nèi)容的情況下,以重要的講述或者臺詞部分中的鏡頭長度長為基礎(chǔ)。另外,在知道切割點的情況下,計算負荷非常小是其特征,即使在計算能力低的設(shè)備中也能夠進行重要鏡頭判定。另外,在求切割點時,可以不使用鄰接的幀而使用離開的幀來謀求處理的高速化。這種情況下,輸出的重要鏡頭的開始時刻從原來的重要鏡頭的開始時刻僅錯開微小的時間。實施形態(tài)2圖5是表示本發(fā)明實施形態(tài)2的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖l相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。時間間隔設(shè)定部21實施從由用戶設(shè)定的摘要視聽時間(用戶希望視聽摘要的時間)、影像內(nèi)容的時間分割數(shù)以及影像內(nèi)容長度設(shè)定內(nèi)容分割時間間隔(分割影像內(nèi)容的時間間隔)和鏡頭視聽時間(每一個鏡頭的^L聽時間)的處理。另外,時間間隔i殳定部21構(gòu)成時間間隔設(shè)定單元。最長鏡頭判定部22在鏡頭長度計算部2每次計算出鏡頭長度時,實施對由該鏡頭長度計算部2直到當前時刻為止計算出的鏡頭長度進行相互比較,判別鏡頭長度最長的鏡頭的處理。最長鏡頭長度緩沖器23是存儲由最長鏡頭判定部22判別了的最長鏡頭的鏡頭長度的存儲器。最長鏡頭開始點緩沖器24是存儲由最長鏡頭判定部22判別了的最長鏡頭的開始點的時刻(檢測出了最長鏡頭的時刻的幀的時刻)的存儲器。時間分割判定部25輸出在由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔中重要鏡頭的開始點的時刻。即,在當前幀的時刻是由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔的整數(shù)倍的情況下,實施把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出的處理。另外,由最長鏡頭判定部22、最長鏡頭長度緩沖器23、最長鏡頭開始點緩沖器24以及時間分割判定部25構(gòu)成最長鏡頭檢測單元。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部21根據(jù)這些輸入信息,設(shè)定所取出的重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔TSegment以及鏡頭視聽時間TPlay。<formula>formulaseeoriginaldocumentpage19</formula>在這樣設(shè)定了的情況下,用戶把n個鏡頭從開頭起各視聽TPlay秒鐘。例如,在影像內(nèi)容長度Tc。ntent是30分鐘(=1800秒),摘要視聽時間T叫est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔Tsegmew成為3分鐘(=180秒),鏡頭視聽時間Tp,ay成為0.5分鐘(=30秒)。另外,時間間隔設(shè)定部21也可以不是輸入數(shù)值信息而是輸入語句的信息,分析該語句,判別摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent。如果輸入影像信號,則切割點檢測部1與上述實施形態(tài)1相同,實施檢測其影像的切割點的處理。如果切割點檢測部1沒有檢測出切割點,則鏡頭長度計算部2不特別實施處理,而如果切割點檢測部l檢測出切割點,則與上述實施形態(tài)l相同,計算以該切割點的前一個切割點為起點的鏡頭的鏡頭長度。即,如果切割點檢測部1檢測出切割點,則鏡頭長度計算部2求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度,輸出到最長鏡頭判定部22。另外,鏡頭長度計算部2如果計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。最長鏡頭判定部22在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度進行相互比較,判別鏡頭長度最長的鏡頭。即,如果鏡頭長度計算部2計算出鏡頭長度,則最長鏡頭判定部22把由該鏡頭長度計算部2計算出的鏡頭長度與存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度進行比較,在由該鏡頭長度計算部2計算出的鏡頭長度比存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度長的情況下,判別為由鏡頭長度計算部2計算出了鏡頭長度的鏡頭是當前時刻下最長的鏡頭。最長鏡頭判定部22如果判別當前時刻中的最長的鏡頭,則把最長鏡頭長度緩沖器23的存儲內(nèi)容更新為由鏡頭長度計算部2計算出的鏡頭長度。另外,最長鏡頭判定部22把最長鏡頭開始點緩沖器24的存儲內(nèi)容更新成最長鏡頭的開始點的時刻(當前幀的時刻)。時間分割判定部25輸出在由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment中重要的鏡頭的開始點的時刻。即,時間分割判定部25在當前幀的時刻是由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment的整數(shù)倍的情況下,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出。這里表示了時間分割判定部25輸出最長鏡頭的開始點的時刻的情況,而也可以輸出最長鏡頭的下一個鏡頭的開始點的時刻,或者最長鏡頭和下一個鏡頭的開始點的時刻。但是,這種情況下,需要設(shè)置存儲最長鏡頭的下一個鏡頭的開始點時刻的緩沖器。如從上述所明確的那樣,依據(jù)本實施形態(tài)2,由于構(gòu)成為在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,檢測由時間間隔設(shè)定部21所設(shè)定的時間間隔中鏡頭長度最長的鏡頭、最長鏡頭的下一個鏡頭或者最長鏡頭和下一個鏡頭,因此例如,能夠不像多數(shù)的影像處理方法或者聲音處理方法等那樣實施復雜的處理而提高計算負荷,起到用戶能夠容易地把握重要鏡頭的效果。另外,如果把本實施形態(tài)2應用到錄像裝置或者再生裝置中,則由于知道重要鏡頭的開始時刻或者鏡頭再生的時間,因此能夠進行影像的自動編輯或者筒便的摘要再生視聽。另外,在求切割點時,也可以不使用鄰接的幀而使用離開的幀來謀求處理的高速化。這種情況下,輸出的重要鏡頭的開始時刻從原來的開始時刻僅錯開微小的時間。實施形態(tài)3圖6是表示本發(fā)明實施形態(tài)3的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖5相同的號碼表示相同或者相當?shù)牟糠郑虼耸÷哉f明。時間間隔設(shè)定部31實施從由用戶所設(shè)定的摘要視聽時間、影像內(nèi)容的時間分割數(shù)以及影像內(nèi)容長度,設(shè)定內(nèi)容分割時間間隔的初始值和鏡頭基準視聽時間(每一個鏡頭的視聽時間)的處理。鏡頭代表范圍初始設(shè)定部32實施從由時間間隔設(shè)定部31所設(shè)定的內(nèi)容分割時間間隔的初始值和影像內(nèi)容長度,設(shè)定鏡頭代表范圍(鏡頭代表范圍由鏡頭代表范圍開始點以及暫定鏡頭代表范圍結(jié)束點構(gòu)成)的初始值的處理。時間分割點緩沖器33是存儲由鏡頭代表范圍初始設(shè)定部32所設(shè)定的鏡頭代表范圍的初始值的存儲器。鏡頭代表范圍判定.再設(shè)定部34在當前幀的時刻超過鏡頭代表范圍的結(jié)束點的情況下,計算并輸出重要鏡頭再生時間的同時,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出。另外,鏡頭代表范圍判定,再設(shè)定部34生成鏡頭代表范圍的更新數(shù)據(jù),更新時間分割點緩沖器33的存儲內(nèi)容。另外,由時間間隔設(shè)定部31、鏡頭代表范圍初始設(shè)定部32、時間分割點緩沖器33以及鏡頭代表范圍判定'再設(shè)定部34構(gòu)成時間間隔設(shè)定單元。其次說明動作。如果輸入由用戶設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部31根據(jù)這些輸入信息,設(shè)定所取出的重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔的初始值Tseg薩to以及鏡頭基準視聽時間TPlay0。N=nshotT=T/nSegmentOContentT-T/nPlay0Dijest例如,在影像內(nèi)容長度Tc。n^t是30分鐘(=1800秒),摘要視聽時間T叫est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔的初始值Tseg咖nto成為3分鐘(=180秒),鏡頭基準視聽時間Twayo成為0.5分鐘(=30秒)。另外,時間間隔設(shè)定部31也可以不是輸入數(shù)值信息而是輸入語句的信息,分析該語句,判別摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度TContent。如果由時間間隔設(shè)定部31設(shè)定內(nèi)容分割時間間隔的初始值TSegmento,則鏡頭代表范圍初始設(shè)定部32從該內(nèi)容分割時間間隔的初始值Tsegn^t。和影像內(nèi)容長度Tc。ntent設(shè)定鏡頭代表范圍的初始值(鏡頭代表范圍的開始點Pstart、暫定鏡頭代表范圍的結(jié)束點PEnd—temp)。P=0StartP=T/N=TEruLtempContentshotSegmentO這里,圖7是表示在分割了影像內(nèi)容的各個分割范圍的每一個內(nèi)存在重要鏡頭的情況下,該鏡頭代表的范圍的說明圖。如果設(shè)定鏡頭代表范圍的初始值,則鏡頭代表范圍初始設(shè)定部32把該鏡頭代表范圍的初始值保存到時間分割點緩沖器33中。如果輸入影像信號,則切割點檢測部1與上述實施形態(tài)1相同,實施檢測其影像的切割點的處理。如果切割點檢測部1沒有檢測出切割點,則鏡頭長度計算部2不特別實施處理,而如果切割點檢測部l檢測出切割點,則與上述實施形態(tài)l相同,計算以該切割點的前一個切割點為起點的鏡頭的鏡頭長度。即,如果切割點檢測部1檢測出切割點,則鏡頭長度計算部2求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到最長鏡頭判定部22。另外,如果計算出鏡頭長度,則鏡頭長度計算部2把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。最長鏡頭判定部22與上述實施形態(tài)2相同,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,判別鏡頭長度最長的鏡頭。即,如果鏡頭長度計算部2計算出鏡頭長度,則最長鏡頭判定部22對由該鏡頭長度計算部2計算出的鏡頭長度與存儲在最長鏡頭長度援沖器23中的最長鏡頭的鏡頭長度進行比較,在由該鏡頭長度計算部2計算出的鏡頭長度比存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度長的情況下,判別為由鏡頭長度計算部2計算出了鏡頭長度的鏡頭在當前時刻是最長的鏡頭。如果最長鏡頭判定部22判別出當前時刻中的最長的鏡頭,則把最長鏡頭長度緩沖器23的存儲內(nèi)容更新成由鏡頭長度計算部2計算出的鏡頭長度。另外,最長鏡頭判定部22把最長鏡頭開始點緩沖器24的存儲內(nèi)容更新成最長鏡頭的開始點的時刻(當前幀的時刻)。鏡頭代表范圍判定'再設(shè)定部34在當前幀的時刻PN。w超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEnd—temp的情況下,如下述那樣,計算鏡頭代表范圍的結(jié)束點PEnd和重要鏡頭再生時間T^y,輸出該重要鏡頭再生時間TPlay。<formula>formulaseeoriginaldocumentpage23</formula>式中,Psh。t一Start是存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻。另外,鏡頭代表范圍判定.再設(shè)定部34在當前幀的時刻PN。W超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEndtemp的情況下,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻PSh。t_start作為在摘要再生中使用的重要鏡頭的開始時刻輸出的同時,更新存儲在時間分割點緩沖器33中的鏡頭代表范圍的開始點Pstart和暫定鏡頭代表范圍的結(jié)束點PEnd_temp。更新后的鏡頭代表范圍如下。<table>tableseeoriginaldocumentpage24</column></row><table>如從上述所明確的那樣,依據(jù)本實施形態(tài)3,由于構(gòu)成為根據(jù)由最長鏡頭判定部22判別了的最長鏡頭的開始時刻和鏡頭長度,更新鏡頭代表范圍,因此起到能夠使內(nèi)容的劃分點或者劃分了的內(nèi)容中的重要鏡頭的再生時間適應性變化的效果。另外,上述實施形態(tài)2的情況下,在時間上均勻地劃分內(nèi)容的情況下是有效的,在內(nèi)容的每個式樣中,最好分開使用上述實施形態(tài)2和實施形態(tài)3。實施形態(tài)4圖8是表示本發(fā)明實施形態(tài)4的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖2相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。距離判定部41在幀間距離計算部12每次計算出幀間距離時,對由該幀間距離計算部12直到當前時刻為止所計算出的幀間距離相互進行比較,實施判別最大幀間距離的處理。即,對由幀間距離計算部12計算出的幀間距離與存儲在最大距離緩沖器42中的最大幀間距離進行比較,如果由幀間距離計算部12計算出的幀間距離比最大的幀間距離大,則向時間判定部43輸出表示檢測出了最大幀間距離的含義的檢測信息的同時,把最大距離緩沖器42的存儲內(nèi)容更新成由幀間距離計算部12計算出的幀間距離。最大距離緩沖器42是存儲由距離判定部41判別了的最大幀間距離的存儲器。另外,由距離判定部41以及最大距離緩沖器42構(gòu)成最大距離檢測單元。時間判定部43如果從距離判定部41接收到最大幀間距離的檢測信息,則求出從存儲在最大距離幀時刻緩沖器44中的幀的時刻(從距離判定部41接收到前一次檢測信息的時刻的幀的時刻)到當前幀的時刻為止的時刻差,在該時刻差比預先設(shè)定的內(nèi)容時間分割間隔(分割影像內(nèi)容的時間間隔)大的情況下,把當前幀的時刻作為重要幀的開始時刻輸出的同時,實施把最大距離幀時刻緩沖器44的存儲內(nèi)容更新成當前幀的時刻的處理。最大距離幀時刻緩沖器44是存儲判別了最大距離的時刻的幀的時刻的存儲器。另外,由時間判定部43以及最大距離幀時刻緩沖器44構(gòu)成重要幀檢測單元。其次說明動作。如果輸入影像信號,則特征量抽取部11與上述實施形態(tài)1相同,從該影像信號抽取表示幀的特征的特征量。作為表示幀的特征的特征量,例如,除了與過去的幀的差分以外,還可以舉出顏色的直方圖、顏色的配置信息、結(jié)構(gòu)信息、運動信息等,既可以使用某一個特征量也可以使用多個特征量。如果特征量抽取部11抽取出當前幀的特征量,則幀間距離計算部12與上述實施形態(tài)1相同,從特征量緩沖器13讀出前一個幀的特征量(由特征量抽取部11前一次抽取出的幀的特征量)。而且,幀間距離計算部12使用預定的評價函數(shù)對當前幀的特征量與前一個幀的特征量進行比較,計算作為這些特征量之間的距離(非類似度)的幀間距離。另外,如果幀間距離計算部12計算出幀間距離,則把特征量緩沖器13的存儲內(nèi)容更新成當前幀的特征量。距離判定部41在幀間距離計算部12每次計算幀間距離時,對由該幀間距離計算部12直到當前時刻為止所計算出的幀間距離相互進行比較,判別最大的幀間距離。即,如果幀間距離計算部12計算出幀間距離,則距離判定部41把該幀間距離與存儲在最大距離緩沖器42中的最大的幀間距離進行比較,如果由幀間距離計算部12計算出的幀間距離比最大的幀間距離大,則向時間判定部43輸出表示檢測出了最大的幀間距離的含義的檢測信息。這時,距離判定部41把最大距離緩沖器42的存儲內(nèi)容更新成由幀間距離計算部12計算出的幀間距離。時間判定部43如果從距離判定部41接收到最大幀間距離的檢測信息,則求出從存儲在最大距離幀時刻緩沖器44中的幀的時刻(從距離判定部41接收到前一次檢測信息的時刻的幀的時刻)到當前幀的時刻為止的時刻差。而且,時間判定部43在該時刻差比預先設(shè)定的內(nèi)容時間分割間隔大的情況下,把當前幀的時刻作為重要幀的開始時刻輸出的同時,把最大距離幀時刻緩沖器44的存儲內(nèi)容更新成當前幀的時刻。如從上述所明確的那樣,依據(jù)本實施形態(tài)4,由于構(gòu)成為如果從距離判定部41接收到最大幀間距離的檢測信息,則求出從存儲在最大距離幀時刻緩沖器44中的幀的時刻到當前幀的時刻為止的時刻差,在該時刻差比預先設(shè)定的內(nèi)容時間分割間隔大的情況下,把當前幀的時刻作為重要幀的開始時刻輸出,因此在保持時間間隔的同時,能夠僅用幀間距離和時間間隔找出內(nèi)容的大的變化點(參照圖9)。由此,起到以非常小的計算負荷就能夠進行影像的自動編輯或者簡便的摘要再生的視聽的效果。另夕卜,在求幀間距離時,也可以不使用鄰接的幀而使用離開的幀來謀求處理的高速化。實施形態(tài)5圖10是表示本發(fā)明實施形態(tài)5的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖5相同的號碼表示相同或者相當?shù)牟糠郑虼耸÷哉f明。距離判定部51在由切割點檢測部1檢測出了切割點的情況下,在幀間距離計算部12每次計算幀間距離時,對由該幀間距離計算部12直到當前時刻為止所計算出的幀間距離相互進行比較,實施判別最大的幀間距離的處理。即,對由幀間距離計算部12計算出的幀間距離與存儲在最大距離緩沖器42中的最大的幀間距離進行比較,如果由幀間距離計算部12計算出的幀間距離比最大的幀間距離大,則把最大距離切割點開始時刻緩沖器52的存儲內(nèi)容更新成當前幀的時刻的同時,把最大距離緩沖器42的存儲內(nèi)容更新成由幀間距離計算部12計算出的幀間距離。最大距離切割點開始時刻緩沖器52是存儲最大幀間距離的切割點的開始時刻的存儲器。另外,由距離判定部51、最大距離緩沖器42以及最大距離切割點開始時刻緩沖期52構(gòu)成最大距離檢測單元。時間分割判定部53輸出由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔中的重要鏡頭的開始點的時刻。即,在當前幀的時刻是由時間間隔設(shè)定部21設(shè)定的內(nèi)容分割時間間隔的整數(shù)倍的情況下,實施把存儲在最大距離切割點開始時刻緩沖器52中的最大的幀間距離的切割點的開始時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出的處理。另外,時間分割判定部53構(gòu)成重要鏡頭檢測單元。其次說明動作。如果輸入由用戶設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部21與上述實施形態(tài)2相同,根據(jù)這些輸入信息設(shè)定重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔TSegment以及鏡頭視聽時間TPlay。<formula>formulaseeoriginaldocumentpage27</formula>如果輸入影像信號,則切割點檢測部1與上迷實施形態(tài)1相同,實施檢測其影像的切割點的處理。另外,如果特征量抽取部ll抽取出當前幀的特征量,則切割點檢測部1的幀間距離計算部12與上述實施形態(tài)1相同,計算幀間距離(參照圖2)。如果切割點檢測部1檢測出切割點,則距離判定部51在幀間距離計算部12每次計算出幀間距離時,對由該幀間距離計算部12直到當前時刻為止計算出的幀間距離相互進行比較,判別最大的幀間距離。即,距離判定部51當切割點檢測部l檢測出了切割點時,如果幀間距離計算部12計算出幀間距離,則把該幀間距離與在最大距離緩沖器42中存儲的最大的幀間距離進行比較,如果由幀間距離計算部12計算出的幀間距離比最大的幀間距離大,則把最大距離切割點開始時刻緩沖器52的存儲內(nèi)容更新成當前幀的時刻的同時,實施把最大距離緩沖器42的存儲內(nèi)容更新成由幀間距離計算部12計算出的幀間距離的處理。時間分割判定部53輸出由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment中的重要鏡頭的開始點的時刻。即,時間分割判定部53在當前幀的時刻是由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment的整數(shù)倍的情況下,實施把存儲在最大距離切割點開始時刻緩沖器52中的最大的幀間距離的切割點的開始時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出的處理。如從以上所明確的那樣,依據(jù)本實施形態(tài)5,由于構(gòu)成為設(shè)置了在由切割點檢測部1檢測出了切割點的情況下,在幀間距離計算部l2每次計算出幀間距離時,對由該幀間距離計算部12直到當前時刻為止所計算出的幀間距離相互進行比較,檢測出最大的幀間距離的距離判定部51,在由時間間隔設(shè)定部21所設(shè)定的時間間隔中,把由距離判定部51檢測出了最大的幀間距離的幀的時刻作為重要鏡頭的開始時刻輸出,因此能夠在時間上均勻地分割影像內(nèi)容,在各個分割了的區(qū)間中能夠把變化大的切割點檢測為各個時間間隔中的代表性的場景。由此,起到能夠以非常小的計算負荷,進行影像的自動編輯或者簡便的摘要再生的視聽的效果。另外,在求幀間距離時,也可以不使用鄰接的幀而使用離開了的幀來謀求處理的高速化。實施形態(tài)6圖11是表示本發(fā)明實施形態(tài)6的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖6以及圖10相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。鏡頭代表范圍判定.再設(shè)定部54在當前幀的時刻超過鏡頭代表范圍的結(jié)束點的情況下,計算并輸出重要鏡頭再生時間,同時,把存儲在最大距離切割點開始時刻緩沖器52中的最大的幀間距離的切割點的開始時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出。另外,鏡頭代表范圍判定'再設(shè)定部54生成鏡頭代表范圍的更新數(shù)據(jù),更新時間分割點緩沖器33的存儲內(nèi)容。另外,由時間間隔設(shè)定部31、鏡頭代表范圍初始設(shè)定部32、時間分割點緩沖器33以及鏡頭代表范圍判定.再設(shè)定部54構(gòu)成時間間隔設(shè)定單元。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)ii以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部31與上述實施形態(tài)3相同,根據(jù)這些輸入信息設(shè)定重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔的初始值TSegmento以及鏡頭基準視聽時間TPlay0。N=n<formula>formulaseeoriginaldocumentpage29</formula>如果時間間隔設(shè)定部31設(shè)定了內(nèi)容分割時間間隔的初始值TSegment。,則鏡頭代表范圍初始設(shè)定部32與上述實施形態(tài)3相同,從該內(nèi)容分割時間間隔的初始值TSegment0和影像內(nèi)容長度Tc。ntent設(shè)定鏡頭代表范圍的初始值(鏡頭代表范圍的開始點Pstart、暫定鏡頭代表范圍的結(jié)束點PEndtempZoP=0<formula>formulaseeoriginaldocumentpage30</formula>如果鏡頭代表范圍初始設(shè)定部32設(shè)定鏡頭代表范圍的初始值,則把該鏡頭代表范圍的初始值保存到時間分割點緩沖器33中。如果輸入影像信號,則與上述實施形態(tài)1相同,切割點檢測部1實施檢測其影像的切割點的處理。另外,如果特征量抽取部11抽取出當前幀的特征量,則切割點檢測部1的幀間距離計算部12與上述實施形態(tài)1相同,計算幀間距離(參照圖2)。在由切割點檢測部1檢測出了切割點的情況下,距離判定部51與上述實施形態(tài)5相同,如果幀間距離計算部12計算出幀間距離,則實施對該幀間距離與存儲在最大距離緩沖器42中的最大的幀間距離進行比較,如果由幀間距離計算部12計算出的幀間距離比最大的幀間距離大,則把最大距離切割點開始時刻緩沖器52的存儲內(nèi)容更新成當前幀的時刻,同時,把最大距離緩沖器42的存儲內(nèi)容更新成由幀間距離計算部12計算出的幀間距離的處理。鏡頭代表范圍判定.再設(shè)定部54在當前幀的時刻PN冊超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEncUemp的情況下,如下述那樣,計算鏡頭代表范圍的結(jié)束點PEnd和重要鏡頭再生時間Tphy,輸出該重要鏡頭再生時間TPlay。p=p+P—pEndNowShot_StartStartT=(P—P)*T/TPlayEndStartPlayOSegmentO式中,Psh。t,art是存儲在最大距離切割點開始時刻緩沖器52中的最大的幀間距離的切割點的開始時刻。另外,鏡頭代表范圍判定.再設(shè)定部54在當前幀的時刻PN。W超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEd—temp的情況下,把存儲在最大距離切割點開始時刻緩沖器52中的最大幀間距離的切割點的開始時刻PSh。t_Start作為在摘要再生中使用的重要鏡頭的開始時刻輸出的同時,更新存儲在時間分割點緩沖器33中的鏡頭代表范圍的開始點Pstart和暫定鏡頭代表范圍的結(jié)束點PEnd—temp。更新后的鏡頭代表范圍如下。PStart==PEndPEnd_temp=PEnd+TContent/NShot=PEnd+TSegment!如從上述所明確的那樣,依據(jù)本實施形態(tài)6,由于構(gòu)成為根據(jù)由距離判定部51檢測出了最大的幀間距離的幀的時刻更新鏡頭代表范圍,因此起到能夠使內(nèi)容的劃分點或者劃分了的內(nèi)容中的重要鏡頭的再生時間適應性地發(fā)生變化的效果。另外,在上述實施形態(tài)5的情況下,在時間上均勻地劃分內(nèi)容的情況下是有效的,在內(nèi)容的每個式樣中,最好分開使用上述實施形態(tài)5和實施形態(tài)6。實施形態(tài)7圖12是表示本發(fā)明實施形態(tài)7的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖1相同的號碼表示相同或者相當?shù)牟糠忠虼耸÷哉f明。距離平均計算部61在切割點檢測部1的幀間距離計算部12每次計算出幀間距離時,實施計算由該幀間距離計算部12直到當前時刻為止所計算出的幀間距離的平均值的處理。另外,距離平均計算部61構(gòu)成平均值計算單元。關(guān)鍵幀候選判定部62在由幀間距離計算部12計算出的幀間距離與由平均值計算部61計算出的平均值的差分值比存儲在最小值緩沖器63中的最小值小的情況下,把表示該差分值小于最小值的含義的最小值檢測信號輸出到略圖候選圖像緩沖器64的同時,把最小值緩沖器63的存儲內(nèi)容更新成該差分值。最小值緩沖器63是存儲最小值的存儲器,略圖候選圖像緩沖器64是如果從關(guān)鍵幀候選判定部62接收到最小值檢測信號,則把影像信號的影像存儲為略圖候選圖像的存儲器。另外,由關(guān)鍵幀候選判定部62、最小值緩沖器63以及略圖候選圖像緩沖器64構(gòu)成略圖候選圖像存儲單元。如果切割點檢測部1檢測出切割點,則略圖生成部65實施從存儲在略圖候選圖像緩沖器64中的略圖候選圖像生成略圖的處理。另外略圖生成部65構(gòu)成略圖生成單元。其次說明動作。如果輸入影像信號,則切割點檢測部1與上述實施形態(tài)1相同,實施檢測其影像的切割點的處理。另外,如果特征量抽取部11抽取出當前幀的特征量,則切割點檢測部1的幀間距離計算部12與上述實施形態(tài)1相同,計算幀間距離(參照圖2)。距離平均計算部61在切割點檢測部1判定為當前的幀不是切割點的情況下,在幀間距離計算部12每次計算幀間距離時,計算由該幀間距離計算部12直到當前時刻為止所計算出的幀間距離的平均值。關(guān)鍵幀候選判定部62在切割點檢測部1判定為當前的幀不是切割點的情況下,如果距離平均計算部61計算出幀間距離的平均值,則求出由幀間距離計算部12計算出的幀間距離與由平均值計算部61計算出的平均值的差分值,對該差分值與存儲在最小值緩沖器63中的最小值進行比較。關(guān)鍵幀候選判定部62在該差分值比存儲在最小值緩沖器63中的最小值小的情況下把表示該差分值比最小值小的含義的最小值檢測信號輸出到略圖候選圖像緩沖器64的同時,把最小值緩沖器63的存儲內(nèi)容更新為該差分值。如果略圖候選圖像緩沖器64從關(guān)鍵幀候選判定部62接收到最小值檢測信號,則把影像信號的影像存儲為略圖候選圖像。如果切割點檢測部l檢測出切割點,則略圖生成部65讀出存儲在略圖候選圖像緩沖器64中的略圖候選圖像,從該略圖候選圖像生成并輸出略圖。另夕卜,在求幀間距離時,也可以不使用鄰接的幀而使用離開的幀來謀求處理的高速化。一般,在影像內(nèi)容中的同一個鏡頭中,也根據(jù)攝影機的搖攝(panning)、俯仰(tilting)、變焦或者人物的運動,在圖像中看到差異。另外,搖攝、俯仰、變焦或者人物的運動安定下來時,是該鏡頭中的重要圖像的情況很多。這時,幀間距離Distn減小,如果其持續(xù)較長的時間,則幀間距離的平均值avgi(DistJ減小。在本實施形態(tài)7中,把IDistn-avgi(Distn)I成為最小的n的圖像作為第i個鏡頭中的代表圖像。由此,能夠有效地檢測代表各鏡頭的圖像,用戶能夠更簡單地從影像內(nèi)容中再生希望視聽的場景。實施形態(tài)8圖13是表示本發(fā)明實施形態(tài)8的影像摘要裝置的結(jié)構(gòu)圖,圖中由于與圖l相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。重要鏡頭長度緩沖器71是如果重要鏡頭判定部4檢測出重要鏡頭,則存儲由鏡頭長度計算部2計算出的重要鏡頭的鏡頭長度的存儲器。此外,由重要鏡頭長度緩沖器71構(gòu)成重要鏡頭長度存儲單元。重要鏡頭再生時間計算部72從存儲在重要鏡頭長度緩沖器71中的重要鏡頭的鏡頭長度和預先設(shè)定的摘要視聽時間實施計算重要鏡頭的再生時間的處理。另外,重要鏡頭再生時間計算部72構(gòu)成再生時間計算單元。其次說明動作。如果鏡頭長度計算部2計算出鏡頭長度,則重要鏡頭判定部4與上述實施形態(tài)1相同,對該鏡頭長度與預先設(shè)定的閾值A(chǔ)進行比較,判定以由切割點檢測部1檢測出的切割點的前一個切割點為起點的鏡頭是否是重要鏡頭,輸出其判定結(jié)果。這里,表示了重要鏡頭判定部4與上述實施形態(tài)1相同,檢測重要鏡頭的情況,而重要鏡頭的檢測方法不限于上述實施形態(tài)1中記載的方法,例如也可以使用上述實施形態(tài)2~6中記載的方法。重要鏡頭再生時間計算部72在輸入由用戶所設(shè)定的摘要視聽時間PT時,如滿足下述式子那樣,從該摘要視聽時間PT和存儲在重要鏡頭長度緩沖器71中的第i個重要鏡頭的鏡頭長度SLi計算第i個重要鏡頭的再生時間TSi。[數(shù)l]<formula>formulaseeoriginaldocumentpage34</formula>式中,m是重要鏡頭的個數(shù)。如在上述中所明確的那樣,依據(jù)本實施形態(tài)8,由于構(gòu)成為從存儲在重要鏡頭長度緩沖器71中的重要鏡頭的鏡頭長度和預先設(shè)定的摘要視聽時間計算重要鏡頭的再生時間,因此起到能夠以與各鏡頭的長度相對應的權(quán)重設(shè)定摘要再生時的各重要鏡頭的視聽時間的效果。實施形態(tài)9圖14是表示本發(fā)明實施形態(tài)9的影像摘要裝置的結(jié)構(gòu)圖,圖中由于與圖1相同的號碼表示相同或者相當?shù)牟糠忠虼耸÷哉f明。重要鏡頭判定部81從存儲在鏡頭開始點緩沖器3中的切割點的檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,實施從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭的處理。另外,重要鏡頭判定部81構(gòu)成重要鏡頭判定單元。其次說明動作。如果輸入影像信號,則與上述實施形態(tài)l相同,切割點檢測部l實施檢測其影4象的切割點的處理。如果切割點檢測部1檢測出影像的切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則重要鏡頭判定部81從鏡頭開始點緩沖器3取得切割點的檢測時刻,從該檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度。而且,重要鏡頭判定部81與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。具體如下。重要鏡頭判定部81例如在影像信號中有m個鏡頭的情況下,使用m個鏡頭中的第i個鏡頭的開始點的時刻ST;(第i個切割點的檢測時刻)和第i+l個鏡頭的開始點的時刻STi+1,求出第i個鏡頭的鏡頭長度SLi。SL=ST_STii+li重要鏡頭判定部81如上迷那樣,如果求出包含在影像信號中的m個鏡頭的鏡頭長度SLj,則按照鏡頭長度SLi變短的順序排序(sort)m個鏡頭。如果設(shè)排序后的鏡頭長度為SSL;,由于按照變短的順序進行排序,因此成為SSLgSSLi+1。接著,重要鏡頭判定部81在排序后的鏡頭長度SSLj上乘以系數(shù)a,計算各乘法結(jié)果aSSLj的總和。其中,系數(shù)a的值域是0<a51。重要鏡頭判定部81對各乘法結(jié)果aSSLi的總和與摘要視聽時間TDijest進行比較,求出滿足下述不等式的最大的k。[數(shù)2]如果求出滿足上述不等式的最大的k,則重要鏡頭判定部81把這時的鏡頭長度SSLk設(shè)定為在判別重要鏡頭時使用的鏡頭長度的閾值SLTh。如果重要鏡頭判定部81設(shè)定了鏡頭長度的閾值SLTh,則對包含在影像信號中的m個鏡頭的鏡頭長度SLi與閾值SLn進行比較,認定為滿足SLTh〈SLj的鏡頭是重要鏡頭,把該重要鏡頭決定為再生對象的鏡頭。這時,使再生對象的鏡頭的再生時間為aSLi。由此,摘要再生的時間成為小于等于摘要視聽時間TDijest。如從上述所明確的那樣,依據(jù)本實施形態(tài)9,由于構(gòu)成為從存儲在鏡頭開始點緩沖器3中的切割點的檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭,因此起到用戶能夠僅視聽重要鏡頭的效果。另外,如果減小系數(shù)a的值,則再生對象的鏡頭的數(shù)量增加,每一個鏡頭的再生時間縮短。反之,如果加大系數(shù)a的值,則再生對象的鏡頭的數(shù)量減少,增加每一個鏡頭的再生時間。因此,系數(shù)a的值最好根據(jù)內(nèi)容的式樣或者特征、用戶的希望分開使用。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)IO圖15是表示本發(fā)明實施形態(tài)10的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖1以及圖14相同的號碼表示相同或者相當?shù)牟糠郑虼耸÷哉f明。時間間隔設(shè)定部91從影像內(nèi)容長度、由用戶設(shè)定的所希望的摘要視聽時間、由用戶設(shè)定或者自動設(shè)定的時間分割數(shù)(時間上分割內(nèi)容的數(shù)量),計算內(nèi)容分割時間間隔(成為時間上分割內(nèi)容的基準的時間)、基準分割摘要視聽時間(成為對所分割的時間進行摘要視聽的基準的時間)。另外,時間間隔設(shè)定部91構(gòu)成時間間隔設(shè)定單元。重要鏡頭判定部81與圖14的重要鏡頭判定部81相同,從存儲在鏡頭開始點緩沖器3中的切割點的檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭,而圖15的重要鏡頭判定部81根據(jù)在由時間間隔設(shè)定部91所設(shè)定的時間間隔中,存儲在鏡頭開始點緩沖器3中的切割點的檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度。時間分割點緩沖器92是存儲分割了內(nèi)容的時刻的存儲器。其次說明動作。時間間隔設(shè)定部91在輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度TContent時,根據(jù)這些輸入信息,設(shè)定內(nèi)容分割時間間隔TSegment以及基準分割摘要視聽時間<formula>formulaseeoriginaldocumentpage37</formula>例如,在影像內(nèi)容長度Tc。ntent是30分鐘(-1800秒),摘要視聽時間T叫w是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(-180秒),基準分割摘要視聽時間Ts成為0.5分鐘(=30秒)。如果輸入影像信號,則與上述實施形態(tài)l相同,切割點檢測部l實施檢測其影像的切割點的處理。切割點檢測部1如果檢測出影像的切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3的同時,把切割點的判定結(jié)果輸出到重要鏡頭判定部81。重要鏡頭判定部81如果從切割點檢測部1接收到切割點的判定結(jié)果,則決定重要鏡頭的開始時刻以及重要鏡頭的再生時間。具體如下。首先,重要鏡頭判定部81參照當前幀時刻tn。w和存儲在時間分割點緩沖器92中的前一次的分割時間幀時刻TPre。重要鏡頭判定部81如下述那樣,在當前的幀時刻Tn體與前一次的分割時間幀時刻TPre的差超過內(nèi)容分割時間間隔TSegment的情況下,參照從切割點檢測部1輸出的切割點判定結(jié)果。<formula>formulaseeoriginaldocumentpage37</formula>重要鏡頭判定部81在切割點的判定結(jié)果表示是切割點的含義的情況下,把該切割點作為影像內(nèi)容的分割點,計算分割成m個的影像內(nèi)容的第i個分割摘要視聽時間TSDijest,i。[數(shù)3]<formula>formulaseeoriginaldocumentpage37</formula>重要鏡頭判定部81由于在知道了第i+l個分割點的時刻,知道全部的第i個分割區(qū)間的鏡頭開始點的時刻及其個數(shù),因此設(shè)在該第i個區(qū)間中有n個鏡頭。使用該n個鏡頭中第j個鏡頭的開始點的時刻STYj和第j+l個鏡頭的開始點的時刻STYj+1,求第j個鏡頭的鏡頭長度SLi,j。<formula>formulaseeoriginaldocumentpage38</formula>如果重要鏡頭判定部81如上述那樣求出分割區(qū)間中的影像中的n個鏡頭的鏡頭長度SUj,則按照鏡頭長度SUj變短的順序排序n個鏡頭。如果設(shè)排序后的鏡頭長度為SSUj,則由于按照變短的順序進行排序,因此成為SSLi,^SSLi,j+1。接著,重要鏡頭判定部81在排序后的鏡頭長度SSUj上乘以系數(shù)a,計算各乘法結(jié)果aSSLi,j的總和。式中,系數(shù)a的值域是0〈a51。重要鏡頭判定部81把各乘法結(jié)果aSSUj的總和與分割摘要視聽時間TSDijest,i進行比較,求滿足下述不等式的最大的k。[數(shù)4]>。如果求出滿足上述不等式的最大的k,則重要鏡頭判定部81把這時的鏡頭長度SSUk設(shè)定為在第i個區(qū)間中,在判別重要鏡頭時使用的鏡頭長度的閾值SLTh,i。如果設(shè)定了鏡頭長度的閾值SLTh,i,則重要鏡頭判定部81在第i個區(qū)間中,對包含在影像信號中的n個鏡頭的鏡頭長度SUj與閾值SLTh,i進行比較,認定滿足SLn,i〈SLi,j的鏡頭是重要鏡頭,把該重要鏡頭決定為再生對象的鏡頭。這時,設(shè)再生對象的鏡頭的再生時間為aSUj。由此分割了的影像中的摘要再生的時間成為小于等于TSDijest,"另夕卜,如果減小系數(shù)a的值,則成為再生對象的鏡頭的數(shù)量增加,每一個鏡頭的再生時間縮短。反之,如果加大系數(shù)a的值,則再生對象的鏡頭的數(shù)量減少,增加每一個鏡頭的再生時間。在本實施形態(tài)10中,還能夠根據(jù)分割區(qū)間改變系數(shù)a的值。例如,在節(jié)目前半部分的新聞內(nèi)容中,能夠使用在節(jié)目前半部分的頭條新聞中加大系數(shù)a,加長視聽認為最重要的部分,在后半部分的短新聞的連續(xù)部分中,減小系數(shù)a,對概要進行視聽等使用方法。在上述實施形態(tài)9的情況下,當內(nèi)容非常長時,內(nèi)容整體的鏡頭長度排序的計算處理量有時非常龐大,而在本實施形態(tài)10中,由于只要在第i個區(qū)間中計算鏡頭長度排序即可,因此即使在內(nèi)容非常長的情況下,也不會導致計算處理量的龐大化,用戶能夠僅對重要鏡頭進行視聽。另外,作為鏡頭長度或者鏡頭開始點等時間信息,還能夠使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等的任一個。實施形態(tài)11圖16是表示本發(fā)明實施形態(tài)11的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖l相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。鏡頭統(tǒng)計處理部101實施從存儲在鏡頭開始點緩沖器3中的時刻計算以各切割點為起點的鏡頭的鏡頭長度,求出與該鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù),與所希望的摘要視聽時間相匹配地,從多個鏡頭中根據(jù)上述分布函數(shù)決定再生對象的鏡頭的處理。另外,鏡頭統(tǒng)計處理部101構(gòu)成重要鏡頭判定單元。其次說明動作。如果輸入影4象信號,則切割點檢測部1與上述實施形態(tài)1相同,實施檢測其影像的切割點的處理。如果切割點檢測部1檢測出影像的切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則鏡頭統(tǒng)計處理部101從鏡頭開始點緩沖器3取得切割點的檢測時刻,從該檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,求出與該鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù)。而且,鏡頭統(tǒng)計處理部101與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中根據(jù)上述分布函數(shù)決定再生對象的鏡頭(重要鏡頭),來決定重要鏡頭的開始點和再生時間。具體如下。鏡頭統(tǒng)計處理部101例如在影像信號中有m個鏡頭的情況下,使用m個鏡頭中的第i個鏡頭的開始點的時刻STi和第i+l個鏡頭的開始點的時刻STw,求第i個鏡頭的鏡頭長度SLi。<formula>formulaseeoriginaldocumentpage40</formula>假定如果鏡頭統(tǒng)計處理部101如上述那樣求出包含在影像信號中的m個鏡頭的鏡頭長度SLi,則鏡頭長度SLi是SLi〉0,鏡頭長度SLi遵從對數(shù)正態(tài)分布。這時,鏡頭長度SLi為x的概率p(x),即,分布概率p(x)如下。式中,n是SLi的平均值,c^是SLi的分散值。圖17是表示鏡頭長度的對數(shù)正態(tài)分布的說明圖。能夠從鏡頭長度SLi容易地計算出上述的平均值ji和分散值o2。由于影像內(nèi)容長度是Tc。^M,因此分布概率p(x)能夠如下式那樣表示。<formula>formulaseeoriginaldocumentpage40</formula>另外,由于影像中的鏡頭數(shù)量是m個,因此在影像中,長度為x的鏡頭的個數(shù)成為mxp(x)。從而,該概率分布p(x)與影像內(nèi)容長度Tc。ntent的關(guān)系用下式表示。[數(shù)7]<formula>formulaseeoriginaldocumentpage40</formula>圖18是表示鏡頭長度與影像內(nèi)容長度Tc。ntent的關(guān)系的說明圖。由此,作為0<化1,能夠在計算機上求出滿足下述不等式的最小的xo。<formula>formulaseeoriginaldocumentpage41</formula>鏡頭統(tǒng)計處理部101如果求出滿足上述不等式的最小的x。,則把該xo設(shè)定為在判別重要鏡頭時使用的鏡頭長度的閾值SLTh。鏡頭統(tǒng)計處理部101如果設(shè)定了鏡頭長度的閾值SLTh,則對包含在影像信號中的m個鏡頭的鏡頭長度SLi與閾值SLTh進行比較,認定為滿足SLTh〈SLi的鏡頭是重要鏡頭,把該重要鏡頭決定為再生對象的鏡頭。這時,設(shè)再生對象的鏡頭的再生時間為aSLi。由此,摘要再生的時間大致成為摘要視聽時間TDijest。其中,在假定為實際鏡頭長度的分布的概率分布p(x)的差大的情況下也可以進行修正。在本實施形態(tài)ll中,在影像內(nèi)容結(jié)束以后計算在統(tǒng)計處理中使用的平均值H和分散值^,而例如關(guān)于直到第i個為止的平均值A(chǔ),也可以使用以下的式子在每次檢測出切割點時,順序計算并更新。<formula>formulaseeoriginaldocumentpage41</formula>同樣,關(guān)于分散值o2,也可以順序進行類似的計算并更新。另外,可以進行任意的近似計算。另外,本實施形態(tài)ll中,在分布函數(shù)中使用對數(shù)正態(tài)分布,而例如也可以使用正態(tài)分布等其它的分布函數(shù)。另外,如果減小系數(shù)a的值,則再生對象的鏡頭數(shù)增加,每一個鏡頭的再生時間縮短。反之,如果加大系數(shù)a的值,則再生對象的鏡頭數(shù)減少,增加每一個鏡頭的再生時間。因此,系數(shù)a的值最好根據(jù)內(nèi)容的式樣或者特征、用戶的希望分開使用。通過使用該實施形態(tài)11,能夠根據(jù)所利用的計算機的能力改變統(tǒng)計處理的精度,即使在便攜設(shè)備等中,用戶也能夠僅對重要鏡頭進行視聽。另外,作為鏡頭長度或者鏡頭開始點等時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)12圖19是表示本發(fā)明實施形態(tài)12的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖15以及圖16相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。時間間隔設(shè)定部91在輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent時,根據(jù)這些輸入信息,設(shè)定內(nèi)容分割時間間隔TSegment以及基準分割摘要視聽時間<formula>formulaseeoriginaldocumentpage42</formula>例如,在影像內(nèi)容長度Tc。ntent是30分鐘(=1800秒),摘要視聽時間T岡est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(-180秒),基準分割摘要視聽時間Ts一mjest成為0.5分鐘(=30秒)。如果輸入影像信號,則切割點檢測部1與上述實施形態(tài)1相同,實施檢測其影像的切割點的處理。如果切割點檢測部1檢測出影像的切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3的同時,把切割點的判定結(jié)果輸出到鏡頭統(tǒng)計處理部101。鏡頭統(tǒng)計處理部101如果從切割點檢測部l接收到切割點的判定結(jié)果,則決定重要鏡頭的開始時刻以及重要鏡頭的再生時間。具體如下。首先,鏡頭統(tǒng)計處理部101參照當前的幀時刻TN柳和存儲在時間分割點緩沖器92中的前一次的分割時間幀時刻TPre。鏡頭統(tǒng)計處理部101如下述那樣,在當前的幀時刻Tn轉(zhuǎn)與前一次的分割時間幀時刻TPre的差超過內(nèi)容分割時間間隔TSegment的情況下,參照從切割點檢測部1輸出的切割點的判定結(jié)果。丁ST—TSegmentN。wPre鏡頭統(tǒng)計處理部101在切割點的判定結(jié)果表示是切割點的含義的情況下,把該切割點作為影像內(nèi)容的分割點,計算分割為m個的影像內(nèi)容的第i個分割摘要視聽時間TsDijest,i。另外,計算第i個區(qū)間的長度TSegment,i。[數(shù)9]<formula>formulaseeoriginaldocumentpage43</formula>鏡頭統(tǒng)計處理部101由于在知道了第i+l個分割點的時刻,知道全部的第i個分割區(qū)間的鏡頭開始點的時刻及其個數(shù),因此設(shè)在該第i個區(qū)間中有n個鏡頭。使用該n個鏡頭中第j個鏡頭的開始點的時刻STYj和第j+l個鏡頭的開始點的時刻STi,j+1,求第j個鏡頭的鏡頭長度SUj。SL=ST—ST假定如果鏡頭統(tǒng)計處理部101如上述那樣求出包含在影像信號中的n個鏡頭的鏡頭長度SLi,則與上述實施形態(tài)ll相同,鏡頭長度SLi是SLi〉0,鏡頭長度SLi遵從對數(shù)正態(tài)分布。這時,鏡頭長度SLi為x的概率p(x),即,分布概率p(x)如下o<formula>formulaseeoriginaldocumentpage43</formula>式中,n是SLi的平均值,^是SLi的分散值。由于該第i個區(qū)間的長度是Tsegment,i,因此分布概率P(X)能夠如下式那樣表示。[數(shù)ll]<formula>formulaseeoriginaldocumentpage43</formula>另外,由于影像中的鏡頭數(shù)量是n個,因此在影像中,長度為x的鏡頭的個數(shù)成為nxp(x)。從而,該概率分布p(x)與影像內(nèi)容長度Tc。ntent的關(guān)系用下式表示。[數(shù)12]<formula>formulaseeoriginaldocumentpage43</formula><formula>formulaseeoriginaldocumentpage44</formula>由此,作為0<aSl,能夠在計算機上求出滿足下述不等式的最小的x0。<formula>formulaseeoriginaldocumentpage44</formula>鏡頭統(tǒng)計處理部101如果求出滿足上述不等式的最小的Xc,則把該Xo設(shè)定為在判別重要鏡頭時使用的鏡頭長度的閾值SLTh,i。鏡頭統(tǒng)計處理部101如果設(shè)定了鏡頭長度的閾值SLTh,i,則對包含在影像信號中的n個鏡頭的鏡頭長度SUj與閾值SLTh,i進行比較,認定為滿足SLTh,,SUj的鏡頭是重要鏡頭,把該重要鏡頭決定為再生對象的鏡頭。這時,設(shè)再生對象的鏡頭的再生時間為aSUi。由此,摘要再生的時間大致成為分割摘要視聽時間Ts—Dijest,"其中,在假定為實際鏡頭長度的分布的概率分布p(x)的差大的情況下也可以進行修正。在本實施形態(tài)12中,在影像內(nèi)容結(jié)束以后計算在統(tǒng)計處理中使用的平均值ji和分散值o2,而例如關(guān)于第i個區(qū)間中的直到第j個為止的平均值Hi,j,也可以使用以下的式子在每次檢測出切割點時,順序計算并更新。<formula>formulaseeoriginaldocumentpage44</formula>""=(SLu+(j—""J力同樣,關(guān)于分散值o2,也可以順序進行類似的計算并更新。另外,可以進行任意的近似計算。另外,本實施形態(tài)12中,在分布函數(shù)中使用對數(shù)正態(tài)分布,而例如也可以使用正態(tài)分布等其它的分布函數(shù)。另外,如果減小系數(shù)a的值,則再生對象鏡頭數(shù)增加,每一個鏡頭的再生時間縮短。反之,如果加大系數(shù)a的值,則再生對象的鏡頭數(shù)減少,增加每一個鏡頭的再生時間。在本實施形態(tài)12中,還能夠根據(jù)分割區(qū)間改變系數(shù)a的值。例如,在節(jié)目前半部分的新聞內(nèi)容中,能夠使用在節(jié)目前半部分的頭條新聞中加大系數(shù)a,加長視聽認為最重要的部分,在后半部分的短新聞的連續(xù)部分中,減小系數(shù)a,對概要進行視聽等使用方法。在本實施形態(tài)12中,即使在用便攜設(shè)備等計算處理量小的計算機處理非常長的內(nèi)容的情況下,通過調(diào)整分割處理或者統(tǒng)計處理的精度,用戶也能夠僅對重要鏡頭進行視聽。另外,作為鏡頭長度或者鏡頭開始點等時間信息,還能夠使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)13圖20是表示本發(fā)明實施形態(tài)13的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖l相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。無聲判定部m實施判定影像中的聲音信號是否為無聲,檢測影像中的聲音的無聲點的處理。另外,無聲判定部lll構(gòu)成無聲點檢測單元。其次說明動作。無聲判定部111判定影像中的聲音信號是否為無聲,檢測影像中的聲音的無聲點。如果無聲判定部lll檢測出影像中的聲音的無聲點,則把該無聲點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭長度計算部2。作為無聲點的檢測方法,例如考慮對音量與閾值進行比較的方法等。而也可以使用其它的方法。鏡頭長度計算部2在從無聲判定部111輸出的切割點的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點的判定結(jié)果表示是切割點的含義的情況下,與上述實施形態(tài)l相同,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的前一個鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到重要鏡頭判定部4。另夕卜,如果鏡頭長度計算部2計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新為當前幀的時刻。重要鏡頭判定部4如果鏡頭長度計算部2計算出鏡頭長度,則與上述實施形態(tài)l相同,把該鏡頭長度與預先設(shè)定的閾值A(chǔ)進行比較。而且,重要鏡頭判定部4在該鏡頭長度比預先設(shè)定的閾值A(chǔ)長的情況下,判定以由無聲判定部lll檢測出的無聲點(切割點)的前一個無聲點(切割點)為起點的鏡頭是重要鏡頭,輸出其判定結(jié)果。這里,重要鏡頭判定部4判定為以前一個切割點為起點的鏡頭是重要鏡頭,而也可以判定為以前一個切割點為起點的鏡頭的下一個鏡頭是重要鏡頭,還可以判定為以前一個切割點為起點的鏡頭和下一個鏡頭這雙方是重要鏡頭。依據(jù)本實施形態(tài)13,由于不是把影像而是把聲音信號的無聲點視為影像內(nèi)容的切割點,因此例如能夠僅視聽戲劇或者電影內(nèi)容的故事中重要的長的臺詞或者講述、音樂節(jié)目中的樂曲部分。另外,通過使用無聲點,能夠減少連續(xù)視聽重要鏡頭時的不自然感。另外,在本實施形態(tài)13的影像摘要裝置中,還可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)14圖21是表示本發(fā)明實施形態(tài)14的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖5相同的號碼表示相同或者相當?shù)牟糠郑虼耸÷哉f明。音量判定部112對影像中的聲音信號的音量與閾值進行比較,實施檢測其聲音信號的音量比閾值小的音量降低點的處理。另外,音量判定部112構(gòu)成音量降低點檢測單元。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部21根據(jù)這些輸入信息,設(shè)定所取出的重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔Tsegment以及鏡頭視聽時間TPlayo<formula>formulaseeoriginaldocumentpage46</formula>在這樣設(shè)定的情況下,用戶對n個鏡頭從開頭起各視聽Tway秒鐘。例如,在影像內(nèi)容長度Tc卯加t是30分鐘(-1800秒),摘要視聽時間T岡est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(=180秒),鏡頭視聽時間TPlay成為0.5分鐘(=30秒)。另外,時間間隔設(shè)定部21也可以不是輸入數(shù)值的信息而是輸入語句的信息,分析該語句,判別摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent。如果輸入影像中的聲音信號,則音量判定部112對該聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測該聲音信號的音量比閾值小的音量降低點。音量判定部112不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭長度計算部2。另夕卜,該閾值也可以根據(jù)內(nèi)容的式樣變化。例如,如果是體育直播,則提高設(shè)定閾值,檢測是否有歡呼聲?;蛘?,如果是新聞節(jié)目或者音樂節(jié)目,通過使閾值降低到噪聲水平附近,檢測無聲部分,進行節(jié)目主持人(caster)或者記者等聲音、樂曲的劃分處等部分的檢測。鏡頭長度計算部2在從音量判定部112輸出的切割點的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點的判定結(jié)果表示是切割點的含義的情況下,與上述實施形態(tài)l相同,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的前一個鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到重要鏡頭判定部4。另外,如果鏡頭長度計算部2計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。最長鏡頭判定部22與上述實施形態(tài)2相同,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,判別鏡頭長度最長的鏡頭。即,如果鏡頭長度計算部2計算出鏡頭長度,則最長鏡頭判定部22對由該鏡頭長度計算部2計算出的鏡頭長度與存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度進行比較,在由該鏡頭長度計算部2計算出的鏡頭長度比存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度長的情況下,判別為由鏡頭長度計算部2計算出了鏡頭長度的鏡頭在當前時刻是最長的鏡頭。如果最長鏡頭判定部22判別了當前時刻中的最長的鏡頭,則把最長鏡頭長度緩沖器23的存儲內(nèi)容更新成由鏡頭長度計算部2計算出的鏡頭長度。另外,最長鏡頭判定部22把最長鏡頭開始點緩沖器24的存儲內(nèi)容更新成最長鏡頭的開始點的時刻(當前幀的時刻)。時間分割判定部25與上述實施形態(tài)2相同,在由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment中,輸出重要鏡頭的開始點的時刻。即,時間分割判定部25在當前幀的時刻是由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment的整數(shù)倍的情況下,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出。這里,表示了時間分割判定部25輸出最長鏡頭的開始點的時刻的情況,而也可以輸出最長鏡頭的下一個鏡頭的開始點的時刻,或者最長鏡頭和下一個鏡頭的開始點的時刻。但是,這種情況下,需要設(shè)置存儲最長鏡頭的下一個鏡頭的開始點時刻的緩沖器。如從上述所明確的那樣,依據(jù)本實施形態(tài)14,由于構(gòu)成為通過進行基于音量的鏡頭的判別,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,檢測出在由時間間隔設(shè)定部21所設(shè)定的時間間隔中鏡頭長度最長的鏡頭,因此例如不必像多數(shù)的影像處理方法或者聲音處理方法等那樣實施復雜的處理而提高計算負荷,起到能夠容易地把握內(nèi)容中的重要鏡頭的效果。如果把本實施形態(tài)14適用在錄像裝置、錄音裝置或者再生裝置中,則由于知道基于音量的重要鏡頭的開始時刻或者鏡頭再生時間,因此能夠進行影像的自動編輯或者簡便的摘要再生的視聽。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,本實施形態(tài)14的影像摘要裝置也可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時刻信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)15圖22是表示本發(fā)明實施形態(tài)15的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖6以及圖21相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部31與上述實施形態(tài)3相同,根據(jù)這些輸入信息,設(shè)定所取出的重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔的初始值TSegmento以及鏡頭基準視聽時間<formula>formulaseeoriginaldocumentpage49</formula>例如,在影像內(nèi)容長度Tc。ntent是30分鐘(=1800秒),摘要視聽時間T叫est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔的初始值Tsegmento成為3分鐘(=180秒),鏡頭基準視聽時間Twayo成為0.5分鐘(=30秒)。另外,時間間隔設(shè)定部31也可以不是輸入數(shù)值的信息而是輸入語句的信息,分析該語句,判別摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent。如果時間間隔設(shè)定部31設(shè)定了內(nèi)容分割時間間隔的初始值TSegmento,則鏡頭代表范圍初始設(shè)定部32與上述實施形態(tài)3相同,從該內(nèi)容分割時間間隔的初始值TSegment0和影像內(nèi)容長度Tc。ntent設(shè)定鏡頭代表范圍的初始值(鏡頭代表范圍的開始點Pstart、暫定鏡頭代表范圍的結(jié)束點PEnd<formula>formulaseeoriginaldocumentpage50</formula>如果鏡頭代表范圍初始設(shè)定部32設(shè)定了鏡頭代表范圍的初始值,則把該鏡頭代表范圍的初始值保存到時間分割點緩沖器33。如果輸入影像中的聲音信號,則音量判定部112與上述實施形態(tài)14相同,對其聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測其聲音信號的音量比閾值小的音量降低點。音量判定部112不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭長度計算部2。另外,該閾值可以根據(jù)內(nèi)容的式樣改變。例如,如果是體育直播,則提高設(shè)定閾值,檢測是否有歡呼聲?;蛘?,如果是新聞節(jié)目或者音樂節(jié)目,則通過使閣值降低到噪聲水平附近,檢測無聲部分,進行節(jié)目主持人或者記者等聲音、樂曲的劃分處等部分的檢測。鏡頭長度計算部2在從音量判定部112輸出的切割點的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點的判定結(jié)果表示是切割點的含義的情況下,與上述實施形態(tài)l相同,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的前一個鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到重要鏡頭判定部4。另外,如果鏡頭長度計算部2計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。最長鏡頭判定部22與上述實施形態(tài)2相同,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,判別鏡頭長度最長的鏡頭。即,如果鏡頭長度計算部2計算出鏡頭長度,則最長鏡頭判定部22對由該鏡頭長度計算部2計算出的鏡頭長度與存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度進行比較,在由該鏡頭長度計算部2計算出的鏡頭長度比存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度長的情況下,判別為由鏡頭長度計算部2計算出了鏡頭長度的鏡頭在當前時刻是最長的鏡頭。如果最長鏡頭判定部22判別了當前時刻中的最長的鏡頭,則把最長鏡頭長度緩沖器23的存儲內(nèi)容更新成由鏡頭長度計算部2計算出的鏡頭長度。另夕卜,最長鏡頭判定部22把最長鏡頭開始點緩沖器24的存儲內(nèi)容更新成最長鏡頭的開始點的時刻(當前幀的時刻)。鏡頭代表范圍判定.再設(shè)定部34在當前幀的時刻Pw。w超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEnd」emp的情況下,與上述實施形態(tài)3相同,計算鏡頭代表范圍的結(jié)束點PEnd和重要鏡頭再生時間TPlay,輸出該重要鏡頭再生時間TPlay。p=p+P—p<formula>formulaseeoriginaldocumentpage51</formula>式中,Psh。t,H是存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻。另外,鏡頭代表范圍判定.再設(shè)定部34在當前幀的時刻PN。W超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEnd_temp的情況下,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻Psh。t一SUH作為在摘要再生中使用的重要鏡頭的開始時刻輸出的同時,更新存儲在時間分割點緩沖器33中的鏡頭代表范圍的開始點Pstw和暫定鏡頭代表范圍的結(jié)束點PEnd—temp。更新后的鏡頭代表范圍如下。<formula>formulaseeoriginaldocumentpage51</formula>如從上述所明確的那樣,依據(jù)本實施形態(tài)15,由于構(gòu)成為通過進行基于音量的鏡頭的判別,根據(jù)由最長鏡頭判定部22判別了的最長鏡頭的開始時刻和鏡頭長度更新鏡頭代表范圍,因此起到能夠使內(nèi)容的劃分點或者劃分了的內(nèi)容中的重要鏡頭的再生時間適應性地變化的效果。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,本實施形態(tài)15的影像摘要裝置也可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)16圖23是表示本發(fā)明實施形態(tài)16的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖14以及圖21相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入影像中的聲音信號,則音量判定部112與上述實施形態(tài)14相同,對其聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測其聲音信號的音量比闊值小的音量降低點。音量判定部112不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭開始點緩沖器3。另外,如果檢測出音量降低點,則把該音量降低點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則重要鏡頭判定部81與上述實施形態(tài)9相同,從鏡頭開始點緩沖器3取得切割點的檢測時刻,從該檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度。而且,重要鏡頭判定部81與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。重要鏡頭判定部81的具體處理內(nèi)容由于與上述實施形態(tài)9相同,因此省略詳細的i兌明。依據(jù)本實施形態(tài)16,通過進行基于音量的鏡頭的判別,能夠僅視聽重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,本實施形態(tài)16的影像摘要裝置也可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)17圖24是表示本發(fā)明實施形態(tài)17的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖15以及圖21相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntet,則時間間隔設(shè)定部91與上述實施形態(tài)10相同,根據(jù)這些輸入信息,設(shè)定內(nèi)容分割時間間隔TSegment以及基準分割摘要視聽時間TsT=T/nSegmentContentT=TS一DijestDijest例如,在影像內(nèi)容長度Tc。ntent是30分鐘(=1800秒),摘要視聽時間T岡est是5分鐘(=300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(=180秒),基準分割摘要視聽時間TS—Dijest成為0.5分鐘(-30秒)。如果輸入影像中的聲音信號,則音量判定部112與上述實施形態(tài)14相同,對其聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測其聲音信號的音量比閾值小的音量降低點。音量判定部112不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭開始點緩沖器3以及重要鏡頭判定部81。另外,如果檢測出音量降低點,則把該音量降低點的檢測時刻存儲到鏡頭開始點緩沖器3。如果從音量判定部112接收到切割點的判定結(jié)果,則重要鏡頭判定部81與上述實施形態(tài)IO相同,在由時間間隔設(shè)定部91所設(shè)定的時間間隔中,從存儲在鏡頭開始點緩沖器3中的切割點的檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭。重要鏡頭判定部81的具體處理內(nèi)容由于與上述實施形態(tài)10相同,因此省略詳細的說明。上述實施形態(tài)16的情況下,當內(nèi)容非常長時,有時內(nèi)容整體的鏡頭長度排序的計算處理量非常龐大,而在本實施形態(tài)17中,由于只要在第i個區(qū)間中計算鏡頭長度排序即可,因此即使在內(nèi)容非常長的情況下,也不會導致計算處理量的龐大化,用戶能夠僅視聽基于音量的重要鏡頭。另夕卜,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,本實施形態(tài)17的影像摘要裝置也可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)18圖25是表示本發(fā)明實施形態(tài)18的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖16以及圖21相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入影像中的聲音信號,則音量判定部112與上述實施形態(tài)14相同,對該聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測其聲音信號的音量比閾值小的音量降低點。音量判定部H2不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭開始點緩沖器3。另外,如果檢測出音量降低點,則把該音量降低點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則鏡頭統(tǒng)計處理部101與上述實施形態(tài)11相同,從鏡頭開始點緩沖器3取得切割點的檢測時刻(音量降低點的檢測時刻),從該檢測時刻計算出以各切割點為起點的鏡頭的鏡頭長度,求出與該鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù)。而且,鏡頭統(tǒng)計處理部101與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中根據(jù)分布函數(shù)決定再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。鏡頭統(tǒng)計處理部101的具體處理內(nèi)容由于與上述實施形態(tài)14相同,因此省略詳細的"i兌明。依據(jù)本實施形態(tài)18,能夠根據(jù)所利用的計算機的能力改變統(tǒng)計處理的精度,即使在便攜設(shè)備等中,用戶也能夠僅視聽基于音量的重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,本實施形態(tài)18的影像摘要裝置也可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)19圖26是表示本發(fā)明實施形態(tài)19的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖19以及圖21相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部91與上述實施形態(tài)12相同,根據(jù)這些輸入信息,設(shè)定內(nèi)容分割時間間隔TSegment以及基準分割摘要視聽時間TsDijest。T=T/n<formula>formulaseeoriginaldocumentpage56</formula>例如,在影像內(nèi)容長度Tc。ntent是30分鐘(=1800秒),摘要視聽時間T叫est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(-180秒),基準分割摘要視聽時間TsjMjest成為0.5分鐘(=30秒)。如果輸入影像中的聲音信號,則音量判定部112與上述實施形態(tài)14相同,對該聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測其聲音信號的音量比閾值小的音量降低點。音量判定部112不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出到鏡頭開始點緩沖器3以及鏡頭統(tǒng)計處理部101。另外,如果檢測出音量降低點,則把該音量降低點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則鏡頭統(tǒng)計處理部101與上述實施形態(tài)12相同,在由時間間隔設(shè)定部91所設(shè)定的時間間隔中,從鏡頭開始點援沖器3取得切割點的檢測時刻(音量降低點的檢測時刻),從該檢測時刻計算出以各切割點為起點的鏡頭的鏡頭長度,求出與該鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù)。而且,鏡頭統(tǒng)計處理部101與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中根據(jù)分布函數(shù)決定再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。鏡頭統(tǒng)計處理部101的具體處理內(nèi)容由于與上述實施形態(tài)12相同,因此省略詳細的說明。在本實施形態(tài)19中,即使在用便攜設(shè)備等計算處理量少的計算機處理非常長的內(nèi)容的情況下,通過調(diào)整分割處理或者統(tǒng)計處理的精度,用戶也能夠僅視聽基于音量的重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,本實施形態(tài)19的影像摘要裝置也可以適用于不是影像內(nèi)容而是無線電廣播等僅聲音的內(nèi)容。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)20圖27是表示本發(fā)明實施形態(tài)20的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖l相同的號碼表示相同或者相當?shù)牟糠郑虼耸÷哉f明。AV切割點判定部121搭栽有切割點檢測部l和音量判定部112,實施從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)果,最終進行切割點判定的處理。圖28是表示本發(fā)明實施形態(tài)20的影像摘要裝置的AV切割點判定部121的結(jié)構(gòu)圖,圖中,當從切割點檢測部l輸出的判定結(jié)果表示是切割點的含義,而且從音量判定部112輸出的判定結(jié)果表示是切割點的含義時,同步判定部122實施這樣的處理,即進行是切割點的含義的最終判定。其次說明動作。如果輸入影像信號,則AV切割點判定部121的切割點檢測部1與上述實施形態(tài)l相同,檢測其影像的切割點。但是,切割點的檢測方法也可以是與上述實施形態(tài)1不同的方法。如果輸入影像中的聲音信號,則AV切割點判定部121的音量判定部112與上述實施形態(tài)14相同,對該聲音信號的音量與預先所設(shè)定的閾值進行比較,檢測出其聲音信號的音量比閾值小的音量降低點。音量判定部112不是把聲音信號的音量比閾值大的點視為切割點,而是把聲音信號的音量比閾值小的音量降低點視為切割點,把其檢測結(jié)果作為切割點的判定結(jié)果輸出。AV切割點判定部121的同步判定部122當從切割點檢測部1輸出的判定結(jié)果表示是切割點的含義,而且從音量判定部112輸出的判定結(jié)果表示是切割點的含義時,進行是切割點的含義的最終判定。即,如果切割點檢測部1和音量判定部112在同一個定時中檢測出切割點,則同步判定部122把該切割點視為影像內(nèi)容中的切割點,而即使切割點檢測部1或者音量判定部112的某一個檢測出切割點,但另一個沒有檢測出切割點,則不把該切割點視為影像內(nèi)容中的切割點。鏡頭長度計算部2在從AV切割點判定部121輸出的切割點的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點的判定結(jié)果表示是切割點的含義的情況下,與上述實施形態(tài)1相同,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的前一個鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度,輸出到重要鏡頭判定部4。另外,如果鏡頭長度計算部2計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。如果鏡頭長度計算部2計算出鏡頭長度,則重要鏡頭判定部4與上述實施形態(tài)l相同,對該鏡頭長度與預先所設(shè)定的閾值A(chǔ)進行比較。而且,重要鏡頭判定部4在該鏡頭長度比預先所設(shè)定的閾值A(chǔ)長的情況下,判定為以由AV切割點判定部121檢測出的切割點的前一個切割點為起點鏡頭是重要鏡頭,輸出其判定結(jié)果。這里,重要鏡頭判定部4判定為以前一個切割點為起點的鏡頭是重要鏡頭,而也可以判定為以前一個切割點為起點的鏡頭的下一個鏡頭是重要鏡頭,還可以判定為以前一個切割點為起點的鏡頭和下一個鏡頭這雙方是重要鏡頭。依據(jù)本實施形態(tài)20,通過使用影像和音量這雙方判定切割點,得到長的鏡頭,用戶能夠僅視聽重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)21圖29是表示本發(fā)明實施形態(tài)21的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖5以及圖27相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部21與上述實施形態(tài)2相同,根據(jù)這些輸入信息,設(shè)定所取出的重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔TSegment以及鏡頭視聽時間TPlay。N=n<formula>formulaseeoriginaldocumentpage59</formula>在這樣設(shè)定了的情況下,用戶能夠?qū)個鏡頭從開頭起各視聽Tp,ay秒鐘。例如,在影像內(nèi)容長度Tc卯tent是30分鐘(-1800秒),摘要視聽時間T岡est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔Tsegment成為3分鐘(=180秒),鏡頭視聽時間Tway成為0.5分鐘(-30秒)。另外,時間間隔設(shè)定部21也可以不是輸入數(shù)值的信息而是輸入語句的信息,分析該語句,判別摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent。AV切割點判定部121與上述實施形態(tài)20相同,從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)果,最終進行切割點的判定。鏡頭長度計算部2在從AV切割點判定部121輸出的切割點的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點的判定結(jié)果表示是切割點的含義的情況下,與上述實施形態(tài)l相同,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的前一個鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到重要鏡頭判定部4。另外,如果鏡頭長度計算部2計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。最長鏡頭判定部22與上述實施形態(tài)2相同,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,判別鏡頭長度最長的鏡頭。即,如果鏡頭長度計算部2計算出鏡頭長度,則最長鏡頭判定部22對由該鏡頭長度計算部2計算出的鏡頭長度與存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度進行比較,在由該鏡頭長度計算部2計算出的鏡頭長度比存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度長的情況下,判別為由鏡頭長度計算部2計算了鏡頭長度的鏡頭在當前時刻是最長的鏡頭。如果最長鏡頭判定部22判別出當前時刻中的最長的鏡頭,則把最長鏡頭長度緩沖器23的存儲內(nèi)容更新成由鏡頭長度計算部2計算出的鏡頭長度。另外,最長鏡頭判定部22把最長鏡頭開始點緩沖器24的存儲內(nèi)容更新成最長鏡頭的開始點的時刻(當前幀的時刻)。時間分割判定部25與上述實施形態(tài)2相同,輸出在由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment中的重要鏡頭的開始點的時刻。即,時間分割判定部25在當前幀的時刻是由時間間隔設(shè)定部21所設(shè)定的內(nèi)容分割時間間隔TSegment的整數(shù)倍的情況下,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻作為在摘要再生中使用的重要鏡頭的開始時刻輸出。這里,表示了時間分割判定部25輸出最長鏡頭的開始點的時刻的情況,而也可以輸出最長鏡頭的下一個鏡頭的開始點的時刻,或者最長鏡頭和下一個鏡頭的開始點的時刻。但是,這種情況下,需要設(shè)置存儲最長鏡頭的下一個鏡頭的開始點的時刻的緩沖器。如從上述所明確的那樣,依據(jù)本實施形態(tài)21,由于構(gòu)成為通過進行基于影像和音量雙方的鏡頭的判別,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,在由時間間隔設(shè)定部21所設(shè)定的時間間隔中檢測鏡頭長度最長的鏡頭,因此例如不會像多數(shù)的影像處理方法或者聲音處理方法等那樣實施復雜的處理而提高計算負荷,起到能夠容易地把握內(nèi)容中的重要鏡頭的效果。如果把本實施形態(tài)21適用在錄像裝置、錄音裝置或者再生裝置中,則由于知道基于影像和音量的重要鏡頭的開始時刻或者鏡頭再生時間,因此能夠進行影像的自動編輯或者簡便的摘要再生的視聽。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)22圖30是表示本發(fā)明實施形態(tài)22的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖6以及圖27相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部31與上述實施形態(tài)3相同,根據(jù)這些輸入信息,設(shè)定所取出的重要鏡頭的個數(shù)Nsh。t、內(nèi)容分割時間間隔的初始值TSegmento以及鏡頭基準視聽時間<formula>formulaseeoriginaldocumentpage61</formula>例如,在影像內(nèi)容長度Tc。^ent是30分鐘(-1800秒),摘要視聽時間T岡est是5分鐘(=300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔的初始值Tseg,nto成為3分鐘(=180秒),鏡頭基準視聽時間TjMayQ成為0.5分鐘(=30秒)。另外,時間間隔設(shè)定部31也可以不是輸入數(shù)值的信息,而是輸入語句的信息,分析該語句,判別摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent。如果時間間隔設(shè)定部31設(shè)定了內(nèi)容分割時間間隔的初始值TSegmento,則鏡頭代表范圍初始設(shè)定部32與上述實施形態(tài)3相同,從該內(nèi)容分割時間間隔的初始值TSegment()和影像內(nèi)容長度Tc。ntent設(shè)定鏡頭代表范圍的初始值(鏡頭代表范圍的開始點Pstart、暫定鏡頭代表范圍的結(jié)束點<formula>formulaseeoriginaldocumentpage62</formula>如果鏡頭代表范圍初始設(shè)定部32設(shè)定了鏡頭代表范圍的初始值,則把該鏡頭代表范圍的初始值保存到時間分割點緩沖器33。AV切割點判定部121與上述實施形態(tài)20相同,從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)果最終進行切割點的判定。鏡頭長度計算部2在從AV切割點判定部121輸出的切割點的判定結(jié)果表示不是切割點的含義的情況下,不特別實施處理,而在切割點的判定結(jié)果表示是切割點的含義的情況下,與上述實施形態(tài)1相同,求出當前幀的時刻與存儲在鏡頭開始點緩沖器3中的前一個鏡頭開始點的時刻的時刻差,把該時刻差作為鏡頭長度輸出到重要鏡頭判定部4。另外,如果鏡頭長度計算部2計算出鏡頭長度,則把鏡頭開始點緩沖器3的存儲內(nèi)容更新成當前幀的時刻。最長鏡頭判定部22與上述實施形態(tài)2相同,在鏡頭長度計算部2每次計算出鏡頭長度時,對由該鏡頭長度計算部2直到當前時刻為止所計算出的鏡頭長度相互進行比較,判別鏡頭長度最長的鏡頭。即,如果鏡頭長度計算部2計算出鏡頭長度,則最長鏡頭判定部22對由該鏡頭長度計算部2計算出的鏡頭長度與存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度進行比較,在由該鏡頭長度計算部2計算出的鏡頭長度比存儲在最長鏡頭長度緩沖器23中的最長鏡頭的鏡頭長度長的情況下,判別為由鏡頭長度計算部2計算了鏡頭長度的鏡頭在當前時刻是最長的鏡頭。如果最長鏡頭判定部22判別出當前時刻中的最長的鏡頭,則把最長鏡頭長度緩沖器23的存儲內(nèi)容更新成由鏡頭長度計算部2計算出的鏡頭長度。另外,最長鏡頭判定部22把最長鏡頭開始點緩沖器24的存儲內(nèi)容更新成最長鏡頭的開始點的時刻(當前幀的時刻)。鏡頭代表范圍判定*再設(shè)定部34在當前幀的時刻Pjv。w超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEnd-t,p的情況下,與上述實施形態(tài)3相同,計算鏡頭代表范圍的結(jié)束點PEnd和重要鏡頭再生時間TPlay,輸出該重要鏡頭再生時間TPlay。<formula>formulaseeoriginaldocumentpage63</formula>式中,PSh。t—Start是存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻。另外,鏡頭代表范圍判定.再設(shè)定部34在當前幀的時刻PN。W超過存儲在時間分割點緩沖器33中的暫定鏡頭代表范圍的結(jié)束點PEnd_temp的情況下,把存儲在最長鏡頭開始點緩沖器24中的最長鏡頭的開始點的時刻PSh。t—Start作為在摘要再生中使用的重要鏡頭的開始時刻輸出的同時,更新存儲在時間分割點緩沖器33中的鏡頭代表范圍的開始點Pstart和暫定鏡頭代表范圍的結(jié)束點PEnd—temp。更新后的鏡頭代表范圍如下。<formula>formulaseeoriginaldocumentpage63</formula>如從上述所明確的那樣,依據(jù)本實施形態(tài)22,由于構(gòu)成為通過進行基于影像和音量的鏡頭的判別,根據(jù)由最長鏡頭判定部22判別出的最長鏡頭的開始時刻和鏡頭長度更新鏡頭代表范圍,因此起到能夠使內(nèi)容的劃分點或者劃分了的內(nèi)容中的重要鏡頭的再生時間適應性變化的效果。另外,通過使用音量小的部分,能夠減輕連續(xù)一見聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)23圖31是表示本發(fā)明實施形態(tài)23的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖14以及圖27相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。AV切割點判定部121與上述實施形態(tài)20相同,從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)杲,最終進行切割點的判定。如果AV切割點判定部121最終檢測出切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則重要鏡頭判定部81與上述實施形態(tài)9相同,從鏡頭開始點緩沖器3取得切割點的檢測時刻,從該檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度。而且,重要鏡頭判定部81與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。重要鏡頭判定部81的具體處理內(nèi)容由于與上述實施形態(tài)9相同,因此省略詳細的"^兌明。依據(jù)本實施形態(tài)23,通過進行基于影像和音量的鏡頭的判別,能夠僅視聽重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)24圖32是表示本發(fā)明實施形態(tài)24的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖15以及圖27相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部91與上述實施形態(tài)10相同,根據(jù)這些輸入信息,設(shè)定內(nèi)容分割時間間隔TSegment以及基準分割摘要視聽時間Ts<formula>formulaseeoriginaldocumentpage65</formula>例如,在影像內(nèi)容長度TContent是30分鐘(-1800秒),摘要視聽時間T叫est是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(-180秒),基準分割摘要視聽時間TS—Dije"成為0.5分鐘(-30秒)。AV切割點判定部121與上述實施形態(tài)20相同,從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)果,最終實施切割點的判定,把其判定結(jié)杲輸出到鏡頭開始點緩沖器3以及重要鏡頭判定部81。另外,如果AV切割點判定部121最終檢測出切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3。如果從音量判定部112接收到切割點的判定結(jié)果,則重要鏡頭判定部81與上述實施形態(tài)IO相同,在由時間間隔設(shè)定部91所設(shè)定的時間間隔中,從存儲在鏡頭開始點緩沖器3中的切割點的檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭。重要鏡頭判定部81的具體處理內(nèi)容由于與上述實施形態(tài)10相同,因此省略詳細的i兌明。在上述實施形態(tài)23的情況下,當內(nèi)容非常長時,有時內(nèi)容整體的鏡頭長度排序的計算處理量非常龐大,而在本實施形態(tài)24中,由于只要在第i個區(qū)間中計算鏡頭長度排序即可,因此即使在內(nèi)容非常長的情況下,也不會導致計算處理量的龐大化,用戶能夠僅視聽基于影像和音量的重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)25圖33是表示本發(fā)明實施形態(tài)25的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖16以及圖27相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。AV切割點判定部121與上述實施形態(tài)20相同,從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)果,最終進行切割點的判定。如果AV切割點判定部121最終檢測出切割點,則把該切割點的檢測時刻存儲在鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則鏡頭統(tǒng)計處理部101與上述實施形態(tài)11相同,從鏡頭開始點緩沖器3取得切割點的檢測時刻(音量降低點的檢測時刻),從該檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,求出與該鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù)。而且,鏡頭統(tǒng)計處理部101與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中根據(jù)分布函數(shù)決定再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。鏡頭統(tǒng)計處理部101的具體處理內(nèi)容由于與上迷實施形態(tài)14相同,因此省略詳細的^兌明。依據(jù)本實施形態(tài)25,能夠根據(jù)所利用的計算機的能力改變統(tǒng)計處理的精度,即使在便攜設(shè)備等中,用戶也能夠僅視聽基于影像和音量的重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。實施形態(tài)26圖34是表示本發(fā)明實施形態(tài)26的影像摘要裝置的結(jié)構(gòu)圖,圖中,由于與圖19以及圖27相同的號碼表示相同或者相當?shù)牟糠?,因此省略說明。其次說明動作。如果輸入由用戶所設(shè)定的摘要視聽時間TDijest、影像內(nèi)容的時間分割數(shù)n以及影像內(nèi)容長度Tc。ntent,則時間間隔設(shè)定部91與上述實施形態(tài)10相同,根據(jù)這些輸入信息,設(shè)定內(nèi)容分割時間間隔TSegment以及基準分割摘要視聽時間Ts<formula>formulaseeoriginaldocumentpage67</formula>例如,在影像內(nèi)容長度Tc福ent是30分鐘(=1800秒),摘要視聽時間Tmjest是5分鐘(-300秒),影像內(nèi)容的時間分割數(shù)n是10的情況下,內(nèi)容分割時間間隔TSegment成為3分鐘(=180秒),基準分割摘要視聽時間TS—Dijest成為0.5分鐘(=30秒)。AV切割點判定部121與上述實施形態(tài)20相同,從切割點檢測部1的判定結(jié)果和音量判定部112的判定結(jié)果,最終實施切割點的判定,把其判定結(jié)果輸出到鏡頭開始點緩沖器3以及鏡頭統(tǒng)計處理部101。另外,如果AV切割點判定部121最終檢測出切割點,則把該切割點的檢測時刻存儲到鏡頭開始點緩沖器3。如果影像結(jié)束而接收到影像結(jié)束信號,則鏡頭統(tǒng)計處理部101與上述實施形態(tài)12相同,在由時間間隔設(shè)定部91所設(shè)定的時間間隔中,從鏡頭開始點緩沖器3取得切割點的檢測時刻(音量降低點的檢測時刻),從該檢測時刻計算以各切割點為起點的鏡頭的鏡頭長度,求出與該鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù)。而且,鏡頭統(tǒng)計處理部101與所希望的摘要視聽時間相匹配地,通過從多個鏡頭中根據(jù)分布函數(shù)決定再生對象的鏡頭(重要鏡頭),決定重要鏡頭的開始點和再生時間。鏡頭統(tǒng)計處理部101的具體處理內(nèi)容由于與上述實施形態(tài)12相同,因此省略詳細的說明。在本實施形態(tài)26中,即使在用便攜設(shè)備等計算處理量少的計算機處理非常長的內(nèi)容的情況下,通過調(diào)整分割處理或者統(tǒng)計處理的精度,用戶能夠僅視聽基于影像和音量的重要鏡頭。另外,通過使用音量小的部分,能夠減輕連續(xù)視聽重要鏡頭時的不自然感。另外,作為鏡頭長度或者鏡頭開始點等的時間信息,也可以使用時刻、幀編號、影像壓縮數(shù)據(jù)中的時間信息等。產(chǎn)業(yè)上的可利用性如上所述,本發(fā)明的影像摘要裝置由于用戶能夠容易地把握重要鏡頭,因此適于在需要從影像信號抽取重要區(qū)間的影像等情況中使用。權(quán)利要求1.一種影像摘要裝置,其特征在于,具備檢測影像的切割點的切割點檢測單元;由上述切割點檢測單元檢測出了切割點的情況下,計算以上述切割點的前一個切割點為起點的鏡頭的鏡頭長度的鏡頭長度計算單元;以由上述鏡頭長度計算單元計算出的鏡頭長度作為判別材料,判別以由上述切割點檢測單元檢測出的切割點的前一個切割點為起點的鏡頭是否是重要鏡頭的重要鏡頭判別單元。2.根據(jù)權(quán)利要求1所述的影像摘要裝置,其特征在于,重要鏡頭判別單元在由鏡頭長度計算單元計算出的鏡頭長度比預先設(shè)定的鏡頭長度長的情況下,判別為以由切割點檢測單元檢測出的切割點的前一個切割點為起點的鏡頭是重要鏡頭、或者以前一個切割點為起點的鏡頭的下一個鏡頭是重要鏡頭、或者以前一個切割點為起點的鏡頭和下一個鏡頭是重要鏡頭。3.—種影像摘要裝置,其特征在于,具備檢測影像的切割點的切割點檢測單元;在由上述切割點檢測單元檢測出了切割點的情況下,計算以上述切割點的前一個切割點為起點的鏡頭的鏡頭長度的鏡頭長度計算單元;設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;最長鏡頭檢測單元,在上述鏡頭長度計算單元每次計算出鏡頭長度時,對由上述鏡頭長度計算單元一直到當前時刻為止所計算出的鏡頭長度進行相互比較,檢測出由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中鏡頭長度最長的鏡頭、最長的鏡頭的下一個鏡頭、或者最長的鏡頭和下一個鏡頭。4.根據(jù)權(quán)利要求3所述的影像摘要裝置,其特征在于,時間間隔設(shè)定單元根據(jù)由最長鏡頭檢測單元檢測出的最長鏡頭的開始時刻和鏡頭長度更新時間間隔。5.—種影像摘要裝置,其特征在于,具備從影像信號抽取表示影像特征的特征量的特征量抽取單元;從由上述特征量抽取單元本次抽取出的特征量和由上述特征量抽取單元前一次抽取出的特征量計算特征量之間的距離的距離計算單元;在上述距離計算單元每次計算出特征量之間的距離時,對由上述距離計算單元一直到當前時刻為止所計算出的特征量之間的距離進行相互比較,檢測出最大距離的最大距離檢測單元;如果上述最大距離檢測單元檢測出最大距離,則從由上述最大距離檢測單元前一次檢測出了最大距離的時刻的幀的時刻到當前幀的時刻為止的時刻差比預先設(shè)定的時刻差大的情況下,把當前幀的時刻作為重要幀的開始時刻輸出的重要幀檢測單元。6.—種影像摘要裝置,其特征在于,具備設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;檢測影像的切割點的切割點檢測單元;從影像信號抽取表示影像特征的特征量的特征量抽取單元;從由上述特征量抽取單元本次抽取出的特征量與由上述特征量抽取單元前一次抽取出的特征量計算出特征量之間的距離的距離計算單元;由上述切割點檢測單元檢測出了切割點的情況下,在上述距離計算單元每次計算出特征量之間的距離時,對由上述距離計算單元一直到當前時刻為止所計算出的特征量之間的距離進行相互比較,檢測出最大距離的最大距離檢測單元;由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中,把由上述最大距檢測單元檢測出了最大距離的幀的時刻作為重要鏡頭的開始時刻輸出的重要鏡頭檢測單元。7.根據(jù)權(quán)利要求6所述的影像摘要裝置,其特征在于,時間間隔設(shè)定單元根據(jù)由最大距離檢測單元檢測出了最大距離的幀的時刻和最大距離更新時間間隔。8.—種影像摘要裝置,其特征在于,具備檢測影像的切割點的切割點檢測單元;從影像信號抽取表示影像特征的特征量的特征量抽取單元;從由上述特征量抽取單元本次抽取出的特征量與由上述特征量抽取單元前一次抽取出的特征量計算出特征量之間的距離的距離計算單元;在上述距離計算單元每次計算出特征量之間的距離時,計算由上述距離計算單元一直到當前時刻為止所計算出的特征量之間的距離的平均值的平均值計算單元;在由上述距離計算單元計算出的特征量之間的距離與由上述平均值計算單元計算出的平均值的差分值小于預先所設(shè)定的最小值的情況下,作為略圖候選圖像存儲上述影像信號的影像的略圖候選圖像存儲單元;如果由上述切割點檢測單元檢測出切割點,則從由上述略圖候選圖像存儲單元所存儲的略圖候選圖像生成略圖的略圖生成單元。9.根據(jù)權(quán)利要求1所述的影像摘要裝置,其特征在于,設(shè)有存儲由重要鏡頭判別單元所判別的重要鏡頭的鏡頭長度的重要鏡頭長度存儲單元;從由上述重要鏡頭長度存儲單元所存儲的重要鏡頭的鏡頭長度和預先所設(shè)定的摘要視聽時間,計算出重要鏡頭的再生時間的再生時間計算單元。10.根據(jù)權(quán)利要求1所述的影像摘要裝置,其特征在于,切割點檢測單元包括從影像信號抽取表示影像特征的特征量的特征量抽取單元;從由上述特征量抽取單元本次抽取出的特征量和由上述特征量抽取單元前一次抽取出的特征量計算出特征量之間的距離的距離計算單元;求出由上述距離計算單元所計算出的特征量之間的距離的統(tǒng)計量,從上述統(tǒng)計量計算出切割點判定用的閾值的閾值計算單元;對由上述距離計算單元所計算出的特征量之間的距離與由上述閾值計算單元所計算出的閾值進行比較,從上迷比較結(jié)果判別切割點的切割點判別單元。11.一種影像摘要裝置,其特征在于,具備檢測影像的切割點的切割點檢測單元;存儲由上述切割點檢測單元檢測出了切割點的時刻的鏡頭開始點存儲單元;從存儲在上述鏡頭開始點存儲單元中的時刻計算出以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭的重要鏡頭判定單元。12.—種影像摘要裝置,其特征在于,具備設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;檢測影像的切割點的切割點檢測單元;存儲由上述切割點檢測單元檢測出了切割點的時刻的鏡頭開始點存儲單元;在由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中,從存儲在上述鏡頭開始點存儲單元中的時刻計算出以各切割點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭的重要鏡頭判定單元。13.—種影像摘要裝置,其特征在于,具備檢測影像的切割點的切割點檢測單元;存儲由上述切割點檢測單元檢測出了切割點的時刻的鏡頭開始點存儲單元;從存儲在上述鏡頭開始點存儲單元中的時刻計算出以各切割點為起點的鏡頭的鏡頭長度,求出與上述鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù),與所希望的摘要視聽時間相匹配地,從多個鏡頭中,根據(jù)上述分布函數(shù)決定再生對象的鏡頭的重要鏡頭判定單元。14.一種影像摘要裝置,其特征在于,具備設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;檢測影像的切割點的切割點檢測單元;存儲由上述切割點檢測單元檢測出了切割點的時刻的鏡頭開始點存儲單元;在由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中,從存儲在上述鏡頭開始點存儲單元中的時刻計算以各切割點為起點的鏡頭的鏡頭長度,求出與上述鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù),與所希望的摘要視聽時間相匹配地,從多個鏡頭中,根據(jù)上述分布函數(shù)決定再生對象的鏡頭的重要鏡頭判定單元。15.—種影像摘要裝置,其特征在于,具備檢測影像中的聲音的無聲點的無聲點檢測單元;由上述無聲點檢測單元檢測出了無聲點的情況下,計算以上述無聲點的前一個無聲點為起點的鏡頭的鏡頭長度的鏡頭長度計算單元;把由上述鏡頭長度計算單元所計算出的鏡頭長度作為判別材料,判別以由上述無聲點檢測單元檢測出的無聲點的前一個無聲點為起點的鏡頭是否是重要鏡頭的重要鏡頭判別單元。16.—種影像摘要裝置,其特征在于,具備設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;檢測影像中的聲音的音量小于閾值的音量降低點的音量降低點檢測單元;在由上述音量降低點檢測單元檢測出了音量降低點的情況下,計算以上述音量降低點的前一個音量降低點為起點的鏡頭的鏡頭長度的鏡頭長度計算單元;最長鏡頭檢測單元,在上述鏡頭長度計算單元每次計算出鏡頭長度時,對由上述鏡頭長度計算單元一直到當前時刻為止所計算出的鏡頭長度進行相互比較,在由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中,檢測出鏡頭長度最長的鏡頭、最長的鏡頭的下一個鏡頭、或者最長的鏡頭和下一個鏡頭。17.根據(jù)權(quán)利要求16所述的影像摘要裝置,其特征在于,時間間隔設(shè)定單元根據(jù)由最長鏡頭檢測單元所檢測出的最長的鏡頭的開始時刻和鏡頭長度更新時間間隔。18.—種影像摘要裝置,其特征在于,具備檢測影像中的聲音的音量小于閾值的音量降低點的音量降低點檢測單元;存儲由上述音量降低點檢測單元檢測出了音量降低點的時刻的鏡頭開始點存儲單元;從存儲在上述鏡頭開始點存儲單元中的時刻計算以各音量降低點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中,把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭的重要鏡頭判定單元。19.一種影像摘要裝置,其特征在于,具備設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;檢測影像中的聲音的音量小于閾值的音量降低點的音量降低點檢測單元;存儲由上述音量降低點檢測單元檢測出了音量降低點的時刻的鏡頭開始點存儲單元;在由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中,從存儲在上述鏡頭開始點存儲單元中的時刻計算出以各音量降低點為起點的鏡頭的鏡頭長度,與所希望的摘要視聽時間相匹配地,從多個鏡頭中,把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭的重要鏡頭判定單元。20.—種影像摘要裝置,其特征在于,具備檢測影像中的聲音的音量小于閾值的音量降低點的音量降低點檢測單元;存儲由上述音量降低點檢測單元檢測出了音量降低點的時刻的鏡頭開始點存儲單元;從存儲在上述鏡頭開始點存儲單元中的時刻計算以各音量降低點為起點的鏡頭的鏡頭長度,求出與上述鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù),與所希望的摘要視聽時間相匹配地,從多個鏡頭中,根據(jù)上述分布函數(shù)決定再生對象的鏡頭的重要鏡頭判定單元。21.—種影像摘要裝置,其特征在于,具備設(shè)定分割影像的時間間隔的時間間隔設(shè)定單元;檢測影像中的聲音的音量小于閾值的音量降低點的音量降低點檢測單元;存儲由上述音量降低點檢測單元檢測出了音量降低點的時刻的鏡頭開始點存儲單元;在由上述時間間隔設(shè)定單元所設(shè)定的時間間隔中,從存儲在上述鏡頭開始點存儲單元中的時刻計算出以各音量降低點為起點的鏡頭的鏡頭長度,求出與上述鏡頭長度有關(guān)的統(tǒng)計性的分布函數(shù),與所希望的摘要視聽時間相匹配地,從多個鏡頭中,根據(jù)上述分布函數(shù)決定再生對象的鏡頭的重要鏡頭判定單元。22.根據(jù)權(quán)利要求1所述的影像摘要裝置,其特征在于,切割點檢測單元在檢測出影像的切割點時,檢測影像中的聲音的音量小于閾值的音量降低點,從檢測出的切割點中,檢測與上述音量降低點同步的切割點。23.根據(jù)權(quán)利要求11所述的影像摘要裝置,其特征在于,重要鏡頭判定單元從多個鏡頭中把鏡頭長度長的鏡頭優(yōu)先決定為再生對象的鏡頭,決定該鏡頭的再生時間。全文摘要本發(fā)明提供一種影像摘要裝置,設(shè)有在由切割點檢測部(1)中的切割點判定部(16)的判定結(jié)果表示是切割點的含義的情況下,計算以其切割點的前一個切割點為起點的鏡頭的鏡頭長度的鏡頭長度計算部(2),把由該鏡頭長度計算部(2)計算出的鏡頭長度作為判別材料,判別以前一個切割點為起點的鏡頭是否是重要鏡頭。文檔編號G11B27/00GK101292523SQ20068003916公開日2008年10月22日申請日期2006年6月23日優(yōu)先權(quán)日2005年10月27日發(fā)明者加藤嘉明,工藤大樹,西川博文申請人:三菱電機株式會社