專利名稱：動(dòng)態(tài)圖像數(shù)據(jù)處理的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及從動(dòng)態(tài)圖像數(shù)據(jù)自動(dòng)生成摘要(digest)動(dòng)態(tài)圖像數(shù)據(jù)的技術(shù)。
背景技術(shù)：
近年來(lái)，隨著攝像機(jī)的普及，使用攝像機(jī)的拍攝正變得普遍。與此同時(shí)，強(qiáng)烈要求希望在短時(shí)間內(nèi)簡(jiǎn)單地掌握長(zhǎng)時(shí)間、多方面拍攝的動(dòng)態(tài)圖像數(shù)據(jù)的內(nèi)容。因此，提議生成作為動(dòng)態(tài)圖像數(shù)據(jù)之摘要信息的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)、所謂的摘要圖像的技術(shù)。
例如，在特開2002-142189號(hào)公報(bào)中，通過(guò)將動(dòng)態(tài)圖像數(shù)據(jù)分割成多個(gè)場(chǎng)景(scene)，求出每個(gè)場(chǎng)景的評(píng)價(jià)值，連接評(píng)價(jià)值高的場(chǎng)景，來(lái)生成摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。在專利文獻(xiàn)1中，評(píng)價(jià)值根據(jù)場(chǎng)景內(nèi)幀圖像的亮度、幀圖像內(nèi)物體的數(shù)量或位置、聲音等來(lái)算出。
圖1是表示專利文獻(xiàn)1中摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的生成的說(shuō)明圖。在圖表(chart)25的第3格，示出了構(gòu)成摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的生成對(duì)象之動(dòng)態(tài)圖像數(shù)據(jù)的幀圖像。為了簡(jiǎn)單，省略了幀圖像的內(nèi)容。作為將動(dòng)態(tài)圖像數(shù)據(jù)分割成場(chǎng)景后的結(jié)果，在動(dòng)態(tài)圖像數(shù)據(jù)的場(chǎng)景斷開處表示虛線L。
在圖1的圖表25的下方，示出了分別擴(kuò)大顯示場(chǎng)景SA和場(chǎng)景SB的幀圖像中代表性的幀圖像a1、幀圖像am及幀圖像bn、幀圖像bp。場(chǎng)景SA是拍攝了山或天空等風(fēng)景的場(chǎng)景，場(chǎng)景SB是拍攝了船橫穿的樣子的場(chǎng)景。各場(chǎng)景由該狀態(tài)下某種程度在時(shí)間、內(nèi)容上連續(xù)的幀圖像構(gòu)成。
在圖表25的第2格，示出求得每個(gè)場(chǎng)景的評(píng)價(jià)值的結(jié)果、確定后的評(píng)價(jià)。如果評(píng)價(jià)為O，則表示該場(chǎng)景適于作為摘要?jiǎng)討B(tài)圖像數(shù)據(jù)，如果評(píng)價(jià)為×，則表示該場(chǎng)景不適于作為摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。在圖表25的第1格，示出可連接評(píng)價(jià)為O的場(chǎng)景之摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的幀圖像。
但是，在這種現(xiàn)有的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中，由于以場(chǎng)景為單位求解評(píng)價(jià)值，所以有時(shí)會(huì)漏掉適于摘要?jiǎng)討B(tài)圖像的幀圖像，或包含不適當(dāng)?shù)膸瑘D像。
例如，幀圖像am是當(dāng)攝像機(jī)的拍攝者要拍攝建筑物10時(shí)、進(jìn)行圖像放大操作后結(jié)果拍攝的幀圖像，雖然對(duì)拍攝者是很重要的幀圖像，但卻從摘要?jiǎng)討B(tài)圖像中漏掉。另外，幀圖像bn是只照船頭的、較不重要的圖像，但包含在摘要?jiǎng)討B(tài)圖像中。

發(fā)明內(nèi)容
本發(fā)明是為解決上述問(wèn)題而進(jìn)行的，其目的在于提供一種有效地活用動(dòng)態(tài)圖像數(shù)據(jù)的幀圖像數(shù)據(jù)，生成管理摘要?jiǎng)討B(tài)圖像的技術(shù)。
為了解決上述課題，本發(fā)明提供一種從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)處理方法。該方法的特征在于，具備幀圖像評(píng)價(jià)工序，其根據(jù)規(guī)定條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，對(duì)應(yīng)所述評(píng)價(jià)，生成第1圖像評(píng)價(jià)值；和動(dòng)態(tài)圖像數(shù)據(jù)抽取工序，其對(duì)應(yīng)所述第1圖像評(píng)價(jià)值，抽取包含滿足規(guī)定條件的多個(gè)幀圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)。
在本發(fā)明的動(dòng)態(tài)圖像處理方法中，由于動(dòng)態(tài)圖像數(shù)據(jù)評(píng)價(jià)每個(gè)幀圖像數(shù)據(jù)，所以可生成由適于作為摘要?jiǎng)討B(tài)圖像的幀圖像數(shù)據(jù)構(gòu)成的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。
作為本發(fā)明一方式的動(dòng)態(tài)圖像處理裝置，其從由在時(shí)間序列上連續(xù)的多個(gè)幀圖像數(shù)據(jù)構(gòu)成的動(dòng)態(tài)圖像數(shù)據(jù)，生成摘要了其內(nèi)容的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)，其特征在于，具備取得所述動(dòng)態(tài)圖像數(shù)據(jù)的取得部；算出部，其針對(duì)各個(gè)所述幀圖像數(shù)據(jù)，算出表示所述動(dòng)態(tài)圖像數(shù)據(jù)的重要性之評(píng)價(jià)值；抽取部，從所述評(píng)價(jià)值及所述評(píng)價(jià)值的變動(dòng)至少一方滿足規(guī)定條件的所述幀圖像數(shù)據(jù)中，抽取至少1個(gè)以上作為在時(shí)間序列上連續(xù)的幀圖像數(shù)據(jù)之集合的幀群；和生成部，其使用抽取出的所述幀群的至少一部分，生成所述摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。
根據(jù)本發(fā)明的動(dòng)態(tài)圖像裝置，可對(duì)每個(gè)幀圖像數(shù)據(jù)評(píng)價(jià)動(dòng)態(tài)圖像數(shù)據(jù)，生成由適于作摘要?jiǎng)討B(tài)圖像的幀圖像數(shù)據(jù)構(gòu)成的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。
評(píng)價(jià)值例如也可基于攝像機(jī)的變焦操作或搖場(chǎng)景(pan)操作來(lái)算出。所謂變焦操作是使用變焦透鏡擴(kuò)大或縮小被攝體的圖像。所謂搖場(chǎng)景操作是固定相機(jī)的位置不變，改變相機(jī)的方向，拍攝寬的范圍。另外，評(píng)價(jià)值也可根據(jù)幀圖像內(nèi)運(yùn)動(dòng)物體的位置、運(yùn)動(dòng)物體的大小、背景的動(dòng)作、膚色的大小等來(lái)算出。并且，評(píng)價(jià)值也可根據(jù)幀圖像內(nèi)物體的數(shù)量、幀圖像的亮度或顏色的直方圖、聲音數(shù)據(jù)等來(lái)算出。
上述的動(dòng)態(tài)圖像處理裝置也可以具備分割部，其分割所述動(dòng)態(tài)圖像數(shù)據(jù)，并分別設(shè)定多個(gè)包含多個(gè)所述幀圖像數(shù)據(jù)的場(chǎng)景，所述抽取部從各個(gè)所述場(chǎng)景中抽取至少1個(gè)以上的所述幀群。
據(jù)此，由于可在摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中包含全部場(chǎng)景的至少一部分，所以通過(guò)觀看摘要?jiǎng)討B(tài)圖像，而容易地掌握全部的場(chǎng)景。分割部也可作成不是以場(chǎng)景為單位，而是以每個(gè)規(guī)定的間隔分割動(dòng)態(tài)圖像數(shù)據(jù)，抽取部也可作成從分割后的數(shù)據(jù)中抽取至少1個(gè)以上的所述幀群。規(guī)定的間隔例如是基于時(shí)間或數(shù)據(jù)量的間隔。如果觀看這樣生成的摘要?jiǎng)討B(tài)圖像，則用戶可判斷是否需要每個(gè)規(guī)定時(shí)間的動(dòng)態(tài)圖像數(shù)據(jù)。因此，可生成用戶能利用于編輯操作中的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。
并且，所述分割部也可根據(jù)所述評(píng)價(jià)值的不連續(xù)變化，來(lái)分割所述動(dòng)態(tài)圖像數(shù)據(jù)。
在動(dòng)態(tài)圖像中，在場(chǎng)景變化的場(chǎng)所，多數(shù)情況下各幀圖像數(shù)據(jù)的亮度或顏色的直方圖、聲音數(shù)據(jù)等相關(guān)的評(píng)價(jià)值不連續(xù)地變化。因此，通過(guò)根據(jù)這樣的評(píng)價(jià)值的不連續(xù)變化，從而可將動(dòng)態(tài)圖像數(shù)據(jù)分割成場(chǎng)景。作為另一方法，也可根據(jù)2個(gè)幀圖像中各個(gè)象素值的差分，將動(dòng)態(tài)圖像數(shù)據(jù)分割成場(chǎng)景。差分為規(guī)定值以上的場(chǎng)所可判斷為是場(chǎng)景變化的場(chǎng)所。
上述動(dòng)態(tài)圖像處理裝置的所述規(guī)定的條件也可是所述評(píng)價(jià)值為規(guī)定閾值以上。并且，也可在規(guī)定的條件中增加所述評(píng)價(jià)值為規(guī)定閾值以上的狀態(tài)在規(guī)定時(shí)間以上連續(xù)。分割動(dòng)態(tài)圖像數(shù)據(jù)時(shí)，也可對(duì)分割的各個(gè)數(shù)據(jù)使用不同的閾值。
并且，也可具備輸入所述摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的再生時(shí)間之希望值的再生時(shí)間輸入部；和對(duì)應(yīng)所述再生時(shí)間的希望值，調(diào)整所述閾值的調(diào)整部。
據(jù)此，可生成對(duì)應(yīng)于再生時(shí)間的希望值之摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。在生成的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的再生時(shí)間超出包含希望值的規(guī)定范圍的時(shí)間時(shí)，也可使調(diào)整部調(diào)整閾值，再次生成摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。
上述的動(dòng)態(tài)圖像處理裝置的所述抽取部也可優(yōu)先抽取所述評(píng)價(jià)值的變化率為0以上的幀群。
通常，變焦操作中及其后的幀群與變焦操作后的幀群相比，多數(shù)情況下作為動(dòng)態(tài)圖像的重要性高。在基于變焦操作設(shè)定評(píng)價(jià)值時(shí)，變焦操作中及其后的幀群之評(píng)價(jià)值的變化率多為0以上，變焦操作后的幀群之評(píng)價(jià)值的變化率多為負(fù)。在變焦操作的前后，既便評(píng)價(jià)值相同，也存在變化率正負(fù)不同的幀圖像。若比較兩者，例如既便是相同的評(píng)價(jià)值，結(jié)果，多數(shù)情況下評(píng)價(jià)值的變化率為0以上的幀群與評(píng)價(jià)值的變化率為負(fù)的幀群相比，作為動(dòng)態(tài)圖像的重要性高。因而，據(jù)此，可抽取更適宜作摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的幀群。
上述動(dòng)態(tài)圖像處理裝置的所述抽取部也可就多個(gè)所述幀群中、所述幀群間的時(shí)間間隔為規(guī)定值以下的2個(gè)幀群，歸納所述2個(gè)幀群及其間的全部幀圖像數(shù)據(jù)，作為1個(gè)幀群抽取。
若抽取出的幀群與幀群的時(shí)間間隔窄，則觀看動(dòng)態(tài)圖像的人有時(shí)感到像將摘要?jiǎng)討B(tài)圖像不自然地中途切開似的不諧調(diào)感。根據(jù)本發(fā)明，可防止產(chǎn)生這樣的不諧調(diào)感。
并且，具備場(chǎng)景分割部，其分割所述動(dòng)態(tài)圖像數(shù)據(jù)，分別設(shè)定多個(gè)包含多個(gè)所述幀圖像數(shù)據(jù)的場(chǎng)景。
并且，所述抽取部也可在所述2個(gè)幀群及其間的全部幀圖像數(shù)據(jù)在同一場(chǎng)景內(nèi)時(shí)，作為1個(gè)幀群抽取。
既便在場(chǎng)景的交替期間中途切開摘要?jiǎng)討B(tài)圖像，觀看摘要?jiǎng)討B(tài)圖像的人感到不諧調(diào)感也少。因此，通過(guò)在場(chǎng)景的交替期間不抽取2個(gè)幀群之間的幀圖像數(shù)據(jù)，可防止評(píng)價(jià)低的幀圖像數(shù)據(jù)進(jìn)入摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。
上述動(dòng)態(tài)圖像處理裝置的所述抽取部也可抽取由規(guī)定數(shù)以上的幀圖像數(shù)據(jù)構(gòu)成的所述幀群。
這樣，就各幀群而言，可確保觀看摘要?jiǎng)討B(tài)圖像的人可掌握其內(nèi)容之程度的長(zhǎng)度。
上述之一的動(dòng)態(tài)圖像處理裝置的所述算出部也可使用比較包含所述評(píng)價(jià)值的算出對(duì)象之所述幀圖像數(shù)據(jù)的2個(gè)所述幀圖像數(shù)據(jù)而求出的動(dòng)作矢量，來(lái)算出所述評(píng)價(jià)值。
根據(jù)動(dòng)作矢量可檢測(cè)圖像放大操作等，可特定拍攝者特別想要拍攝的幀圖像。也可將這樣的幀圖像判斷為動(dòng)態(tài)圖像的重要性高，算出評(píng)價(jià)值。不必在評(píng)價(jià)值算出中必須使用動(dòng)作矢量，例如也可事先在拍攝時(shí)記錄變焦操作或相機(jī)的姿勢(shì)等拍攝信息，使用該拍攝信息，算出評(píng)價(jià)值。
作為本發(fā)明的另一方式的動(dòng)態(tài)圖像處理裝置，其從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)，其特征在于，具備靜止圖像評(píng)價(jià)部，其根據(jù)規(guī)定的條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)靜止圖像數(shù)據(jù)的每一個(gè)，對(duì)應(yīng)所述評(píng)價(jià)，生成第1圖像評(píng)價(jià)值；動(dòng)態(tài)圖像評(píng)價(jià)部，其對(duì)應(yīng)于所述多個(gè)靜止圖像數(shù)據(jù)各自的所述第1圖像評(píng)價(jià)值和所述第1圖像評(píng)價(jià)值時(shí)間序列上的變化率，生成所述多個(gè)靜止圖像數(shù)據(jù)各自的第2圖像評(píng)價(jià)值；和動(dòng)態(tài)圖像數(shù)據(jù)抽取部，其根據(jù)所述第2圖像評(píng)價(jià)值，從所述動(dòng)態(tài)圖像數(shù)據(jù)中抽取由所述第2圖像評(píng)價(jià)值比規(guī)定閾值大的多個(gè)靜止圖像數(shù)據(jù)構(gòu)成的動(dòng)態(tài)圖像數(shù)據(jù)。
根據(jù)本發(fā)明的動(dòng)態(tài)圖像數(shù)據(jù)處理裝置，由于不只考慮評(píng)價(jià)各幀圖像重要性的第1圖像評(píng)價(jià)值，還考慮第1圖像評(píng)價(jià)值的變化率來(lái)抽取動(dòng)態(tài)圖像數(shù)據(jù)，所以可自動(dòng)地抽取用戶希望的動(dòng)態(tài)圖像數(shù)據(jù)。
在上述動(dòng)態(tài)圖像數(shù)據(jù)處理裝置中，所述動(dòng)態(tài)圖像評(píng)價(jià)部也可具有如下評(píng)價(jià)模式，即設(shè)增大所述第1圖像評(píng)價(jià)值在時(shí)間序列上的變化率為正的多個(gè)靜止圖像數(shù)據(jù)之第1圖像評(píng)價(jià)值而得到的值為所述第2圖像評(píng)價(jià)值，或者所述動(dòng)態(tài)圖像評(píng)價(jià)部也可具有如下評(píng)價(jià)模式，即設(shè)降低所述第1圖像評(píng)價(jià)值在時(shí)間序列上的變化率為負(fù)的多個(gè)靜止圖像數(shù)據(jù)之第1圖像評(píng)價(jià)值而得到的值為所述第2圖像評(píng)價(jià)值。
據(jù)此，由于重點(diǎn)抽取在時(shí)間序列上比作為峰值時(shí)幀圖像的峰值圖像還靠前的動(dòng)態(tài)圖像數(shù)據(jù)，所以可生成用戶希望的摘要圖像數(shù)據(jù)。重點(diǎn)抽取在時(shí)間序列上比峰值圖像還靠前的動(dòng)態(tài)圖像數(shù)據(jù)多是由于朝向峰值圖像的動(dòng)畫作為到達(dá)峰值圖像之前的心理準(zhǔn)備時(shí)期的動(dòng)態(tài)圖像是重要的，另外，設(shè)超過(guò)峰值圖像后的圖像作為靜止圖像個(gè)體，既便增大重要性，用戶也不關(guān)心。
另外，作為增大第1圖像評(píng)價(jià)值的方法，例如有相加規(guī)定的正值的方法或乘以大于1的值的系數(shù)的方法。另外，作為增大第1圖像評(píng)價(jià)值的方法，例如有減去規(guī)定正值的方法或乘以不足1的系數(shù)的方法。并且還有一律降低為零的方法。
在上述動(dòng)態(tài)圖像數(shù)據(jù)處理裝置中，所述動(dòng)態(tài)圖像評(píng)價(jià)部也可具有設(shè)所述第1圖像評(píng)價(jià)值、與所述第1圖像評(píng)價(jià)值的時(shí)間序列之變化率乘以規(guī)定的正系數(shù)后的值之和為所述第2圖像評(píng)價(jià)值的評(píng)價(jià)模式。
據(jù)此，可通過(guò)操作規(guī)定的系數(shù)，而定量地調(diào)整在哪種程度重點(diǎn)地抽取在時(shí)間序列上比峰值圖像還靠前的動(dòng)態(tài)圖像數(shù)據(jù)。該調(diào)整例如可對(duì)應(yīng)于用戶意圖的被攝物來(lái)設(shè)定。具體地說(shuō)，根據(jù)用戶意圖的被攝物是動(dòng)作要素大的人物還是動(dòng)作要素小的風(fēng)景，適當(dāng)?shù)恼{(diào)整量不同。
在上述動(dòng)態(tài)圖像數(shù)據(jù)處理裝置中，最好是所述規(guī)定系數(shù)設(shè)定成比1小的正值。因?yàn)橥ㄟ^(guò)發(fā)明人的實(shí)驗(yàn)發(fā)現(xiàn)，規(guī)定系數(shù)一般最好是設(shè)定在0～1之間。
在上述動(dòng)態(tài)圖像處理裝置中，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取部也可具有一種抽取模式，即根據(jù)所述第2圖像評(píng)價(jià)值，從所述動(dòng)態(tài)圖像數(shù)據(jù)中僅抽取由所述第2圖像評(píng)價(jià)值比規(guī)定閾值大的多個(gè)靜止圖像數(shù)據(jù)構(gòu)成的、且再生時(shí)間比規(guī)定時(shí)間長(zhǎng)的動(dòng)態(tài)圖像數(shù)據(jù)。據(jù)此，可排除抽取用戶不希望的、非常短的動(dòng)態(tài)圖像數(shù)據(jù)。
在上述動(dòng)態(tài)圖像數(shù)據(jù)處理裝置中，具備對(duì)每個(gè)場(chǎng)景分割所述動(dòng)態(tài)圖像數(shù)據(jù)的場(chǎng)景分割部，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取部也可對(duì)每個(gè)所述場(chǎng)景進(jìn)行所述抽取。
在上述動(dòng)態(tài)圖像數(shù)據(jù)處理裝置中，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取部也可按每個(gè)所述場(chǎng)景算出所述第1圖像評(píng)價(jià)值和所述第2圖像評(píng)價(jià)值至少一方的平均值，對(duì)應(yīng)所述平均值，對(duì)每個(gè)所述場(chǎng)景使所述規(guī)定的閾值變化。
本發(fā)明的摘要圖像數(shù)據(jù)生成裝置，其特征在于，具備上述之一中記載的動(dòng)態(tài)圖像數(shù)據(jù)處理裝置；和動(dòng)態(tài)圖像數(shù)據(jù)連接部，其在所述抽取的動(dòng)態(tài)圖像數(shù)據(jù)為多個(gè)時(shí)，連接所述抽取出的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)，生成所述摘要圖像數(shù)據(jù)。
根據(jù)本發(fā)明的摘要圖像數(shù)據(jù)生成裝置，可連接考慮第1圖像評(píng)價(jià)值的變化率后抽取出的動(dòng)態(tài)圖像數(shù)據(jù)，以自動(dòng)生成摘要圖像數(shù)據(jù)。
在上述摘要圖像數(shù)據(jù)生成裝置中，所述動(dòng)態(tài)圖像數(shù)據(jù)連接部也可具有按時(shí)間序列順序連接所述抽取出的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)的連接模式，或者所述動(dòng)態(tài)圖像數(shù)據(jù)連接部也可具有一種連接模式，即所述動(dòng)態(tài)圖像數(shù)據(jù)連接部按對(duì)應(yīng)構(gòu)成所述抽取出的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)各自之多個(gè)靜止圖像數(shù)據(jù)的所述第1圖像評(píng)價(jià)值和所述第2圖像評(píng)價(jià)值之一而決定的順序，連接所述抽取出的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)。
另外，本發(fā)明可通過(guò)摘要圖像數(shù)據(jù)輸出裝置、動(dòng)態(tài)圖像數(shù)據(jù)的屬性信息生成裝置、動(dòng)態(tài)圖像數(shù)據(jù)的屬性信息存儲(chǔ)裝置、用于使計(jì)算機(jī)實(shí)現(xiàn)摘要圖像數(shù)據(jù)生成的方法或裝置的功能的計(jì)算機(jī)程序、記錄了該計(jì)算機(jī)程序的記錄介質(zhì)、包含該計(jì)算機(jī)程序并在載波內(nèi)具體化了的數(shù)據(jù)信號(hào)等各種方式來(lái)實(shí)現(xiàn)。


圖1是表示現(xiàn)有技術(shù)中的生成摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的說(shuō)明圖。
圖2是表示本發(fā)明第1實(shí)施例中的動(dòng)態(tài)圖像處理裝置的結(jié)構(gòu)示意的說(shuō)明圖。
圖3是用于說(shuō)明本發(fā)明第1實(shí)施例中的幀圖像的評(píng)價(jià)值的說(shuō)明圖。
圖4是用于表示本發(fā)明第1實(shí)施例中變焦操作開始·結(jié)束時(shí)的幀圖像數(shù)據(jù)、搖場(chǎng)景操作開始·結(jié)束時(shí)的幀圖像數(shù)據(jù)之檢測(cè)方法的說(shuō)明圖。
圖5是表示本發(fā)明第1實(shí)施例中運(yùn)動(dòng)物體mv的說(shuō)明圖。
圖6是表示本發(fā)明第1實(shí)施例中合計(jì)圖3(b)～(g)的各評(píng)價(jià)值而求出的評(píng)價(jià)值「合計(jì)」的說(shuō)明圖。
圖7是表示本發(fā)明第1實(shí)施例中動(dòng)態(tài)圖像處理裝置100的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)生成處理的說(shuō)明圖。
圖8是表示本發(fā)明第1實(shí)施例中各幀圖像的動(dòng)作檢測(cè)處理的流程圖。
圖9是表示本發(fā)明第1實(shí)施例中幀群的抽取處理的流程圖。
圖10是表示本發(fā)明第1實(shí)施例中幀群的選擇處理的流程圖。
圖11是表示本發(fā)明第2實(shí)施例中圖像處理系統(tǒng)100的說(shuō)明圖。
圖12是表示顯示在顯示器18a上的、圖像文件生成處理中操作顯示畫面200的說(shuō)明圖。
圖13是表示本發(fā)明第2實(shí)施例中靜止圖像數(shù)據(jù)生成處理的內(nèi)容的流程圖。
圖14是表示本發(fā)明第2實(shí)施例中使用的動(dòng)態(tài)圖像數(shù)據(jù)構(gòu)成的一例的說(shuō)明圖。
圖15是表示本實(shí)施例的第2實(shí)施例中場(chǎng)景分割處理的結(jié)果的表。
圖16是表示本發(fā)明第2實(shí)施例中評(píng)價(jià)值計(jì)算處理的內(nèi)容的流程圖。
圖17是表示本發(fā)明第2實(shí)施例中動(dòng)態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說(shuō)明圖。
圖18是表示本發(fā)明第3實(shí)施例中動(dòng)態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說(shuō)明圖。
圖19是表示本發(fā)明第4實(shí)施例中圖像管理系統(tǒng)100a的說(shuō)明圖。
圖20是表示本發(fā)明第4實(shí)施例的圖像管理中數(shù)據(jù)庫(kù)內(nèi)容的說(shuō)明圖。
圖21是表示在本發(fā)明的第4實(shí)施例中、存儲(chǔ)于記錄介質(zhì)上的數(shù)據(jù)文件GF的內(nèi)容的說(shuō)明圖。
圖22是表示印刷在記錄介質(zhì)上的目錄圖像的說(shuō)明圖。
圖23是表示本發(fā)明第4實(shí)施例中圖像數(shù)據(jù)自動(dòng)管理處理的內(nèi)容的說(shuō)明圖。
具體實(shí)施例方式
下面，基于實(shí)施例，按下面的順序說(shuō)明本發(fā)明的實(shí)施方式。
A、第1實(shí)施例A1、動(dòng)態(tài)圖像處理裝置的結(jié)構(gòu)
A2、評(píng)價(jià)值的算出及幀群的抽取A3、第1實(shí)施例的處理A4、第1實(shí)施例的效果A5、第1實(shí)施例的變形例B、本發(fā)明第2實(shí)施例的圖像處理系統(tǒng)的結(jié)構(gòu)C、本發(fā)明第2實(shí)施例的摘要圖像數(shù)據(jù)生成處理D、本發(fā)明第3實(shí)施例的摘要圖像數(shù)據(jù)生成處理E、本發(fā)明第4實(shí)施例的摘要圖像數(shù)據(jù)的管理F、變形例A、第1實(shí)施例A1、動(dòng)態(tài)圖像處理裝置的結(jié)構(gòu)圖2是表示作為實(shí)施例的動(dòng)態(tài)圖像處理裝置的結(jié)構(gòu)示意的說(shuō)明圖。左側(cè)表示動(dòng)態(tài)圖像處理裝置100，右側(cè)表示動(dòng)態(tài)圖像處理裝置100的功能塊。動(dòng)態(tài)圖像處理裝置100是用于從由多個(gè)幀圖像數(shù)據(jù)構(gòu)成的動(dòng)態(tài)圖像數(shù)據(jù)中，生成作為其摘要信息的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的裝置。在本實(shí)施例中，稱幀圖像數(shù)據(jù)表示的圖像為幀圖像。該幀圖像意味著可用非交織方式顯示的靜止圖像。
動(dòng)態(tài)圖像處理裝置100是通用的個(gè)人計(jì)算機(jī)，動(dòng)態(tài)圖像處理裝置100中具備作為輸入信息裝置的鍵盤120及鼠標(biāo)130、和作為輸出信息的裝置的顯示器150。另外，在動(dòng)態(tài)圖像處理裝置中，作為輸入動(dòng)態(tài)圖像數(shù)據(jù)的裝置，備有攝像機(jī)30及CD-R/RW驅(qū)動(dòng)器140。另外，作為輸入動(dòng)態(tài)圖像數(shù)據(jù)的裝置，還可具備從CD-R/RW驅(qū)動(dòng)器之外的DVD驅(qū)動(dòng)器等各種信息存儲(chǔ)介質(zhì)中可讀出數(shù)據(jù)的驅(qū)動(dòng)裝置。
動(dòng)態(tài)圖像處理裝置100利用規(guī)定的操作系統(tǒng)下運(yùn)行的應(yīng)用程序，可實(shí)現(xiàn)圖2右側(cè)中圖示的、摘要?jiǎng)討B(tài)圖像生成控制部102、數(shù)據(jù)取得部104、場(chǎng)景分割部106、動(dòng)作檢測(cè)部107、評(píng)價(jià)值算出部108、抽取部109、摘要?jiǎng)討B(tài)圖像生成部110等功能。這些功能也可硬件地具備。
下面說(shuō)明各功能。數(shù)據(jù)取得部104從CD-R/RW驅(qū)動(dòng)器140內(nèi)的CD-RW或數(shù)字?jǐn)z像機(jī)30、或硬盤(未圖示)等中讀入動(dòng)態(tài)圖像數(shù)據(jù)，在RAM上構(gòu)筑動(dòng)態(tài)圖像數(shù)據(jù)庫(kù)101。另外，數(shù)據(jù)取得部104使用鍵盤120或鼠標(biāo)130也取得用戶輸入的摘要?jiǎng)討B(tài)圖像的再生時(shí)間的希望值，并存儲(chǔ)在存儲(chǔ)器中。
場(chǎng)景分割部106檢測(cè)動(dòng)態(tài)圖像的場(chǎng)景的交替期間，將動(dòng)態(tài)圖像數(shù)據(jù)分割成場(chǎng)景。動(dòng)態(tài)檢測(cè)部107通過(guò)幀圖像數(shù)據(jù)間的比較求出動(dòng)作矢量，或根據(jù)動(dòng)作矢量檢測(cè)運(yùn)動(dòng)物體塊。
價(jià)值算出部108根據(jù)動(dòng)作矢量或運(yùn)動(dòng)物體塊等，算出幀圖像數(shù)據(jù)的后述的評(píng)價(jià)值。抽取部109根據(jù)評(píng)價(jià)值，抽取在時(shí)間序列上連續(xù)的幀圖像數(shù)據(jù)的集合(下面稱為幀群)。抽取部109從各場(chǎng)景中抽取1個(gè)幀群。摘要?jiǎng)討B(tài)圖像生成部110連接抽取的幀群，生成摘要?jiǎng)討B(tài)圖像數(shù)據(jù)，輸出到CD-R/RW驅(qū)動(dòng)器140內(nèi)的CD-RW或數(shù)字?jǐn)z像機(jī)30、或硬盤中。摘要?jiǎng)討B(tài)圖像生成控制部102整體控制以上各部的摘要?jiǎng)討B(tài)圖像生成動(dòng)作。
另外，也可具備利用摘要?jiǎng)討B(tài)圖像數(shù)據(jù)，使摘要?jiǎng)討B(tài)圖像在顯示器150上顯示的顯示部。
A2、評(píng)價(jià)值的算出及幀群的抽取評(píng)價(jià)值算出部108就變焦、搖場(chǎng)景、靜止、運(yùn)動(dòng)物體位置、運(yùn)動(dòng)物體大小、膚色大小等項(xiàng)目分別評(píng)價(jià)幀圖像數(shù)據(jù)，以算出評(píng)價(jià)值。
圖3是用于說(shuō)明幀圖像數(shù)據(jù)的評(píng)價(jià)值的說(shuō)明圖。圖3(a)是選出動(dòng)態(tài)圖像的5張幀圖像并進(jìn)行示例的圖。從左側(cè)起按時(shí)間序列圖示幀圖像。圖3(a)中示出的幀圖像不連續(xù)，在從左側(cè)起第n張(n＝1～4)幀圖像和第n+1張幀圖像之間，就動(dòng)態(tài)圖像而言存在多張幀圖像，但這里省略圖示。圖3(b)～(g)是就各項(xiàng)表示幀圖像數(shù)據(jù)的評(píng)價(jià)值之時(shí)刻變化的曲線。曲線的時(shí)刻對(duì)應(yīng)再生了動(dòng)態(tài)圖像時(shí)從再生開始的經(jīng)過(guò)時(shí)間。曲線通過(guò)用線連結(jié)在再生動(dòng)態(tài)圖像時(shí)在各經(jīng)過(guò)時(shí)間顯示的幀圖像數(shù)據(jù)的評(píng)價(jià)值來(lái)表示。另外，示出圖3(a)的各幀圖像數(shù)據(jù)的評(píng)價(jià)值在該幀圖像中央下方位置附近表示的曲線。
圖3(b)是評(píng)價(jià)值「變焦」的曲線?！缸兘埂故顷P(guān)于變焦操作的評(píng)價(jià)值。所謂變焦操作是放大、縮小被攝體的相機(jī)操作。評(píng)價(jià)值算出部108使用變焦操作函數(shù)、變焦結(jié)束函數(shù)等2種函數(shù)，算出評(píng)價(jià)值「變焦」。變焦操作函數(shù)是開始變焦操作后的經(jīng)過(guò)時(shí)間越大輸出越大的「變焦」、傾角為正的一次函數(shù)。變焦結(jié)束函數(shù)是開始變焦后的時(shí)間經(jīng)過(guò)越大輸出越小的「變焦」、傾角為負(fù)的一次函數(shù)。
評(píng)價(jià)值算出部108從開始變焦操作的時(shí)刻起到變焦操作結(jié)束、經(jīng)過(guò)30幀之前使用變焦操作函數(shù)，從變焦操作結(jié)束、經(jīng)過(guò)了30幀的時(shí)刻起使用變焦結(jié)束函數(shù)。變焦結(jié)束函數(shù)僅預(yù)先確定傾角。評(píng)價(jià)值算出部108求出碎片，以使由變焦結(jié)束函數(shù)求出的開頭的「變焦」與由變焦操作函數(shù)求出的最后的「變焦」一致。評(píng)價(jià)值算出部108到輸入0以下的值之前使用變焦結(jié)束函數(shù)?！缸兘埂篂?以下的值時(shí)修正成值0。評(píng)價(jià)值算出部108設(shè)在從開始變焦操作到輸出0以下的「變焦」之前的時(shí)間中未出現(xiàn)的幀圖像數(shù)據(jù)之「變焦」為值0。
變焦操作中及其后的幀圖像認(rèn)為是拍攝者特別想拍攝的幀圖像，如上述那樣設(shè)定變焦函數(shù)。關(guān)于變焦操作開始時(shí)或變焦操作結(jié)束時(shí)的檢測(cè)方法，將后述。
在變焦操作中，稱放大被攝體像的操作為推攝(zoom in)，稱縮小被攝體像的操作為拉攝(zoom out)。在推攝、拉攝兩者中使用變焦操作函數(shù)、變焦結(jié)束函數(shù)。在圖3(a)的幀圖像中，自左側(cè)起從第1張幀圖像開始推攝，自左側(cè)起在第2張幀圖像中結(jié)束推攝。因此，圖3(b)的評(píng)價(jià)值「變焦」如曲線所示那樣變動(dòng)。
圖3(c)是評(píng)價(jià)值「搖場(chǎng)景」的曲線?！笓u場(chǎng)景」是關(guān)于搖場(chǎng)景操作的評(píng)價(jià)值。所謂「搖場(chǎng)景」是固定相機(jī)的位置不變，改變相機(jī)的方向，以拍攝寬的范圍的操作。評(píng)價(jià)值算出部108通過(guò)2個(gè)搖場(chǎng)景函數(shù)的函數(shù)算出評(píng)價(jià)值「搖場(chǎng)景」。2個(gè)搖場(chǎng)景函數(shù)是檢測(cè)搖場(chǎng)景操作開始、結(jié)束后的幀圖像數(shù)據(jù)使用的、與前述2個(gè)變焦函數(shù)相同結(jié)構(gòu)的函數(shù)。并且，使用2個(gè)搖場(chǎng)景函數(shù)的時(shí)間條件也與2個(gè)變焦函數(shù)相同。評(píng)價(jià)值算出部108算出除使用搖場(chǎng)景函數(shù)的時(shí)間之外的「搖場(chǎng)景」為值0。認(rèn)為搖場(chǎng)景操作中及其后的幀圖像是拍攝者特別想拍攝的幀圖像，如上面那樣設(shè)定搖場(chǎng)景函數(shù)。后述搖場(chǎng)景操作開始或搖場(chǎng)景操作結(jié)束的檢測(cè)方法。圖3(a)的幀圖像中，由于未進(jìn)行搖場(chǎng)景操作，圖3(c)的評(píng)價(jià)值如曲線所示那樣為值0不變。
圖3(d)是評(píng)價(jià)值「靜止」的曲線?！胳o止」是關(guān)于背景動(dòng)作的評(píng)價(jià)值。評(píng)價(jià)值算出部108通過(guò)靜止函數(shù)的函數(shù)算出評(píng)價(jià)值「靜止」。靜止函數(shù)是若輸入背景動(dòng)作的大小(下面簡(jiǎn)稱動(dòng)作的大小為速度)、則輸出「靜止」的函數(shù)。靜止函數(shù)，速度越接近于0輸出越大的值。另外，速度若變?yōu)橐?guī)定值以上，則輸出值0。認(rèn)為背景靜止的場(chǎng)面的幀圖像是拍攝者特別想拍攝的幀圖像，如上面那樣設(shè)定靜止函數(shù)。后面敘述背景速度的算出方法。圖3(a)的幀圖像在從左側(cè)起第二張幀圖像之前背景的動(dòng)作依次變小，從第2張幀圖像開始背景靜止。因此，圖3(d)的評(píng)價(jià)值如曲線表示那樣動(dòng)作。
圖3(e)是評(píng)價(jià)值「運(yùn)動(dòng)物體位置」的曲線。「運(yùn)動(dòng)物體位置」是關(guān)于運(yùn)動(dòng)物體(被攝體)的位置的評(píng)價(jià)值。另外，下面說(shuō)的運(yùn)動(dòng)物體是指在幀圖像內(nèi)最大的運(yùn)動(dòng)物體。評(píng)價(jià)值算出部108通過(guò)稱為運(yùn)動(dòng)物體位置函數(shù)的函數(shù)算出評(píng)價(jià)值「運(yùn)動(dòng)物體位置」。運(yùn)動(dòng)物體位置函數(shù)是若輸入運(yùn)動(dòng)物體在幀圖像內(nèi)的位置，則輸出評(píng)價(jià)值「運(yùn)動(dòng)物體位置」的函數(shù)。運(yùn)動(dòng)物體位置函數(shù)作為運(yùn)動(dòng)物體的位置，輸入越接近幀圖像中央的值，輸出越大的值。另外，作為運(yùn)動(dòng)物體的位置，在輸入包含幀圖像中央的規(guī)定范圍以外的值時(shí)，輸出值0。認(rèn)為運(yùn)動(dòng)物體在中央的場(chǎng)面的幀圖像是拍攝者特別想拍攝的幀圖像，如上面那樣設(shè)定運(yùn)動(dòng)物體位置函數(shù)。后述運(yùn)動(dòng)物體位置的算出方法。在圖3(a)的幀圖像中，從自左側(cè)起第三張幀圖像開始，運(yùn)動(dòng)物體(人物)逐漸向幀圖像的中央移動(dòng)，在第4張幀圖像中運(yùn)動(dòng)物體(人物)大致位于幀圖像的中央。而且，從第4張幀圖像開始，運(yùn)動(dòng)物體(人物)從中央逐漸向左方向移動(dòng)。因此，圖3(e)的評(píng)價(jià)值如曲線所示那樣變動(dòng)。
圖3(f)是評(píng)價(jià)值「運(yùn)動(dòng)物體大小」的曲線?！高\(yùn)動(dòng)物體大小」是關(guān)于幀圖像內(nèi)的運(yùn)動(dòng)物體大小的評(píng)價(jià)值。評(píng)價(jià)值算出部108通過(guò)稱為運(yùn)動(dòng)物體大小函數(shù)的函數(shù)算出評(píng)價(jià)值「運(yùn)動(dòng)物體大小」。運(yùn)動(dòng)物體大小函數(shù)是若輸入幀圖像內(nèi)的運(yùn)動(dòng)物體大小、則輸出評(píng)價(jià)值「運(yùn)動(dòng)物體大小」的函數(shù)。運(yùn)動(dòng)物體大小函數(shù)，輸入越大的值、輸出越大的值。另外，在輸入規(guī)定值以下的值時(shí)，輸出值0。認(rèn)為拍攝運(yùn)動(dòng)物體大的幀圖像是拍攝者特別想拍攝的幀圖像，如上述那樣設(shè)定運(yùn)動(dòng)物體大小函數(shù)。后述運(yùn)動(dòng)物體大小的算出方法。在圖3(a)的幀圖像中，由于從自左側(cè)起第1張幀圖像開始，運(yùn)動(dòng)物體逐漸變大，從第2張幀圖像開始運(yùn)動(dòng)物體保持恒定的大小，所以圖3(f)的評(píng)價(jià)值如曲線所示那樣變動(dòng)。
圖3(g)是評(píng)價(jià)值「膚色大小」的曲線。「膚色大小」是關(guān)于幀圖像內(nèi)的膚色大小的評(píng)價(jià)值。評(píng)價(jià)值算出部108通過(guò)稱為膚色大小函數(shù)的函數(shù)算出評(píng)價(jià)值「膚色大小」。膚色大小函數(shù)是若輸入幀圖像內(nèi)的膚色大小、則輸出評(píng)價(jià)值「膚色大小」的函數(shù)。膚色大小函數(shù)，輸入越大的值、輸出越大的值。另外，在輸入規(guī)定值以下的值時(shí)輸出值0。認(rèn)為拍攝膚色大的幀圖像是通過(guò)放大拍攝人物的幀圖像，是拍攝者特別想拍攝的幀圖像，這樣地設(shè)定。后述膚色大小的算出方法。在圖3(a)的幀圖像中，由于從自左側(cè)起第1張幀圖像開始，膚色逐漸變大，從第2張幀圖像開始膚色保持恒定大小，所以圖3(g)的評(píng)價(jià)值如曲線所示那樣變動(dòng)。
以上，為算出評(píng)價(jià)值而使用的函數(shù)可各式各樣地設(shè)定。例如，用于算出評(píng)價(jià)值「靜止」的靜止函數(shù)也可是根據(jù)作為背景速度變?yōu)?后的第幾號(hào)的幀圖像數(shù)據(jù)，輸出不同的值。既便涉及運(yùn)動(dòng)物體位置，也可在運(yùn)動(dòng)物體的位置變?yōu)橹醒胫螅鶕?jù)是第幾幀圖案數(shù)據(jù)，輸出不同的值。另外，除以上的評(píng)價(jià)值之外，評(píng)價(jià)值算出部108也可算出關(guān)于并進(jìn)及運(yùn)動(dòng)物體的動(dòng)作速度的評(píng)價(jià)值。所謂并進(jìn)就是如馬拉松轉(zhuǎn)播那樣，運(yùn)動(dòng)物體存在于幀圖像的中央，背景動(dòng)作。所謂運(yùn)動(dòng)物體的動(dòng)作速度就是相對(duì)于運(yùn)動(dòng)物體的背景的相對(duì)速度。在運(yùn)動(dòng)物體的動(dòng)作速度為規(guī)定值以上時(shí)，使運(yùn)動(dòng)物體的動(dòng)作速度相關(guān)的評(píng)價(jià)值為值0。
下面，說(shuō)明變焦操作的開始或結(jié)束、搖場(chǎng)景操作的開始或結(jié)束的檢測(cè)方法。變焦操作的開始或結(jié)束、搖場(chǎng)景操作的開始或結(jié)束根據(jù)動(dòng)作矢量來(lái)檢測(cè)。所謂動(dòng)作矢量是表示可將幀圖像分割成多個(gè)的各塊的圖案在從1個(gè)幀圖像到另一個(gè)幀圖像之間怎樣移動(dòng)的矢量。塊的圖案移動(dòng)越大，即該塊的動(dòng)作矢量越大，該塊的圖案表示的運(yùn)動(dòng)物體移動(dòng)越快。后述動(dòng)作矢量的算出方法，下面設(shè)已算出動(dòng)作矢量來(lái)進(jìn)行說(shuō)明。
圖4是用于表示變焦操作開始·結(jié)束時(shí)的幀圖像數(shù)據(jù)、搖場(chǎng)景操作開始·結(jié)束時(shí)的幀圖像數(shù)據(jù)之檢測(cè)方法的說(shuō)明圖。在動(dòng)態(tài)圖像數(shù)據(jù)中，各塊的動(dòng)作矢量m如圖4(a)所示，在從幀圖像外側(cè)開始向中央時(shí)，評(píng)價(jià)值算出部108因而判斷為開始推攝，并檢測(cè)該幀圖像數(shù)據(jù)為開始了變焦操作的幀圖像數(shù)據(jù)。開始變焦操作之后，各塊的動(dòng)作矢量m如圖4(a)所示，在未從幀圖像的外側(cè)朝向中央的時(shí)刻，檢測(cè)該幀圖像數(shù)據(jù)為變焦操作結(jié)束了的幀圖像數(shù)據(jù)。
各塊的動(dòng)作矢量m如圖4(b)所示，在從幀圖像的中央開始向外側(cè)時(shí)，評(píng)價(jià)值算出部108因而判斷為開始拉攝，檢測(cè)該幀圖像數(shù)據(jù)為開始變焦操作的幀圖像數(shù)據(jù)。開始變焦操作之后，各塊的動(dòng)作矢量m如圖4(b)，在未從幀圖像的外側(cè)朝向中央的時(shí)刻，檢測(cè)該幀圖像數(shù)據(jù)為變焦操作結(jié)束了的幀圖像數(shù)據(jù)。
而且，在動(dòng)態(tài)圖像數(shù)據(jù)中，作為間位(meta)數(shù)據(jù)，有時(shí)附加表示是否按攝像機(jī)的變焦按鈕的變焦按鈕操作信息。開始了變焦操作的幀圖像數(shù)據(jù)或變焦操作結(jié)束了的幀圖像數(shù)據(jù)也可根據(jù)這樣的變焦按鈕操作信息來(lái)檢測(cè)。
另一方面，開始了搖場(chǎng)景操作的幀圖像或結(jié)束了搖場(chǎng)景操作的幀圖像根據(jù)整個(gè)幀圖像的錯(cuò)(ズレ)S來(lái)檢測(cè)。所謂錯(cuò)位S是表示在從1個(gè)幀圖像到另一幀圖像之間整個(gè)幀圖像沿怎樣的方向移動(dòng)的矢量。改變攝像機(jī)的方向的速度越大，錯(cuò)位S的大小變得越大。如圖4(c)所示，在時(shí)間序列上連續(xù)的規(guī)定數(shù)量以上的幀圖像中，在錯(cuò)位S的方向變?yōu)橄嗤较驎r(shí)，判斷為開始搖場(chǎng)景操作。而且，檢測(cè)錯(cuò)位S為相同方向的幀圖像數(shù)據(jù)中開頭的幀圖像數(shù)據(jù)為開始搖場(chǎng)景操作的幀圖像數(shù)據(jù)。而且，檢測(cè)錯(cuò)位S為相同方向的幀圖像數(shù)據(jù)中最后的幀圖像數(shù)據(jù)為結(jié)束搖場(chǎng)景操作的幀圖像。
下面，說(shuō)明各幀圖像的背景速度或運(yùn)動(dòng)物體位置、運(yùn)動(dòng)物體大小的算出方法。這些值根據(jù)作為動(dòng)作矢量大小超過(guò)規(guī)定值的塊之集合的運(yùn)動(dòng)物體塊來(lái)算出。運(yùn)動(dòng)物體塊表示的圖案可推斷為運(yùn)動(dòng)物體。在幀圖像內(nèi)存在多個(gè)運(yùn)動(dòng)物體時(shí)，群集(clustering)動(dòng)作矢量的大小超過(guò)規(guī)定值的塊，求出多個(gè)運(yùn)動(dòng)物體塊。圖5是表示運(yùn)動(dòng)物體mv的說(shuō)明圖。
評(píng)價(jià)值算出部108根據(jù)運(yùn)動(dòng)物體塊以外的塊(下面稱為背景塊)的動(dòng)作矢量的大小，算出背景的速度。也可設(shè)各背景塊的動(dòng)作矢量大小的合計(jì)值為背景的速度。也可設(shè)各背景塊的動(dòng)作矢量大小的平均值為背景的速度。在這里，設(shè)平均值為背景的速度。
評(píng)價(jià)值算出部108算出運(yùn)動(dòng)物體塊的重心，以作為運(yùn)動(dòng)物體位置。另外，評(píng)價(jià)值算出部108算出運(yùn)動(dòng)物體塊的大小，以作為運(yùn)動(dòng)物體大小。另外，運(yùn)動(dòng)物體大小在運(yùn)動(dòng)物體塊是多個(gè)時(shí)，也可是全部運(yùn)動(dòng)物體塊的大小。
下面，說(shuō)明膚色大小的檢測(cè)方法。在下式中，膚色的區(qū)域可作為具有滿足0.1＜H＜0.9且G＜B的RGB值的象素的集合來(lái)求出。
H(色調(diào))＝1.732(G-B)/(2R-G-B) (1)S(彩度)＝{(B-R)2+(R-G)2+(G-B)2}/3 (2)V(亮度)＝R+G+B (3)評(píng)價(jià)值算出部108算出幀圖像中膚色象素的數(shù)量，以作為膚色大小。另外，膚色大小也可設(shè)為運(yùn)動(dòng)物體塊中膚色象素的數(shù)量。
接著，說(shuō)明以如上所述求出的評(píng)價(jià)值為基礎(chǔ)，抽取幀群的方法。評(píng)價(jià)值算出部108按每個(gè)幀圖像數(shù)據(jù)相加如上所述求出的各項(xiàng)評(píng)價(jià)值。
圖6是表示合計(jì)圖3(b)～(g)的各評(píng)價(jià)值求出的評(píng)價(jià)值「合計(jì)」的說(shuō)明圖。其中，比圖3(b)～(g)延長(zhǎng)橫軸來(lái)表示。抽取部109抽取圖6的評(píng)價(jià)值「合計(jì)」為閾值以上的幀群。例如，在使用圖6曲線中的閾值b時(shí)，抽取相當(dāng)于時(shí)刻范圍A的幀群(下面稱為幀群A)、相當(dāng)于時(shí)刻范圍C的幀群(下面稱為幀群C)和相當(dāng)于時(shí)刻范圍D的幀群(下面稱為幀群D)。
在本實(shí)施例中，為了生成在用戶可識(shí)別的程度下再生1個(gè)場(chǎng)面的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)，附加幀群由數(shù)量比規(guī)定數(shù)大的數(shù)量的幀構(gòu)成的條件。這時(shí)，如幀群D那樣，不抽取幀數(shù)少、再生時(shí)間短的幀群。
在本實(shí)施例中，抽取部109從分割后的場(chǎng)景中僅抽取1個(gè)幀群。因此，如情況A(CASE A)那樣，在1個(gè)場(chǎng)景中2個(gè)幀群A、C成為抽取候補(bǔ)時(shí)，抽取幀群中幀群圖像數(shù)據(jù)的評(píng)價(jià)值的合計(jì)大者。在這里，由于(幀群A的評(píng)價(jià)值的合計(jì))＞(幀群C的評(píng)價(jià)值的合計(jì))，所以抽取部109抽取幀群A。另外，也可抽取幀群中評(píng)價(jià)值的最大值大者。在這里，由于(幀群A的評(píng)價(jià)值的最大值)＞(幀群C的評(píng)價(jià)值的最大值)，所以抽取幀群A。
在使用閾值C時(shí)，無(wú)論是情況A還是情況B(CASE B)，都不從1個(gè)場(chǎng)景中抽取全部幀群。在從1個(gè)場(chǎng)景中至少抽取1個(gè)幀群時(shí)，調(diào)整閾值(在圖6的實(shí)例中，閾值c→閾值a或b)，至少抽取1個(gè)幀群。
接著，說(shuō)明使用閾值b的情況。在本實(shí)施例中，在抽取的幀群A和幀群C的間隔(時(shí)刻范圍B)窄時(shí)，與幀群A與幀群C一起抽取相當(dāng)于時(shí)刻范圍B的幀群(下面稱為幀群B)(圖6的情況2)。這是為了防止摘要?jiǎng)討B(tài)圖像變成碎片。在本實(shí)施例中，在幀數(shù)比規(guī)定值Th(＝150)小時(shí)，判斷為時(shí)刻范圍窄。在幀群B的幀數(shù)為規(guī)定值Th以上時(shí)，幀群B不抽取(圖6的情況1)。另外，如情況B那樣，在未將一起抽取的幀群(幀群A、B、C的集合)收集在1個(gè)場(chǎng)景中時(shí)，既便時(shí)刻范圍B窄，幀群B也不抽取。這是由于因?yàn)閳?chǎng)景中斷，所以不必連續(xù)再生幀圖像。
在本實(shí)施例中，對(duì)應(yīng)于摘要?jiǎng)討B(tài)圖像的再生時(shí)間的希望值，限定抽取的幀圖像的總數(shù)(下面稱為總幀數(shù))。抽取部109在抽取出的總幀數(shù)不在規(guī)定范圍內(nèi)時(shí)，調(diào)整閾值，再次進(jìn)行幀群的抽取。例如，使用閾值b抽取幀群、總幀數(shù)不在規(guī)定范圍內(nèi)時(shí)，將閾值變更成閾值a，再次抽取幀群。
另外，抽取部109也可如時(shí)刻范圍A1、時(shí)刻范圍C1所示，抽取評(píng)價(jià)值上升或保持恒定值的范圍的幀群。
并且，圖6的評(píng)價(jià)值是單純地相加圖3(b)～(g)各評(píng)價(jià)值而求出的，但也可是評(píng)價(jià)值算出部108分別對(duì)圖3(b)～(g)各評(píng)價(jià)值進(jìn)行加權(quán)后相加，算出作為抽取部109的抽取基準(zhǔn)的評(píng)價(jià)值。
A3第1實(shí)施例的處理下面，說(shuō)明動(dòng)態(tài)圖像處理裝置100的處理。圖7是表示動(dòng)態(tài)圖像處理裝置100的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)生成處理的說(shuō)明圖。首先，動(dòng)態(tài)圖像處理裝置100通過(guò)用戶的輸入，取得動(dòng)態(tài)圖像數(shù)據(jù)或摘要?jiǎng)討B(tài)圖像的再生時(shí)間的希望值(步驟S100)。而且，場(chǎng)景分割所取得的動(dòng)態(tài)圖像數(shù)據(jù)(步驟S200)。場(chǎng)景分割通過(guò)使用顏色或亮度的直方圖、聲音數(shù)據(jù)等動(dòng)態(tài)圖像數(shù)據(jù)的特征量并比較各幀圖像數(shù)據(jù)的已知技術(shù)來(lái)進(jìn)行。根據(jù)再生時(shí)間的希望值，算出對(duì)應(yīng)于該希望值的總幀數(shù)的希望范圍。由于恰好抽取再生時(shí)間為希望值數(shù)量的幀圖像數(shù)據(jù)是困難的，所以為了持有若干余裕，算出希望范圍。
接著，檢測(cè)各幀圖像的動(dòng)作(步驟S300)。圖8是表示各幀圖像的動(dòng)作檢測(cè)處理的流程圖。在本處理中，首先，動(dòng)態(tài)圖像處理裝置100從動(dòng)態(tài)圖像的多個(gè)幀圖像中，選擇1個(gè)作為檢測(cè)動(dòng)作的對(duì)象的基準(zhǔn)幀圖像n，檢測(cè)基準(zhǔn)幀圖像n與其之前的幀圖像(n-1)的整個(gè)幀圖像的錯(cuò)位S(步驟S301)。錯(cuò)位S例如可使用梯度法或圖案匹配法等已知的技術(shù)來(lái)檢測(cè)。
這里檢測(cè)的錯(cuò)位S相當(dāng)于前述的、用于檢測(cè)搖場(chǎng)景的錯(cuò)位S。
在圖中，示出在幀圖像(n-1)和基準(zhǔn)幀圖像n中拍攝山為背景、球?yàn)檫\(yùn)動(dòng)物體的實(shí)例。如果比較幀圖像(n-1)和基準(zhǔn)幀圖像n，則可知山向幀圖像的右下方移動(dòng)，球向幀圖像的右方移動(dòng)，另外，球的移動(dòng)量比山的移動(dòng)量相對(duì)大，山在幀圖像內(nèi)占的面積也比球的面積大。若對(duì)這樣的幀圖像適用上述勾配法或圖案匹配法，則在整個(gè)幀圖像中占的面積比例大的山的錯(cuò)位比在整個(gè)幀圖像中占的面積小的球的錯(cuò)位優(yōu)先檢測(cè)。即，整個(gè)幀圖像的錯(cuò)位與山的錯(cuò)位幾乎一致。
另外，在2個(gè)幀之間產(chǎn)生上下左右方向的并進(jìn)錯(cuò)位和旋轉(zhuǎn)方向的旋轉(zhuǎn)錯(cuò)位，但這里為簡(jiǎn)化說(shuō)明，設(shè)不產(chǎn)生旋轉(zhuǎn)錯(cuò)位來(lái)說(shuō)明。
在檢測(cè)了整個(gè)幀圖像的錯(cuò)位S后，動(dòng)態(tài)圖像處理裝置100將基準(zhǔn)幀圖像n和其之前的幀圖像(n-1)分別分割成多個(gè)塊(步驟S302)。在圖中，示出將各個(gè)幀圖像沿橫方向分割成4份，沿縱方向分割成3份的實(shí)例。
在分割幀圖像后，動(dòng)態(tài)圖像處理裝置100通過(guò)檢測(cè)對(duì)應(yīng)于基準(zhǔn)幀圖像n各塊的幀圖像(n-1)各塊的錯(cuò)位Sb(步驟S303)，得到各塊的錯(cuò)位Sb與整個(gè)錯(cuò)位S的差分，算出各塊的動(dòng)作矢量m(步驟S304)。在這里，算出的動(dòng)作矢量m相當(dāng)于前述的、檢測(cè)推攝或拉攝所用的動(dòng)作矢量。在圖示的實(shí)例中，拍攝球的右上方的塊之外的塊的錯(cuò)位Sb由于與在步驟S301中檢測(cè)出的整個(gè)幀圖像的錯(cuò)位S幾乎相等，所以被刪除，動(dòng)作矢量m變?yōu)榱恪H檢測(cè)右上方的塊的動(dòng)作矢量m。
接著，動(dòng)態(tài)圖像處理裝置100判斷動(dòng)作矢量m是否超過(guò)規(guī)定的閾值，作為運(yùn)動(dòng)物體，檢測(cè)超過(guò)規(guī)定閾值的動(dòng)作矢量m的塊(步驟S305)。在這里，檢測(cè)的運(yùn)動(dòng)物體的塊相當(dāng)于前述的、檢測(cè)靜止或運(yùn)動(dòng)物體位置或運(yùn)動(dòng)物體大小所用的運(yùn)動(dòng)物體塊。設(shè)置閾值是為了排除塊之間的輕微的錯(cuò)位(例如，微小的旋轉(zhuǎn)錯(cuò)位)。作為閾值，例如可設(shè)為30象素(pixel)。在圖示的實(shí)例中，基準(zhǔn)幀圖像n內(nèi)右上方的塊特定為運(yùn)動(dòng)物體塊。
對(duì)動(dòng)態(tài)圖像數(shù)據(jù)中除開頭的幀圖像數(shù)據(jù)之外的全部幀圖像數(shù)據(jù)，進(jìn)行以上的步驟S301～S305的處理。
再次返回圖7進(jìn)行說(shuō)明。動(dòng)態(tài)圖像處理裝置100接著根據(jù)步驟S300中檢測(cè)出的錯(cuò)位S、動(dòng)作矢量或運(yùn)動(dòng)物體塊，算出各幀圖像數(shù)據(jù)的評(píng)價(jià)值(步驟S400)。算出方法如在前項(xiàng)A2中所述，評(píng)價(jià)值算出部108就變焦、搖場(chǎng)景、靜止、運(yùn)動(dòng)物體位置、運(yùn)動(dòng)物體大小、膚色大小等項(xiàng)，分別算出評(píng)價(jià)值。而且，相加這些值，求出合計(jì)的評(píng)價(jià)值。
而且，以求出的合計(jì)的評(píng)價(jià)值為基礎(chǔ)，抽取摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中使用的幀群(步驟S500)。圖9是表示幀群的抽取處理的流程圖。動(dòng)態(tài)圖像處理裝置100檢索開頭場(chǎng)景中的各幀圖像數(shù)據(jù)的評(píng)價(jià)值，全部抽取包含于摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中的、成為候補(bǔ)的幀群(步驟S501)。具體地說(shuō)，抽取全部幀圖像數(shù)據(jù)的評(píng)價(jià)值為閾值以上的幀群。
接著，挑選抽取的幀群(步驟S502)。圖10是表示幀群的挑選處理的流程圖。在幀群的挑選處理中，在步驟S501中抽取的幀群為2以上時(shí)(步驟S503是)，控制(check)任意2個(gè)幀群的間隔(步驟S504)。這里所說(shuō)的間隔，是存在于2個(gè)幀群之間的幀圖像數(shù)據(jù)的數(shù)量，在圖6的實(shí)例中相當(dāng)于時(shí)刻范圍B。
在間隔比規(guī)定值小時(shí)(步驟S505否)，重新抽取幀群(步驟S506)。在重新抽取中，匯總間隔比規(guī)定值小的2個(gè)幀群、和存在于其間的幀圖像數(shù)據(jù)，作為1個(gè)幀群抽取。在圖6的實(shí)例中，幀群B的幀數(shù)比規(guī)定值Th小的情況(圖6的情況2)相當(dāng)于與幀群A和幀群C一起抽取相當(dāng)于時(shí)刻范圍B的幀群。如果調(diào)查在步驟S501中抽取的全部幀群的間隔，則前進(jìn)到下一步驟。另外，在步驟S501中抽取的幀群為1以下時(shí)(步驟S503否)，省略步驟S504～步驟S506的處理。
接著，動(dòng)態(tài)圖像處理裝置100判別是否抽取的幀群的幀圖像數(shù)比規(guī)定值大(步驟S507)。在幀圖像數(shù)據(jù)數(shù)為規(guī)定值以下時(shí)(步驟S507否)，從摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的候補(bǔ)中去除該幀群(步驟S508)。在圖6的實(shí)例中，相當(dāng)于幀群D。在幀群的幀圖像數(shù)據(jù)數(shù)比規(guī)定值大時(shí)(步驟S508是)，仍向候補(bǔ)中加入幀群，前進(jìn)到下一步驟。
再次返回圖9進(jìn)行說(shuō)明。接著，動(dòng)態(tài)圖像處理裝置100檢測(cè)在場(chǎng)景中在候補(bǔ)中剩余的幀群是否為1個(gè)以上(步驟S512)。
如果在場(chǎng)景中幀群為1個(gè)(步驟S512否)，則調(diào)整閾值(步驟S514)，再次返回場(chǎng)景的開頭(步驟S515)。而且，重復(fù)步驟S501以后的處理。所謂閾值處理，例如在圖6中相當(dāng)于從閾值b到閾值a變更閾值。在一定范圍內(nèi)增減閾值來(lái)調(diào)整。
在場(chǎng)景中，在候補(bǔ)中剩余的幀群為1個(gè)以上時(shí)(步驟S512是)，選擇抽取構(gòu)成幀群的各幀圖像數(shù)據(jù)之評(píng)價(jià)值的合計(jì)為最大的幀群(步驟S516)。這是因?yàn)樵u(píng)價(jià)值的合計(jì)最大的幀群可推測(cè)為最適宜表示該場(chǎng)景的幀群。在候補(bǔ)中剩余的幀群為1個(gè)時(shí)，省略步驟S516的處理。另外，省略步驟S516的處理，也可從1個(gè)場(chǎng)景中抽取2個(gè)以上的幀群。
而且，如果在動(dòng)態(tài)圖像數(shù)據(jù)最后之前處理結(jié)束(步驟S509否)，則移向下一場(chǎng)景(步驟S510)，就該場(chǎng)景重復(fù)步驟S501以后的處理。
在動(dòng)作圖像數(shù)據(jù)的最后之前處理結(jié)束時(shí)(步驟S517是)，檢測(cè)總幀數(shù)是否在希望范圍內(nèi)(步驟S519)。如果不在希望范圍內(nèi)(步驟S519否)，則調(diào)整閾值(步驟S520)。這里的閾值調(diào)整與步驟S514中的閾值調(diào)整相同，相當(dāng)于圖6中從閾值b到閾值a變更閾值。其中，在步驟S514中調(diào)整該場(chǎng)景中使用的閾值，但這里調(diào)整在整個(gè)動(dòng)態(tài)圖像數(shù)據(jù)中使用的閾值。閾值可在一定范圍內(nèi)增減來(lái)調(diào)整，也可根據(jù)規(guī)定函數(shù)(例如，設(shè)不足部分幀圖像數(shù)或過(guò)剩幀圖像數(shù)為變量的函數(shù))來(lái)調(diào)整。另外，調(diào)整閾值以成為按場(chǎng)景分類而不同的閾值。而且，返回動(dòng)態(tài)圖像數(shù)據(jù)的開頭(步驟S522)，清除此前的候補(bǔ)，再次從抽取開頭場(chǎng)景中的幀群開始。
總幀數(shù)在希望范圍內(nèi)時(shí)(步驟S519)，確定此前作為候補(bǔ)抽取出的幀群為是摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中使用的幀群，前進(jìn)到下一處理。
再次返回圖7進(jìn)行說(shuō)明。如果抽取幀圖像數(shù)據(jù)，則接著生成摘要?jiǎng)討B(tài)圖像數(shù)據(jù)(步驟S600)。摘要?jiǎng)討B(tài)圖像數(shù)據(jù)通過(guò)連接抽取出的幀群來(lái)生成。而且，輸出生成的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)(步驟S700)。輸出端是數(shù)字?jǐn)z像機(jī)30或CD-R/RW驅(qū)動(dòng)器140。用戶通過(guò)用數(shù)字?jǐn)z像機(jī)30等再生所輸出的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)，從而可觀看摘要?jiǎng)討B(tài)圖像。
A4第1實(shí)施例的效果根據(jù)上述實(shí)施例的動(dòng)態(tài)圖像處理裝置100，按每個(gè)幀圖像數(shù)據(jù)評(píng)價(jià)動(dòng)態(tài)圖像數(shù)據(jù)，可生成由適宜作摘要?jiǎng)討B(tài)圖像的幀圖像數(shù)據(jù)構(gòu)成的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。由于在1個(gè)場(chǎng)景內(nèi)摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中一定包含著1個(gè)幀群，所以不存在摘要?jiǎng)討B(tài)圖像內(nèi)未再生的場(chǎng)景。即，如果用戶再生摘要?jiǎng)討B(tài)圖像，則可觀看全部的場(chǎng)景，容易掌握整個(gè)動(dòng)態(tài)圖像。并且，由于包含于摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的幀群選擇場(chǎng)景中認(rèn)為最佳的幀群，所以用戶更容易掌握原來(lái)的整個(gè)動(dòng)態(tài)圖像。
另外，由于限定總幀數(shù)為已達(dá)到再生時(shí)間希望值的幀圖像數(shù)，所以可生成對(duì)應(yīng)于再生時(shí)間希望值的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)。在抽取的2個(gè)幀群的間隔窄時(shí)，通過(guò)連接兩者及存在于兩者間的幀圖像數(shù)據(jù)，可防止感到如中途切斷摘要?jiǎng)討B(tài)圖像那樣的不諧調(diào)。另外，在場(chǎng)景的交替期間內(nèi)，即便2個(gè)幀群的間隔窄，也不必連接兩者，通過(guò)不連接兩者，從而防止在摘要?jiǎng)討B(tài)圖像中包含評(píng)價(jià)低的幀圖像數(shù)據(jù)。并且，通過(guò)在摘要?jiǎng)討B(tài)圖像數(shù)據(jù)中使用幀圖像數(shù)據(jù)數(shù)為規(guī)定數(shù)以上的幀群，從而可防止1個(gè)場(chǎng)景過(guò)短、難以掌握摘要?jiǎng)討B(tài)圖像的內(nèi)容的事態(tài)。
A5第1實(shí)施例的變形例以上說(shuō)明了本發(fā)明的實(shí)施例，但本發(fā)明不限于此，可在不脫離其精神的范圍內(nèi)采用各種結(jié)構(gòu)。例如，在步驟512中幀群不是1個(gè)時(shí)，在步驟S508中存在去除的幀群時(shí)，也可不是調(diào)整閾值、再次抽取幀群，而是從去除的幀群中選擇最佳的幀群，包含在摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的候補(bǔ)中。這時(shí)，也可重新對(duì)該最佳幀群追加該最佳幀群前后的、任意數(shù)的幀圖像數(shù)據(jù)。在步驟S507中，也可追加不足的幀圖像數(shù)據(jù)數(shù)份。在選擇最佳幀群時(shí)，也可根據(jù)構(gòu)成幀群的各幀圖像數(shù)據(jù)的評(píng)價(jià)值之合計(jì)、或評(píng)價(jià)值的最大值來(lái)選擇。
實(shí)施例的處理必要時(shí)也可省略。例如，在無(wú)再生時(shí)間希望值時(shí)可省略步驟S519～步驟S522的處理。
B本發(fā)明第2實(shí)施例的圖像處理系統(tǒng)的結(jié)構(gòu)圖11是表示本發(fā)明第2實(shí)施例的圖像處理系統(tǒng)100的說(shuō)明圖。圖像處理系統(tǒng)100備有供給動(dòng)態(tài)圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)庫(kù)部30；從動(dòng)態(tài)圖像數(shù)據(jù)中抽取其一部分，以生成摘要圖像數(shù)據(jù)的個(gè)人計(jì)算機(jī)PC；提供所用的用戶接口的用戶接口部18。用戶接口部18具備顯示從動(dòng)態(tài)圖像數(shù)據(jù)庫(kù)部30供給的動(dòng)態(tài)圖像或后述的操作顯示畫面的顯示器18a；和接受來(lái)自用戶的輸入的鍵盤18b或鼠標(biāo)18c。
個(gè)人計(jì)算機(jī)PC備有執(zhí)行從動(dòng)態(tài)圖像數(shù)據(jù)生成摘要圖像數(shù)據(jù)的生成處理的圖像處理應(yīng)用程序10；管理動(dòng)態(tài)圖像數(shù)據(jù)庫(kù)部30或用戶接口部18等外部設(shè)備間的接口的接口部(I/F部)15。
圖像處理應(yīng)用程序10備有對(duì)每個(gè)場(chǎng)景分割動(dòng)態(tài)圖像數(shù)據(jù)的場(chǎng)景分割處理部11；評(píng)價(jià)動(dòng)態(tài)圖像數(shù)據(jù)的圖像評(píng)價(jià)部12；根據(jù)該評(píng)價(jià)，抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)抽取部13；按時(shí)間序列的順序連接所抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)，生成摘要圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)連接部14。另外，圖像評(píng)價(jià)部12在技術(shù)方案范圍中用作「動(dòng)態(tài)圖像評(píng)價(jià)部」及「靜止圖像評(píng)價(jià)部」。
動(dòng)態(tài)圖像數(shù)據(jù)庫(kù)部30具有數(shù)字?jǐn)z像機(jī)30a、DVD30b及硬盤30c來(lái)作為動(dòng)態(tài)圖像數(shù)據(jù)的供給源。動(dòng)態(tài)圖像數(shù)據(jù)在本實(shí)施例中，設(shè)為表示非交織方式的靜止圖像的幀圖像數(shù)據(jù)的集合。
圖12是表示顯示器18a中顯示的圖像文件生成處理中的操作顯示畫面200的說(shuō)明圖。操作顯示畫面200包含選擇作為處理對(duì)象的原圖像數(shù)據(jù)的種類的原圖像數(shù)據(jù)種類選擇開關(guān)121；從選擇的種類的原圖像數(shù)據(jù)中選擇1個(gè)所用的原圖像數(shù)據(jù)選擇窗口122；顯示由作為處理對(duì)象的原圖像數(shù)據(jù)表示的圖像的圖像顯示區(qū)域123；靜止圖像數(shù)據(jù)生成處理用的操作按鈕。另外，在圖12的實(shí)例中，示出在原圖像數(shù)據(jù)選擇窗口122中選擇了動(dòng)態(tài)圖像數(shù)據(jù)Gs的狀態(tài)。
在動(dòng)態(tài)圖像數(shù)據(jù)的摘要圖像生成處理用的操作按鈕中包含用于自動(dòng)生成摘要圖像數(shù)據(jù)的摘要圖像自動(dòng)制作按鈕124；和用于控制圖像顯示區(qū)域123中顯示的動(dòng)態(tài)圖像或摘要手動(dòng)制作的各種按鈕。在控制動(dòng)態(tài)圖像用的各種按鈕中包含再生按鈕231、停止按鈕232、暫停按鈕233、倒退按鈕234、快進(jìn)按鈕235及動(dòng)態(tài)圖像抽取按鈕236。動(dòng)態(tài)圖像抽取按鈕236是用于手動(dòng)抽取動(dòng)態(tài)圖像數(shù)據(jù)的按鈕。
在上述說(shuō)明的系統(tǒng)結(jié)構(gòu)中，若按下摘要圖像自動(dòng)制作按鈕124，則如下面所示那樣，通過(guò)在從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)的同時(shí)，連接抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)，從而自動(dòng)生成摘要圖像數(shù)據(jù)。
C本發(fā)明第2實(shí)施例的摘要圖像數(shù)據(jù)生成處理圖13是表示本發(fā)明第2實(shí)施例的摘要圖像數(shù)據(jù)生成處理的內(nèi)容的流程圖。在步驟S10000中，圖像處理應(yīng)用程序10(圖11)從動(dòng)態(tài)圖像數(shù)據(jù)庫(kù)部30接受動(dòng)態(tài)圖像數(shù)據(jù)的供給。所供給的動(dòng)態(tài)圖像數(shù)據(jù)在未圖示的存儲(chǔ)器中緩沖的同時(shí)，在圖像顯示區(qū)域123(圖12)中顯示。
圖14是表示本發(fā)明實(shí)施例中使用的動(dòng)態(tài)圖像數(shù)據(jù)的結(jié)構(gòu)之一實(shí)例的說(shuō)明圖。動(dòng)態(tài)圖像數(shù)據(jù)是在1幀時(shí)間為33ms的時(shí)間序列上連接的幀圖像數(shù)據(jù)的集合，對(duì)各幀圖像數(shù)據(jù)按時(shí)間序列的順序附加幀序號(hào)。在圖14的實(shí)例中，動(dòng)態(tài)圖像數(shù)據(jù)表示馬拉松選手正在行走的情形。
在步驟S20000中，場(chǎng)景分割處理部11執(zhí)行場(chǎng)景分割處理。所謂場(chǎng)景分割處理，是對(duì)每個(gè)場(chǎng)景分割動(dòng)態(tài)圖像數(shù)據(jù)的處理。在本實(shí)施例中，所謂「每個(gè)場(chǎng)景」意味在動(dòng)態(tài)圖像數(shù)據(jù)取得時(shí)相機(jī)的記錄開始和記錄停止的期間。即，各場(chǎng)景因記錄開始而開始，因記錄停止而結(jié)束。場(chǎng)景分割處理例如可通過(guò)識(shí)別圖像的急劇變化來(lái)實(shí)現(xiàn)。
圖15是表示本實(shí)施例的第2第2實(shí)施例中的場(chǎng)景分割處理結(jié)果的表。在該表中，所謂分割場(chǎng)景序號(hào)是對(duì)分割的各場(chǎng)景按時(shí)間序列的順序附加的序號(hào)。開始時(shí)刻和結(jié)束時(shí)刻以4組2位的數(shù)字表示各場(chǎng)景的開始時(shí)刻和結(jié)束時(shí)刻。具體地說(shuō)，開頭的2位表示時(shí)間，下2位表示分，再下2位表示秒，且最后2位表示各秒中的幀序號(hào)。例如4號(hào)場(chǎng)景構(gòu)成為從0時(shí)1分12秒的第13號(hào)幀到0時(shí)1分13秒的第15號(hào)幀的幀集合。
在步驟S30000(圖13)中，圖像評(píng)價(jià)部12執(zhí)行幀圖像評(píng)價(jià)處理。所謂幀圖像評(píng)價(jià)處理，是數(shù)值化幀圖像數(shù)據(jù)表示的靜止圖像的重要性，以作為靜止圖像評(píng)價(jià)值的處理。在該評(píng)價(jià)方法中存在各種方法，例如可利用特開2002-142189號(hào)公報(bào)或特開平10-224736號(hào)公報(bào)中公開的方法。以往，對(duì)應(yīng)于構(gòu)成動(dòng)態(tài)圖像的多個(gè)靜止圖像的各種重要性來(lái)判斷動(dòng)態(tài)圖像的重要性。
在步驟S40000中，圖像評(píng)價(jià)部12執(zhí)行動(dòng)態(tài)圖像評(píng)價(jià)處理。動(dòng)態(tài)圖像評(píng)價(jià)處理是與上述的評(píng)價(jià)方法不同，還考慮構(gòu)成動(dòng)態(tài)圖像的多個(gè)靜止圖像各自的時(shí)間序列信息，來(lái)評(píng)價(jià)構(gòu)成動(dòng)態(tài)圖像的各個(gè)靜止圖像數(shù)據(jù)的評(píng)價(jià)方法。
圖16是表示本發(fā)明第2實(shí)施例的動(dòng)態(tài)圖像評(píng)價(jià)處理的內(nèi)容的流程圖。在步驟S41000中，圖像評(píng)價(jià)部12對(duì)靜止圖像評(píng)價(jià)值進(jìn)行平滑化處理。平滑化處理例如可使用移動(dòng)平均濾波器來(lái)進(jìn)行。由此，可在時(shí)間序列上使靜止圖像評(píng)價(jià)值平滑。
在步驟S42000中，圖像評(píng)價(jià)部12執(zhí)行變化率算出處理。所謂變化率算出處理是算出執(zhí)行平滑化處理后變得平滑的靜止圖像評(píng)價(jià)值之變化率的處理。該變化率可表示各靜止圖像的重要性慢慢地提高后是趨向重要性為峰值的峰值圖像，還是超過(guò)峰值圖像。趨向峰值圖像的動(dòng)態(tài)圖像作為到達(dá)峰值圖像之前的心理準(zhǔn)備期間的動(dòng)態(tài)圖像是重要的。另外，超過(guò)峰值圖像后的圖像作為靜止圖像單體，即便重要性高，多數(shù)情況下用戶關(guān)心也少。因此，通過(guò)重點(diǎn)地抽取峰值圖像前的動(dòng)態(tài)圖像數(shù)據(jù)，可進(jìn)一步生成用戶希望的摘要圖像數(shù)據(jù)。
在步驟S430000中，圖像評(píng)價(jià)部12執(zhí)行動(dòng)態(tài)圖像評(píng)價(jià)值確定處理。在這里，所謂「動(dòng)態(tài)圖像評(píng)價(jià)值」是表示評(píng)價(jià)作為動(dòng)態(tài)圖像一部分的各靜止圖像數(shù)據(jù)的值，與用靜止圖像數(shù)據(jù)單體評(píng)價(jià)的靜止圖像評(píng)價(jià)值不同。在本實(shí)施例中，動(dòng)態(tài)圖像評(píng)價(jià)值確定處理是使用靜止圖像評(píng)價(jià)值和靜止圖像評(píng)價(jià)值的變化率來(lái)確定作為動(dòng)態(tài)圖像的一部分的幀圖像的評(píng)價(jià)值的處理。具體地說(shuō)，例如著眼于靜止圖像評(píng)價(jià)值的變化率的正負(fù)，在靜止圖像評(píng)價(jià)值的變化率為正時(shí)，將靜止圖像評(píng)價(jià)值直接確定為動(dòng)態(tài)圖像評(píng)價(jià)值，另外，在靜止圖像評(píng)價(jià)值的變化率為負(fù)時(shí)，確定靜止圖像評(píng)價(jià)值一律為0。另外，「動(dòng)態(tài)圖像評(píng)價(jià)值」相當(dāng)于技術(shù)方案范圍中的第2圖像評(píng)價(jià)值。
在步驟S50000(圖13)中，動(dòng)態(tài)圖像數(shù)據(jù)抽取部13執(zhí)行動(dòng)態(tài)圖像數(shù)據(jù)抽取處理。動(dòng)態(tài)圖像數(shù)據(jù)抽取處理是抽取動(dòng)態(tài)圖像評(píng)價(jià)值比規(guī)定的閾值Th大的、連續(xù)的多個(gè)幀圖像數(shù)據(jù)的集合的處理。
圖17是表示本發(fā)明第2實(shí)施例的動(dòng)態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說(shuō)明圖。該圖示出通過(guò)場(chǎng)景分割處理分割的某1個(gè)場(chǎng)景的靜止圖像評(píng)價(jià)值和動(dòng)態(tài)圖像評(píng)價(jià)值。在該圖中，為了容易區(qū)分兩者，在靜止圖像評(píng)價(jià)值的變化率為正時(shí)，確定靜止圖像評(píng)價(jià)值的2倍為動(dòng)態(tài)圖像評(píng)價(jià)值。另外，在靜止圖像評(píng)價(jià)值的變化率為負(fù)時(shí)，確定靜止圖像評(píng)價(jià)值一律為零。
如從圖17可知那樣，已知在從時(shí)刻T1到時(shí)刻T2間的時(shí)間P1r、和從時(shí)刻T3到時(shí)刻T4間的時(shí)間P2r中，動(dòng)態(tài)圖像評(píng)價(jià)值超過(guò)閾值th。這2個(gè)時(shí)間P1r、P2r是包含成為抽取候補(bǔ)的動(dòng)態(tài)圖像數(shù)據(jù)的時(shí)間。在本實(shí)施例中，從成為候補(bǔ)的動(dòng)態(tài)圖像數(shù)據(jù)中排除比規(guī)定時(shí)間短的數(shù)據(jù)。因?yàn)橥ǔＳ脩舨幌Ｍ浅６痰膭?dòng)態(tài)圖像。在本例中，時(shí)間P2r成為該場(chǎng)景中的抽取對(duì)象時(shí)間的一部分。
抽取對(duì)象時(shí)間在峰值圖像的后側(cè)僅延長(zhǎng)規(guī)定時(shí)間。具體地說(shuō)，抽取對(duì)象時(shí)間從時(shí)間P2r變更成時(shí)間P2e。這是由于與在峰值圖像直接切換場(chǎng)景相比，在峰值圖像后還有些動(dòng)態(tài)圖像的一方在峰值時(shí)動(dòng)態(tài)圖像不突然結(jié)束，所以最好是作為動(dòng)態(tài)圖像。這樣，不僅抽取峰值圖像的前側(cè)，還可抽取重點(diǎn)抽取峰值圖像前側(cè)的動(dòng)態(tài)圖像數(shù)據(jù)。
在步驟S60000中，動(dòng)態(tài)圖像數(shù)據(jù)連接部14執(zhí)行動(dòng)態(tài)圖像數(shù)據(jù)連接處理。所謂動(dòng)態(tài)圖像數(shù)據(jù)連接處理，是按時(shí)間序列的順序連接所抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)的處理。這樣連接后的動(dòng)態(tài)圖像數(shù)據(jù)成為摘要圖像數(shù)據(jù)。
這樣，在第2實(shí)施例中，由于可重點(diǎn)地抽取圖像的重要性為峰值的圖像前方的圖像，所以可在進(jìn)行各靜止圖像的時(shí)間序列的考慮之后，生成用戶希望的摘要圖像數(shù)據(jù)。并且，由于僅著眼于靜止圖像評(píng)價(jià)值之變化率的正負(fù)來(lái)進(jìn)行處理，所以存在可高速處理的優(yōu)點(diǎn)。
另外，在第2實(shí)施例中，在靜止圖像評(píng)價(jià)值的變化率為負(fù)時(shí)，確定靜止圖像評(píng)價(jià)值一律為零來(lái)確定動(dòng)態(tài)圖像評(píng)價(jià)值，但也可利用以下之一或組合來(lái)確定動(dòng)態(tài)評(píng)價(jià)值。
(1)設(shè)增大靜止圖像評(píng)價(jià)值在時(shí)間序列上的變化率為正的多個(gè)靜止圖像數(shù)據(jù)之靜止圖像評(píng)價(jià)值而得到的值為動(dòng)態(tài)圖像評(píng)價(jià)值。
(2)設(shè)降低靜止圖像評(píng)價(jià)值在時(shí)間序列上的變化率為負(fù)的多個(gè)圖像數(shù)據(jù)之靜止圖像評(píng)價(jià)值而得到的值為動(dòng)態(tài)圖像評(píng)價(jià)值。
另外，作為增大靜止圖像評(píng)價(jià)值的方法，例如有加上規(guī)定的正值的方法或乘以比1大的值的系數(shù)的方法。另外，作為降低圖像評(píng)價(jià)值的方法，例如有減去規(guī)定的正值的方法或乘以不足1的系數(shù)。
D本發(fā)明第3實(shí)施例的摘要圖像數(shù)據(jù)生成處理圖18是表示本發(fā)明第3實(shí)施例的動(dòng)態(tài)圖像數(shù)據(jù)抽取處理的內(nèi)容的說(shuō)明圖。第3實(shí)施例僅動(dòng)態(tài)圖像評(píng)價(jià)值的確定法與第2實(shí)施例不同，其他結(jié)構(gòu)相同。第3實(shí)施例的動(dòng)態(tài)圖像評(píng)價(jià)值的確定法是作為靜止圖像評(píng)價(jià)值的變化率乘以規(guī)定正系數(shù)k的值與靜止圖像評(píng)價(jià)值的和來(lái)算出的方法。示出這樣算出的2個(gè)動(dòng)態(tài)圖像評(píng)價(jià)值和靜止圖像評(píng)價(jià)值。2個(gè)動(dòng)態(tài)圖像評(píng)價(jià)值是通過(guò)使用2個(gè)規(guī)定系數(shù)k的計(jì)算來(lái)算出的每個(gè)系數(shù)k的動(dòng)態(tài)圖像評(píng)價(jià)值。
從圖18可知?jiǎng)討B(tài)圖像評(píng)價(jià)值與靜止圖像評(píng)價(jià)值相比，在時(shí)間序列上峰值向前方移動(dòng)。這樣，由于即便利用第3實(shí)施例的動(dòng)態(tài)圖像評(píng)價(jià)值的確定法，動(dòng)態(tài)圖像評(píng)價(jià)值的峰值在時(shí)間序列上也向前方移動(dòng)，所以在時(shí)間序列上在峰值圖像的前側(cè)重點(diǎn)地抽取圖像。
與第2實(shí)施例不同，這樣的峰值移動(dòng)量可通過(guò)操作規(guī)定的正系數(shù)k而簡(jiǎn)單地調(diào)整。從圖18可知，具有若規(guī)定的正系數(shù)k變大、則峰值的移動(dòng)量也變大，若規(guī)定的正系數(shù)k變小、則峰值的移動(dòng)量也變小的傾向。
這樣，第3實(shí)施例可通過(guò)操作規(guī)定的系數(shù)k，而簡(jiǎn)單地調(diào)整以哪種程度重點(diǎn)地抽取比峰值圖像在時(shí)間序列上還靠前的動(dòng)態(tài)圖像數(shù)據(jù)。該調(diào)整例如可對(duì)應(yīng)于用戶謀求的被攝體來(lái)設(shè)定。具體地說(shuō)，因用戶謀求的被攝體是動(dòng)態(tài)要素大的人物或是動(dòng)態(tài)要素小的風(fēng)景而適宜的調(diào)整量不同。
另外，通過(guò)發(fā)明者的實(shí)驗(yàn)發(fā)現(xiàn)通常最好是規(guī)定的系數(shù)在0至1間設(shè)定。
E本發(fā)明第4實(shí)施例的摘要圖像數(shù)據(jù)的管理圖19是本發(fā)明第4實(shí)施例的圖像數(shù)據(jù)管理系統(tǒng)100a的說(shuō)明圖。圖像數(shù)據(jù)管理系統(tǒng)100a與圖像處理系統(tǒng)100在以下方面不同。即，第1在個(gè)人計(jì)算機(jī)PCa中安裝圖像管理應(yīng)用程序20a。第2將可在動(dòng)態(tài)圖像數(shù)據(jù)的記錄介質(zhì)(例如DVD-R)上進(jìn)行打印的打印裝置111連接于個(gè)人計(jì)算機(jī)PCa。
打印裝置111具備打印頭部件60、供紙盤(tray)105、手動(dòng)用供紙口103。供紙口103在不能彎曲的厚紙或如記錄介質(zhì)D那樣的光盤上打印時(shí)使用。在記錄介質(zhì)D上進(jìn)行打印時(shí)，如圖所示，記錄介質(zhì)D在安裝于記錄介質(zhì)用盤T的狀態(tài)下被插入供紙口103，進(jìn)行打印。圖像管理應(yīng)用程序20可數(shù)據(jù)庫(kù)化管理存儲(chǔ)在各記錄介質(zhì)中的圖像數(shù)據(jù)。
圖20是表示本發(fā)明第4實(shí)施例的圖像管理中數(shù)據(jù)庫(kù)的內(nèi)容的說(shuō)明圖。在本例中，在該數(shù)據(jù)庫(kù)中由4個(gè)字段構(gòu)成，注冊(cè)8個(gè)記錄(record)。4個(gè)字段包含記錄介質(zhì)的種類、最終數(shù)據(jù)存儲(chǔ)時(shí)間、內(nèi)容信息和關(guān)聯(lián)數(shù)據(jù)存儲(chǔ)位置。例如，記錄序號(hào)是3的數(shù)據(jù)分別存儲(chǔ)DVD-R、2005年1月21日16時(shí)39分24秒、家庭旅行及目錄(C￥mov￥mpeg￥file￥3)作為介質(zhì)種類、最終數(shù)據(jù)存儲(chǔ)時(shí)間、內(nèi)容信息及關(guān)聯(lián)數(shù)據(jù)存儲(chǔ)位置。對(duì)應(yīng)每個(gè)記錄介質(zhì)注冊(cè)各記錄。
圖21是表示在本發(fā)明第4實(shí)施例中存儲(chǔ)于記錄介質(zhì)中的數(shù)據(jù)文件GF之內(nèi)容的說(shuō)明圖。數(shù)據(jù)文件GF包含屬性信息存儲(chǔ)區(qū)域80和圖像數(shù)據(jù)存儲(chǔ)區(qū)域90。在屬性信息存儲(chǔ)區(qū)域80中，存儲(chǔ)有對(duì)應(yīng)于上述數(shù)據(jù)庫(kù)的各字段的數(shù)據(jù)。圖像數(shù)據(jù)存儲(chǔ)區(qū)域90中存儲(chǔ)有在上述各實(shí)施例中生成的摘要圖像數(shù)據(jù)。
最終數(shù)據(jù)存儲(chǔ)時(shí)間將最后在記錄介質(zhì)上存儲(chǔ)動(dòng)態(tài)圖像數(shù)據(jù)的時(shí)間記錄到秒。利用最終數(shù)據(jù)存儲(chǔ)時(shí)間是難以存在相同數(shù)據(jù)的唯一數(shù)據(jù)這一點(diǎn)，可利用作記錄介質(zhì)的識(shí)別管理序號(hào)。內(nèi)容信息是用戶可自由地輸入的信息。關(guān)聯(lián)數(shù)據(jù)存儲(chǔ)位置是表示存儲(chǔ)關(guān)聯(lián)數(shù)據(jù)的硬盤30c(圖19)內(nèi)的目錄(directory)的數(shù)據(jù)。
在本實(shí)施例中，關(guān)聯(lián)數(shù)據(jù)存儲(chǔ)位置中包含代表圖像數(shù)據(jù)、配置信息和圖像位置信息。作為代表圖像數(shù)據(jù)，例如在各場(chǎng)景中可利用評(píng)價(jià)值最高的靜止圖像數(shù)據(jù)的低分辨率數(shù)據(jù)、或包含該靜止圖像數(shù)據(jù)的、在低分辨率下短時(shí)間的動(dòng)態(tài)圖像數(shù)據(jù)。配置信息例如可利用表示在記錄介質(zhì)上打印多個(gè)代表圖像數(shù)據(jù)所用的配置的數(shù)據(jù)。作為圖像位置信息，例如可利用特定包含代表圖像數(shù)據(jù)的場(chǎng)景的信息或在場(chǎng)景內(nèi)部的開始時(shí)間。
圖22是表示在記錄介質(zhì)上打印的2個(gè)摘要圖像的說(shuō)明圖。在記錄介質(zhì)D和記錄介質(zhì)Da上，作為摘要圖像，分別打印6個(gè)和9個(gè)代表圖像。用戶知道記錄介質(zhì)的內(nèi)容的同時(shí)，為了特定記錄介質(zhì)，可利用索引圖像。圖像管理應(yīng)用程序20a使用代表圖像數(shù)據(jù)和配置信息，可在顯示器18中顯示索引圖像。例如，可構(gòu)成為在用戶通過(guò)使用圖像管理應(yīng)用程序20a，檢索數(shù)據(jù)庫(kù)(圖20)，而在發(fā)現(xiàn)期望的動(dòng)態(tài)圖像數(shù)據(jù)時(shí)，在顯示器18a中顯示摘要圖像，可特定期望的記錄介質(zhì)。
而且，包含各代表圖像的摘要圖像最好是作為在其周圍有向圖像輪廓變薄的層次(gradation)的打印圖像來(lái)打印。這是為了控制打印位置偏移所導(dǎo)致的、對(duì)記錄介質(zhì)的打印圖像的圖像質(zhì)量惡化。由于對(duì)記錄介質(zhì)的打印圖像通常具有(1)空白易變小，(2)打印的位置偏移易變得較大等特有的傾向，由此具有打印的位置偏移所導(dǎo)致的、對(duì)記錄介質(zhì)的打印圖像的圖像質(zhì)量惡化易變大，即易明顯等特有的情況。
圖23是本發(fā)明第4實(shí)施例中圖像數(shù)據(jù)自動(dòng)管理處理的內(nèi)容的說(shuō)明圖。圖像數(shù)據(jù)自動(dòng)管理處理例如可構(gòu)成為在DVD-R中存儲(chǔ)動(dòng)態(tài)圖像數(shù)據(jù)后，對(duì)應(yīng)基于用戶的結(jié)束處理命令自動(dòng)起動(dòng)。
在步驟S10100中，圖像處理應(yīng)用程序10(圖19)以第1至第3實(shí)施例中公開的方法執(zhí)行摘要圖像生成處理，生成包含代表圖像數(shù)據(jù)的摘要圖像數(shù)據(jù)。
代表圖像數(shù)據(jù)如前所述，作為評(píng)價(jià)值成為峰值的時(shí)間的靜止圖像數(shù)據(jù)或動(dòng)態(tài)圖像數(shù)據(jù)(在低分辨率下短時(shí)間的數(shù)據(jù))來(lái)生成。代表圖像數(shù)據(jù)也可自動(dòng)生成預(yù)先設(shè)定數(shù)的數(shù)據(jù)，或也可生成成為候補(bǔ)的代表圖像數(shù)據(jù)，并使用戶選擇。
在步驟S10200中，圖像管理應(yīng)用程序20(圖19)執(zhí)行屬性數(shù)據(jù)生成處理。所謂屬性數(shù)據(jù)生成處理是生成除存儲(chǔ)于屬性信息存儲(chǔ)區(qū)域80(圖21)的代表圖像數(shù)據(jù)以外的各數(shù)據(jù)的處理。
配置信息例如是用于生成如圖22所示的打印圖像的信息。配置信息可構(gòu)成為包含特定打印圖像中代表圖像數(shù)據(jù)的尺寸和位置的信息。
代表圖像分析日期例如可通過(guò)從PCa的內(nèi)部時(shí)鐘(未圖示)取得代表圖像數(shù)據(jù)的生成結(jié)束日期來(lái)生成。最終數(shù)據(jù)存儲(chǔ)時(shí)間例如可根據(jù)最后追述動(dòng)態(tài)圖像數(shù)據(jù)的日期而同樣地生成。經(jīng)未圖示的用戶接口輸入內(nèi)容信息。
在步驟S10300中，圖像管理應(yīng)用程序20執(zhí)行屬性數(shù)據(jù)存儲(chǔ)處理。屬性數(shù)據(jù)存儲(chǔ)處理是將生成的屬性信息存儲(chǔ)在記錄介質(zhì)中的處理。若將屬性信息全部存儲(chǔ)在記錄介質(zhì)上，則在本實(shí)施例中自動(dòng)地執(zhí)行定案(finalize)處理。
在步驟S10400中，圖像管理應(yīng)用程序20執(zhí)行屬性數(shù)據(jù)注冊(cè)處理。所謂屬性數(shù)據(jù)注冊(cè)處理是將生成的屬性信息作為記錄而在數(shù)據(jù)庫(kù)中注冊(cè)的處理。由此，可在硬盤30c上管理存儲(chǔ)于未裝載在個(gè)人計(jì)算機(jī)PCa上的多個(gè)記錄介質(zhì)中的動(dòng)態(tài)圖像數(shù)據(jù)。
在步驟S10500中，圖像管理應(yīng)用程序20執(zhí)行代表圖像打印處理。代表圖像打印處理在記錄介質(zhì)(例如DVD-R)上打印包含如圖22所示的代表圖像的摘要圖像。
由此，例如如果用戶使用圖像管理應(yīng)用程序20，使用聲音檢索或文本檢索、將來(lái)使用圖案匹配等的圖像檢索等探索方法來(lái)特定期望的動(dòng)態(tài)圖像數(shù)據(jù)，則可向用戶提供存儲(chǔ)該動(dòng)態(tài)圖像數(shù)據(jù)的記錄介質(zhì)的目錄圖像。索引圖像的提供通過(guò)在顯示器18a上顯示或打印到打印用紙上來(lái)進(jìn)行。用戶可使用提供的目錄圖像來(lái)簡(jiǎn)單地特定記錄介質(zhì)。
這樣，在將代表圖像數(shù)據(jù)打印到記錄介質(zhì)的同時(shí)，若利用包含代表圖像數(shù)據(jù)的屬性數(shù)據(jù)來(lái)進(jìn)行數(shù)據(jù)庫(kù)管理，則可大大地減輕用戶管理動(dòng)態(tài)圖像數(shù)據(jù)的負(fù)擔(dān)。并且，在記錄介質(zhì)上，可根據(jù)內(nèi)容信息等屬性信息打印圖像，可供用戶利用。
并且，在本實(shí)施例中，由于在記錄介質(zhì)上也存儲(chǔ)屬性數(shù)據(jù)，所以在其他個(gè)人計(jì)算機(jī)所具有的數(shù)據(jù)庫(kù)中也可簡(jiǎn)單地注冊(cè)。例如可構(gòu)成為如果在記錄介質(zhì)中存儲(chǔ)注冊(cè)用的代理(agent)，則只要在其他的個(gè)人計(jì)算機(jī)上加載記錄介質(zhì)，就自動(dòng)地在數(shù)據(jù)庫(kù)中注冊(cè)。
另外，在本實(shí)施例中，在最后動(dòng)態(tài)圖像數(shù)據(jù)的存儲(chǔ)后生成屬性信息，但例如也可構(gòu)成為對(duì)每個(gè)動(dòng)態(tài)圖像數(shù)據(jù)的附記更新屬性信息。
另外，例如對(duì)如DCD-RW那樣可隨時(shí)改寫或附記的記錄介質(zhì)，可通過(guò)本系統(tǒng)監(jiān)視是否在其他的圖像處理裝置中追加進(jìn)行處理。這時(shí)，最好是顯示用于促使用戶注意的用戶接口。該用戶接口最好是具有詢問(wèn)用戶是否更新屬性信息的功能。
并且，在不包含屬性數(shù)據(jù)時(shí)，最好是同樣地在使用戶知道不包含屬性數(shù)據(jù)的意圖的同時(shí)，提供容許來(lái)自用戶的屬性數(shù)據(jù)的生成指示之接口。
F變形例另外，本發(fā)明不限于上述實(shí)施例或?qū)嵤┓绞?，在不脫離其精神的范圍內(nèi)，可以各種形式實(shí)施，例如也可如下的變形。
F-1、在上述實(shí)施例中，構(gòu)成為排除比規(guī)定時(shí)間還短的動(dòng)態(tài)圖像數(shù)據(jù)，但也可構(gòu)成為不是自動(dòng)排除，而是在自動(dòng)生成摘要圖像后用戶可用手動(dòng)排除。另外，上述規(guī)定的時(shí)間最好是構(gòu)成為用戶可調(diào)整。
F-2、在上述實(shí)施例中，按時(shí)間序列順序連接所抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)，但例如也可對(duì)應(yīng)于靜止圖像評(píng)價(jià)值來(lái)確定，也可對(duì)應(yīng)動(dòng)態(tài)圖像評(píng)價(jià)值來(lái)確定，或也可對(duì)應(yīng)兩者來(lái)確定。
F-3、在上述實(shí)施例中，對(duì)每個(gè)場(chǎng)景分割動(dòng)態(tài)圖像數(shù)據(jù)，對(duì)每個(gè)分割的場(chǎng)景抽取動(dòng)態(tài)圖像數(shù)據(jù)，但也可不對(duì)每個(gè)場(chǎng)景分割，而進(jìn)行與上述各實(shí)施例相同的處理。
F-4、在上述實(shí)施例中，作為動(dòng)態(tài)圖像的抽取基準(zhǔn)使用的規(guī)定閾值th是恒定的，但例如也可對(duì)每個(gè)場(chǎng)景算出動(dòng)態(tài)圖像評(píng)價(jià)值的平均值，對(duì)應(yīng)該平均值，按每個(gè)場(chǎng)景使規(guī)定的閾值th變化。據(jù)此，進(jìn)一步可抽取符合用戶需要的動(dòng)態(tài)圖像數(shù)據(jù)。
另外，規(guī)定的閾值th也可使用靜止圖像評(píng)價(jià)值和動(dòng)態(tài)圖像評(píng)價(jià)值兩者、或僅靜止圖像評(píng)價(jià)值替代動(dòng)態(tài)圖像評(píng)價(jià)值，對(duì)每個(gè)場(chǎng)景使規(guī)定的閾值th變化。
F-5、在上述的實(shí)施例中，在抽取多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)時(shí)，動(dòng)態(tài)圖像數(shù)據(jù)連接部14(圖11)連接所抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)，生成摘要圖像數(shù)據(jù)，但例如也可構(gòu)成本發(fā)明為不連接而單獨(dú)地向用戶提供所抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)處理方法。
F-6、在上述實(shí)施例中，公開作為在包含各代表圖像的索引圖像有層次的打印圖像來(lái)打印的結(jié)構(gòu)，但例如對(duì)文本等其他的打印圖像也可適用同樣的結(jié)構(gòu)。
另外，最好采用就是否在打印圖像中有層次，用戶可自由地選擇的結(jié)構(gòu)(例如提供允許用戶選擇是否有層次的接口畫面)。這時(shí)，也構(gòu)成為設(shè)有層次的打印為初始設(shè)定，也可構(gòu)成為設(shè)未有層次的打印為初始設(shè)定，或也可構(gòu)成為可變更層次的寬度或程度。
F-7、在上述實(shí)施例中，動(dòng)態(tài)圖像數(shù)據(jù)由非交織方式的幀圖像數(shù)據(jù)構(gòu)成，但本發(fā)明也可適用交織方式的動(dòng)態(tài)圖像數(shù)據(jù)。這時(shí)，在上述實(shí)施例中的各幀圖像數(shù)據(jù)相當(dāng)于根據(jù)由奇數(shù)號(hào)掃描線的圖像數(shù)據(jù)構(gòu)成的奇數(shù)場(chǎng)之靜止圖像數(shù)據(jù)、和由偶數(shù)號(hào)掃描線的圖像數(shù)據(jù)構(gòu)成的偶數(shù)場(chǎng)之靜止圖像數(shù)據(jù)生成的靜止圖像數(shù)據(jù)。
在上述實(shí)施例中，也可將由硬件實(shí)現(xiàn)的結(jié)構(gòu)的一部分替換成軟件，相反，也可將由軟件實(shí)現(xiàn)的結(jié)構(gòu)的一部分替換成硬件。
在本發(fā)明功能的一部分或全部由軟件來(lái)實(shí)現(xiàn)時(shí)，該軟件(計(jì)算機(jī)程序)可以存儲(chǔ)在計(jì)算機(jī)可讀取的記錄介質(zhì)上的形式來(lái)提供。在本發(fā)明中，所謂「計(jì)算機(jī)可讀取的記錄介質(zhì)」不限于如軟盤或CD-ROM那樣的便攜型記錄介質(zhì)，還包含各種RAM或ROM等計(jì)算機(jī)內(nèi)的內(nèi)部存儲(chǔ)裝置、或硬盤等固定于計(jì)算機(jī)的外部存儲(chǔ)裝置。
最后，本申請(qǐng)通過(guò)參照在公開中包含作為優(yōu)先權(quán)主張的基礎(chǔ)的下面2個(gè)日本專利申請(qǐng)。
特愿2004-60004(申請(qǐng)日平成16年3月4目)特愿2004-74298(申請(qǐng)日平成16年3月16日)(產(chǎn)業(yè)上的可利用性)本發(fā)明可適用于動(dòng)態(tài)圖像數(shù)據(jù)的處理技術(shù)。
權(quán)利要求
1.一種動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)，其特征在于，具備幀圖像評(píng)價(jià)工序，其根據(jù)規(guī)定的條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，并對(duì)應(yīng)所述評(píng)價(jià)來(lái)生成第1圖像評(píng)價(jià)值；和動(dòng)態(tài)圖像數(shù)據(jù)抽取工序，其對(duì)應(yīng)所述第1圖像評(píng)價(jià)值，抽取包含滿足規(guī)定條件的多個(gè)幀圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)。
2.根據(jù)權(quán)利要求1所述的動(dòng)態(tài)圖像處理方法，其中，還具備取得所述動(dòng)態(tài)圖像數(shù)據(jù)的取得工序，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含從所述第1圖像評(píng)價(jià)值和所述第1圖像評(píng)價(jià)值的變動(dòng)的至少一方滿足規(guī)定條件的所述幀圖像數(shù)據(jù)中，抽取1個(gè)以上作為在時(shí)間序列上連續(xù)的幀圖像數(shù)據(jù)之集合的幀群的工序，所述動(dòng)態(tài)圖像處理方法還具備使用所述抽取幀群的至少一部分，生成所述摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的摘要?jiǎng)討B(tài)圖像數(shù)據(jù)生成工序。
3.根據(jù)權(quán)利要求2所述的動(dòng)態(tài)圖像處理方法，其中，還具備分割所述動(dòng)態(tài)圖像數(shù)據(jù)，分別設(shè)定多個(gè)包含多個(gè)所述幀圖像數(shù)據(jù)的場(chǎng)景的分割工序；所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含從各所述場(chǎng)景中抽取至少1個(gè)以上所述幀群的工序。
4.根據(jù)權(quán)利要求3所述的動(dòng)態(tài)圖像處理方法，其中，所述分割工序包含根據(jù)所述第1圖像評(píng)價(jià)值的不連接變化，分割所述動(dòng)態(tài)圖像數(shù)據(jù)的工序。
5.根據(jù)權(quán)利要求2所述的動(dòng)態(tài)圖像處理方法，其中，所述規(guī)定條件包含所述第1圖像評(píng)價(jià)值為規(guī)定閾值以上。
6.根據(jù)權(quán)利要求5所述的動(dòng)態(tài)圖像處理方法，其中，還具備輸入所述摘要?jiǎng)討B(tài)圖像數(shù)據(jù)的再生時(shí)間之希望值的再生時(shí)間輸入工序；和對(duì)應(yīng)所述再生時(shí)間的希望值，調(diào)整所述閾值的調(diào)整工序。
7.根據(jù)權(quán)利要求2所述的動(dòng)態(tài)圖像處理方法，其中，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含優(yōu)先抽取所述第1圖像評(píng)價(jià)值的變化率為0以上的幀群的工序。
8.根據(jù)權(quán)利要求2所述的動(dòng)態(tài)圖了像處理方法，其中，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含如下工序，即就多個(gè)所述幀群中、所述幀群間的時(shí)間間隔為規(guī)定值以下的2個(gè)幀群，歸納所述2個(gè)幀群及其間的全部幀圖像數(shù)據(jù)后作為1個(gè)幀群抽取。
9.根據(jù)權(quán)利要求8所述的動(dòng)態(tài)圖像處理方法，其中，還具備場(chǎng)景分割工序，其分割所述動(dòng)態(tài)圖像數(shù)據(jù)，分別設(shè)定多個(gè)包含多個(gè)所述幀圖像數(shù)據(jù)的場(chǎng)景；所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序還包含在所述2個(gè)幀群及其間的全部幀圖像數(shù)據(jù)處于相同場(chǎng)景內(nèi)時(shí)，作為1個(gè)幀群提取的工序。
10.根據(jù)權(quán)利要求2所述的動(dòng)態(tài)圖像處理方法，其中，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含抽取由規(guī)定數(shù)以上的幀圖像數(shù)據(jù)構(gòu)成的所述幀群的工序。
11.根據(jù)權(quán)利要求2～10中任一項(xiàng)所述的動(dòng)態(tài)圖像處理方法，其中，所述幀圖像評(píng)價(jià)工序包含如下工序，即使用比較包含所述第1圖像評(píng)價(jià)值的算出對(duì)象之所述幀圖像數(shù)據(jù)的2個(gè)所述幀圖像數(shù)據(jù)而求出的動(dòng)作矢量，算出所述第1圖像評(píng)價(jià)值。
12.根據(jù)權(quán)利要求1所述的動(dòng)態(tài)圖像處理方法，其中，具備動(dòng)態(tài)圖像評(píng)價(jià)工序，其對(duì)應(yīng)多個(gè)幀圖像數(shù)據(jù)各自的所述第1圖像評(píng)價(jià)值和所述第1圖像評(píng)價(jià)值的時(shí)間序列變化率，生成所述多個(gè)幀圖像數(shù)據(jù)各自的第2圖像評(píng)價(jià)值；所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含如下工序，即根據(jù)所述第2圖像評(píng)價(jià)值，從所述動(dòng)態(tài)圖像數(shù)據(jù)中抽取由所述第2圖像評(píng)價(jià)值比規(guī)定閾值大的多個(gè)幀圖像數(shù)據(jù)構(gòu)成的動(dòng)態(tài)圖像數(shù)據(jù)
13.根據(jù)權(quán)利要求12所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中，所述動(dòng)態(tài)圖像評(píng)價(jià)部具有設(shè)增大所述第1圖像評(píng)價(jià)值的時(shí)間序列變化率為正的多個(gè)幀圖像數(shù)據(jù)之第1圖像評(píng)價(jià)值而得到的值為所述第2圖像評(píng)價(jià)值的評(píng)價(jià)模式。
14.根據(jù)權(quán)利要求12或13所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中，所述動(dòng)態(tài)圖像評(píng)價(jià)部具有設(shè)降低所述第1圖像評(píng)價(jià)值的時(shí)間序列變化率為負(fù)的多個(gè)幀圖像數(shù)據(jù)之第1圖像評(píng)價(jià)值而得到的值為所述第2圖像評(píng)價(jià)值的評(píng)價(jià)模式。
15.根據(jù)權(quán)利要求12～14中任一項(xiàng)所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中，所述動(dòng)態(tài)圖像評(píng)價(jià)部具有設(shè)所述第1圖像評(píng)價(jià)值與所述第1圖像評(píng)價(jià)值的時(shí)間序列變化率乘以規(guī)定正系數(shù)的值之和為所述第2圖像評(píng)價(jià)值的評(píng)價(jià)模式。
16.根據(jù)權(quán)利要求15所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中，所述規(guī)定系數(shù)是比1小的正值。
17.根據(jù)權(quán)利要求12～16中任一項(xiàng)所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中，所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序具有如下抽取模式，即根據(jù)所述第2圖像評(píng)價(jià)值，從所述動(dòng)態(tài)圖像中僅抽取由所述第2圖像評(píng)價(jià)值比規(guī)定閾值大的多個(gè)幀圖像數(shù)據(jù)構(gòu)成的動(dòng)態(tài)圖像數(shù)據(jù)，且再生時(shí)間比規(guī)定時(shí)間還長(zhǎng)的圖像數(shù)據(jù)。
18.根據(jù)權(quán)利要求12～17中任一項(xiàng)所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中，還具備對(duì)每個(gè)場(chǎng)景分割所述動(dòng)態(tài)圖像數(shù)據(jù)的場(chǎng)景分割工序；所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含在每個(gè)所述場(chǎng)景中進(jìn)行所述抽取的工序。
19.根據(jù)權(quán)利要求18所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法，其中所述動(dòng)態(tài)圖像數(shù)據(jù)抽取工序包含如下工序，即按每個(gè)所述場(chǎng)景算出所述第1圖像評(píng)價(jià)值和所述第2圖像評(píng)價(jià)值至少之一的平均值，對(duì)應(yīng)所述平均值，按每個(gè)所述場(chǎng)景使所述規(guī)定閾值變化。
20.一種摘要圖像數(shù)據(jù)生成方法，其從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分，生成作為在時(shí)間上縮短的動(dòng)態(tài)圖像數(shù)據(jù)之摘要圖像數(shù)據(jù)，其特征在于，具備權(quán)利要求12～19中任一項(xiàng)所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法；和動(dòng)態(tài)圖像數(shù)據(jù)連接工序，其在存在多個(gè)所述抽取的動(dòng)態(tài)圖像數(shù)據(jù)時(shí)，連接所述抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)，生成所述摘要圖像數(shù)據(jù)。
21.根據(jù)權(quán)利要求20所述的摘要圖像數(shù)據(jù)生成方法，其中，所述動(dòng)態(tài)圖像數(shù)據(jù)連接工序具有按時(shí)間序列順序連接所述抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)的連接模式。
22.根據(jù)權(quán)利要求20或21所述的摘要圖像生成方法，其中，所述動(dòng)態(tài)圖像數(shù)據(jù)連接工序具有如下連接模式，即按對(duì)應(yīng)構(gòu)成所述抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)各自之多個(gè)幀圖像數(shù)據(jù)的所述第1圖像評(píng)價(jià)值和所述第2圖像評(píng)價(jià)值至少之一而確定的順序，連接所述抽取的多個(gè)動(dòng)態(tài)圖像數(shù)據(jù)。
23.一種打印方法，其在存儲(chǔ)動(dòng)態(tài)圖像數(shù)據(jù)的記錄介質(zhì)上進(jìn)行打印，其特征在于，具備權(quán)利要求1～19中任一項(xiàng)所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法；和對(duì)應(yīng)所述多個(gè)幀圖像數(shù)據(jù)的至少一部分，在所述記錄介質(zhì)的表面上進(jìn)行打印的工序。
24.一種動(dòng)態(tài)圖像數(shù)據(jù)存儲(chǔ)方法，其在記錄介質(zhì)上存儲(chǔ)動(dòng)態(tài)圖像數(shù)據(jù)和所述動(dòng)態(tài)圖像數(shù)據(jù)的屬性信息，其特征在于，具備在所述記錄介質(zhì)上存儲(chǔ)所述動(dòng)態(tài)圖像數(shù)據(jù)的工序；權(quán)利要求1～19中任一項(xiàng)所述的動(dòng)態(tài)圖像數(shù)據(jù)處理方法；生成包含對(duì)應(yīng)所述多個(gè)幀圖像數(shù)據(jù)至少之一部分而生成的數(shù)據(jù)的屬性信息的工序；和在所述記錄介質(zhì)上存儲(chǔ)所述生成的屬性信息的工序。
25.一種動(dòng)態(tài)圖像數(shù)據(jù)處理裝置，其從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)，其特征在于，具備幀圖像評(píng)價(jià)部，其根據(jù)規(guī)定條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，并對(duì)應(yīng)所述評(píng)價(jià)，生成第1圖像評(píng)價(jià)值；和動(dòng)態(tài)圖像數(shù)據(jù)抽取部，其對(duì)應(yīng)所述第1圖像評(píng)價(jià)值，抽取包含滿足規(guī)定條件的多個(gè)幀圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)。
26.一種打印裝置，其在存儲(chǔ)動(dòng)態(tài)圖像數(shù)據(jù)的記錄介質(zhì)上進(jìn)行打印，其特征在于，具備幀圖像評(píng)價(jià)部，其根據(jù)規(guī)定條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，并對(duì)應(yīng)所述評(píng)價(jià)值，生成第1圖像評(píng)價(jià)值；代表圖像數(shù)據(jù)抽取部，其對(duì)應(yīng)所述第1圖像評(píng)價(jià)值，抽取滿足規(guī)定條件的幀圖像數(shù)據(jù)；和打印部，其對(duì)應(yīng)所述幀圖像數(shù)據(jù)，在所述記錄介質(zhì)表面上進(jìn)行打印。
27.一種計(jì)算機(jī)程序，其使計(jì)算機(jī)執(zhí)行用于從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)的處理，其特征在于，具備使所述計(jì)算機(jī)實(shí)現(xiàn)如下功能的程序幀圖像評(píng)價(jià)功能，其根據(jù)規(guī)定的條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，并對(duì)應(yīng)所述評(píng)價(jià)，生成第1圖像評(píng)價(jià)值；和動(dòng)態(tài)圖像數(shù)據(jù)抽取功能，其對(duì)應(yīng)所述第1圖像評(píng)價(jià)值，抽取包含滿足規(guī)定條件的多個(gè)幀圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)。
28.一種計(jì)算機(jī)程序，其使計(jì)算機(jī)執(zhí)行用于在存儲(chǔ)動(dòng)態(tài)圖像數(shù)據(jù)的記錄介質(zhì)上進(jìn)行打印的處理，其特征在于，具備使所述計(jì)算機(jī)實(shí)現(xiàn)如下功能的程序幀圖像評(píng)價(jià)功能，其根據(jù)規(guī)定條件，評(píng)價(jià)包含于所述動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，并對(duì)應(yīng)所述評(píng)價(jià)，生成第1圖像評(píng)價(jià)值；代表圖像數(shù)據(jù)抽取功能，其對(duì)應(yīng)所述第1圖像評(píng)價(jià)值，抽取滿足規(guī)定條件的幀圖像數(shù)據(jù)；和控制對(duì)應(yīng)所述幀圖像數(shù)據(jù)而在所述記錄介質(zhì)的表面上進(jìn)行打印的打印部的功能。
29.一種計(jì)算機(jī)程序產(chǎn)品，其特征在于，具備計(jì)算機(jī)可讀取的介質(zhì)；和存儲(chǔ)于所述計(jì)算機(jī)可讀取的介質(zhì)上的權(quán)利要求27或28所述的計(jì)算機(jī)程序。
全文摘要
本發(fā)明提供一種從動(dòng)態(tài)圖像數(shù)據(jù)中抽取一部分動(dòng)態(tài)圖像數(shù)據(jù)的動(dòng)態(tài)圖像數(shù)據(jù)處理方法。該方法的特征在于，具備幀圖像評(píng)價(jià)工序，其根據(jù)規(guī)定條件，評(píng)價(jià)包含于動(dòng)態(tài)圖像數(shù)據(jù)中的多個(gè)幀圖像數(shù)據(jù)的每一個(gè)，并對(duì)應(yīng)評(píng)價(jià)，生成第1圖像評(píng)價(jià)值；和動(dòng)態(tài)圖像數(shù)據(jù)抽取工序，其對(duì)應(yīng)第1圖像評(píng)價(jià)值，抽取包含滿足規(guī)定條件的多個(gè)幀圖像數(shù)據(jù)之動(dòng)態(tài)圖像數(shù)據(jù)。
文檔編號(hào)H04N5/91GK1839625SQ20058000075
公開日2006年9月27日 申請(qǐng)日期2005年3月3日 優(yōu)先權(quán)日2004年3月4日
發(fā)明者細(xì)田達(dá)矢, 鍬田直樹, 筱崎順一郎, 向山文昭 申請(qǐng)人:精工愛普生株式會(huì)社