專利名稱:圖像顯示裝置和短片生成裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及靜止圖像的處理和顯示技術(shù),尤其涉及在圖像顯示之際考慮提取的目標的區(qū)域控制、及使用至少一個以上的靜止圖像生成及再現(xiàn)短的圖像的技術(shù)。
背景技術(shù):
在2001年日本國內(nèi)的照相機市場中,數(shù)字靜像攝影機(以下稱數(shù)字照相機)的出售量超過普通銀鹽照像機的出售量,今后,預(yù)測其差別會進一步擴大。另外,在近年來的攜帶電話市場中,發(fā)售了多種帶有數(shù)字照相機的攜帶電話,其模式也大受歡迎。這樣,數(shù)字照相機的用戶急劇增加。
另一方面,具有圖像顯示功能的攜帶型終端(例如攜帶電話機等)也普及到每人一臺的程度,在該攜帶型終端的圖像顯示裝置(以下簡稱為圖像顯示裝置)中,對利用數(shù)字照相機所攝影的圖像進行顯示的要求,也日益增加。
通常,數(shù)字照相機等的圖像形成裝置,對于被攝影體以1280×960像素進行攝影,將該1280×960像素的圖像(以下將此圖像稱為原圖像)和160×120像素的簡略圖像,以EXIF形式存儲于SD存儲卡等的記錄媒體中。另一方面,圖像顯示裝置的顯示器最大顯示240×320像素(QVGA)。
這樣,在圖像顯示裝置的顯示器和圖像顯示裝置上要顯示的圖像(顯示用圖像)之間的解像度的存在著差異的情況下,有必要放大、縮小顯示用圖像,以便與其解像度相一致。
因此,作為與現(xiàn)有的圖像形成裝置有關(guān)的技術(shù),在攜帶電話機等中,判斷要顯示的圖像是否收在顯示區(qū)域內(nèi),在原圖像沒有收在顯示區(qū)域的大小中的情況下,提出了顯示另外存儲的簡略圖像的顯示方法(例如參照特開2002-23914號公報)。
但是,隨著數(shù)字照相機和帶照相機的攜帶電話的普及,保存有大量的數(shù)字靜止圖像(Digital Still Picture,以下稱靜止圖像)的用戶顯著增加。這些靜止圖像一般存入個人計算機的盤驅(qū)動器中,做為再現(xiàn)該大量靜止圖像的裝置,提出從靜止圖像生成電影那樣的短的圖像(短片)、并進行再現(xiàn)的短片生成裝置。例如在特開平11-15993號公報中,一邊根據(jù)動態(tài)圖像處理內(nèi)容和時間處理順序(方案)實施視覺效果,一邊再現(xiàn)靜止圖像的技術(shù)。
圖1表示現(xiàn)有的短片生成裝置的構(gòu)成的方塊圖。
該現(xiàn)有的短片生成裝置900由操作輸入部901、圖像輸入部902、圖像存儲部903、方案(scenario)生成部904、圖像再現(xiàn)部905、以及顯示部906構(gòu)成。
操作輸入部901從用戶的輸入操作接受靜止圖像數(shù)據(jù)的輸入指示、靜止圖像的選擇等。
圖像輸入部902將用數(shù)字照相機910等攝影的JPEG壓縮形式的靜止圖像數(shù)據(jù)存儲在裝置內(nèi)。
圖像存儲部903存儲所收入的靜止圖像數(shù)據(jù)。
方案生成部904將用戶所選擇的靜止圖像為基礎(chǔ),決定靜止圖像的再生順序和視覺效果,生成作為再現(xiàn)信息的方案,保存在存儲器中。這里,所謂方案不是MPEG所代表的動態(tài)圖像,而是通過XML代表的腳本語言,對按照時間系列的視覺效果、規(guī)定效果的動作的參數(shù)、指向成為效果的對象的靜止圖像的指針、再現(xiàn)時間等,加以記述。
圖像生成部905,按照生成的方案,從圖像存儲部903讀出靜止圖像數(shù)據(jù),一邊執(zhí)行所指定的視覺效果,一邊以15幀/秒,重復(fù)再現(xiàn)操作。
顯示部906接受方案生成部904和圖像再現(xiàn)部905的控制,顯示用戶界面的畫面和再現(xiàn)圖像。
以上構(gòu)成的短片生成裝置900如下進行動作。
首先用戶利用數(shù)字照相機901攝影的圖像,通過圖像輸入部902讀入裝置內(nèi),按原樣傳送到圖像存儲部903內(nèi)進行儲存。
這里,操作輸入部901從用戶接受到按下短片生成按鈕的操作時,方案生成部904生成方案。
圖2表示現(xiàn)有的方案生成部904的處理順序的流程。
首先,方案生成部904向用戶要求從存儲在圖像存儲部903中的圖像選擇多張,生成畫面(圖像選擇畫面),輸出至顯示部906(S900)。
這里,操作輸入部901從用戶接受在顯示部906所顯示的圖像中選擇再現(xiàn)的靜止圖像的操作時(S902的Yes),方案生成部904檢查所選擇的圖像的攝影時刻信息,按照攝影時刻順序排列圖像再現(xiàn)信息,生成連接列表化的方案框架(S904)。
這里,操作輸入部901從用戶接受5張靜止圖像(圖像31、圖像32、圖像33、圖像34和圖像35)的選擇的情況下,在圖3中顯示生成的方案框架。另外,該5張靜止圖像的攝影時刻,按照圖像31、圖像32、圖像33、圖像34、圖像35的順序排列成時間系列。
圖3表示現(xiàn)有的方案框架。
在現(xiàn)有的方案框架中,方案標題920、方案先頭列表921、方案第2列表922、方案第3列表923、方案第4列表924以及方案第5列表925,通過連接列表化來構(gòu)成。
此時方案標題920中設(shè)置方案名和圖像數(shù),在方案框架的各列表921至925中,各圖像的再現(xiàn)信息中,設(shè)置圖像文件名、圖像存儲部903中的存儲部位。
這樣,方案標題920的全部再現(xiàn)時間、方案框架的各列表921到925的視覺效果信息和再現(xiàn)時間信息為空白狀態(tài)。
方案生成部904在生成這種方案框架之后,按圖像的再現(xiàn)順序,決定對各圖像分配的視覺效果。
再度參照圖2進行說明,方案生成部904首先參照方案先頭列表921(S906),決定分配給圖像31的視覺效果。
此時方案生成部904通過隨機函數(shù),產(chǎn)生隨機數(shù)除以4(S908),通過求得除后的余數(shù),決定分配給圖像31的視覺效果。
也就是說,方案生成部904在余數(shù)為1的情況下(S910的Yes),在方案先頭列表921的視覺效果信息上,追加圖像逐漸變鮮明的漸強效果(S912)。如果余數(shù)為2(S904的Yes),則在圖像先頭列表921的視覺效果信息上追加使圖像逐漸消失的漸弱效果(S916)。另外,余數(shù)為0(S918的Yes)時,在方案先頭列表921的視覺效果信息上追加使圖像向圖像中央方向擴大的移近效果,在余數(shù)為3的情況下(S918的No),在方案先頭列表921的視覺效果信息上追加將圖像的一部分放大顯示,使顯示部分移動的Pan(全景)效果(S922)。
進一步,方案生成部904在方案先頭列表921的視覺效果信息上追加分配的視覺效果之際,設(shè)定相應(yīng)的圖像再現(xiàn)時間,追加在方案先頭列表921的再現(xiàn)時間信息上。這里,實施漸強效果的圖像的再現(xiàn)時間為3秒(45幀),除此之外的圖像再現(xiàn)時間為2秒(30幀)。
之后,方案生成部904判斷追加了視覺效果和再現(xiàn)時間信息的列表是否為最后的列表(S924),如果是最后的列表(S924的Yes),結(jié)束方案生成的處理動作,如果不是最后的列表(924的No),則參照列表框架的下一列表(S926),重復(fù)決定視覺效果的處理動作。
這樣,方案生成部904在再現(xiàn)順序中重復(fù)分配視覺效果的處理動作直到最后的圖像為止,完成如圖4所示的方案。
圖4是表示現(xiàn)有的已完成的方案的第一例的示意圖。
在該完成的方案中,方案標題930中記述有表示全部再現(xiàn)時間12秒的信息,在記述圖像31的再現(xiàn)信息的方案先頭列表931中,記述分配漸強效果的視覺效果信息,記述再現(xiàn)時間2秒的再現(xiàn)時間信息。同樣,在記述各圖像再現(xiàn)信息的列表中,也分別記述各自分配的效果信息和再現(xiàn)時間信息。
即,根據(jù)該完成的方案,按照圖像31、圖像32、圖像33、圖像34、圖像35的順序進行再現(xiàn),分別實施對圖像31的漸強效果,對圖像32的移離效果,對圖像33的減弱效果,對圖像34的Pan(全景)效果和對圖像35的移近效果的視覺效果。另外,再現(xiàn)時間表示為分別是2秒、3秒、2秒、2秒、3秒(共計12秒)。
這里,操作輸入部901如果從用戶接受短片的標題的輸入,則方案生成部904存在在完成的方案的列表先頭插入標題圖像(用于標題的黑色畫面的圖像)的再現(xiàn)信息的情況。
此時,方案生成部904在方案列表先頭追加表示在圖像中央部分加入用戶輸入的文字的視覺效果信息和時間效果信息(2秒)。這樣完成的方案如圖5所示,圖5是現(xiàn)有的已完成的方案的第二例的圖。
在該完成的方案中,按照標題圖像、圖像31、圖像32、圖像33、圖像34、圖像35的順序進行再現(xiàn),對標題圖像實施文字加入效果,對圖像31實施漸強效果,對圖像32實施移離效果,對圖像33實施漸弱效果,對圖像34實施Pan效果,對圖像35實施移近效果。再現(xiàn)時間分別為2秒、2秒、3秒、2秒、2秒、3秒(共計14秒)。
也就是說,在方案標題940中,記述表示全部再現(xiàn)時間14秒的信息,在記述標題圖像的再現(xiàn)信息的標題先頭列表941中,記述分配將用戶輸入的文字,加入圖像中央部分的圖像加入效果的視覺效果信息,記述再現(xiàn)時間2秒的再現(xiàn)時間信息。同樣,在記述各圖像的再現(xiàn)信息的列表中,還記述有各自分配的視覺效果信息和再現(xiàn)時間信息。
接著,圖像再現(xiàn)部905按照方案生成部904中以上的順序,接受生成的方案的地址信息,參照方案的先頭列表中存儲的圖像的再現(xiàn)信息。
于是,圖像再現(xiàn)部905根據(jù)所參照的再現(xiàn)信息,從圖像存儲部903讀出壓縮形式的圖像進行解碼,根據(jù)再現(xiàn)時間信息(幀數(shù))一邊進行時間管理,一邊在視覺效果信息中,實施指示的視覺效果,并輸出至顯示部906。如果先頭的圖像的再現(xiàn)結(jié)束后,圖像再現(xiàn)部905參照方案中下一個圖像的再現(xiàn)信息,執(zhí)行再現(xiàn)處理,重復(fù)該處理直到最后的圖像(圖像35)的再現(xiàn)處理結(jié)束為止。
這里,使用圖6對顯示部906輸出顯示的圖像的視覺效果進行說明。
圖6是表示現(xiàn)有的短片生成裝置900的圖面顯示的例子的示意圖。
這里,對向圖像的對角線方向進行移動的Pan(全景)效果進行說明。
根據(jù)向圖像對角線方向的Pan(全景)效果,短片生成裝置900在對顯示畫面例950進行顯示之后,對第1顯示區(qū)域951放大顯示,沿顯示推移線952使顯示部分移動后,顯示第二顯示區(qū)域953,結(jié)束再現(xiàn)。
這樣,現(xiàn)有的短片生成裝置900一邊對多個靜止圖像實施移近、漸強、移遠、漸弱、Pan(全景)等視覺效果,一邊如動畫那樣,生成短圖像(短片)并進行再現(xiàn)。這樣,現(xiàn)有的短片生成裝置900使靜止畫如動畫那樣動起來,使用數(shù)字靜止圖像打開新的娛樂世界,是劃時代的裝置。
但是,在上述現(xiàn)有的圖像顯示裝置中,顯示用圖像的解象度(像素)比顯示器的解象度(像素)更大(多)的情況下,為了顯示圖像全體,必須存儲比顯示器的像素更少的像素的簡略圖像。這種情況在攜帶電話等顯示部分極小的顯示終端非常顯著,將原圖像的1/64的解像度的簡略圖像,在具有QVGA(320×240像素=約8萬像素(76800))大小的顯示區(qū)域的顯示裝置上,進行整體顯示。
也就是說,在這種情況下,由于圖像整體的解像度降低,所以存在著視覺上畫質(zhì)變差的問題。
另外,在圖像內(nèi)要看到的地方(興趣區(qū)域;ROI;Region OfInterest;例如人的面部)相對較小,所以在畫質(zhì)劣化的同時,存在識別性降低的問題。
為了解決該問題,考慮存儲原圖像、在顯示器中顯示原圖像,但是在小的顯示裝置(畫面)中只能要看見大的圖像的一部分,對用戶增加了操作負荷,從而產(chǎn)生問題。更詳細說明如下首先XGA大小的圖像由于對于QVGA大小的顯示區(qū)域要大將近10倍,所以用戶如果尋找ROI就必須使用滾動條等進行查找。另外,在人的面部拍得較小的情況下,使用者將該部分移近進行顯示的操作是必須的,所以使用者的操作負荷變高。
同樣,在顯示器預(yù)覽顯示9個左右簡略圖像的情況下,必須進一步將簡略圖像縮小到80×60左右。即使在這種情況下,對于一個一個的簡略圖像,存在著解象度低下導(dǎo)致的識別性低下,難于判斷顯示內(nèi)容的問題。
另外,根據(jù)上述現(xiàn)有的短片生成裝置,由于是隨機或固定地決定對于預(yù)先由用戶選擇的圖像的視覺效果,生成再生時必要的方案,所以不能生成某事件的方案。即在決定對各圖像分配的視覺效果之際,不考慮圖像的內(nèi)容,而任意地分配視覺效果,所以,存在著不能生成產(chǎn)生圖像特征的事件的方案的問題。
另外,根據(jù)現(xiàn)有的短片生成裝置,在方案生成之際,用戶由于必須進行標題輸入或者圖像選擇,所以存在花費功夫的問題。
發(fā)明內(nèi)容
本發(fā)明鑒于以上問題而提出,其第一目的在于提供減輕視覺畫質(zhì)的劣化,提高識別性,減輕用戶的操作負荷的圖像顯示裝置、圖像顯示方法以及具有這些的攜帶型終端,此外,提供一種圖像顯示裝置,在一覽顯示簡略圖像之際,容易判斷顯示內(nèi)容。
另外本發(fā)明的第二目的,在于提供一種短片生成裝置,能夠?qū)D像實施相應(yīng)的視覺效果并進行再現(xiàn),提供省去進行標題輸入和圖像選擇等的用戶的操作、能生成方案的短片生成裝置。
為達成以上目的,本發(fā)明采用以下技術(shù)裝置。
本發(fā)明的圖像裝置為具有顯示圖像的顯示機構(gòu)的圖像顯示裝置,其特征在于,具有保持以比所述顯示機構(gòu)中可顯示的像素更多的像素形成的原圖像的圖像保持機構(gòu);判斷在上述原圖像保持機構(gòu)所保持的原圖像中是否含有目標,在含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定機構(gòu);根據(jù)從用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從上述原圖像中提取上述原圖像中作為含有目標的區(qū)域的目標區(qū)域的至少一部分,生成與上述顯示機構(gòu)中可顯示的像素相一致的顯示用圖像的顯示用圖像生成機構(gòu)。
由此,由于從原畫像生成含有目標區(qū)域的至少一部分的顯示用圖像,所以包含目標區(qū)域的至少一部分的部分被較大地顯示。因此,可提供識別性提高、可以減輕用戶的操作負荷的圖像顯示裝置。
這里,上述目標判定機構(gòu)具有提取上述原畫像中包含的目標的位置和大小,將所提取的目標的位置和大小加入上述目標信息中的目標提取部,所述顯示用圖像生成機構(gòu),根據(jù)上述目標信息中加入的目標的位置和大小,決定從上述原畫像中提取的部分。
根據(jù)該構(gòu)成,容易決定包含目標區(qū)域的至少一部分的原圖像的部分。
另外,上述目標提取部可使用圖案匹配、顏色分布信息、邊緣信息、區(qū)域分割信息、以及布局信息中的至少其中之一,提取上述目標。
另外,上述目標判定機構(gòu)進一步具有判定上述目標提取部提取的目標的種類,將所判定的目標種類加入上述目標信息中的目標種類判定部。上述顯示用圖像生成機構(gòu),可根據(jù)上述目標信息中所加入的目標的位置、大小和種類,決定從上述所圖像中提取的部分。
由此,容易決定包含目標區(qū)域的至少一部分的原圖像的部分。
另外,在上述目標的種類中,可包含有人物、人物面部、狗、貓以及書籍和文字列的物品,招牌以及標簽的至少一種。
因此,包含各種種類的目標區(qū)域的至少一部分的部分被較大地顯示。
另外,上述目標判定機構(gòu)進一步具有目標優(yōu)先度設(shè)定部,將對應(yīng)于上述目標種類判定部判定的目標的種類的優(yōu)先度,加入上述目標信息中。上述顯示用圖像生成機構(gòu),能夠根據(jù)上述目標信息中加入的目標的優(yōu)先度,決定從上述原圖像提取的部分。
由此,容易決定包含目標區(qū)域的至少一部分的原圖像的部分。
上述目標判定機構(gòu)具有提取原畫像中包含的目標的位置和大小,將所提取的目標的候補位置和大小加入上述目標信息中的目標提取部,所述顯示用圖像生成機構(gòu),決定從上述原畫像中提取的部分,以含有上述目標的信息中加入的目標位置的中心。
由此,可提高目標的識別性。
另外,上述圖像顯示裝置的特征在于,進一步具有對原圖像進行攝像的攝像機構(gòu)、以及通過記錄媒體或傳送媒體輸入原圖像的圖像輸入機構(gòu)的至少其中之一,和將通過所述攝像機構(gòu)以及所述圖像輸入機構(gòu)的至少其中之一取得的原圖像存儲在所述原圖像保持機構(gòu)的存儲機構(gòu)。
根據(jù)該構(gòu)成,可以以各種方案取得原圖像。
而且,上述顯示用圖像生成裝置進一步具有簡略圖像生成機構(gòu),其根據(jù)上述目標信息,從上述原圖像提取上述原圖像中作為包含目標的區(qū)域的目標區(qū)域的至少一部分,生成預(yù)先設(shè)定的像素的簡略圖像。這里,在上述原圖像保持機構(gòu)中,保持多個原圖像,上述顯示用圖像生成機構(gòu)優(yōu)選為上述簡略圖像生成機構(gòu)將生成的各原圖像的簡略圖像在上述顯示機構(gòu)中進行一覽顯示,上述預(yù)先決定的像素優(yōu)選為在上述顯示機構(gòu)中,對一個簡略圖像的顯示所分配的像素。
由此,即使在簡略圖像的一覽顯示之際,也可以容易判別顯示的內(nèi)容。
另外,上述顯示用圖像生成機構(gòu),通過放大或縮小從上述原圖像提取的部分,可以生成與上述顯示機構(gòu)中可顯示的像素相對應(yīng)的顯示用圖像,上述顯示用圖像生成機構(gòu),可以決定從上述原圖像提取的部分,使得從上述原圖像提取的部分的像素為上述顯示機構(gòu)中可顯示的像素。
由此,由于包含目標區(qū)域的至少一部分的部分被較大地顯示,所以能夠?qū)崿F(xiàn)提高了識別性、減輕用戶的操作負荷圖像顯示裝置。
另外,本發(fā)明的短片生成裝置,使用至少一個靜止圖像生成圖像,其特征在于,具有取得從外部輸入的一個以上的靜止圖像的靜止圖像輸入機構(gòu);判別上述輸入的靜止圖像的每一個中是否包含目標,在上述輸入的靜止圖像中包含有目標的情況下,提取與上述目標有關(guān)的信息的目標提取機構(gòu);通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述目標提取手段的判別結(jié)果,決定對上述靜止圖像包含的目標實施的視覺效果,生成作為圖像再現(xiàn)信息的方案的方案生成機構(gòu)。這里,上述目標為文字區(qū)域,上述目標提取機構(gòu)進一步包含判別每個所述輸入的靜止圖像中是否含有文字區(qū)域,在上述輸入的靜止圖像中含有文字區(qū)域的情況下,提取與上述文字區(qū)域有關(guān)的文字區(qū)域提取部。上述方案生成機構(gòu),通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述文字區(qū)域提取部的判別結(jié)果,決定對上述靜止圖像所包含的文字區(qū)域?qū)嵤┑囊曈X效果,從而生成作為圖像再現(xiàn)信息的方案。
根據(jù)該構(gòu)成,提取靜止圖像中包含的目標(文字區(qū)域),對該目標(文字區(qū)域)實施視覺效果,可強調(diào)該目標(文字區(qū)域),生成事件的某個短片。
上述方案生成機構(gòu),可根據(jù)上述文字區(qū)域提取部的判別結(jié)果,生成對于上述靜止圖像所包含的文字區(qū)域?qū)嵤┓糯笮Ч姆桨?,另外,上述方案生成機構(gòu),可根據(jù)上述文字區(qū)域提取部的判別結(jié)果,生成對上述靜止圖像中包含的文字區(qū)域?qū)嵤㏄an(全景)效果方案。而且,上述方案生成機構(gòu)可根據(jù)上述文字區(qū)域提取部的判斷結(jié)果,可生成修正上述靜止圖像中含有的文字區(qū)域的方案。
另外,上述方案生成機構(gòu)在上述文字區(qū)域提取部所提取的文字區(qū)域相關(guān)的信息中,根據(jù)上述文字區(qū)域的形狀、大小或色彩中的至少一種,決定對該文字區(qū)域?qū)嵤┑囊曈X效果,由此生成方案。
這樣,根據(jù)靜止圖像的文字區(qū)域的特性,選擇文字區(qū)域上施加的視覺效果,所以,實施與該文字區(qū)域相對應(yīng)的視覺效果,可生成更有效果的短片。
另外,上述短片生成裝置進一步具有以上述文字區(qū)域提取部判別為含有文字區(qū)域的靜止圖像的攝影時刻為基準,選擇再現(xiàn)的靜止圖像的圖像選擇機構(gòu),上述方案生成機構(gòu)生成上述圖像選擇機構(gòu)所選擇的再現(xiàn)圖像的方案。
由此,由于自動選擇與關(guān)鍵圖像時間相關(guān)連的圖像組,所以用戶不必一個一個地選擇短片使用的靜止圖像。
而且,上述方案生成機構(gòu)根據(jù)上述文字區(qū)域提取部的判別結(jié)果,還可生成使用上述靜止圖像中所含文字區(qū)域的方案作為標題。
由此,由于圖像的文字區(qū)域可以自動地被收入標題圖像中,所以用戶可以省去從鍵盤輸入標題文字的操作。
另外,由上述方案生成機構(gòu)所決定的視覺效果,至少為放大或者縮小目標、顯示上述靜止圖像的放大縮小效果、使視點從目標或者向目標移動的視點移動效果、以目標為焦點的移近或者移離并且顯示上述靜止圖像的移近移離效果、以及上述靜止圖像中切除目標所含區(qū)域的切除效果中之一。
由此,對目標可實施各種視覺效果中的任一種,可實現(xiàn)在提高識別性的同時,生成具有效果的短片的短片生成裝置。
此外,本發(fā)明不僅可實現(xiàn)這種圖像的顯示裝置,而且可實現(xiàn)以具有這種圖像顯示裝置的特征的機構(gòu)作為步驟的圖像顯示方法,可實現(xiàn)將這些步驟在計算機中執(zhí)行的程序。而且可實現(xiàn)具有這種圖像顯示裝置的攜帶型終端。
同樣,本發(fā)明不僅可實現(xiàn)這種短片生成裝置,而且可實現(xiàn)將具有這種短片生成裝置的特征的機構(gòu)作為步驟的短片生成方法,并可實現(xiàn)將這些步驟在計算機上執(zhí)行的程序。而且,這種程序可通過CD-ROM等記錄媒體或網(wǎng)絡(luò)等傳送媒體進行發(fā)送。
如以上說明所示,根據(jù)本發(fā)明的圖像顯示裝置,可從包含目標區(qū)域的至少一部分的原圖像的部分生成顯示用圖像,所以包含目標區(qū)域至少一部分的部分可顯示的較大,因此,可提供提高識別性、減輕用戶的操作負荷的圖像顯示裝置。
另外,根據(jù)本發(fā)明的圖像顯示裝置,因從包含目標區(qū)域的至少一部的原圖像的部分生成簡略圖像,所以,即使在簡略圖像中也可以較大顯示包含目標區(qū)域的至少一部分的部分。因此,在一覽顯示簡略圖像之際,可容易判別所顯示為何物。
由此,根據(jù)本發(fā)明,可使著眼于原圖像的目標的各種圖像處理成為可能??稍谙袼厣俚娘@示器中顯示識別性高的圖像。這在數(shù)字照相機或攜帶電話普及的今天,本發(fā)明的實用價值極高。
另外,根據(jù)本發(fā)明的短片生成裝置,因為能夠?qū)τ趫D像選擇相應(yīng)的視覺效果并加以實施,所以可生成更具效果的短片。
而且,將用戶所選擇圖像作關(guān)鍵圖像,自動選擇關(guān)聯(lián)的圖像進行再現(xiàn),所可以省去用戶自己選擇全部圖像的麻煩。
而且,因為將文字區(qū)域自動地加入標題圖像中,所以用戶自己不必用手輸入標題。
因此,用戶可通過簡單的操作,欣賞效果好的短片,在持有大量靜止圖像的用戶顯著增加的今天,可以說本發(fā)明的實用價值極高。
圖1是表示現(xiàn)有的短片生成裝置結(jié)構(gòu)的方框圖。
圖2是表示現(xiàn)有的方案生成部的處理順序的流程圖。
圖3是現(xiàn)有的方案框架示意圖。
圖4是現(xiàn)有的已完成的方案的第一例的示意圖。
圖5是現(xiàn)有的已完成的方案的第二例的示意圖。
圖6是基于現(xiàn)有的短片生成裝置的畫面顯示例的示意圖。
圖7是具有數(shù)字照相機和圖像顯示裝置的攜帶電話的外觀構(gòu)成示意圖。
圖8是實施方式1中圖像顯示裝置的方框構(gòu)成的示意圖。
圖9是外部接口部和目標判定部中原圖像輸入時的算法流程示意圖。
圖10是圖像保持部中存儲的原圖像的示意圖。
圖11是目標信息的構(gòu)成例的示意圖。
圖12目標候補的提取例的示意圖。
圖13是目標優(yōu)先度設(shè)定表格的構(gòu)成例示意圖。
圖14是顯示用圖像生成部的簡略圖像生成處理部中簡略圖像生成時的算法流程示意圖。
圖15A是在本發(fā)明的圖像顯示裝置中一覽顯示簡略圖像的示意圖。圖15B是現(xiàn)有的圖像顯示裝置中一覽顯示簡略圖像的示意圖。
圖16是顯示用圖像生成處理的流程圖。
圖17是根據(jù)效果種類的顯示用圖像生成處理的子程序的流程圖。
圖18A是放大圖像示意圖。圖18B是全體圖像示意圖。
圖19A視點移動前的顯示圖像的示意圖。圖19B視點移動后的顯示圖像的示意圖。
圖20A移近時的顯示圖像的示意圖。圖20B移離時的顯示圖像的示意圖。
圖21A是切除處理時、處理前的顯示圖像的示意圖。圖21B是切除處理后的顯示圖像的示意圖。
圖22表示幻燈顯示部執(zhí)行的處理的流程。
圖23是在交互自動顯示放大圖像和縮小圖像時顯示圖像的示意圖。
圖24是畫面中,放大圖像的顯示之際顯示返回、整體、保存的圖符,在縮小圖像顯示之際,顯示返回、放大、保存的圖符的顯示例的示意圖。
圖25是從整體圖像至人的面部擴大圖片為止,逐漸改彎倍率進行滑動移位時,顯示圖像的顯示例的示意圖。
圖26A和圖26B是用于說明在增加預(yù)定的視覺效果的同時進行顯示的情況的處理的示意圖。
圖27是圖26A和圖26B所示的處理進行時,按時間軸進行推移的顯示例的示意圖。
圖28是實施方式2中短片生成裝置的構(gòu)成方框示意圖。
圖29是實施方式2中文字區(qū)域提取部的處理順序流程示意圖。
圖30是實施方式2中方案生成部的處理順序流程示意圖。
圖31是實施方式2中方案框架的示意圖。
圖32是實施方式2中所完成的方案示意圖。
圖33是表示實施方式2中圖像再現(xiàn)部的處理順序的流程圖。
圖34是實施方式2的短片生成裝置的畫面顯示的第一例的示意圖。
圖35是實施方式2的短片生成裝置的畫面顯示的第二例的示意圖。
圖36是實施方式2的短片生成裝置的畫面顯示的第三例的示意圖。
圖37是實施方式3中的短片生成裝置的畫面顯示的結(jié)構(gòu)示意圖。
圖38是實施方式3的方案生成部的處理順序的流程示意圖。
圖39是實施方式3的圖像選擇的示意圖。
圖40是實施方式3的方案框架的示意圖。
圖41是實施方式3中所完成的方案示意圖。
圖42是表示實施方式3的短片生成裝置中的畫面顯示的第一例的示意圖。
圖43是實施方式3的短片生成裝置中的畫面顯示的第二例的示意圖。
具體實施例方式
以下參照附圖詳細說明用于實施本發(fā)明的優(yōu)選實施方式。
(實施方式1)使用圖7~27對本發(fā)明的實施方式1涉及的圖像顯示裝置進行說明。
圖1為具有數(shù)字照相機和圖像顯示裝置的攜帶電話的外觀結(jié)構(gòu)的示意圖。
數(shù)字照相機100具有例如300萬像素的CCD等,以1280*960像素對被攝像體進行攝影,將其1280*960像素的原圖像和160*120像素的簡略圖以EXIF形式存儲在記錄媒體207中。
另一方面,攜帶電話115具有用于在基站間發(fā)送接收電波的天線201;具有閃光、可攝影動態(tài)圖像和靜止圖像的照相機部203;顯示由照相機部203攝影的圖像和由天線201所接受的圖像等數(shù)據(jù)的液晶顯示器的顯示部202;由操作鍵204構(gòu)成的主體部;用于輸出音聲的揚聲器等音聲輸出部208;用于輸入音聲的麥克風(fēng)等音聲輸入部205;以及用于使記錄媒體207可安裝于攜帶電話115的溝槽部206。
照相機部203具有例如130萬像素的CCD等,以比顯示部202中可顯示的像素(240*320)更多的最大1024*1280像素對被攝像體進行攝影。記錄媒體207為在塑料盒內(nèi)收容有作為可電改寫或消去的非易失性存儲器的EEPROM(Electrically Erasable and Programmable ReadOnly Memory)的一種閃存元件的SD存儲卡(TM)等記錄媒體,其保持攝影后的動態(tài)圖像或靜止圖像的數(shù)據(jù)、所接受的郵件的數(shù)據(jù)、編碼或解碼后的動態(tài)圖像或靜止圖像的數(shù)據(jù)。
圖2為本實施方式1中圖像顯示裝置的方框結(jié)構(gòu)示意圖。
圖像顯示裝置1具有安裝于上述攜帶電話115上、作為外部接口起作用的外部接口部10;作為存儲裝置起作用的存儲器部20;判斷在存儲器部20中存儲的原圖像中是否含有目標(object),在判斷為含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定部30;根據(jù)從用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從包含目標區(qū)域的至少一部分的原圖像的部分,生成至少1張與顯示器50中的像素相一致的顯示用圖像,將所生成的顯示用圖像顯示于顯示器50加以控制的顯示用圖像生成部40;作為顯示圖像的部分的顯示器50。另外,目標判定部30和顯示用圖像生成部40由用于進行規(guī)定的運算處理的程序和執(zhí)行該程序的DSP等構(gòu)成。
外部接口10具有圖像攝影部110、圖像輸入部120、用戶IF130。
圖像輸入部120從以SD存儲卡(TM)和多媒體卡為代表的任意的記錄媒體,或通過以太網(wǎng)(TM)帶、無線LAN等為代表的任意網(wǎng)絡(luò)取得圖像,收進圖像顯示裝置1中。
用戶IF部130通過鍵盤、數(shù)字鍵、接觸板、音聲識別等為代表的任意輸入機構(gòu),提供圖像顯示裝置1的用戶界面。該用戶IF部130可通過圖符顯示或幫助顯示來提高用戶的便利性。
外部接口10的構(gòu)成元件不限于圖像攝影部110、圖像輸入部120、以及用戶IF130,根據(jù)需要,也可進行與任意的外部環(huán)境、外部裝置連接、輸入輸出。
例如,將音聲識別用的麥克風(fēng)部205、輸出幫助/音聲信息等圖像顯示裝置1內(nèi)部的數(shù)據(jù)的揚聲器部208、在圖像攝像部110攝影的情況下閃光等的光源部、利用光顯示電源在ON/OFF狀態(tài)等任意的圖像顯示裝置1內(nèi)部的狀態(tài)的內(nèi)部狀態(tài)顯示部等通常的攜帶電話或PDA、個人計算機、游戲機、照相機(數(shù)字照相機、電影)具有的任意的外部輸入輸出裝置,作為外部接口10的構(gòu)成元件。
存儲器部20具有圖像保持部210、目標信息保持部220、簡略圖像保持部230、用戶指定圖像保持部24、以及顯示用圖像保持部250。該存儲器部20根據(jù)需要在易失性存儲器/非易失性存儲器之外,可使用SD存儲器卡(TM)或硬盤等任意的記錄媒體作為存儲器。
圖像保持部210保存輸入至圖像顯示裝置的圖像數(shù)據(jù)。該圖像保持部210根據(jù)需要,可對于一個原圖像數(shù)據(jù)保存多種格式或解像度、調(diào)整數(shù)據(jù)。例如,可進行JPEG和位圖等多種格式的保存、VGA/XGA/QVGA等各自相異的多種解像度的保存和作為僅對圖像的一部分進行裁切(切去)后的圖像進行保存。不限于這里列舉的保存例,圖像保持部210可以以任意的組合對數(shù)據(jù)進行保存。
目標信息保持部220保持通過目標判定部30所生成的目標信息。
簡略圖像保持部230保持通過顯示用圖像生成部40所生成的簡略圖像。
用戶指定圖像保持部240保持由用戶指定的顯示用圖像。
顯示用圖像保持部250特別地用于暫時保持顯示器50中顯示的圖像數(shù)據(jù),例如相當于通常的個人計算機中VRAM。
目標判定部30具有目標候補提取部310、目標候補判定部320、目標優(yōu)先度判定部330。
目標候補提取部310從圖像內(nèi)推定目標的候補并將其提取。
這里,目標候補提取部310中的候補提取方法以及目標候補判定部320中的判定方法可使用特開2002-304627號公報和特開平10-21394號公報等中公開的現(xiàn)有的任意的圖像處理技術(shù)。
例如,在目標候補提取部310中,通過利用基于模板的圖案匹配,或通過利用頻率、顏色、布局等相關(guān)的區(qū)域分割形狀/二值化圖像/邊緣提取圖像,提取目標的候補。
目標候補判定部320對目標候補判定其真?zhèn)魏头N類。
另外,在目標候補判定部320中,針對目標候補區(qū)域,使用任意的處理,進行目標種類的判別定和是否為目標的判定。例如,可使用顏色信息/邊緣信息。
這里,列舉將目標設(shè)為人的面部的具體實例。首先,準備用于進行人的面部候補判定的灰色模板。計算灰色模板與對象圖像的相關(guān),將相關(guān)值高的區(qū)域作為“人的面部的候補區(qū)域“。而且,對于候補區(qū)域,求出膚色所含的比例,由此,可進行“是否為人的面部的判定”。
目標優(yōu)選取度判定部330將對應(yīng)于目標候補判定部320所判定的目標的種類的優(yōu)先度加入目標信息中。
顯示用圖像生成部40具有簡略圖像生成處理部410、放大縮小處理部420、視點移動處理部430、移近/移離處理部440、切除處理部450等。通過顯示用圖像保持部250生成在顯示器50所顯示的圖像。
簡略圖像生成處理部410對圖像保持部210中存儲的所有原圖像的每一個,根據(jù)目標情報中含有的位置,設(shè)定包含原圖像中目標的至少一部分的顯示區(qū)域。然后,簡略圖像生成處理部410從原圖像以預(yù)先設(shè)定的像素,生成所設(shè)定的顯示區(qū)域的的簡略圖像,在顯示器50一覽顯示所生成的簡略圖像。由此,對用戶可容易地提示原圖像顯示什么,被攝影體為何物。
放大縮小處理部420可對原圖像進行放大或縮小。由此,可將原圖像中含有的目標放大觀看,可看清直至目標的細微部、可觀看目標的整體。
此外,作為自動放大目標的條件,在(1)事前用戶進行“自動放大顯示”的設(shè)定的情況,(2)作為初期設(shè)定,設(shè)定“自動放大顯示”的情況,(3)在目標被識別的情況下,設(shè)定“自動放大顯示“的情況等時,可對目標的存在依存或非依存地設(shè)定任意的條件。
視點移動處理部430可進行與Pan(全景)及tilt(傾斜攝影)相當?shù)奶幚?。這里,所謂Pan處理,為攝影時照相機操作的一種,相當于“固定照像機的位置于原處,一邊左右移動一邊對廣的范圍進行攝影”。在該視點移動處理部430的情況中,意味著顯示器所顯示的圖像以“一邊左右移動,一邊顯示廣的范圍”的方式進行處理。
同樣,所謂tilt(傾斜攝影)相當于“將固定于三腳的照像機上下移動”,但在視點移動處理部430的情況下,意味著以“一邊上下移動一邊顯示寬的范圍”的方式通行處理。此外,視點移動處理部430的視點移動方法不限于所述的左右/上下方向,可在任意的時間向任意的方向視點移動。
移近/移離處理部440進行相當于zoom in(移近)zoom out(移離)的處理。這里所謂zoom in(移近)為攝影時照像機操作的一種,相當于“固定照像機的位置,通過移近得到連續(xù)接近的圖像。
相反,zoom out(移離)相當于“得到連續(xù)離開的圖像“。與前面的視點移動處理部430相同,在該移近/移離處理部440的情況下,意味著在顯示器50顯示的圖像以“固定視點,連續(xù)地接近或離開”的方式進行處理。此外,移近/移離處理部440的視點沒必要必須固定,也可以在處理中移動視點。由此,在移近的情況下集中視線,可使注意力提高,觀看明確,提高效果,在移離的情況下,可使周圍的狀況被看到。
其次,切除處理部450相當于將圖像trimming(裁切)。
這里,所謂trimming(裁切)是“在將照片的原版拉長時,省去周圍的不要部分,對畫面進行調(diào)整”,而在該切除處理部450中,相當于將圖像的一部分切除成任意的形狀進行顯示。這里,在切除目標的背景中,可顯示任意的圖像、文本、紋理(貼的花紋,圖案)。這些數(shù)據(jù)可利用預(yù)先保持在圖像保持部210中的數(shù)據(jù),或顯示用圖像生成部40生成新的,或者通過外部接口部10取得。
幻燈顯示部460將用戶指定圖像保持部240存儲的顯示用圖像在顯示器50中作為圖像顯示。
顯示器50由液晶面板等構(gòu)成,以水平240像素×垂直320像素顯示圖像。
其次,對在上述構(gòu)成的圖像顯示裝置1中輸入靜止圖像(原圖像)時的動作加以說明。
圖9是外部接口部10和目標判定部30中輸入原圖像時的算法流程示意圖。
圖像輸入部120和目標判定部30針對記錄媒體207中記錄的所有原圖像,對每個原圖像重復(fù)執(zhí)行以下的處理(循環(huán)A)。
首先,圖像輸入部120將記錄媒體207中記錄的原圖像讀出至本圖像顯示裝置1內(nèi)的工作存儲器(S100),將所讀出的原圖像存放于圖像保持部210中(S102)。此外,圖像數(shù)據(jù)的保存形式可以是JPEG形式代表的壓縮形式,也可以是非壓縮形式。
其次,目標判定部30的目標候補提取部310,將圖像保持部210中存儲的原圖像讀出至工作存儲器(S104),將原圖像中含有的目標的候補全部提取(S106),取得該目標候補的位置或大小。目標候補的位置、大小的取得結(jié)束時,目標候補判定部320判定目標候補的種類,取得目標候補的種類(S108)。目標候補的種類的取得結(jié)束時,目標優(yōu)先度判定部330取得對每個種類預(yù)先設(shè)定的目標優(yōu)先度(S110)。
目標優(yōu)先度的取得結(jié)束時,目標判定部30通過以表格形式匯集原圖像的文件名、目標候補的位置、大小,目標候補的種類、目標優(yōu)先度,生成目標信息,將生成的目標信息存儲于目標信息保持部220中(S112)。
對于全部的原圖像,向圖像保持部210的存儲和對應(yīng)的目標信息向目標的信息保持部220的存儲結(jié)束時,圖像輸入部120和目標判定部30結(jié)束原圖像輸入處理/目標判定處理。
通過這種上述的處理,記錄媒體207中存儲的全部原圖像(參照圖)在順次存儲于圖像保持部210的同時,生成與各原圖像對應(yīng)的目標信息(參照圖11),并存儲于目標信息保持部220。
這里,將目標的判定實例示于圖12中。
目標候補提取部310對于圖12所示的原圖像1301,使例如“面部”“領(lǐng)帶”“蘋果”“標志”的目標模板發(fā)生作用(具體方法使用計算與上述模板的相互關(guān)聯(lián)等任意的現(xiàn)有技術(shù))。如圖12所示,從原圖像1301,將作為最像面部的區(qū)域的目標候補1311、作為最像領(lǐng)帶的區(qū)域的目標候補1312、作為最像蘋果的區(qū)域的目標候補1313、作為最像標志的區(qū)域的目標候補1314分別提取。這些候補1311~1314為目標候補組1302。
此外,目標的位置、大小可用包圍所提取的目標的四邊形的一個對角線的始點和終點的座標來表示。另外,可以包圍所抽去的目標的圖的中心的座標、通過半徑的大小,表示目標的位置、大小。在此情況下,目標的大小,在該實施方式1表示為包含目標的周圍,具有余裕,但也可表示沒有余裕。
其次,目標候補判定部320,針對各個區(qū)域的候補1311~1314,通過進行如上所述的判定,判定是否為面部、是否為領(lǐng)帶,是否為蘋果,決定目標的種類。判定方法例如為基于上述的顏色分布的方法(若為面部則膚色多)或基于上述的形狀的方法(利用領(lǐng)帶的典型形狀)。此外,目標候補1313由于不含有“像蘋果的顏色”,判定為不是蘋果,目標的種類不明。
而且,目標優(yōu)先度判定部330預(yù)先保持圖13所示的目標優(yōu)先度設(shè)定表格331,使用該目標優(yōu)先度設(shè)定表格331,針對各個區(qū)域的候補1311~1314通過與種類的關(guān)系分別取得目標的優(yōu)先度“5”、“3”、“1”、“3”。
由此,生成與圖12所示的原圖像1301(文件名a001.jPg)對應(yīng)的目標信息(參照圖11),存儲于目標信息保持部220。
此外,在圖13所示的目標優(yōu)先度設(shè)定表格331中,作為目標的種類,預(yù)先登錄“人的面部”、“領(lǐng)帶”、“項鏈”“蘋果”、“桔子”、“標志”“橡皮”“不明”,然而,在目標候補判定部320能判定種類,不用說適合于人物(全身)、人物(腰部)、人物(胸部)、狗、貓等動物,檸檬等植物、果、椅、書籍、標簽等動產(chǎn),觀光地圖,包含站名、公司名等文字列的招牌等不動產(chǎn)等所有種類的目標。
另外,對“人的面部”、“領(lǐng)帶”、“項鏈”的目標,將其優(yōu)先度預(yù)先設(shè)定為“5”、“3”、“3”,但也可根據(jù)用戶自己的喜好來設(shè)定。
由此,可對成為顯示對象的全部原圖像,分別取得目標的位置等,使以目標為中心的圖像處理成為可能。
其次,對上述構(gòu)成的圖像顯示裝置1中生成簡略圖像時的動作加以說明。
圖14是顯示用圖像生成部40的簡略圖像生成處理部410中生成簡略圖像時的算法的流程示意圖。
在該圖像顯示裝置1中,由于顯示器一覽顯示9個簡略圖像,所以用4800(水平80×垂直60)像素形成1個簡略圖像。
簡略圖像生成處理部410針對圖像保持部210中保持的全部原圖像,對每個原圖像重復(fù)執(zhí)行以下的處理(循環(huán)B)首先,簡略圖像生成部410參照對應(yīng)的目標信息,判斷原圖像中是否存在目標(S200)。在存在的情況下(S200中為Yes),將簡略圖像的對象決定為目標區(qū)域(S202)。此外,在存在多個目標的情況下,由優(yōu)先度高的來決定。在區(qū)域的決定結(jié)束時,簡略圖像生成處理部410,由目標區(qū)域和顯標器50的像素的比例,算出目標區(qū)域的縮小率(S204),通過根據(jù)所算出的比例進行抽去間隙等,生成目標的簡略圖像(S206),將該簡略圖像保存在簡略圖像保持部230(S208)另一方面,在判定為目標不存在的情況下(S200為No),簡略圖像生成處理部410,將簡略圖像的對象決定為原圖像的全體(S210),根據(jù)原圖像的全體和顯示器50的像素比例,算出原圖像的縮小率(S212),根據(jù)算出的比例進行抽去間隙等,生成原圖像全體的簡略圖像(S214),保存該簡略圖像(S216)。
針對圖像保持部210所保持的全部原圖像,在對每個原圖像生成簡略圖像結(jié)束時,簡略圖像生成處理部410結(jié)束簡略圖像的生成。
這里,圖15A和B所示對簡略圖像進行一覽顯示的例子。
圖15A表示對以目標為中心的簡略圖像進行一覽顯示的情況。通過如該顯示例那樣提取目標進行顯示,能夠?qū)τ脩羧菀椎靥崾緢D像中是否會有目標。
圖15B為與現(xiàn)有例相同的由原圖像作成的的簡略圖像。在該簡略圖像的一覽顯示中,由于圖像一張一張地顯示的大小非常小,所以要識別圖像中所含為何物,可知是非常困難的。
以下,對顯示用圖像生成處理的加以說明。
圖16為表示顯示用圖像生成處理的流程圖。
首先,顯示用圖像生成部40的簡略圖像生成處理部410一覽顯示簡略圖像(S300),等待選擇簡略圖像(S302)。該選擇通過簡略圖像所帶有的編號的輸入、游標鍵的移動進行。若選擇簡略圖像,則顯示用圖像生成部40讀出對應(yīng)的原圖像(S304),接著,讀出目標信息(S306),判斷原圖像中目標是否存在(S308)。
在目標存在的情況下(S308為YES),顯示用圖像生成部40決定效果的種類(S310),生成對應(yīng)于效果種類的顯示用圖像(S312)。所生成的顯示用圖像,通過顯示用圖像保持部250,傳送給顯示器50,通過顯示器50進行顯示(S314)。
另一方面,在目標不存在的情況下(S308為No),顯示用圖像生成部40由原圖像全體生成顯示用圖像(S316)。所生成的顯示用圖像(全體圖像)通過顯示用圖像保持部250傳送給顯示器50,通過顯示器50進行顯示(S314)。
向顯示器50的傳送結(jié)束時,顯示用圖像生成部40判斷是否按下返回按鈕(F1鍵)(S318)。在按下返回按鈕時(S318為Yes),視為圖像的閱覽結(jié)束,返回步驟S300,等待選擇簡略圖像。由此,可依次況覽與圖15A所示的簡略圖像對應(yīng)的顯示用圖像。
在沒有按下返回按鈕時(S318為No),顯示用圖像生成部40判斷保存按鈕是否押下(S320)。在按下保存接鈕時(S320為Yes),在用戶指定圖像保持部240保存顯示用圖像(S322),進入到步驟S324。在沒有按下保存按鈕時(S320為No),顯示用圖像生成部40進入到步驟S324。由此,在用戶指定圖像保持部240僅保存用戶感興趣的顯示用圖像,使僅顯示感興趣的顯示用圖像成為可能。
在步驟S324中,顯示用圖像生成部40判斷是否按下掛機(onhook)按鈕(S324)。在沒有按下掛機按鈕時(S324為No),顯示用圖像生成部40視為用戶正在閱覽顯示用圖像,返回步驟S312,生成顯示用圖像。
在按下掛機按鈕時(S324為Yes),顯示用圖像生成部40視為用戶的顯示用圖像的閱覽已結(jié)束,結(jié)束顯示用圖像生成處理。
圖17表示與效果的種類對應(yīng)的顯示用圖像生成處理的子程序。
首先,顯示用圖像生成部40決定效果的種類(S400),該決定通過隨機選擇放大/縮小處理、視點移動處理,移近/移離處理以及切除處理來進行。
在所決定的效果為放大/縮小處理時,放大縮小處理部420首先判斷是否為生成顯示用圖像的初期(S402)。在為生成顯示用圖像的初期時(S402為Yes),放大縮小處理部420將目標(人的面部)區(qū)域和全體圖像的區(qū)域決定為顯示區(qū)域(S404),設(shè)置放大標志為1(S406),從目標(人的面部)區(qū)域生成放大顯示圖像(S408),回到圖16所示的主程序。
從原圖像的目標(人的面部)區(qū)域和顯示器50的像素的比例,算出目標(人的面部)區(qū)域的放大率/縮小率,根據(jù)計算出的比例進行補充、抽去間隙,由此生成該放大顯示圖像。由此,顯示器50如圖18A所示,僅顯示目標(人的面部)區(qū)域。
另一方面,在不為生成顯示用圖像的初期時(S402為否),放大縮小處理部420依次判斷放大標志是否為1(S410),是否按下中心按鈕(S412),在判斷結(jié)果為放大標志為1(S410為Yes),中心按鈕被按下(S412為Yes)時,放大縮小處理部420視為放大圖像的閱覽已結(jié)束,設(shè)定放大標志為0(S414),從全體圖像的區(qū)域生成縮小圖像(S416),回到圖16所示的主程序。
從原圖像全體的區(qū)域和顯示器50的像素比例,算出原圖像的縮小率,根據(jù)所算出的比例,進行抽去間隙,由此,生成該縮小顯示圖像。由此,顯示器50如圖18B所示,顯示全體圖像。
與此相對,在判斷的結(jié)果為放大標志為0(S410為No),中心按鈕被按下(S412為Yes)時,視為縮小圖像的閱覽已結(jié)束,返回步驟S414,設(shè)置放大標志為1(S406),由目標(人的面部)區(qū)域生成放大顯示圖像(S408)。
在中心按鈕沒有按下時(S412為No),放大縮小處理視為放大圖像或縮小圖像正在被閱覽,返回圖16所示的主程序。
由此放大圖像,可使被攝影體放大,可以看清至細微部,從而可減輕視覺上畫質(zhì)的變差,提高識別性,減輕用戶的操作負荷。
另外,對于縮小顯示圖像也由原圖像整體作成,所以與以前相比,可以減輕視覺上畫質(zhì)的變差,提高識別性,減輕用戶的操作負荷,在步驟S400中,在所決定的效果為視點移動處理時,視點移動處理部430首先判斷是否為顯示用圖像生成的初期(S420)。在為生成顯示用圖像生成的初期時(S420為Yes),視點移動處理部430將原圖像中的目標(胸部)區(qū)域和向右橫方向移動視點的區(qū)域決定為顯示區(qū)域(S422),從向右橫方向移動的區(qū)域生成顯示用圖像(S424),返回至圖16所示的主程序。
從向右橫方向移動原圖像中的視點的區(qū)域和顯示器50的像素的比例,算出目標區(qū)域的放大率/縮小率,基于計算出的比例進行補充,抽去間隙,由此生成該顯示圖像。由此如圖19A所示,顯示器50顯示目標(胸部)的一半和人周圍的區(qū)域。
另一方面,在不為顯示用圖像生成的初期時(S426為No),視點移動處理部430等待預(yù)定時間(例如2秒)(S426)。若經(jīng)過預(yù)定的時間(S426為Yes),視點移動處理部430視為右橫方向圖像的閱覽已結(jié)束,由目標(胸部攝影)區(qū)域生成顯示用圖像(S428),返回至圖16所示的主程序。
由原圖像中的目標的區(qū)域和顯示器50的像素的比例,算出目標區(qū)域的放大率/縮小率,基于計算出的比例,進行補充、抽去間隙,生成該顯示圖像。由此,如圖19B所示,顯示器50僅顯示目標(胸部拍攝)的圖像。
通過這種顯示圖像,使遍及從目標的周圍至目標為止的廣泛范圍看起來大,能夠看清至細微部為止,從而可減輕視覺上畫質(zhì)的變差,提高識別性,減輕使用者的操作負荷。
在步驟S400中,在所決定的效果為移近/移離處理時,移近/移離處理部440首先判斷是否為顯示用圖像生成的初期(S430)。在為生成顯示用圖像生成的初期時(S430為Yes),移近/移離處理部440將原圖像中的目標(胸部)區(qū)域和固定視點移近的區(qū)域決定為顯示區(qū)域(S432),從移近的區(qū)域生成顯示用圖像(S434),返回至圖16所示的主程序。
從原圖像中移近區(qū)域和顯示器50的像素的比例,算出目標區(qū)域的放大率/縮小率,基于計算出的比例進行補充,抽去間隙,由此生成該移近圖像。由此如圖20A所示,顯示器50以視點為畫面中心,顯示目標(胸部)移離的區(qū)域。
另一方面,在不為顯示用圖像生成的初期時(S430為No),移近/移離處理部440等待經(jīng)過預(yù)定時間(例如2秒)(S436)。若經(jīng)過預(yù)定的時間(S436為Yes),移近/移離處理部440視為移離的圖像的閱覽已結(jié)束,由目標(胸部攝影)區(qū)域生成顯示用圖像(S438),返回至圖16所示的主程序。
由原圖像中的移離區(qū)域和顯示器50的像素的比例,算出目標區(qū)域的放大率/縮小率,基于計算出的比例,進行補充、抽去間隙,生成該移離圖像。由此,如圖20B所示,顯示器50顯示目標(胸部拍攝)和其周圍的圖像。
通過這種移近/移離圖像,通過接近到目標為止,使目標較大顯示,能夠看清至細微部為止,從而可減輕視覺上畫質(zhì)的變差,提高識別性,減輕使用者的操作負荷。
另外,移近/移離處理部440的視點沒有必要必須固定,而可在處理中移動視點。
在步驟S400中,在所決定的效果為切除處理時,切除處理處理部450首先判斷是否為顯示用圖像生成的初期(S440)。在為生成顯示用圖像生成的初期時(S440為Yes),切除處理處理部450將原圖像中的目標(胸部)區(qū)域和切除了人的面部的區(qū)域決定為顯示區(qū)域(S442),從目標(胸部)區(qū)域生成顯示用圖像(S444),返回至圖16所示的主程序。
從原圖像中目標(胸部)區(qū)域和顯示器50的像素的比例,算出目標區(qū)域的放大率/縮小率,基于計算出的比例進行補充,抽去間隙,由此生成該顯示圖像。由此如圖21A所示,顯示器50顯示目標(胸部)區(qū)域。
另一方面,在不為顯示用圖像生成的初期時(S440為No),切除處理部450等待預(yù)定時間(例如2秒)(S446)。若經(jīng)過預(yù)定的時間(S446為Yes),切除處理部450視為胸部拍攝圖像的閱覽已結(jié)束,僅切除目標(人的面部)區(qū)域生成顯示用圖像(S448),返回至圖16所示的主程序。
通過切除目標(人的面部)區(qū)域的外側(cè),將切除的區(qū)域描黑,生成這種切除圖像。由此,如圖21B所示,顯示器50僅顯示切除目標(人的面部)后的圖像。
通過這種切除圖像,可將不要的區(qū)域的圖像隱蔽,利用攝影時的注釋等進行修飾,從而可減輕視覺上畫質(zhì)的變差,提高識別性,減輕使用者的操作負荷。
另外,在切除目標后的背景上,可顯示任意的圖像、文本、紋理(貼的花紋、圖案)。這些數(shù)據(jù)也可利用預(yù)先保持在圖像保持部210的數(shù)據(jù),生成新的顯示用圖像生成部40,通過外部接口而取得。
其次,對滑動顯示部460所執(zhí)行的處理加以說明。
圖22為表示滑動顯示部460所執(zhí)行的處理的流程圖。
滑動顯示部460針對圖像保持部210所保持的全部顯示用圖像,對每個顯示用圖像重復(fù)進行以下的處理(循環(huán)C)。
滑動顯示部460從用戶指定圖像保持部240讀出由用戶的指定存儲的顯示用圖像(S500),將該顯示用圖像顯示于顯示器50(S502),等待預(yù)定時間(例如,2秒)(S504)。
通過重復(fù)這種處理,對于全部的顯示用圖像,如果每隔一定時間顯示結(jié)束時,滑動顯示部460結(jié)束滑動顯示。
這里,在用戶指定圖像保持部240,通??杀3钟脩舾信d趣的圖像中識別性得到提高的圖像。
因此,在滑動顯示中也可以減輕視覺上畫質(zhì)的劣化。提高識別性,減輕用戶的操作負荷。
另外,即使在實施方式1中,在顯示放大圖像,按下中心按鈕時生成并顯示縮小圖像,在顯示縮小圖像的情況下,按下中心按鈕時生成并顯示放大圖像,但是,如圖23所示,也可以交互顯示放大圖像421和縮小圖像422。由此,可減輕用戶的操作負荷。
在上述實施方式1中,在顯示器50中僅顯示圖像,然而,在如圖24所示的畫面中,可在放大圖像423的顯示之際顯示“返回”、“全體”、“保存”的圖符,在縮小圖像424的顯示之際顯示“返回”、“放大”、“保存”的圖符。由此,可提高基于GUI的操作性,減輕用戶操作負荷。
另外,在上述實施方式1中,生成并顯示全體圖像和人的面部的放大圖像這二種圖像,但可如圖25所示,從全體圖像425a至人的面部的放大圖像425d為止徐徐改變倍率滑動地進行改變。由此,可提高視覺效果。該具體實例如下所述。
在這里,使原圖像為圖26A所示的攝影圖像。通過至此為止的實施方式1,可自動地進行全體顯示或目標的放大的顯示。然而,在這里,對一邊注意圖像的整體,一邊徐徐地注目ROI的顯示方法,加以說明。
這里,通過目標判定部30,作為攝影圖像中的ROI提取目標(面部),使最終想顯示的區(qū)域(最終顯示區(qū)域)為圖26B所示的用左側(cè)的四角圍住的區(qū)域。另一方面,使最終顯示區(qū)域,或用距離其它的目標最遠的圖26A所示的四角圍住的區(qū)域為初期顯示區(qū)域。此時,顯示區(qū)域的大小當然與初期顯示區(qū)域和最終顯示區(qū)域相等。因此,從初期顯示區(qū)域,可以引出連接目標的“標志”,“不明”,“領(lǐng)帶”至最終顯示區(qū)域為止的顯示區(qū)域移動線(巡回目標的樣條線)。沿該樣條線移動視點,可進行從初期顯示區(qū)域逐漸至最終顯示區(qū)域的顯示。
在此情況下,顯示器50所顯示的圖像,如圖的所示的初期區(qū)域圖像426a~最終顯示區(qū)域圖像426g那樣,按時間軸推移。由此,可顯示從初期顯示區(qū)域逐漸至最終顯示區(qū)域的全景圖像,飛躍地提高視覺效果。
當然,初期顯示的位置/大小或最終顯示區(qū)域的位置/大小、顯示區(qū)域的移動方法不限于以上所述,全部可為任意的。
即,通過組合放大縮小處理部420、視覺移動處理部430、移近/稱離處理部440、切除處理部而成為可能的任意的處理,可一邊對任意形狀區(qū)域以任意的放大率組合任意的處理,一邊加上移進/移離處理對全體圖像和目標進行顯示。
另外,通過上述實施方式1、被縮小顯示的圖像和被放大顯示的圖像數(shù)據(jù)既可分別從原圖像獨立地生成,又可從屬地生成,在獨立生成的情況下,由于可不必將縮小化后的圖像改為放大來進行放大顯示,所以可得到更佳的畫質(zhì)。在從屬生成的情況下,可特別地通過以縮小顯示的圖像為基礎(chǔ)來削減內(nèi)部存儲器。
另外,可將具有如攜帶電話或PDA、游戲機、數(shù)字照像機、攝像機、個人計算機(PC)、筆記本型PC、汽車導(dǎo)向系統(tǒng)等的顯示裝置的通常的電氣設(shè)備視為圖像置示裝置來加以利用。
另外,可應(yīng)用于不僅為單一的圖像顯示,而且可為如滑動顯示(拍攝膠片)那樣,連續(xù)地顯示多個圖像的情況。在此情況下,例如在如帶照像機的攜帶電話或數(shù)字照像機那樣,攝像元件數(shù)(CCD像素)比終端顯示的畫面的像素大,且通常保持多個(多張)圖像數(shù)據(jù)為自然的終端,在連續(xù)顯示終端內(nèi)的圖像之際,可不僅僅滑動顯示縮小圖像,而且可加上向著ROI的移離等想見的處所的放大顯示,并進行如動畫編輯那樣的滑動顯示。
另外,也可以具有外部輸入,特別地將連續(xù)顯示(上述的外觀上滑動顯示的再現(xiàn)顯示)作為動畫,或?qū)㈧o止圖像和再現(xiàn)方法作為記述的數(shù)據(jù)文件加以保存,作為圖像輸出向外部輸出。
而且,可在放大/縮小時,付加任意的效果音,也可在上述的滑動顯示的再現(xiàn)時加上音樂。
實施方式2以下,使用附圖28~36對本發(fā)明實施方式2的短片生成裝置加以說明。
圖28為表示本發(fā)明實施方式2的短片生成裝置的功能結(jié)構(gòu)的方塊示意圖。
該短片生成裝置500是使用輸入的一個以上的靜止圖像,生成短圖像(短片)的方案,將靜止圖像按照方案再現(xiàn)短片的計算機裝置。具有操作輸入部501、圖像輸入部502、文字區(qū)域提取部503、圖像存儲部504、方案生成部505,圖像再現(xiàn)部506以及顯示部507,操作輸入部501是接受靜止圖像的讀取指示、靜上圖像的選擇等來自用戶的輸入操作的鍵盤或鼠標等輸入裝置。
圖像輸入部502是將由數(shù)字照像機100等攝影的JPEG壓縮形式的靜止圖像數(shù)據(jù)讀入至裝置內(nèi)的處理部,通過USB(Universal SerialBus)或IEEE(Institute Electrical and Electronic Engineers)1394等接口而實現(xiàn)。
文字區(qū)域提取部503是判定裝置內(nèi)讀取的靜止圖像中是否含有四方形的文字區(qū)域,在含有文字區(qū)域的情況下,將與該文字區(qū)域有關(guān)的文字區(qū)域信息提取的處理部,通過使用圖案匹配法,邊緣檢測法的OCR(Optical Character Reader)而實現(xiàn)。這里,在文字區(qū)域信息中,包含靜止圖像中的文字區(qū)域的位置,文字區(qū)域的形狀、大小以及顏色等,文字區(qū)域提取部503將提取的文字區(qū)域信息保持在裝置內(nèi)的存儲器中。
圖像存儲部504是將數(shù)字照像機100攝影的JPEG壓縮形式等的靜止圖像數(shù)據(jù)加以存儲的硬盤等存儲裝置。
方案生成部505是從操作輸入部501取得由用戶接受的圖像的選擇結(jié)果,決定所選擇的圖像的再現(xiàn)順序和視覺效果、生成作為再現(xiàn)信息的方案的處理部,通過CPU和存儲器實現(xiàn)。
圖像再現(xiàn)部506是按照方案生成部505中生成的方案從圖像存儲部504讀出靜止圖像,一邊實施方案所指定的視覺效果,一邊以15幀/秒重復(fù)再現(xiàn)的動作的處理部,通過CPU和存儲器來實現(xiàn)。
顯示部507為接受來自方案生成部505和圖像再現(xiàn)部506的控制,對用戶界面畫面和圖像進行顯示的CRT顯示器或液晶顯示器。
以下對由此構(gòu)成的短片生成裝置500的各部分的處理動作詳細說明。
圖29為表示文字區(qū)域提取部503的處理順序的流程圖。
首先,將用戶用數(shù)字照像機100攝影的靜止圖像數(shù)據(jù)通過圖像輸入部502直接地讀入短片生成裝置(S600)。
此時,文字區(qū)域提取部503從由圖像輸入部502讀入的靜止圖像數(shù)據(jù)進行文字區(qū)域的提取(S602)。另外,此時,文字區(qū)域種類的文字區(qū)域提取信息的區(qū)域,保持在存儲器中。
這里,在靜止圖像數(shù)據(jù)中不含有文字區(qū)域時(S604為No),文字區(qū)域提取部503在存儲器中保持著的文字區(qū)域提取信息的區(qū)域中追加“未提取”,將靜止圖像存儲于圖像存儲部504中,結(jié)束處理動作(S606)。
另一方面,在靜止圖像數(shù)據(jù)中含有文字區(qū)域時(S604為Yes),文字區(qū)域提取部503參照文字區(qū)域信息,判斷該圖像中含有的文字區(qū)域是否為縱向長區(qū)域(縱、橫的比率為2比1以上)(S608)。
在文字區(qū)域為縱向長區(qū)域時(S608為Yes),文字區(qū)域提取部503在存儲器中保持的文字區(qū)域提取信息的區(qū)域中,追加“縱向長區(qū)域”,將靜止圖像存儲于圖像存儲部504中,結(jié)束處理動作。(S610)在文字區(qū)域不為縱向長區(qū)域時(S608為No),文字區(qū)域提取部503參照文字區(qū)域信息,判定其圖像中所含的文字區(qū)域是否為橫向長區(qū)域(縱、橫的比率為1比2以上)(S612)。
在文字區(qū)域為橫向長區(qū)域時(S612為Yes),文字區(qū)域提取部503在存儲器中保持的文字區(qū)域提取信息的區(qū)域中,追加“橫向長區(qū)域”,將靜止圖像數(shù)據(jù)存儲于圖像存儲部504中,結(jié)束處理動作(S614)。
另一方面,在文字區(qū)域不為橫向長區(qū)域時(S612為No),即,文字區(qū)域為接近正方形的情況下,文字區(qū)域提取部503在存儲器中保持的文字區(qū)域提取信息的區(qū)域中,追加“正方形區(qū)域”,將靜止圖像數(shù)據(jù)存儲于圖像存儲部504中,結(jié)束處理動作(S616)。
圖30為表示方案生成部505的處理順序的流程圖。
首先,操作輸入部501接受由用戶按下短片生成按鈕的操作時,操作輸入部501向方案生成部505輸出方案生成指示。
若方案生成部505取得方案生成指示,則生成要求用戶從圖像存儲部504中存儲的圖像選擇多張的畫面(圖像選擇畫面),向顯示部507輸出(S650)。
這里,操作輸入部501從用戶接受從顯示部507中顯示的圖像中選擇再現(xiàn)的靜止圖像的操作時(S652的Yes),向方案生成部505輸出所選擇的圖像的信息。
然后,方案生成部505檢驗所選擇的圖像的攝影時刻信息,接攝順序排列各圖像的再現(xiàn)信息,生成連接列表化的方案框架(S654)。
這里,在操作輸入部501從用戶接受5張靜止圖像(圖像1、圖像2、圖像3、圖像4及圖像5)的選擇時,所生成的方案框架如圖31所示。另外,該5張靜止圖像的攝影時刻為對圖像1、圖像2、圖像3、圖像4、圖像5按時間系列排列。
如圖31所示,方案框架中,通過連接列表化方案標題600,方案先頭列表601,方案第2列表602,方案第3列表603,方案第4列表604以及方案第5列表605來構(gòu)成。
此時,方案標題600中,設(shè)定方案名和圖像數(shù),方案框架的各列表601~605中,設(shè)定各圖像再現(xiàn)信息中圖像文件名,圖像存儲部504中存儲部位及文字區(qū)域提取信息。
于是,方案標題600的全部再現(xiàn)時間,方案框架的各列表601~605的視覺效果和再現(xiàn)時間信息在此階段為空白狀態(tài)。
再度參照圖30,繼續(xù)說明方案生成部505的處理順序。方案生成部505參照所生成的方案框架的方案先頭列表601(S656)、決定對于方案先頭列表601中所示的圖像分配的視覺效果。
此時,方案生成部505為了決定視覺效果檢驗方案框架中設(shè)置的文字區(qū)域提取信息,判斷方案先頭列表601所示的圖像(圖像1)是否為提取了文字區(qū)域的圖像(S658)。
在是文字區(qū)域被提取的圖像時(S658的是),方案生成部505進一步參照該文字區(qū)域提取信息,判斷圖像中所含文字區(qū)域是否為縱向長區(qū)域(S660)。
在文字區(qū)域為縱向長區(qū)域時(S660為是),方案生成部505在方案先頭列表601的視覺效果信息上追加對該文字區(qū)域從上向下方向的Pan效果(S662)。另外,在上述實施方式1中,使顯示區(qū)域上下方向移動的視覺效果被稱為tilt(傾斜攝影),但在以下稱為上下方向的Pan效果。
另一方面,方案區(qū)域若不為縱向長區(qū)域(S660的No),方案生成部505參照該文字區(qū)域提取信息,判斷圖像中所含文字區(qū)域是否為橫向長區(qū)域(S664)。
在文字區(qū)域為橫向長區(qū)域時(S664為Yes),方案生成部505在方案先頭列表601的視覺效果信息上追加對該文字區(qū)域從左向右的Pan效果。
在文字區(qū)域不為橫向長區(qū)域時(S664為No)即,文字區(qū)域為正方形區(qū)域時,方案生成部505在方案先頭列表601的視覺效果信息上追加對該文字區(qū)域的移近效果(S668)。
與此相對,在方案先頭列表601所示圖像不為提取文字區(qū)域的圖像時(S668為No),方案方案生成部505通過隨機函數(shù)產(chǎn)生隨機數(shù)并除以3(S670),通過求得除后的余數(shù),決定配給圖像的視覺效果。
也就是說,方案生成部505在余數(shù)為1時(S672的Yes),在方案先頭列表601的視覺效果信息上追加對圖像的漸強效果(S674),若余數(shù)為2(S676為Yes),在方案先頭列表601的視覺效果信息上追加對圖像的漸弱效果(S678)。在余數(shù)為0時(S676為No),在方案先頭列表601的視覺效果信息上追加表示不施加視覺效果的標志。
而且,方案生成部505在方案在先頭列表601的信息效果上追加分配的視覺效果之際,設(shè)定相應(yīng)的圖像的再現(xiàn)時間,在方案先頭列表601的再現(xiàn)時間信息上進行追加。這里,施加文字區(qū)域上下或左右的Pan效果或移近效果的圖像的再現(xiàn)時間為3秒,除此之外的圖像和再現(xiàn)時間設(shè)定為2秒。
之后,方案生成部505判斷追加了視覺效果和再現(xiàn)時間信息的列表是否為最后的列表(S680),若為最后的列表(S680為Yes),結(jié)束方案生成的處理動作,若不為最后的列表(S680為No),則參照方案框架的下一列表(S682),重復(fù)進行決定對圖像或圖像中所含文字區(qū)域的視覺效果的處理動作。
由此,方案生成部505在再現(xiàn)順序中從先頭的圖像(圖像1)至最后的圖像(圖像5)為止重復(fù)分配視覺效果的處理動作,結(jié)束圖32所示的方案。
圖32為完成的方案的示意圖。
在該完成的方案中,方案標題610中記述表示全部再現(xiàn)時間12秒的信息,記述圖像1的再現(xiàn)信息的方案先頭列表611中記述分配漸弱效果的視覺效果信息,記述再現(xiàn)時間2秒的再現(xiàn)時間信息。同樣,在記述各圖像的再現(xiàn)信息的列表611~615中,分別記述所分配的視覺效果信息和再現(xiàn)時間信息。
即,根據(jù)該完成的方案,按圖像1、圖像2、圖像3、圖像4、圖像5的順序進行再現(xiàn),分別在圖像1施加漸弱效果,在圖像2對文字區(qū)域施加移近效果,在圖像3對文字區(qū)域施加左右方向的Pan效果,在圖像4施加漸強效果的視覺效果,在圖像5,不施加視覺效果。此外,圖像的再現(xiàn)時間分別為2秒、3秒、3秒、2秒、2秒(計12秒)。
圖33表示圖像再現(xiàn)部506利用這樣生成的方案,再現(xiàn)圖像的處理順序的流程圖。
首先,圖像生成部506接受通過方案而生成的方案的地址信息,參照方案先頭列表(S700)取得方案先頭列表中存儲的圖像(圖像1)的再現(xiàn)信息,即圖像文件名、圖像存儲部504中的存儲部位、文字區(qū)域提取信息、視覺效果信息、再現(xiàn)時間信息以及下一列表信息。
其次,圖像再現(xiàn)部506根據(jù)取得的再現(xiàn)信息,從圖像存儲部504中的存儲部位,讀出與文件名一致的壓縮形式的靜止圖像數(shù)據(jù)(S702)。若圖像再現(xiàn)部506解碼所讀出的壓縮形式的靜止圖像,則根據(jù)所取得的再現(xiàn)時間信息(幀數(shù)),一邊進行時間管理,一邊施加視覺效果信息中所示的視覺效果(漸弱效果),再現(xiàn)圖像,輸出直顯示部507進行顯示。
若圖像的再現(xiàn)結(jié)束,則圖像再現(xiàn)部506參照取得的下一列表信息,判斷該下一列表是否為方案中最后的列表(S706)。
若不為最后的列表(S706為No),則圖像生成部506根據(jù)下一列表信息,參照方案的下一列表(S708),取得下一圖像(圖像2)的再現(xiàn)信息,重復(fù)以上處理,直到最后的圖像(圖像5)的再現(xiàn)處理結(jié)束為止。
另一方面,若為最后的列表(S706為Yes),即下一列表信息為“NULL”,則圖像生成部506結(jié)束圖像再現(xiàn)的處理動作。
這里,使用圖34,就圖像中含有的文字區(qū)域的視覺效果加以說明。
圖34為短片生成裝置500中畫面顯示的第一例的示意圖。
這里,就對圖像中含有的文字區(qū)域施加左右方向的Pan效果的情況加以說明。
首先,短片生成裝置500的圖像再現(xiàn)部506,向顯示部507輸出顯示第一顯示圖像例623。如圖34所示,在該第一顯示圖像例623中,含有橫向長區(qū)域的第一文字區(qū)域624,對該第一文字區(qū)域624向左右方向施加Pan效果。
其次,短片生成裝置500的圖像再現(xiàn)部506,放大第一顯示圖像例623中含有的第一文字區(qū)域624,向顯示部507輸出顯示第二顯示圖像例623a。之后,圖像再現(xiàn)部506使第一文字區(qū)域624的顯示部分向右方向移動。將第三顯示圖像例623b和第四顯示圖像例623c依次輸出至顯示部507進行顯示。在第四顯示圖像例623c顯示之后,轉(zhuǎn)移至下一個圖像的再現(xiàn)處理。
通過對圖像中含有的文字區(qū)域施加這種視覺效果,能強調(diào)該圖像的特性(攝影場所等),能給閱覽短片的用戶深刻的印象。
在上述方案生成部505中,圖像中含有的文字區(qū)域上施加的視覺效果,不限于上下或左右方向的Pan效果或移近效果。例如,可施加在顯示圖像整體后對文字區(qū)域?qū)式裹c的聚焦效果,或相反施加在文字區(qū)域?qū)式裹c后顯示圖像整體的散焦效果,此外,也可施加將文字區(qū)域分為多個部分,從顯示畫面外依次滑動顯示構(gòu)成文字區(qū)域的各部分的滑近效果,或相反向顯示畫面外依次滑動消去各部分的滑遠效果。
這里,使用圖35,就圖像中含有的文字區(qū)域施加的散焦效果加以說明。
圖35為短片生成裝置500中畫面顯示的第二例的示意圖。
首先,短片生成裝置500的圖像再現(xiàn)部506,向顯示部507輸出顯示第二顯示圖像例633a。如圖35所示,在該第二顯示圖像例633a中,含有橫向長區(qū)域的第一文字區(qū)域634,對該第一文字區(qū)域634施加散焦效果。
其次,短片生成裝置500的圖像再現(xiàn)部506,放大第一文字區(qū)域634中對準的焦點,向顯示部507輸出顯示表示圖像全體的第一顯示圖像例633。之后,結(jié)束該圖像的再現(xiàn),移至下一圖像的再現(xiàn)處理。
另外,如果使圖35中表示圖像顯示的推移的箭頭方向相反,即顯示第一顯示圖像例633之后,向第一文字區(qū)域634依次聚焦地進行顯示,若顯示第二顯示圖像例633a,則成為施加聚焦效果。
另外,使用圖36,就對圖像中含有的文字區(qū)域施加的滑近效果加以說明。
圖36為短片生成裝置500中畫面顯示的第三例的示意圖。
首先,短片生成裝置500的圖像再現(xiàn)部506,向顯示部507輸出顯示第二顯示圖像例643a。如圖36所示,在該第二顯示圖像例643a中,含有橫向長區(qū)域的第一文字區(qū)域644,對該第一文字區(qū)域634施加滑近效果。
其次,短片生成裝置500的圖像再現(xiàn)部506,從顯示畫面之外滑動顯示第一文字區(qū)域644中的部分(“奈良站”的“奈”的部分),向顯示部507輸出顯示第三顯示圖像例643b。
接著,短片生成裝置500的圖像再現(xiàn)部506,從顯示畫面之外滑動顯示第一文字區(qū)域644中的下一部分(“奈良站”的“良”的部分),向顯示部507輸出顯示第四顯示圖像例643c。
最后,短片生成裝置500的圖像再現(xiàn)部506,從顯示畫面之外滑動顯示第一文字區(qū)域644中的部分(“奈良站”的“站”的部分),向顯示部507輸出顯示第一顯示圖像例643。之后,結(jié)束該圖像的再現(xiàn),移至下一圖像的再現(xiàn)處理。
這樣,根據(jù)本實施方式2的短片生成裝置500,文字區(qū)域提取部503將靜止圖像中含有的文字區(qū)域提取,方案生成部505對靜止圖像中含有的文字區(qū)域選擇相應(yīng)的視覺效果,因此,可生成更有效果的短片。
另外,在本實施方式2中,是根據(jù)文字區(qū)域的形狀(縱橫比),選擇圖像中含有的文字區(qū)域上施加的視覺效果,但也可根據(jù)文字區(qū)域的其他的大小(面積或者縱和橫的長),色彩(文字或底色),選擇圖像中含有的文字區(qū)域上施加的視覺效果。具體地說,可考慮對較預(yù)定面積小的文字區(qū)域?qū)嵤┓糯笮Ч?,或如道路標志的地名那樣,對在黑的地面上用白色描寫的文字區(qū)域,或?qū)υ诰G的地面上用白色描寫的文字區(qū)域?qū)嵤┓糯笮Ч?br>
另外,通過對文字中含有的文字區(qū)域?qū)嵤└淖兤湮淖謪^(qū)域的色彩,用預(yù)先準備的其他文字進行置換的視覺效果,可生成強調(diào)文字區(qū)域,適用于廣告宣傳等用途的短片。
而且,在本實施方式2中,數(shù)字照相機100攝影的圖像可通過圖像輸入部502直接取入裝置內(nèi),也可將數(shù)字照相機100攝影的圖像通過存儲卡等記錄媒體輸入裝置內(nèi)。
而且,在本實施方式2中,圖像或圖像中含有的文字效果上施加的視覺效果如以上例所示,但當然不限于這些視覺效果。
實施方式3接著,對本發(fā)明的實施方式3的短片生成裝置加以說明。
本實施方式3的短片生成裝置的結(jié)構(gòu)和處理動作,與實施的實施方式2的短片生成裝置大致相同,但方案生成部的結(jié)構(gòu)和處理動作不同。
以下,以其不同點為中心進行說明。另外,對與實施方式2相同的構(gòu)成元件,加上相同的符號,省略其說明。
圖37為表示本實施方式3的短片生成裝置的功能結(jié)構(gòu)的方塊示意圖。
如圖37所示,該短片生成裝置510操作輸入部501、圖像輸入部502、文字區(qū)域提取部503、圖像存儲部504、方案生成部505,圖像再現(xiàn)部506以及顯示部507,操作輸入部501接受靜止圖像中含有的文字區(qū)域的選擇等、來自用戶的輸入操作。
方案生成部508是從操作輸入部501取得由用戶選擇的文字區(qū)域的信息(文字區(qū)域選擇信息),根據(jù)與所選擇的文字區(qū)域相關(guān)的文字區(qū)域信息,進行再現(xiàn)圖像的選擇、標題圖像的生成、所選擇的圖像的再現(xiàn)順序和視覺效果的決定,和進行作為再現(xiàn)信息的方案的生成的處理部,具有選擇圖像決定部509。
選擇圖像決定部509是按照包含所選擇的文字區(qū)域的靜止圖像(關(guān)鍵圖像)的攝影時刻,將該關(guān)鍵圖像在前后預(yù)定時間內(nèi)(例如,3秒以內(nèi))攝制的靜止圖像再現(xiàn)的圖像加以選擇的處理部,通過CPU和存儲器來實現(xiàn)。
以下對由此構(gòu)成的短片生成裝置510的各部分的處理動作詳細說明。
圖38為方案生成部508的處理順序的流程圖。
首先,操作輸入部501接受由用戶按下短片生成按鈕的操作時,操作輸入部501向方案生成部508輸出方案生成指示。
若方案生成部508取得方案生成指示,則生成要求選擇文字區(qū)域的畫面(圖像選擇畫面),向顯示部507輸出(S800)。此時,方案生成部508,在存儲于圖像存儲部504的圖像中,對于文字區(qū)域提取部503中提取了文字區(qū)域的圖像,通過例如將該文字區(qū)域部分用虛線包圍,使該文字區(qū)域部分明確顯示,生成文字區(qū)域選擇圖像。另外,提取的文字區(qū)域圖像存有多個的情況下,方案生成部508生成含有下一按鈕的文字區(qū)域選擇畫面,操作輸入部501從用戶接受按下下一按鈕的操作,方案生成部508將文字區(qū)域選擇畫面切換為提取下一文字區(qū)域的圖像。
這里,操作輸入部501從用戶接受從顯示部507中顯示的文字區(qū)域選擇畫面中選擇文字區(qū)域的操作時(S802的Yes),向方案生成部508輸出文字區(qū)域選擇信息。
然后,方案生成部508在選擇圖像決定部509中,根據(jù)包含該文字區(qū)域的圖像(關(guān)鍵圖像)的攝影時刻信息,將全部在關(guān)鍵圖像的前后預(yù)定時刻以內(nèi)攝制的圖像,作為再現(xiàn)的圖像加以選擇(S804)。
使用圖39對該選擇圖像決定部509中圖像選擇加以說明。
圖39為選擇圖像決定部509的圖像選擇模式的示意圖。
在圖39中,按攝影時刻順序,將攝影圖像(圖像7~15)進行排列的狀態(tài)的示意圖。
這里,操作輸入部501從用戶接受選擇圖像10含有的文字區(qū)域的操作時,選擇圖像決定部509決定圖像10為關(guān)鍵圖像700。
因此,選擇圖像決定部509將全部在該關(guān)鍵圖像700攝影時刻的前后預(yù)定時間t以內(nèi)攝制的圖像,作為再現(xiàn)的圖像加以選擇。
圖39中,表示圖像8和圖像13在關(guān)鍵圖像的前后預(yù)定時間t內(nèi)攝制的圖像,所以,選擇圖像決定部509將圖像8~圖像13作為選擇圖像701進行處理。
這樣,在選擇圖像決定部509中,若選擇再現(xiàn)的圖像,則方案生成部508檢查所選擇的圖像的攝影時刻信息,將個圖像的再現(xiàn)信息按攝影時刻順序排列,生成連接列表化的方案框架(圖38的S806)。
如圖39所示,在選擇圖像決定部509中,選擇了6張靜止圖像(圖像8~圖像13)的情況下所生成的方案框架顯示于圖40中。
圖40為方案框架示意圖。
如圖40所示,方案框架通過將方案標題710,方案先頭列表711,方案第2列表712,方案第3列表713,方案第4列表714、方案第5列表715、以及方案第6列表716來構(gòu)成。
此時,方案標題710中,設(shè)定方案名和圖像數(shù),方案先頭列表711中,設(shè)定用于短片標題的、預(yù)先存儲于圖像存儲部504的標題圖像(例如,黑等單色畫面)的再現(xiàn)信息中圖像文件名和圖像存儲部504中存儲部位。另外,剩下的方案框架的各列表712~717中,設(shè)定各圖像再現(xiàn)信息中圖像文件名,圖像存儲部504中存儲部位。
于是,方案標題210的全部再現(xiàn)時間,方案框架的各列表711~717的視覺效果信息和再現(xiàn)時間信息在此階段為空白狀態(tài)。
再度參照圖38,繼續(xù)說明方案生成部508的處理順序。方案生成部508參照所生成的方案框架的方案先頭列表711(S808)、決定對于方案先頭列表711中所示的圖像分配的視覺效果。
此時,方案生成部508檢查圖像文件名,判斷方案先頭列表711所示的圖像是否為標題圖像(S810)。
在是標題圖像時(S810為Yes),方案生成部508在方案先頭列表711的視覺效果信息上追加表示在該圖像的圖像中央部加入了用戶選擇的文字區(qū)域的文字加入效果(S812)。
在不為標題圖像的其他圖像時(S810為No),方案方案生成部508通過隨機函數(shù)產(chǎn)生隨機數(shù)并除以4(S812),通過求得除后的余數(shù),決定分配給圖像的視覺效果。
也就是說,方案生成部508在余數(shù)為1時(S816的Yes),在方案先頭列表711的視覺效果信息上追加對圖像的漸強效果(S818),若余數(shù)為2(S820為Yes),在方案先頭列表711的視覺效果信息上追加對圖像的漸弱效果(S822)。在余數(shù)為0時(S824為Yes),在方案先頭列表711的視覺效果信息上追加向該圖像的圖像中央部分移近效果(S826)。在余數(shù)為3時(S824為No),在方案先頭列表711的視覺效果信息上追加表示不施加視覺效果的標志。
而且,方案生成部508在方案在先頭列表711上追加分配的視覺效果之際,設(shè)定相應(yīng)的圖像的再現(xiàn)時間,在方案先頭列表711的再現(xiàn)時間信息上進行追加。這里,施加移近效果的圖像的再現(xiàn)時間為3秒(45幀),除此之外的圖像和再現(xiàn)時間設(shè)定為2秒(30幀)。
之后,方案生成部508判斷追加了視覺效果信息和再現(xiàn)時間信息的列表是否為最后的列表(S828),若為最后的列表(S828為Yes),結(jié)束方案生成的處理動作,若不為最后的列表(S828為No),則參照方案框架的下一列表(S830),重復(fù)進行決定對圖像的視覺效果的處理動作。
由此,方案生成部508在再現(xiàn)順序中從先頭的圖像(標題圖像)至最后的圖像(圖像13)為止重復(fù)分配視覺效果的處理動作,結(jié)束圖41所示的方案。
圖41為完成的方案的示意圖。
在該完成的方案中,方案標題720中記述表示全部再現(xiàn)時間16秒的信息,記述標題圖像的再現(xiàn)信息的方案先頭列表721中,記述分配文字加入效果的視覺效果信息,記述再現(xiàn)時間2秒的再現(xiàn)時間信息。同樣,在記述各圖像的再現(xiàn)信息的列表722~727中,分別記述所分配的視覺效果信息和再現(xiàn)時間信息。
即,根據(jù)該完成的方案,按標題圖像、圖像8、圖像9、圖像10、圖像11、圖像12、圖像13的順序進行再現(xiàn),分別在標題圖像施加文字加入效果,在圖像8施加漸強效果,在圖像9施加移近效果,在圖像10施加漸弱效果,在圖像12施加移近效果,在圖像11和圖像13不施加視覺效果。此外,圖像的再現(xiàn)時間分別為2秒、2秒、3秒、2秒、2秒、3秒、2秒(計16秒)。
之后,圖像生成部506接受通過方案生成部508生成的方案的地址信息,參照方案先頭列表取得方案先頭列表中存儲的圖像(標題圖像)的再現(xiàn)信息。之后,圖像再現(xiàn)部506根據(jù)取得的再現(xiàn)信息,從圖像存儲部504中,讀出壓縮形式的靜止圖像數(shù)據(jù)并解碼,根據(jù)再現(xiàn)時間信息(幀數(shù)),一邊進行時間管理,一邊施加視覺效果信息中所示的視覺效果(文字加入效果),再現(xiàn)圖像,輸出至顯示部507進行顯示。
若圖像的再現(xiàn)結(jié)束,則圖像再現(xiàn)部506參照取得的下一列表信息,取得下一圖像(圖像8)的再現(xiàn)信息,重復(fù)以上處理,直到最后的圖像(圖像13)的再現(xiàn)處理結(jié)束為止。
經(jīng)過這樣的處理動作,將短片生成裝置510再現(xiàn)的短片的畫面顯示例,顯示于42和圖43中。
圖42為短片生成裝置510中畫面顯示的第一例的示意圖。
圖42中,示出作為標題圖像的顯示例的第一顯示圖像例730,作為圖8~13的顯示例的第一顯示圖像例731~第7顯示圖像例736共計7個顯示圖像例。示出短片生成裝置510從第一顯示圖像例730開始按順序進行再現(xiàn)的狀態(tài)。
這里,第一顯示圖像例730為根據(jù)圖41的方案先頭列表721進行再現(xiàn)的標題圖像,分配有加入成為關(guān)鍵圖像的圖像10的文字區(qū)域,即第四顯示圖像例733中含有的橫向長區(qū)域的第一文字區(qū)域733a(“Broadway”)的視覺效果,短片生成裝置510在2秒間顯示該第一顯示圖像例730后,切換為顯示第二顯示圖像例731。
之后,第二顯示圖像例731為根據(jù)圖41的方案第2列表722進行再現(xiàn)的圖像8,分配有漸強效果;短片生成裝置510在從第一顯示圖像例730切換為顯示第二顯示圖像例731之際,使圖像逐漸鮮明地再現(xiàn)第二顯示圖像例731。
之后,短片生成裝置510將依再現(xiàn)順序排列的圖像9~13,同樣地按照方案的列表進行再現(xiàn),按順序顯示第3顯示圖像例732~第7顯示圖像例736。
另外,在文字區(qū)域提取部503中,所提取的文字區(qū)域不限于漢字或字母,也可為平假名文字等。文字區(qū)域提取部503通過對每個語言保持圖案匹配用的模板,可進行涉及多語言的文字區(qū)域的提取。這與上述實施方式1中的目標判定部300、上述實施方式2中的同樣。
圖43中示出提取日本語的文字區(qū)域的情況的畫面顯示。
圖43為短片生成裝置510中畫面顯示的第二例的示意圖。
圖43中,與圖42同樣,示出作為標題圖像的顯示例的第一顯示圖像例740,第1顯示圖像例741~第7顯示圖像例746共計7個顯示圖像例。示出短片生成裝置510從第1顯示圖像例730開始按順序進行再現(xiàn)的狀態(tài)。
這里,第一顯示圖像例740分配有加入第四顯示圖像例743中含有的縱向長區(qū)域的第一文字區(qū)域743a(“鐮倉大佛”)的視覺效果。這樣,可將縱向長區(qū)域的文字區(qū)域加入標題圖像中。
另外,第5顯示圖像例744中,提取這里含有的日本語的平假名的第二文字區(qū)域744b(“ぉみくじ”)。這樣,可提取日本語的平假名的文字。
這樣,根據(jù)本實施方式3的短片生成裝置510,將包含用戶選擇的文字區(qū)域的靜止圖像作為關(guān)鍵圖像,自動選擇方案生成部508再現(xiàn)的圖像,所以可省去用戶選擇再現(xiàn)的圖像的麻煩。
而且,因為將用戶所選擇的文字區(qū)域自動加入標題圖像中,所以用戶不必用鍵盤輸入用于標題的文字。
在本實施方式3中,用戶通過操作輸入部510從候補選擇文字區(qū)域,但方案生成部508也可從文字區(qū)域的大小等條件進行判斷來自行決定。這里,短片生成裝置510,可利用默認值自行決定標題圖像中使用的文字區(qū)域,在操作輸入部501從用戶接受標題用的文字輸入時,可將用戶所希望的標題文字用于標題圖像中。
另外,選擇圖像決定部509以用戶選擇的關(guān)鍵圖像的再現(xiàn)時刻為基準,將前后預(yù)定時間內(nèi)攝制的圖像選擇為再現(xiàn)的圖像,但選擇圖像決定部509可不從關(guān)鍵圖像的時間范圍,而按攝影時刻為順序排列圖像,檢查與下一圖像的攝影時刻的間隔,在為預(yù)定時間以上的間隔時,將該下一圖像作為另一組加以區(qū)分來進行分組,將屬于包含關(guān)鍵圖像的組的圖像選擇為再現(xiàn)圖像。
而且,方案生成部508在方案的先頭列表中配置標題圖像的再現(xiàn)信息,但也可不配置于方案中,圖像生成部506在方案執(zhí)行前,向顯示部507輸出顯示組合了文字區(qū)域的標題圖像。另外,在標題圖像中,也可不使用黑色畫面,而將關(guān)鍵圖像直接作為標題圖像使用。
與實施方式2同樣,數(shù)字照相機100攝影的圖像可通過圖像輸入部502直接取入裝置內(nèi),也可將數(shù)字照相機100攝影的圖像通過存儲卡等記錄媒體輸入裝置內(nèi)。
而且,與實施方式2同樣,本實施方式3的圖像或圖像中含有的文字效果上施加的視覺效果如以上例所示,但當然不限于這些視覺效果。
工業(yè)應(yīng)用本發(fā)明的圖像顯示裝置作為如攜帶電話或PDA那樣具有比原圖像的像素少的像素的顯示裝置非常有用。
此外,本發(fā)明的短片生成裝置可用于帶有圖像再現(xiàn)功能的攜帶電話和個人計算機,尤其能良好地應(yīng)用于存儲大量靜止圖像數(shù)據(jù)的個人計算機中。
權(quán)利要求
1.一種圖像顯示裝置,具有顯示圖像的顯示機構(gòu),其特征在于,具有用于保持以比所述顯示機構(gòu)中可顯示的像素更多的像素形成的原圖像的圖像保持機構(gòu);判斷在上述原圖像保持機構(gòu)所保持的原圖像中是否含有目標,在含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定機構(gòu);根據(jù)由用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從上述原圖像中提取上述原圖像中作為含有目標的區(qū)域的目標區(qū)域的至少一部分,生成與上述顯示機構(gòu)中可顯示的像素相一致的顯示用圖像的顯示用圖像生成機構(gòu)。
2.根據(jù)權(quán)利要求1所述的圖像顯示裝置,其特征在于,上述目標判定機構(gòu)具有目標提取部,提取上述原畫像中包含的目標的位置和大小,將所提取的目標的位置和大小加入上述目標信息中;所述顯示用圖像生成機構(gòu),根據(jù)上述目標信息中加入的目標的位置和大小,決定從上述原畫像中提取的部分。
3.根據(jù)權(quán)利要求2所述的圖像顯示裝置,其特征在于,上述目標判定機構(gòu)進一步具有判定上述目標提取部提取的目標的種類,將所判定的目標種類加入上述目標信息中的目標種類判定部,上述顯示用圖像生成機構(gòu)根據(jù)上述目標信息中所加入的目標的位置、大小和種類,決定從上述所圖像提取的部分。
4.根據(jù)權(quán)利要求3所述的圖像顯示裝置,其特征在于,上述目標的種類中含有人物、人物的面部、狗、貓和書籍及包含有文字的物品、招牌、標簽的至少一種。
5.根據(jù)權(quán)利要求3所述的圖像顯示裝置,其特征在于,上述目標判定機構(gòu)進一步具有將與上述目標種類判定部所判定的目標的種類對應(yīng)的優(yōu)先度,加入上述目標信息中的目標優(yōu)先度設(shè)定部,上述顯示用圖像生成機構(gòu)根據(jù)上述目標信息中加入的目標的優(yōu)先度,決定從上述原圖像提取的部分。
6.根據(jù)權(quán)利要求2所述的圖像顯示裝置,其特征在于,上述目標提取部使用圖案匹配、色分布信息、邊緣信息、區(qū)域分割信息以及布局信息中的至少其中之一,提取上述目標。
7.根據(jù)權(quán)利要求1所述的圖像顯示裝置,其特征在于,上述顯示用圖像生成裝置進一步具有簡略圖像生成機構(gòu),其根據(jù)上述目標信息,從上述原圖像提取上述原圖像中作為包含目標的區(qū)域的目標區(qū)域的至少一部分,生成預(yù)先設(shè)定的像素的簡略圖像。
8.根據(jù)權(quán)利要求7所述的圖像顯示裝置,其特征在于,在所述原圖像保持機構(gòu)中,保持有多個原圖像,所述顯示用圖像生成機構(gòu)將所述簡略圖像生成機構(gòu)所生成的各原圖像的簡略的圖像,在所述顯示機構(gòu)一覽顯示。
9.根據(jù)權(quán)利要求8所述的圖像顯示裝置,其特征在于,所述預(yù)先設(shè)定的像素是所述顯示機構(gòu)中1個簡略圖像的顯示所分配的像素。
10.根據(jù)權(quán)利要求1所述的圖像顯示裝置,其特征在于,所述顯示用圖像生成機構(gòu)通過將此所述原圖像提取的部分放大或縮小,生成與所述顯示機構(gòu)中可顯示的像素相一致的顯示用圖像。
11.根據(jù)權(quán)利要求1所述的圖像顯示裝置,其特征在于,所述顯示用圖像生成機構(gòu)決定從所述原圖像提取的部分,以使從所述原圖像提取的部分的像素為上述顯示機構(gòu)中可顯示的像素。
12.根據(jù)權(quán)利要求1所述的圖像顯示裝置,其特征在于,上述目標判定機構(gòu)具有提取原畫像中包含的目標的位置和大小,將所提取的目標的候補的位置和大小加入上述目標信息中的目標提取部,所述顯示用圖像生成機構(gòu),決定從上述原畫像中提取的部分,以含有上述目標信息中加入的目標的位置的中心。
13.根據(jù)權(quán)利要求1所述的圖像顯示裝置,其特征在于,所述圖像顯示裝置進一步具有對原圖像進行攝像的攝像機構(gòu)以及通過記錄媒體或傳送媒體輸入原圖像的圖像輸入機構(gòu)的至少其中之一;和將通過所述攝像機構(gòu)以及所述圖像輸入機構(gòu)的至少其中之一取得的原圖像,存儲在所述原圖像保持機構(gòu)的存儲機構(gòu)。
14.一種在具有顯示圖像的顯示機構(gòu)的圖像顯示裝置中的圖像生成方法,其特征在于,所述圖像顯示裝置具有原圖像圖像保持機構(gòu),保持以比所述顯示機構(gòu)中可顯示的像素更多的像素形成的原圖像;所述圖像生成方法包括判斷在上述原圖像保持機構(gòu)所保持的原圖像中是否含有目標,在含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定步驟;根據(jù)從用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從上述原圖像中提取上述原圖像中作為含有目標的區(qū)域的目標區(qū)域的至少一部分,生成與上述顯示機構(gòu)中可顯示的像素相一致的顯示用圖像的顯示用圖像生成步驟。
15.一種程序,用于具有顯示圖像的顯示機構(gòu)的圖像顯示裝置,其特征在于,所述圖像顯示裝置具有原圖像保持機構(gòu),保持以比所述顯示機構(gòu)中可顯示的像素更多的像素形成的原圖像,所述程序使計算機執(zhí)行以下步驟判斷在上述原圖像保持機構(gòu)所保持的原圖像中是否含有目標,在含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定步驟;和根據(jù)從用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從上述原圖像中提取上述原圖像中作為含有目標的區(qū)域的目標區(qū)域的至少一部分,生成與上述顯示機構(gòu)中可顯示的像素相一致的顯示用圖像的顯示用圖像生成步驟。
16.一種具有圖像顯示裝置的攜帶型終端,其特征在于,所述圖像顯示裝置具有顯示圖像的顯示機構(gòu);保持以比所述顯示機構(gòu)中可顯示的像素更多的像素形成的原圖像的原圖像保持機構(gòu);判斷在上述原圖像保持機構(gòu)所保持的原圖像中是否含有目標,在含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定機構(gòu);根據(jù)由用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從上述原圖像中提取上述原圖像中作為含有目標的區(qū)域的目標區(qū)域的至少一部分,生成與上述顯示機構(gòu)中可顯示的像素相一致的顯示用圖像的顯示用圖像生成機構(gòu)。
17.一種短片生成裝置,使用至少一個靜止圖像生成圖像,其特征在于,具有取得從外部輸入的一個以上的靜止圖像的靜止圖像輸入機構(gòu);判別上述輸入的靜止圖像的每一個中是否包含目標,在上述輸入的靜止圖像中包含有目標的情況下,提取與上述目標有關(guān)的信息的目標提取機構(gòu);通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述目標提取手段的判別結(jié)果,決定對上述靜止圖像包含的目標實施的視覺效果,生成作為圖像再現(xiàn)信息的方案的方案生成機構(gòu)。
18.根據(jù)權(quán)利要求17所述的短片生成裝置,其特征在于,上述目標為文字區(qū)域,上述目標提取機構(gòu)包含判別每個所述輸入的靜止圖像中是否含有文字區(qū)域,在上述輸入的靜止圖像中含有文字區(qū)域的情況下,提取與上述文字區(qū)域有關(guān)的文字區(qū)域提取部,上述方案生成機構(gòu),通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述文字區(qū)域提取部的判別結(jié)果,決定對上述靜止圖像所包含的文字區(qū)域?qū)嵤┑囊曈X效果,從而生成作為圖像再現(xiàn)信息的方案。
19.根據(jù)權(quán)利要求18所述的短片生成裝置,其特征在于,上述方案生成機構(gòu)根據(jù)上述文字區(qū)域提取部的判別結(jié)果,生成對上述靜止圖像所包含的文字區(qū)域?qū)嵤┓糯笮Ч姆桨浮?br>
20.根據(jù)權(quán)利要求18所述的短片生成裝置,其特征在于,上述方案生成機構(gòu)根據(jù)上述文字區(qū)域提取部的判別結(jié)果,生成對上述靜止圖像中包含的文字區(qū)域?qū)嵤┤靶Ч姆桨浮?br>
21.根據(jù)權(quán)利要求18所述的短片生成裝置,其特征在于,上述方案生成機構(gòu)根據(jù)上述文字區(qū)域提取部的判斷結(jié)果,生成修正上述靜止圖像中含有的文字區(qū)域的方案。
22.根據(jù)權(quán)利要求18所述的短片生成裝置,其特征在于,上述方案生成機構(gòu)根據(jù)在與上述文字區(qū)域提取部所提取的文字區(qū)域相關(guān)的信息中,上述文字區(qū)域的形狀、大小或色彩中的至少一種,決定對該文字區(qū)域?qū)嵤┑囊曈X效果,由此生成方案。
23.根據(jù)權(quán)利要求18所述的短片生成裝置,其特征在于,上述短片生成裝置進一步具有以上述文字區(qū)域提取部判別含有文字區(qū)域的靜止圖像的攝影時刻為基準,選擇再現(xiàn)的靜止圖像的圖像選擇機構(gòu),上述方案生成機構(gòu)生成上述圖像選擇機構(gòu)所選擇的再現(xiàn)圖像的方案。
24.根據(jù)權(quán)利要求18所述的短片生成裝置,其特征在于,上述方案生成機構(gòu)根據(jù)上述文字區(qū)域提取部的判別結(jié)果,生成將上述靜止圖像中包含的文字區(qū)域作為標題使用的方案。
25.根據(jù)權(quán)利要求17所述的短片生成裝置,其特征在于,所述短片生成裝置進一步具有存儲所述輸入的靜止圖像的圖像存儲機構(gòu);和從圖像存儲機構(gòu)讀出所存儲的靜止圖像,按照所述方案生成裝置所生成的方案,一邊實施所指定的視覺效果,一邊再現(xiàn)所述靜止圖像。
26.根據(jù)權(quán)利要求25所述的短片生成裝置,其特征在于,所述短片生成裝置進一步具有從是圖像存儲機構(gòu)存儲的靜止圖像中接受靜止圖像的指定的接受機構(gòu),所述方案生成機構(gòu)判別每個指定的靜止圖像中是否含有目標,在上述指定的靜止圖像中含有目標的情況下,提取與上述目標有關(guān)的信息。
27.根據(jù)權(quán)利要求17所述的短片生成裝置,其特征在于,由上述方案生成機構(gòu)所決定的視覺效果至少為放大或者縮小目標、顯示上述靜止圖像的放大縮小效果,使視點向目標或者從目標移動來顯示所述靜止圖像的視點移動效果,進行以目標為焦點的移近或者移離并顯示上述靜止圖像的移近移離效果,以及切去上述靜止圖像中含有目標的區(qū)域的切去效果中的一種。
28.一種短片生成方法,使用至少一個靜止圖像生成圖像,其特征在于,具有取得從外部輸入的一個以上的靜止圖像的靜止圖像輸入步驟;判別上述輸入的靜止圖像的每一個中是否包含目標,在上述輸入的靜止圖像中包含有目標的情況下,提取與上述目標有關(guān)的信息的目標提取步驟;通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述目標提取手段的判別結(jié)果,決定對上述靜止圖像包含的目標實施的視覺效果,生成作為圖像再現(xiàn)信息的方案的方案生成步驟。
29.根據(jù)權(quán)利要求28所述的短片生成方法,其特征在于,上述目標為文字區(qū)域,上述目標提取步驟包含判別每個所述輸入的靜止圖像中是否含有文字區(qū)域,在上述輸入的靜止圖像中含有文字區(qū)域的情況下,提取與上述文字區(qū)域有關(guān)的文字區(qū)域提取分步驟,上述方案生成步驟,通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述文字區(qū)域提取分步驟的判別結(jié)果,決定對上述靜止圖像所包含的文字區(qū)域?qū)嵤┑囊曈X效果,從而生成作為圖像再現(xiàn)信息的方案。
30.根據(jù)權(quán)利要求29所述的短片生成方法,其特征在于,上述方案生成步驟,根據(jù)與上述文字區(qū)域提取分步驟所提取的文字區(qū)域相關(guān)的信息中,上述文字區(qū)域的形狀、大小或色彩中的至少一種,決定對該文字區(qū)域?qū)嵤┑囊曈X效果,由此生成方案。
31.根據(jù)權(quán)利要求29所述的短片生成方法,其特征在于,上述短片生成方法進一步具有以上述文字區(qū)域提取分步驟部判別為含有文字區(qū)域的靜止圖像的攝影時刻為基準,選擇再現(xiàn)的靜止圖像的圖像選擇步驟,上述方案生成步驟,生成上述圖像選擇機構(gòu)所選擇的再現(xiàn)圖像的方案。
32.根據(jù)權(quán)利要求29所述的短片生成方法,其特征在于,上述方案生成步驟根據(jù)上述文字區(qū)域提取分步驟的判別結(jié)果,生成將上述靜止圖像中包含的文字區(qū)域作為標題使用的方案。
33.根據(jù)權(quán)利要求28所述的短片生成方法,其特征在于,所述短片生成方法進一步具有存儲所述輸入的靜止圖像的圖像存儲步驟;和讀出在上述圖像存儲步驟所存儲的靜止圖像,按照所述方案生成步驟所生成的方案,一邊實施所指定的視覺效果,一邊再現(xiàn)所述靜止圖像的圖像再現(xiàn)步驟。
34.一種程序,在使用至少一個靜止圖像生成圖像的短片生成裝置中使用,其特征在于,使計算機上執(zhí)行取得從外部輸入的一個以上的靜止圖像的靜止圖像輸入步驟;判別上述輸入的靜止圖像的每一個中是否包含目標,在上述輸入的靜止圖像中包含有目標的情況下,提取與上述目標有關(guān)的信息的目標提取步驟;以及通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述目標提取手段的判別結(jié)果,決定對上述靜止圖像包含的目標實施的視覺效果,生成作為圖像再現(xiàn)信息的方案的方案生成步驟。
35.一種記錄有程序的、計算機可讀取的記錄媒體,其特征在于,該程序使計算機執(zhí)行下述步驟取得從外部輸入的一個以上的靜止圖像的靜止圖像輸入步驟;判別上述輸入的靜止圖像的每一個中是否包含目標,在上述輸入的靜止圖像中包含有目標的情況下,提取與上述目標有關(guān)的信息的目標提取步驟;以及通過決定上述輸入的靜止圖像的再現(xiàn)順序,和根據(jù)上述目標提取手段的判別結(jié)果,決定對上述靜止圖像包含的目標實施的視覺效果,生成作為圖像再現(xiàn)信息的方案的方案生成步驟。
全文摘要
圖像顯示裝置(1)具有以規(guī)定的像素顯示圖像的顯示器(50);存儲以比顯示器(50)更多的像素形成的原圖像的圖像保持部(210);判斷在圖像保持部所存儲的原圖像中是否含有目標,在判斷為含有目標的情況下,生成與該目標有關(guān)的目標信息的目標判定部(30);根據(jù)從用戶指定的原圖像和與該原圖像對應(yīng)的目標信息,從原圖像中提取目標區(qū)域的至少一部分,生成與顯示器(50)中可顯示的像素相一致的顯示用圖像的顯示用圖像生成部(40)。
文檔編號H04N5/232GK1577393SQ20041006360
公開日2005年2月9日 申請日期2004年7月12日 優(yōu)先權(quán)日2003年7月11日
發(fā)明者古屋晉二, 岡林一郎, 森康浩, 山內(nèi)真樹, 川端章裕 申請人:松下電器產(chǎn)業(yè)株式會社