專利名稱：：攝像設(shè)備和攝像方法以及再現(xiàn)設(shè)備和再現(xiàn)方法
技術(shù)領(lǐng)域：
：本發(fā)明涉及攝像設(shè)備和再現(xiàn)設(shè)備，尤其涉及用于在運動圖像拍攝期間改變壓縮比(compressionratio)的技術(shù)。
背景技術(shù)：
：現(xiàn)在，許多商用照相機被配置成既能夠拍攝數(shù)字視頻又能夠拍攝數(shù)字靜止照片。然而，一般對于視頻記錄模式和數(shù)字靜止圖像模式設(shè)置不同的流水線(pipeline)。因此，需要用戶在拍攝期間在視頻記錄模式和數(shù)字靜止圖像模式之間來回切換。而且，即使從運動圖像中提取幀以獲得數(shù)字靜止圖像，通過使用視頻記錄模式的流水線拍攝的幀圖像的分辨率也很低。日本特開2003-283921號公報(下文稱作“專利文獻1”)公開了一種以突發(fā)模式(burstmode)同時處理數(shù)字視頻幀和高分辨率靜止圖像的方法。該方法允許在運動圖像拍攝期間拍攝快照(snapshot)。日本特開2002-300372號公報(下文稱作“專利文獻2”)公開了一種用于組合連續(xù)拍攝的兩幅圖像，從而獲得高質(zhì)量圖像或者具有高級視覺效果的圖像的技術(shù)(超分辨率處理)。然而，在專利文獻1中所述的處理方法具體涉及在運動圖像拍攝期間拍攝快照。該方法不允許用戶在運動圖像再現(xiàn)期間從壓縮的運動圖像中提取所期望場景處的高分辨率幀圖像。同樣，在專利文獻2中所述的圖像處理設(shè)備具有如下缺點如果以高壓縮比記錄運動圖像，例如在運動圖像專家組(MovingPictureExpertsGroup，MPEG)格式的運動圖像的情況下，則通過存在連續(xù)預(yù)測幀(predictedframe，P-幀)的片斷中的多個連續(xù)幀生成的合成圖像的分辨率低。
發(fā)明內(nèi)容本發(fā)明旨在解決上述問題，并且提供一種攝像設(shè)備，該攝像設(shè)備能夠獲取用于超分辨率處理的高質(zhì)量圖像數(shù)據(jù)。根據(jù)本發(fā)明的一方面，一種攝像設(shè)備包括壓縮單元，用于壓縮所捕獲的被攝體圖像，以生成壓縮被攝體圖像；拍攝模式改變單元，用于改變捕獲所述被攝體圖像的拍攝模式；壓縮比改變單元，用于改變所述壓縮單元中的壓縮比；記錄單元，用于將所述壓縮被攝體圖像記錄在記錄介質(zhì)中。如果所述拍攝模式改變單元將所述拍攝模式從非超分辨率模式改變?yōu)槌直媛誓Ｊ?，則所述壓縮比改變單元將所述壓縮單元中的壓縮比改變?yōu)榈谝粔嚎s比。如果所述拍攝模式改變單元將所述拍攝模式從超分辨率模式改為非超分辨率模式，則所述壓縮比改變單元將所述壓縮單元中的壓縮比改變?yōu)榇笥谒龅谝粔嚎s比的第二壓縮比。本發(fā)明還提供一種再現(xiàn)設(shè)備，該再現(xiàn)設(shè)備能夠再現(xiàn)用于超分辨率處理的高質(zhì)量圖像數(shù)據(jù)。根據(jù)本發(fā)明的另一方面，一種再現(xiàn)設(shè)備包括解壓縮單元，用于對壓縮被攝體圖像進行解壓縮，以生成解壓縮的被攝體圖像；頭判斷單元，用于讀取附加到所述壓縮被攝體圖像上的壓縮比信息，并且通過該壓縮比信息判斷是否可以生成超分辨率圖像；以及超分辨率圖像生成單元，用于通過多個連續(xù)被攝體圖像生成超分辨率圖像。所述超分辨率圖像生成單元基于所述頭判斷單元的判斷，當在適于生成超分辨率圖像的場景選擇了幀圖像時生成所述超分辨率圖像。根據(jù)本發(fā)明的另一方面，一種攝像方法包括壓縮步驟，用于壓縮所捕獲的被攝體圖像，以生成壓縮被攝體圖像；拍攝模式改變步驟，用于改變拍攝所述被攝體圖像的拍攝模式；壓縮比改變步驟，用于改變所述壓縮步驟中的壓縮比；以及記錄步驟，用于將所述壓縮被攝體圖像記錄在記錄介質(zhì)中。如果在所述拍攝模式改變步驟中將所述拍攝模式從非超分辨率模式改變?yōu)槌直媛誓Ｊ剑瑒t所述壓縮比改變步驟將所述壓縮步驟中的壓縮比改變?yōu)榈谝粔嚎s比。如果在所述拍攝模式改變步驟中將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ?，則所述壓縮比改變步驟將所述壓縮步驟中的壓縮比改變?yōu)楦哂谒龅谝粔嚎s比的第二壓縮比。根據(jù)本發(fā)明的另一方面，一種再現(xiàn)方法包括解壓縮步驟，用于對壓縮被攝體圖像進行解壓縮，以生成解壓縮的被攝體圖像；讀取步驟，用于讀取附加到所述壓縮被攝體圖像上的壓縮比信息；判斷步驟，用于通過所述壓縮比信息判斷是否可以生成超分辨率圖像；以及超分辨率圖像生成步驟，用于通過多個連續(xù)被攝體圖像生成超分辨率圖像。所述超分辨率圖像生成步驟基于所述判斷步驟的判斷，當在適于生成超分辨率圖像的場景選擇了幀圖像時生成所述超分辨率圖像。根據(jù)本發(fā)明的另一方面，提供一種計算機程序，當將其裝載到計算機中并且執(zhí)行它時，該計算機程序執(zhí)行如上所述的攝像方法。根據(jù)本發(fā)明的另一方面，提供一種計算機程序，當將其裝載到計算機中并且執(zhí)行它時，該計算機程序執(zhí)行如上所述的再現(xiàn)方法。根據(jù)本發(fā)明的另一方面，提供一種存儲如上所述的計算機程序的計算機可讀的記錄介質(zhì)。通過參照附圖對典型實施例的以下說明，本發(fā)明的進一步特征將顯而易見。圖1是示出根據(jù)本發(fā)明第一典型實施例的攝像設(shè)備的結(jié)構(gòu)的框圖。圖2是示出根據(jù)本發(fā)明第四典型實施例的再現(xiàn)設(shè)備的結(jié)構(gòu)的框圖。圖3是示出根據(jù)典型MPEG壓縮方法的幀結(jié)構(gòu)的示意圖。圖4是示出根據(jù)由本發(fā)明第二典型實施例的攝像設(shè)備改變的MPEG壓縮方法的幀結(jié)構(gòu)的示意圖。圖5是示出根據(jù)本發(fā)明第一典型實施例的攝像設(shè)備的中央處理單元(CPU)中的處理步驟的流程圖。圖6是示出根據(jù)本發(fā)明第四典型實施例的再現(xiàn)設(shè)備的CPU中的處理步驟的流程圖。圖7是示出CPU中的圖6的記錄處理的處理步驟的流程圖。圖8是示出根據(jù)本發(fā)明第二典型實施例的攝像設(shè)備的結(jié)構(gòu)的框圖。圖9是示出根據(jù)本發(fā)明第二典型實施例的攝像設(shè)備的CPU中的處理步驟的流程圖。圖10是示出根據(jù)本發(fā)明第三典型實施例的攝像設(shè)備的結(jié)構(gòu)的框圖。圖11是示出根據(jù)本發(fā)明第三典型實施例的攝像設(shè)備的CPU中的處理步驟的流程圖。圖12是示出根據(jù)本發(fā)明第五典型實施例的攝像設(shè)備的CPU中的處理步驟的流程圖。圖13示出根據(jù)本發(fā)明第六典型實施例的圖像數(shù)據(jù)記錄方法。圖14是示出當使用第六典型實施例的圖像數(shù)據(jù)記錄方法時的操作的時序圖。圖15是示出當使用第六典型實施例的圖像數(shù)據(jù)記錄方法時的操作的另一時序圖。圖16是示出應(yīng)用于本發(fā)明至少一個典型實施例的超分辨率處理的步驟的流程圖。圖17示出在超分辨率處理中所使用的幀圖像和在超分辨率處理后所獲得的圖像。圖18示出在超分辨率處理中的插值。具體實施例方式下面參照附圖對本發(fā)明的典型實施例進行說明。第一典型實施例圖1是根據(jù)本發(fā)明第一典型實施例的框圖，且示出能夠在運動圖像拍攝期間改變壓縮比的攝像設(shè)備的典型結(jié)構(gòu)。圖5是示出在第一典型實施例中的運動圖像拍攝期間改變拍攝模式的處理步驟的流程圖。首先，參照圖1說明本典型實施例的攝像設(shè)備。在圖1中，通過鏡頭800進入的被攝體光學(xué)圖像被電荷耦合器件(charge-coupleddevice，CCD)801光電轉(zhuǎn)換成電信號?；趶亩〞r發(fā)生器807輸入的驅(qū)動控制信號，CCD801捕獲預(yù)定時間段的被攝體光學(xué)圖像。同時，CCD801根據(jù)從定時發(fā)生器807輸入的讀取控制信號(水平同步信號、垂直同步信號等)，將已轉(zhuǎn)換成電信號的圖像信號發(fā)送到模擬信號處理器802。定時發(fā)生器807基于從定時控制器808輸入的控制信號，生成驅(qū)動控制信號和讀取控制信號。模擬信號處理器802主要包括低通濾波器(low-passfilter，LPF)電路和自動增益控制(automaticgaincontrol，AGC)電路。模擬信號處理器802對從CCD801輸出的圖像信號進行降噪和信號水平調(diào)整。模數(shù)(analog-to-digital，A/D)轉(zhuǎn)換處理器803將從模擬信號處理器802輸出的圖像信號轉(zhuǎn)換成數(shù)字信號(下文稱作“圖像數(shù)據(jù)”)。數(shù)字信號處理器804主要包括白平衡(whitebalance，WB)電路和伽瑪(Y)校正電路。WB電路對從A/D轉(zhuǎn)換處理器803輸出的圖像數(shù)據(jù)的各顏色成分的水平進行轉(zhuǎn)換，并且調(diào)整所捕獲的圖像的白平衡。Y-校正電路使用預(yù)設(shè)的校正表以調(diào)整各像素數(shù)據(jù)的水平，并對圖像數(shù)據(jù)的Y-特性進行校正。從數(shù)字信號處理器804輸出的圖像數(shù)據(jù)經(jīng)過存儲器接口(I/F)805，并被暫時存儲在視頻隨機存取存儲器(videorandom-accessmemory，VRAM)806中。壓縮單元809讀取存儲在VRAM806中的圖像數(shù)據(jù)，并且以運動聯(lián)合圖像專家組(Motion-JPEG，運動-JPEG)格式、音視頻交替(audiovideointerleaving，AVI)格式等對所讀取的圖像數(shù)據(jù)進行壓縮。壓縮的圖像數(shù)據(jù)經(jīng)過存儲器I/F805，并且被記錄在記錄介質(zhì)826中。攝像操作單元822包括用于開始運動圖像拍攝操作的運動圖像拍攝開始按鈕、用于結(jié)束運動圖像拍攝操作的運動圖像拍攝結(jié)束按鈕、以及超分辨率模式按鈕。當按下超分辨率模式按鈕時，通過CPU823向頭寫入單元824和壓縮比控制器825輸入控制信號?；趤碜訡PU823的控制信號，頭寫入單元824向各幀的頭寫入關(guān)于是以超分辨率模式還是以正常模式(非超分辨率模式)進行拍攝的信息。同時，基于來自CPU823的控制信號，壓縮比控制器825向壓縮單元809輸出用于控制壓縮比的控制信號。壓縮單元809根據(jù)從壓縮比控制器825輸入的控制信號改變壓縮比。圖1所示的攝像設(shè)備還包括液晶顯示器(liquidcrystaldisplay，LCD)I/F820和LCD821。接著，參照圖5的流程圖說明在本典型實施例的攝像設(shè)備中的運動圖像拍攝期間進行的處理步驟。圖5示出從按下圖1所示的攝像操作單元822的運動圖像拍攝開始按鈕那一點開始的處理步驟。參考圖5，在開始運動圖像拍攝操作時，在步驟S906將“mode”復(fù)位為0。然后，處理進入步驟S900，在該步驟判斷是否按下了攝像操作單元822中的超分辨率模式按鈕。如果判斷出沒有按下超分辨率模式按鈕，則處理進入步驟S904。另一方面，如果在步驟S900判斷出按下了超分辨率模式按鈕，則處理進入步驟S901，在該步驟判斷當前拍攝模式是否是正常模式。在本典型實施例中，將mode＝0設(shè)置為正常模式，將mode＝1設(shè)置為超分辨率模式。如果在步驟S901判斷出當前拍攝模式是正常模式(即mode＝0)，則處理進入步驟S903，在該步驟，將1代入“mode”。這改變了壓縮比，使得以低壓縮比壓縮幀圖像數(shù)據(jù)。另一方面，如果在步驟S901判斷出當前拍攝模式是超分辨率模式(即mode＝1)，則處理進入步驟S902，在該步驟，將0代入“mode”。這改變了壓縮比，使得以高壓縮比壓縮幀圖像數(shù)據(jù)。接著，處理進入步驟S904，在該步驟，“mode”被寫入各幀的頭。例如，寫入正常模式的mode＝0或者超分辨率模式的mode＝1等拍攝模式信息。然后，處理進入步驟S905，在該步驟判斷是否按下了攝像操作單元822中的運動圖像拍攝結(jié)束按鈕。如果判斷出沒有按下運動圖像拍攝結(jié)束按鈕，則處理返回步驟S900以重復(fù)上述步驟。如果在步驟S905判斷出已按下了運動圖像拍攝結(jié)束按鈕，則拍攝操作結(jié)束。因此，可以在運動圖像拍攝期間通過按下超分辨率模式按鈕來改變幀圖像的壓縮比。在壓縮比高的正常模式下，可以減小幀圖像的數(shù)據(jù)大小。另一方面，在壓縮比低的超分辨率模式下，可以在各幀的信息損失不明顯的情況下記錄運動圖像。而且，由于拍攝模式信息被寫入各幀的頭，因此在運動圖像再現(xiàn)時可以容易地相互區(qū)分在正常模式下拍攝的場景和在超分辨率模式下拍攝的場景。盡管前述說明指的是以運動-JPEG格式或者AVI格式壓縮圖像數(shù)據(jù)的情況，然而也可以以MPEG格式壓縮圖像數(shù)據(jù)。在后者情況下，可以在運動圖像拍攝期間改變圖像數(shù)據(jù)的壓縮比。例如，對于MPEG格式的運動圖像記錄，在正常模式下，在圖5的步驟S903，改變壓縮比，使得在幀內(nèi)幀(intraframe，I-幀)、P-幀和雙向幀(bi-directionalframe，B-幀)中以高壓縮比壓縮幀圖像數(shù)據(jù)。I-幀是通過幀內(nèi)編碼生成的壓縮幀，而P-幀和B-幀是通過幀間編碼生成的壓縮幀。另一方面，在超分辨率模式下，在圖5的步驟S902，改變壓縮比，使得在I-幀、P-幀和B-幀中以低壓縮比壓縮幀圖像數(shù)據(jù)。如上所述，在MPEG格式的運動圖像記錄中，可以在運動圖像拍攝期間通過按下超分辨率模式按鈕來改變幀圖像的壓縮比。在I-幀、P-幀和B-幀的壓縮比高的正常模式下，可以減小幀圖像的數(shù)據(jù)大小。另一方面，在I-幀、P-幀和B-幀的壓縮比低的超分辨率模式下，可以在各幀的信息損失不明顯的情況下記錄運動圖像。而且，由于將拍攝模式信息寫入各幀的頭，因此在運動圖像再現(xiàn)時可以容易地相互區(qū)分在正常模式下拍攝的場景和在超分辨率模式下拍攝的場景。第二典型實施例圖8是根據(jù)本發(fā)明第二典型實施例的框圖，且示出能夠在運動圖像拍攝期間改變壓縮方法的攝像設(shè)備的典型結(jié)構(gòu)。圖9是示出在第二典型實施例中在運動圖像拍攝期間改變拍攝模式的處理步驟的流程圖。首先，參照圖8說明本典型實施例的攝像設(shè)備的結(jié)構(gòu)。在圖8中，通過鏡頭100進入的被攝體光學(xué)圖像被CCD101光電轉(zhuǎn)換成電信號?；趶亩〞r發(fā)生器107輸入的驅(qū)動控制信號，CCD101捕獲預(yù)定時間段的被攝體光學(xué)圖像。同時，CCD101根據(jù)從定時發(fā)生器107輸入的讀取控制信號(水平同步信號、垂直同步信號等)，將已轉(zhuǎn)換成電信號的圖像信號發(fā)送到模擬信號處理器102。定時發(fā)生器107基于從定時控制器108輸入的控制信號，生成驅(qū)動控制信號和讀取控制信號。模擬信號處理器102主要包括LPF電路和AGC電路。模擬信號處理器102對從CCD101輸出的圖像信號進行降噪和信號水平調(diào)整。A/D轉(zhuǎn)換處理器103將從模擬信號處理器102輸出的圖像信號轉(zhuǎn)換成數(shù)字信號(下文稱作“圖像數(shù)據(jù)”)。數(shù)字信號處理器104主要包括WB電路和Y-校正電路。WB電路對從A/D轉(zhuǎn)換處理器103輸出的圖像數(shù)據(jù)的各顏色成分的水平進行轉(zhuǎn)換，并且調(diào)整所捕獲的圖像的白平衡。Y-校正電路使用預(yù)設(shè)的校正表以調(diào)整各像素數(shù)據(jù)的水平，并且對圖像數(shù)據(jù)的Y-特性進行校正。從數(shù)字信號處理器104輸出的圖像數(shù)據(jù)經(jīng)過存儲器I/F105，并被暫時存儲到VRAM106中。MPEG壓縮單元109讀取存儲在VRAM106中的圖像數(shù)據(jù)，并且以MPEG格式對所讀取的圖像數(shù)據(jù)進行壓縮。壓縮的圖像數(shù)據(jù)經(jīng)過存儲器I/F105，并被記錄在記錄介質(zhì)126中。攝像操作單元122包括用于開始運動圖像拍攝操作的運動圖像拍攝開始按鈕、用于結(jié)束運動圖像拍攝操作的運動圖像拍攝結(jié)束按鈕、以及超分辨率模式按鈕。當按下超分辨率模式按鈕時，通過CPU123將控制信號輸入到頭寫入單元124和壓縮方法控制器125?；趤碜訡PU123的控制信號，頭寫入單元124將關(guān)于是以超分辨率模式還是以正常模式進行拍攝的信息寫入各幀的頭。同時，基于來自CPU123的控制信號，壓縮方法控制器125將用于控制壓縮方法的控制信號輸出到MPEG壓縮單元109。MPEG壓縮單元109根據(jù)從壓縮方法控制器125輸入的控制信號改變MPEG壓縮方法。接著，參照圖9的流程圖說明在本典型實施例的攝像設(shè)備中的運動圖像拍攝期間進行的處理步驟。圖9示出從按下圖8所示的攝像操作單元122的運動圖像拍攝開始按鈕那一點開始的處理步驟。參照圖9，在開始運動圖像拍攝操作時，在步驟S506將“mode”復(fù)位為0。然后，處理進入步驟S500，在該步驟判斷是否按下了攝像操作單元122中的超分辨率模式按鈕。如果判斷出沒有按下超分辨率模式按鈕，則處理進入步驟S504。另一方面，如果在步驟S500判斷出按下了超分辨率模式按鈕，則處理進入步驟S501，在該步驟，判斷當前拍攝模式是否是正常模式。在本典型實施例，將mode＝0設(shè)置為正常模式，將mode＝1設(shè)置為超分辨率模式。如果在步驟S501判斷出當前拍攝模式是正常模式(即mode＝0)，則處理進入步驟S503，在該步驟，將1代入“mode”。這改變了MPEG壓縮方法，使得僅在I-幀中壓縮運動圖像數(shù)據(jù)。另一方面，如果在步驟S501判斷出當前拍攝模式是超分辨率模式(即mode＝1)，則處理進入步驟S502，在該步驟，將0代入“mode”。這改變了MPEG壓縮方法，使得在I-幀和P-幀中壓縮運動圖像數(shù)據(jù)。例如，如圖3所示，正常模式意味著在I-幀和P-幀中壓縮圖像數(shù)據(jù)。另一方面，如圖4所示，超分辨率模式意味著從拍攝模式改變那一點(例如，圖4的時間t′2)開始，僅在I-幀中壓縮圖像數(shù)據(jù)。返回參照圖9，處理進入步驟S504，在該步驟將正常模式的mode＝0或者超分辨率模式的mode＝1等拍攝模式信息寫入各幀的頭。接著，處理進入步驟S505，在該步驟判斷是否按下了攝像操作單元122中的運動圖像拍攝結(jié)束按鈕。如果在步驟S505判斷出沒有按下運動圖像拍攝結(jié)束按鈕，則處理返回步驟S500以重復(fù)上述步驟。如果在步驟S505判斷出已按下運動圖像拍攝結(jié)束按鈕，則拍攝操作結(jié)束。通過進行上述處理步驟，可以在運動圖像拍攝期間通過按下超分辨率模式按鈕改變MPEG壓縮方法。在允許高壓縮方法的正常模式下，在I-幀和P-幀中壓縮運動圖像數(shù)據(jù)，而在允許低壓縮方法的超分辨率模式下，僅在I-幀中壓縮運動圖像數(shù)據(jù)。而且，由于將拍攝模式信息寫入各幀的頭，因此在運動圖像再現(xiàn)時可以容易地相互區(qū)分在正常模式下拍攝的場景和在超分辨率模式下拍攝的場景。第三典型實施例圖10是根據(jù)本發(fā)明第三典型實施例的框圖，且示出能夠在運動圖像拍攝期間改變幀分辨率的攝像設(shè)備的典型結(jié)構(gòu)。圖11是示出在第三典型實施例中的運動圖像拍攝期間改變拍攝模式的處理步驟的流程圖。首先，參照圖10說明本典型實施例的攝像設(shè)備的結(jié)構(gòu)。在圖10中，通過鏡頭300進入的被攝體光學(xué)圖像被CCD301光電轉(zhuǎn)換成電信號?；趶亩〞r發(fā)生器307輸入的驅(qū)動控制信號，CCD301捕獲預(yù)定時間段的被攝體光學(xué)圖像。同時，CCD301根據(jù)從定時發(fā)生器307輸入的讀取控制信號，將已被轉(zhuǎn)換成電信號的圖像信號發(fā)送到模擬信號處理器302。定時發(fā)生器307基于從定時控制器308輸入的控制信號，生成驅(qū)動控制信號和讀取控制信號。模擬信號處理器302主要包括LPF電路和AGC電路。模擬信號處理器302對從CCD301輸出的圖像信號進行降噪和信號水平調(diào)整。A/D轉(zhuǎn)換處理器303將從模擬信號處理器302輸出的圖像信號轉(zhuǎn)換成數(shù)字信號(下文稱作“圖像數(shù)據(jù)”)。數(shù)字信號處理器304主要包括WB電路和Y-校正電路。WB電路對從A/D轉(zhuǎn)換處理器303輸出的圖像數(shù)據(jù)的各顏色成分的水平進行轉(zhuǎn)換，并且調(diào)整所捕獲的圖像的白平衡。Y-校正電路使用預(yù)設(shè)的校正表以調(diào)整各像素數(shù)據(jù)的水平，并且對圖像數(shù)據(jù)的Y-特性進行校正。將從數(shù)字信號處理器304輸出的圖像數(shù)據(jù)發(fā)送到分辨率改變單元325。根據(jù)來自CPU323的控制信號，分辨率改變單元325改變待記錄的圖像數(shù)據(jù)的分辨率。從分辨率改變單元325輸出的圖像數(shù)據(jù)經(jīng)過存儲器I/F305，并且被暫時存儲在VRAM306中。壓縮單元309讀取存儲在VRAM306中的圖像數(shù)據(jù)，并對所讀取的圖像數(shù)據(jù)進行壓縮。壓縮的圖像數(shù)據(jù)經(jīng)過存儲器I/F305，并且被記錄在記錄介質(zhì)326中。攝像操作單元322包括用于開始運動圖像拍攝操作的運動圖像拍攝開始按鈕、用于結(jié)束運動圖像拍攝操作的運動圖像拍攝結(jié)束按鈕、以及超分辨率模式按鈕。當按下超分辨率模式按鈕時，通過CPU323將控制信號輸入到頭寫入單元324和分辨率改變單元325?；趤碜訡PU323的控制信號，頭寫入單元324將關(guān)于是以超分辨率模式還是以正常模式進行拍攝的信息寫入各幀的頭。接著，參照圖11的流程圖說明在本典型實施例的攝像設(shè)備中的運動圖像拍攝期間所進行的處理步驟。圖11示出從按下圖10中的攝像操作單元322的運動圖像拍攝開始按鈕那一點開始的處理步驟。參照圖11，在開始運動圖像拍攝操作時，在步驟S006將“mode”復(fù)位為0。然后，處理進入步驟S000，在該步驟判斷是否按下了攝像操作單元322中的超分辨率模式按鈕。如果判斷出沒有按下超分辨率模式按鈕，則處理進入步驟S004。另一方面，如果在步驟S000判斷出按下了超分辨率模式按鈕，則處理進入步驟S001，在該步驟判斷當前拍攝模式是否是正常模式。在本典型實施例中，將mode＝0設(shè)置為正常模式，且將mode＝1設(shè)置為超分辨率模式。如果在步驟S001判斷出當前拍攝模式是正常模式(即mode＝0)，則處理進入步驟S003，在該步驟將1代入“mode”以提高圖像數(shù)據(jù)的分辨率。例如，將分辨率提高到視頻圖像陣列(videographicsarray，VGA)分辨率(640×480像素)。另一方面，如果在步驟S001判斷出當前拍攝模式是超分辨率模式(即mode＝1)，則處理進入步驟S002，在該步驟將0代入“mode”以降低圖像數(shù)據(jù)的分辨率。例如，將分辨率降低到四分之一視頻圖像陣列(quartervideographicsarray，QVGA)分辨率(320×240像素)。接著，處理進入步驟S004，在該步驟將正常模式的mode＝0或者超分辨率模式的mode＝1等拍攝模式信息寫入各幀的頭。然后，處理進入步驟S005，在該步驟判斷是否已按下攝像操作單元322中的運動圖像拍攝結(jié)束按鈕。如果在步驟S005判斷出沒有按下運動圖像拍攝結(jié)束按鈕，則處理返回步驟S000。如果在步驟S005判斷出已按下運動圖像拍攝結(jié)束按鈕，則拍攝操作結(jié)束。通過進行上述處理步驟，可以在運動圖像拍攝期間通過按下超分辨率模式按鈕改變待記錄的圖像數(shù)據(jù)的分辨率。在正常模式下，可以以QVGA分辨率等低分辨率記錄圖像數(shù)據(jù)，而在超分辨率模式下，可以以VGA分辨率等高分辨率記錄圖像數(shù)據(jù)。而且，由于將拍攝模式信息寫入各幀的頭，因此在運動圖像再現(xiàn)時可以容易地相互區(qū)分以正常模式拍攝的場景和以超分辨率模式拍攝的場景。第四典型實施例圖2是根據(jù)本發(fā)明第四典型實施例的框圖，且示出能夠在運動圖像再現(xiàn)期間從所選擇的場景中提取超分辨率幀圖像數(shù)據(jù)的再現(xiàn)設(shè)備的典型結(jié)構(gòu)。圖6是示出在運動圖像再現(xiàn)期間從所選擇的場景中提取超分辨率幀圖像數(shù)據(jù)的處理步驟的流程圖。首先，參照圖2說明本典型實施例的再現(xiàn)設(shè)備的結(jié)構(gòu)。將通過上述任一攝像設(shè)備壓縮的運動圖像數(shù)據(jù)記錄在記錄介質(zhì)200中。解壓縮單元202通過存儲器I/F201從記錄介質(zhì)200中讀取壓縮的運動圖像數(shù)據(jù)，并且對所讀取的數(shù)據(jù)進行解壓縮。然后，解壓縮單元202將寫入各幀的頭的頭信息輸出到頭判斷單元203。頭判斷單元203判斷拍攝模式是正常模式還是超分辨率模式，并將控制信號通過CPU205輸出到解壓縮單元202和超分辨率圖像生成單元211。根據(jù)來自CPU205的控制信號，解壓縮單元202根據(jù)拍攝模式是正常模式還是超分辨率模式改變解壓縮方法。通過存儲器I/F201將由解壓縮單元202解壓縮的圖像數(shù)據(jù)輸出到第一VRAM206，并且暫時存儲在第一VRAM206中。顯示單元207通過存儲器I/F201從第一VRAM206讀取圖像數(shù)據(jù)，將該圖像數(shù)據(jù)與顯示單元207中的同步信號發(fā)生器(synchronizingsignalgenerator，SSG)生成的同步信號進行組合，生成視頻輸出信號。將所生成的視頻輸出信號通過監(jiān)視器I/F208發(fā)送到監(jiān)視器209上，并作為運動圖像來顯示。如果寫入頭的拍攝模式信息是超分辨率模式，則將用于開始從第一VRAM206中讀取圖像數(shù)據(jù)的控制信號輸入到超分辨率圖像生成單元211。同時，消息顯示單元215在監(jiān)視器209上顯示消息以指示可以提取超分辨率幀圖像。再現(xiàn)操作單元204包括運動圖像再現(xiàn)開始按鈕、運動圖像再現(xiàn)結(jié)束按鈕、幀選擇按鈕、記錄按鈕和取消按鈕。當按下幀選擇按鈕時，通過CPU205將用于開始超分辨率圖像生成的控制信號輸入到超分辨率圖像生成單元211。根據(jù)該控制信號，超分辨率圖像生成單元211基于時間上連續(xù)的多個圖像數(shù)據(jù)生成所選擇幀圖像的超分辨率圖像。本典型實施例的超分辨率圖像生成單元211通過使用由在利用照相機拍照時出現(xiàn)的運動模糊而引起的位移，以及使用多個具有幀間小位移的時間上連續(xù)的幀圖像，來恢復(fù)所選擇的幀圖像的高頻成分。為了讀取所選擇幀圖像前后的幾個連續(xù)幀圖像，超分辨率圖像生成單元211將所選擇的幀圖像的頭信息返回CPU205。在接收到該頭信息時，CPU205向解壓縮單元202輸出控制信號，以便從記錄介質(zhì)200中讀取時間上連續(xù)的幀圖像，并且對該幀圖像進行解壓縮。將解壓縮的幀圖像通過存儲器I/F201發(fā)送到超分辨率圖像生成單元211。基于該所選擇的幀圖像，超分辨率圖像生成單元211估計時間上連續(xù)的幀圖像的位移。超分辨率圖像生成單元211通過使用與各估計位移相對應(yīng)的權(quán)值確定加權(quán)和來生成超分辨率圖像。通過存儲器I/F201將所生成的超分辨率圖像發(fā)送到第二VRAM210，并且暫時存儲在第二VRAM210中。當按下再現(xiàn)操作單元204中的幀選擇按鈕時，顯示單元207根據(jù)從CPU205輸入的控制信號，切換到通過存儲器I/F201從第二VRAM210中讀取圖像數(shù)據(jù)。因此，當按下再現(xiàn)操作單元204中的幀選擇按鈕時，監(jiān)視器209顯示由超分辨率圖像生成單元211生成的超分辨率圖像。同時，根據(jù)來自CPU205的控制信號，監(jiān)視器209顯示詢問是否記錄所顯示的超分辨率圖像的消息，并且提示用戶按下再現(xiàn)操作單元204中的記錄按鈕或者取消按鈕。如果按下再現(xiàn)操作單元204中的取消按鈕，則在不記錄超分辨率圖像時更新幀圖像并且將其顯示在顯示單元207上。如果按下再現(xiàn)操作單元204中的記錄按鈕，則通過CPU205向JPEG壓縮單元212等壓縮單元輸入用于開始壓縮的控制信號。根據(jù)來自CPU205的控制信號，JPEG壓縮單元212通過存儲器I/F201從第二VRAM210中讀取超分辨率圖像數(shù)據(jù)。以JPEG格式對所讀取的超分辨率圖像數(shù)據(jù)進行壓縮，通過存儲器I/F201發(fā)送，并將其記錄在記錄介質(zhì)200中。接著，參照圖6的流程圖說明在本典型實施例的再現(xiàn)設(shè)備中的運動圖像再現(xiàn)期間所進行的處理步驟。圖6示出從按下運動圖像再現(xiàn)開始按鈕且開始運動圖像再現(xiàn)那一點開始的處理步驟。參照圖6，在步驟S600，判斷在通過上述任一攝像設(shè)備記錄的運動圖像的幀頭中寫入了“正常模式”和“超分辨率模式”中的哪一個。如果判斷出寫入了正常模式，則處理進入步驟S607，在該步驟從第一VRAM206中讀取圖像數(shù)據(jù)并且在監(jiān)視器209上顯示正常圖像。另一方面，如果在步驟S600判斷出選擇超分辨率模式作為拍攝模式，則處理進入步驟S601，在該步驟在監(jiān)視器209上顯示消息“可提取超分辨率幀！”。然后，處理進入步驟S602，在該步驟判斷是否按下了再現(xiàn)操作單元204中的幀選擇按鈕。如果在步驟S602判斷出沒有按下幀選擇按鈕，則處理進入步驟S607，在該步驟，從第一VRAM206中讀取圖像數(shù)據(jù)并且在監(jiān)視器209上顯示正常圖像。另一方面，如果在步驟S602判斷出已按下幀選擇按鈕，則處理進入步驟S603，在該步驟生成所選擇幀的超分辨率圖像，從存儲所生成的超分辨率圖像的第二VRAM210中讀取圖像數(shù)據(jù)，從而在監(jiān)視器209上顯示該超分辨率圖像。接著，處理進入步驟S604，在該步驟進行記錄。下面參照圖7詳細說明該記錄。接著，在步驟S605，判斷是否按下了運動圖像再現(xiàn)結(jié)束按鈕。如果判斷出沒有按下運動圖像再現(xiàn)結(jié)束按鈕，則在步驟S606更新幀并且處理返回步驟S600。如果在步驟S605判斷出已按下運動圖像再現(xiàn)結(jié)束按鈕，則運動圖像再現(xiàn)結(jié)束。圖7是示出在圖6的步驟S604中進行的記錄的詳細處理的流程圖。在圖7的步驟S700，監(jiān)視器209顯示消息“記錄或取消？”，以提示用戶按下再現(xiàn)操作單元204中的記錄按鈕或取消按鈕。處理進入步驟S701，在該步驟判斷用戶是否按下再現(xiàn)操作單元204中的記錄按鈕或者取消按鈕。如果判斷出既沒有按下記錄按鈕也沒有按下取消按鈕時，則處理返回步驟S700。如果在步驟S701判斷出按下了記錄按鈕和取消按鈕中的一個，則處理進入步驟S702，在該步驟判斷是否按下了記錄按鈕。如果判斷出沒有按下記錄按鈕，則記錄處理結(jié)束。如果在步驟S702判斷出按下了記錄按鈕，則處理進入步驟S703，在該步驟以JPEG格式壓縮超分辨率圖像數(shù)據(jù)并將其記錄在記錄介質(zhì)200中。然后，記錄處理結(jié)束。通過進行上述處理步驟，當用戶在所記錄的運動圖像中從超分辨率模式期間所捕獲的幀中選擇幀時，可以基于所選擇的幀前后的連續(xù)多個圖像數(shù)據(jù)生成并且記錄超分辨率圖像數(shù)據(jù)。在本典型實施例的再現(xiàn)設(shè)備中，以JPEG格式壓縮所提取的超分辨率圖像數(shù)據(jù)，并且將其記錄在記錄介質(zhì)200中。所提取的超分辨率圖像數(shù)據(jù)也可以通過其它方式用于各種用途。例如，如圖2所示，可以從第二VRAM210中讀取超分辨率圖像數(shù)據(jù)，通過打印機I/F213將其發(fā)送到打印機214，并且進行打印。而且，在上述本典型實施例中，基于寫入頭中的拍攝模式信息進行關(guān)于是否可以生成超分辨率圖像的判斷。當將關(guān)于壓縮比或者分辨率的信息寫入頭中時，頭判斷單元203可以進行類似的判斷。第五典型實施例在本發(fā)明的第五典型實施例中，為了在運動圖像拍攝期間拍攝靜止圖像，通過按下靜止圖像拍攝按鈕將拍攝模式改變?yōu)槌直媛誓Ｊ健Ｔ诔直媛誓Ｊ较?，在適于生成超分辨率圖像的時間段(對應(yīng)于幾幀)以較低的壓縮比記錄圖像。然后，拍攝模式自動返回提高壓縮比的運動圖像拍攝模式(正常模式)，并且繼續(xù)進行運動圖像記錄。在本典型實施例中，能夠在運動圖像拍攝期間改變壓縮比的攝像設(shè)備的結(jié)構(gòu)與圖1的框圖所示的結(jié)構(gòu)相同。將參照圖12說明在運動圖像拍攝期間改變拍攝模式的處理步驟。圖12示出從按下圖1中的攝像操作單元822的運動圖像拍攝開始按鈕那一點開始的處理步驟。參照圖12，在開始運動圖像拍攝操作時，在步驟S1000將“mode”復(fù)位為0，并且在下一步驟S1001將CNT復(fù)位為0。然后，處理進入步驟S1002，在該步驟判斷拍攝模式是否是正常模式。在本典型實施例，將mode＝0設(shè)置為正常模式，將mode＝1設(shè)置為超分辨率模式。如果在步驟S1002判斷出當前拍攝模式是正常模式(即mode＝0)，則處理進入步驟S1003。如果在步驟S1002判斷出當前拍攝模式是超分辨率模式(即mode＝1)，則處理進入步驟S1005。在步驟S1003，判斷是否按下了攝像操作單元822中的靜止圖像拍攝按鈕(超分辨率模式按鈕)。如果判斷出沒有按下超分辨率模式按鈕，則處理進入步驟S1012，在該步驟改變壓縮比，使得以高壓縮比壓縮幀圖像數(shù)據(jù)。然后，處理進入步驟S1013，在該步驟，將“mode”寫入各幀的頭。然后，處理進入步驟S1011。另一方面，如果在步驟S1003判斷出按下了超分辨率模式按鈕，則處理進入步驟S1004，在該步驟將1代入“mode”。然后，處理進入步驟S1005。在步驟S1005，改變壓縮比，使得以低壓縮比壓縮幀圖像數(shù)據(jù)。然后，處理進入步驟S1006，在該步驟，將“mode”寫入各幀的頭。接著，在步驟S1007，使當前CNT值加1。然后，在步驟S1008，將CNT值與CNTmax進行比較。如果CNT值等于或者小于CNTmax(即CNT≤CNTmax)，則處理進入步驟S1011。如果CNT值大于CNTmax(即CNT＞CNTmax)，則處理進入步驟S1009。此處，提前輸入提供超分辨率所需的幀數(shù)作為CNTmax的值。例如，如果輸入3作為CNTmax值(即CNTmax＝3)，則以低壓縮比壓縮從按下靜止圖像拍攝按鈕那一點開始的四幀圖像，并對其進行記錄。在步驟S1008，如果CNT值大于CNTmax(即CNT＞CNTmax)，則處理進入步驟S1009，在該步驟，將0代入“mode”。在步驟S1010，將0代入CNT。然后，處理進入步驟S1011，在該步驟判斷是否按下了攝像操作單元822中的運動圖像拍攝結(jié)束按鈕。如果判斷出沒有按下運動圖像拍攝結(jié)束按鈕，則處理返回步驟S1002以重復(fù)上述步驟。如果在步驟S1011判斷出按下了運動圖像拍攝結(jié)束按鈕，則拍攝操作結(jié)束。如上所述，由于提前輸入幀數(shù)作為CNTmax值，因此在運動圖像拍攝期間用戶僅需按下靜止圖像拍攝按鈕(超分辨率模式按鈕)一次。換句話說，通過按下靜止圖像拍攝按鈕一次，可以僅在生成超分辨率圖像所需的時間段以低壓縮比記錄圖像數(shù)據(jù)，然后，拍攝模式自動返回運動圖像拍攝模式(正常模式)，該正常模式允許重新開始以較高壓縮比記錄運動圖像。第六典型實施例本發(fā)明的第六典型實施例的特征在于允許開始高質(zhì)量記錄在將拍攝模式改變?yōu)槌直媛誓Ｊ街八@得的圖像的圖像數(shù)據(jù)記錄方法。在本典型實施例中，能夠在運動圖像拍攝期間改變壓縮比的攝像設(shè)備的結(jié)構(gòu)與圖1的框圖所示的結(jié)構(gòu)相同。圖13示出根據(jù)第六典型實施例的圖像數(shù)據(jù)記錄方法。參照圖13，“圖像數(shù)據(jù)”1301示出通過拍攝被攝體所獲得的并且被顯影(develop)的圖像數(shù)據(jù)?！癡RAM”1302示出存儲在圖1的VRAM806中的圖像數(shù)據(jù)。在本實施例中，可以將多個顯影后的圖像數(shù)據(jù)存儲在VRAM806中?！坝涗浗橘|(zhì)”1303示出記錄在記錄介質(zhì)826中的圖像數(shù)據(jù)。在圖13中，將羅馬數(shù)字I～VI按連續(xù)順序分配給各時間階段。將參照圖13說明本典型實施例的記錄方法。在階段I，將顯影后的圖像數(shù)據(jù)(a)存儲在VRAM806中。接著，在階段II，將顯影后的圖像數(shù)據(jù)(b)存儲到與圖像數(shù)據(jù)(a)的VRAM區(qū)域不同的VRAM區(qū)域中。同樣地，在階段III，將顯影后的圖像數(shù)據(jù)(c)存儲到與圖像數(shù)據(jù)(a)和(b)的VRAM區(qū)域不同的VRAM區(qū)域中。此時，最初存儲在VRAM806中的圖像數(shù)據(jù)(a)被轉(zhuǎn)換成以高壓縮比壓縮的壓縮圖像數(shù)據(jù)(A)并且被記錄在記錄介質(zhì)826中。在正常模式下，即在運動圖像記錄期間，重復(fù)上述步驟以將運動圖像數(shù)據(jù)記錄在記錄介質(zhì)826中。接著，在圖13的階段IV，按下超分辨率模式按鈕。這將拍攝模式改變?yōu)槌直媛誓Ｊ?。將顯影后的圖像數(shù)據(jù)(d)存儲到與圖像數(shù)據(jù)(b)和(c)的VRAM區(qū)域不同的VRAM區(qū)域中。由于已從VRAM806中讀出了圖像數(shù)據(jù)(a)，因此將圖像數(shù)據(jù)(d)存儲在之前存儲圖像數(shù)據(jù)(a)的VRAM區(qū)域中。這有助于減小VRAM806的大小。在超分辨率模式下，從VRAM806中讀出之前存儲的圖像數(shù)據(jù)(b)，將其轉(zhuǎn)換成以低壓縮比壓縮的壓縮圖像數(shù)據(jù)(B)，并將其記錄在記錄介質(zhì)826中。接著，在圖13的階段V，將顯影后的圖像數(shù)據(jù)(e)存儲在與圖像數(shù)據(jù)(c)和(d)的VRAM區(qū)域不同的VRAM區(qū)域中。由于已從VRAM806中讀出了圖像數(shù)據(jù)(b)，因此將圖像數(shù)據(jù)(e)存儲在之前存儲圖像數(shù)據(jù)(b)的VRAM區(qū)域中。然后，從VRAM806中讀出之前存儲的圖像數(shù)據(jù)(c)，將其轉(zhuǎn)換成以低壓縮比壓縮的壓縮圖像數(shù)據(jù)(C)，并且將其記錄在記錄介質(zhì)826中。同樣地，在圖13的階段VI，將顯影后的圖像數(shù)據(jù)(f)存儲到與圖像數(shù)據(jù)(d)和(e)的VRAM區(qū)域不同的VRAM區(qū)域中。由于已從VRAM806中讀出了圖像數(shù)據(jù)(c)，因此將圖像數(shù)據(jù)(f)存儲在之前存儲圖像數(shù)據(jù)(c)的VRAM區(qū)域中。然后，從VRAM806中讀出之前存儲的圖像數(shù)據(jù)(d)，將其轉(zhuǎn)換成以低壓縮比壓縮的壓縮圖像數(shù)據(jù)(D)，并且將其記錄在記錄介質(zhì)826中。因此，重復(fù)上述步驟允許開始高質(zhì)量記錄在用戶將拍攝模式改變?yōu)槌直媛誓Ｊ街八@得的圖像。然后，為了在再現(xiàn)期間顯示超分辨率圖像數(shù)據(jù)，可以通過使用在用戶指定的時間之前和之后獲得的圖像數(shù)據(jù)，生成超分辨率圖像數(shù)據(jù)。圖14是當將本典型實施例的方法應(yīng)用于圖5、圖9和圖11的流程圖所示的處理步驟時的壓縮處理所涉及的塊的時序圖。圖15是當將本典型實施例的方法應(yīng)用于圖12的流程圖所示的處理步驟時的壓縮處理所涉及的塊的時序圖?？梢詮膱D14和圖15中明顯看到，可以以低壓縮比記錄與在按下按鈕時所獲得的圖像數(shù)據(jù)E之前的圖像數(shù)據(jù)C和D相對應(yīng)的圖像。第七典型實施例本發(fā)明的第七典型實施例指的是可應(yīng)用于第一到第六典型實施例的超分辨率處理。圖16是示出超分辨率處理的步驟的流程圖。在步驟S1601，獲得多個所選擇的幀圖像數(shù)據(jù)。例如，在本典型實施例中，獲得四個所選擇的幀圖像數(shù)據(jù)。所獲得的多個幀圖像數(shù)據(jù)被暫時存儲在存儲器中。幀圖像數(shù)據(jù)包括表示點陣中的各像素的灰度值(下文也稱作“像素值”)的灰度數(shù)據(jù)(下文也稱作“像素數(shù)據(jù)”)。像素數(shù)據(jù)是例如包括亮度(Y)、藍色色度(bluechrominance，Cb)和紅色色度(redchrominance，Cr)成分的YCbCr數(shù)據(jù)，或者是包括紅色(R)、綠色(G)和藍色(B)成分的RGB數(shù)據(jù)。像素數(shù)據(jù)的類型取決于攝像裝置的類型。為了清楚地說明超分辨率處理，本典型實施例的幀圖像數(shù)據(jù)由僅一種顏色的多值圖像數(shù)據(jù)來表示。如將參照圖17所述，該圖像不具有VGA大小，而由8×8＝64像素來表示。在步驟S1602，估計用于校正所獲得的三個幀圖像的幀位移(位置位移)的校正量。為了估計該校正量，將上述四個所選擇的幀圖像中的一個設(shè)置為參考幀，將其它三個幀圖像設(shè)置為目標幀。然后，對于各目標幀，估計用于校正離開參考幀的位移的校正量。在本典型實施例中，將四個所選擇的幀圖像中最早生成的幀圖像設(shè)置為參考幀，并將其它三個幀圖像設(shè)置為目標幀。在以下說明中，所獲得的四個幀中的每一個的編號(下文也稱作“幀編號”)由“n”(n＝0、1、2或3)來表示。將具有幀編號“n”的幀稱作“幀n”，且與幀n相對應(yīng)的圖像被稱作“幀圖像Fn”。例如，將具有幀編號n＝0的幀稱作“幀0”，且其相對應(yīng)的圖像被稱作“幀圖像F0”。這里，將幀0設(shè)置為參考幀，將幀1～3設(shè)置為目標幀。同時，與參考幀相對應(yīng)的幀圖像F0也被稱作參考幀圖像，且與各目標幀相對應(yīng)的幀圖像F1～F3也被稱作目標幀圖像。圖像的位移由平移(橫向或者縱向)和轉(zhuǎn)動位移的組合來表示。此處，在本典型實施例中省略對轉(zhuǎn)動位移和對轉(zhuǎn)動位移所進行的處理的說明。圖17示出在超分辨率處理中所使用的幀圖像和通過超分辨率處理所獲得的圖像。圖17示出被攝體、通過拍攝所獲得的參考幀圖像F0和目標幀圖像F1～F3。在被攝體周圍的點線矩形表示當拍攝參考幀圖像F0時的視場角(fieldangle)，而實線矩形表示當拍攝各目標幀圖像F1～F3時的視場角。在本典型實施例中，橫向平移位移量由“um”來表示，而縱向平移位移量由“vm”來表示。目標幀圖像Fn(n＝1～3)的橫向平移位移量由“umn”來表示，而目標幀圖像Fn(n＝1～3)的縱向平移位移量由“vmn”來表示。例如，如圖17所示，目標幀圖像F1相對于參考幀圖像F0的縱向平移位移量由um1和vm1來表示。為了組合目標幀圖像(F1～F3)和參考幀圖像(F0)，對各目標幀圖像中的各像素的位移進行校正，使得消除各目標幀圖像和參考幀圖像之間的位移。用于該校正的橫向平移校正量和縱向平移校正量分別由“u”和“v”來表示。目標幀圖像Fn(n＝1～3)的橫向平移校正量由“un”來表示，而目標幀圖像Fn(n＝1～3)的縱向平移校正量由“vn”來表示。例如，目標幀圖像F1的校正量由u1和v1來表示。此處，術(shù)語校正意味著將目標幀圖像Fn(n＝1～3)中的各像素的位置在橫向上移動“un”，在縱向上移動“vn”。因此，目標幀圖像Fn(n＝1～3)的校正量“un”和“vn”可以分別表示為un＝-umn和vn＝-vmn。例如，目標幀圖像F1的校正量u1和v1可以分別表示為u1＝-um1和v1＝-vm1。因此，通過使用校正量u1和v1校正目標幀圖像F1中的各像素的位置，可以消除目標幀圖像F1和參考幀圖像F0之間的位移。通過使用校正量u2和v2以及校正量u3和v3，可以以相同的方式進行目標幀圖像F2和F3的校正?；趨⒖紟瑘D像F0的圖像數(shù)據(jù)和各目標幀圖像F1～F3的圖像數(shù)據(jù)來計算各目標幀圖像Fn(F1～F3)的校正量“un”和“vn”。為了進行該計算，使用模式匹配方法、梯度法、最小二乘法等的預(yù)定公式。所計算出的校正量“un”和“vn”作為平移校正量“un”和“vn”的數(shù)據(jù)存儲在存儲器的預(yù)定區(qū)域中。在步驟S1603，將參考幀的圖像數(shù)據(jù)與校正后的目標幀的圖像數(shù)據(jù)組合在一起以生成高分辨率靜止圖像數(shù)據(jù)。在本典型實施例中，為了清楚起見，圖17以像素為單位示出了各目標幀的位移。然而，在實際拍攝中會出現(xiàn)少于一個像素長度的位移。使用該小位移可以獲得較高的分辨率。因此，在構(gòu)成將要生成的靜止圖像的像素(下文也稱作“生成像素”)中，一些像素既不存在于參考幀圖像也不存在于目標幀圖像中。對于這些像素，使用表示生成像素周圍的像素的像素值的像素數(shù)據(jù)(即表示灰度值的灰度數(shù)據(jù))通過預(yù)定方法進行插值。因此，多個像素組合在一起以形成高分辨率圖像。典型的插值方法包括雙線性方法、雙三次方法和最近鄰法。圖18示出使用雙線性方法進行的插值。如圖所示，首先，從參考幀圖像和目標幀圖像中選擇具有位置距離生成像素1801最近的最近鄰像素1802的幀圖像。接著，在所選擇的幀圖像中，將生成像素1801周圍的四個像素確定為近鄰像素1802～1805。然后，對通過將預(yù)定權(quán)值分配給近鄰像素1802～1805的各數(shù)據(jù)值而獲得的值進行平均以得到生成像素1801的數(shù)據(jù)值。通過對生成像素的各位置進行上述步驟，如圖17所示，可以獲得分辨率例如是幀圖像分辨率的兩倍高的超分辨率圖像。該分辨率不限于是幀圖像分辨率的兩倍高，而可以是幀圖像分辨率的其它倍數(shù)。在插值中所使用的包含數(shù)據(jù)值的幀數(shù)越多，超分辨率圖像的分辨率越高。其它典型實施例根據(jù)本發(fā)明的上述典型實施例的攝像設(shè)備的各組件以及攝像方法的各步驟可以通過執(zhí)行存儲在例如計算機的RAM或者只讀存儲器(read-onlymemory，ROM)中的程序來實現(xiàn)。該程序和記錄該程序的計算機可讀的記錄介質(zhì)也包括在本發(fā)明的范圍之內(nèi)。本發(fā)明可以例如作為系統(tǒng)、設(shè)備、方法、程序或者存儲介質(zhì)來實施。具體地，本發(fā)明可以應(yīng)用于由多個單元構(gòu)成的系統(tǒng)，或者應(yīng)用于由單個單元構(gòu)成的設(shè)備。本發(fā)明包括以下情況將執(zhí)行上述典型實施例的功能的軟件程序(例如，與根據(jù)典型實施例的圖5、6、7、9、11和12中的任一個的流程圖相對應(yīng)的程序)直接提供給系統(tǒng)或者設(shè)備。本發(fā)明還包括以下情況從遠程裝置將該程序提供給系統(tǒng)或者設(shè)備，并且該系統(tǒng)或者設(shè)備的計算機讀取并且執(zhí)行所提供的程序代碼以執(zhí)行上述典型實施例的功能。因此，安裝在計算機中的用于執(zhí)行本發(fā)明的功能處理的程序代碼也實現(xiàn)本發(fā)明。換句話說，用于執(zhí)行本發(fā)明的功能處理的計算機程序也包括在本發(fā)明中。在這種情況下，該程序可以采取任何形式，只要其起該程序的作用即可。程序的可能形式的例子包括目標代碼、由解釋程序執(zhí)行的程序、以及提供給操作系統(tǒng)(operatingsystem，OS)的腳本數(shù)據(jù)。用于提供程序的記錄介質(zhì)的例子包括軟盤(floppy，注冊商標)、硬盤、光盤、磁光(magneto-optical，MO)盤、光盤只讀存儲器(compact-diskread-onlymemory，CD-ROM)、可寫入光盤(CD-recordable，CD-R)、可重寫光盤(CD-rewritable，CD-RW)、磁帶、非易失性存儲卡、ROM以及多功能數(shù)字光盤(digitalversatiledisk，DVD)(例如DVD-ROM或者DVD-R)。其它提供程序的可能方法是通過經(jīng)客戶計算機上的瀏覽器訪問因特網(wǎng)上的主頁從該主頁下載本發(fā)明的計算機程序。還可以通過將通過壓縮該程序而創(chuàng)建的且具有自動安裝功能的文件下載到硬盤等記錄介質(zhì)中來提供本發(fā)明的計算機程序。在其它可能的提供方法中，將包括在本發(fā)明的程序中的程序代碼分成多個文件，然后從因特網(wǎng)上的不同主頁下載該多個文件。因此，允許多個用戶下載在計算機中執(zhí)行本發(fā)明的功能處理的程序文件的萬維網(wǎng)(WorldWideWeb，WWW)服務(wù)器也包括在本發(fā)明的范圍之內(nèi)。在其它可能的方法中，可以對本發(fā)明的程序進行加密，將其存儲在CD-ROM等存儲介質(zhì)中并分發(fā)給用戶。然后，允許滿足預(yù)定標準的用戶從因特網(wǎng)的主頁下載用于解密該加密程序的密鑰信息。用戶使用該密鑰信息執(zhí)行并允許將該加密程序安裝在計算機中，從而使得可以執(zhí)行本發(fā)明的程序的功能。當計算機讀取并且執(zhí)行該程序時，執(zhí)行上述典型實施例的功能。此外，基于該程序的指令，運行在計算機上的OS執(zhí)行全部或者部分實際處理。這樣可以執(zhí)行上述典型實施例的功能。而且，當將從存儲介質(zhì)讀出的程序?qū)懭胗嬎銠C中的功能擴展板或者與計算機相連的功能擴展單元中的存儲器，然后功能擴展板或者功能擴展單元中的CPU基于該程序的指令執(zhí)行全部或者部分實際處理時，也可以執(zhí)行上述典型實施例的功能。盡管參照典型實施例說明了本發(fā)明，但是應(yīng)該理解，本發(fā)明不限于所公開的典型實施例。以下權(quán)利要求的范圍符合最寬的解釋，以包括所有修改、等同結(jié)構(gòu)和功能。權(quán)利要求1.一種攝像設(shè)備，其包括壓縮單元，用于壓縮所捕獲的被攝體圖像，以生成壓縮被攝體圖像；拍攝模式改變單元，用于改變捕獲所述被攝體圖像的拍攝模式；壓縮比改變單元，用于改變所述壓縮單元中的壓縮比；以及記錄單元，用于將所述壓縮被攝體圖像記錄在記錄介質(zhì)中，其中，如果所述拍攝模式改變單元將所述拍攝模式從非超分辨率模式改變?yōu)槌直媛誓Ｊ剑瑒t所述壓縮比改變單元將所述壓縮單元中的壓縮比改變?yōu)榈谝粔嚎s比；如果所述拍攝模式改變單元將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ剑瑒t所述壓縮比改變單元將所述壓縮單元中的壓縮比改變?yōu)榇笥谒龅谝粔嚎s比的第二壓縮比。2.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，所述壓縮比改變單元改變所述壓縮單元中的壓縮比，使得如果將所述拍攝模式從所述非超分辨率模式改變?yōu)樗龀直媛誓Ｊ?，則降低由幀內(nèi)編碼所生成的壓縮幀的壓縮比和由幀間編碼所生成的壓縮幀的壓縮比，以生成所述壓縮被攝體圖像；如果將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ?，則提高由幀內(nèi)編碼所生成的壓縮幀的壓縮比和由幀間編碼所生成的壓縮幀的壓縮比，以生成所述壓縮被攝體圖像。3.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，所述壓縮比改變單元改變所述壓縮單元中的壓縮比，使得如果將所述拍攝模式從所述非超分辨率模式改變?yōu)樗龀直媛誓Ｊ?，則僅在由幀內(nèi)編碼所生成的壓縮幀中壓縮所述被攝體圖像；如果將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ剑瑒t在由幀內(nèi)編碼所生成的壓縮幀和由幀間編碼所生成的壓縮幀二者中壓縮所述被攝體圖像。4.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，還包括頭信息寫入單元，用于將關(guān)于所述壓縮比的頭信息附加到所述壓縮被攝體圖像上，其中，所述記錄單元將附加有所述頭信息的所述壓縮被攝體圖像記錄在所述記錄介質(zhì)中。5.根據(jù)權(quán)利要求4所述的攝像設(shè)備，其特征在于，還包括幀分辨率改變單元，用于改變將被記錄在所述記錄介質(zhì)中的被攝體圖像的幀分辨率，其中，所述頭信息寫入單元將關(guān)于所述幀分辨率的頭信息附加到所述被攝體圖像上；以及所述幀分辨率改變單元改變所述幀分辨率，使得如果將所述拍攝模式從所述非超分辨率模式改變?yōu)樗龀直媛誓Ｊ?，則將所述被攝體圖像作為較高分辨率壓縮被攝體圖像進行記錄，并且如果將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ?，則將所述被攝體圖像作為較低分辨率壓縮被攝體圖像進行記錄。6.根據(jù)權(quán)利要求5所述的攝像設(shè)備，其特征在于，所述頭信息寫入單元將關(guān)于所述幀分辨率的頭信息附加到所述壓縮被攝體圖像上；所述記錄單元將所述壓縮被攝體圖像和所述頭信息記錄在所述記錄介質(zhì)中；以及所述幀分辨率改變單元改變所述幀分辨率，使得如果將所述拍攝模式從所述非超分辨率模式改變?yōu)樗龀直媛誓Ｊ?，則以第二分辨率記錄所述被攝體圖像，并且如果將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ?，則以低于所述第二分辨率的第一分辨率記錄所述被攝體圖像。7.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，如果已由所述記錄單元記錄了超分辨率處理所需數(shù)量的以低壓縮比壓縮的圖像數(shù)據(jù)，則所述拍攝模式改變單元將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ健?.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，還包括主存儲單元，用于暫時存儲將由所述壓縮單元壓縮的多個未壓縮圖像數(shù)據(jù)，其中，如果通過所述拍攝模式改變單元將所述拍攝模式改變?yōu)樗龀直媛誓Ｊ?，則所述壓縮單元以所述第一壓縮比壓縮在將所述拍攝模式改變?yōu)樗龀直媛誓Ｊ綍r刻之前所獲得的、暫時存儲在所述主存儲單元中的未壓縮圖像數(shù)據(jù)。9.一種再現(xiàn)設(shè)備，其包括解壓縮單元，用于對壓縮被攝體圖像進行解壓縮，以生成解壓縮的被攝體圖像；頭判斷單元，用于讀取附加到所述壓縮被攝體圖像上的壓縮比信息，并且通過該壓縮比信息判斷是否可以生成超分辨率圖像；以及超分辨率圖像生成單元，用于通過多個連續(xù)被攝體圖像生成超分辨率圖像，其中，所述超分辨率圖像生成單元基于所述頭判斷單元的判斷，當在適于生成超分辨率圖像的場景選擇了幀圖像時生成所述超分辨率圖像。10.根據(jù)權(quán)利要求9的再現(xiàn)設(shè)備，其特征在于，所述頭判斷單元讀取附加到所述壓縮被攝體圖像上的幀分辨率信息，并且通過該幀分辨率信息判斷是否可以生成超分辨率圖像。11.一種攝像方法，其包括壓縮步驟，用于壓縮所捕獲的被攝體圖像，以生成壓縮被攝體圖像；拍攝模式改變步驟，用于改變拍攝所述被攝體圖像的拍攝模式；壓縮比改變步驟，用于改變所述壓縮步驟中的壓縮比；以及記錄步驟，用于將所述壓縮被攝體圖像記錄在記錄介質(zhì)中，其中，如果在所述拍攝模式改變步驟中將所述拍攝模式從非超分辨率模式改變?yōu)槌直媛誓Ｊ剑瑒t所述壓縮比改變步驟將所述壓縮步驟中的壓縮比改變?yōu)榈谝粔嚎s比；如果在所述拍攝模式改變步驟中將所述拍攝模式從所述超分辨率模式改變?yōu)樗龇浅直媛誓Ｊ?，則所述壓縮比改變步驟將所述壓縮步驟中的壓縮比改變?yōu)楦哂谒龅谝粔嚎s比的第二壓縮比。12.一種再現(xiàn)方法，其包括解壓縮步驟，用于對壓縮被攝體圖像進行解壓縮，以生成解壓縮的被攝體圖像；讀取步驟，用于讀取附加到所述壓縮被攝體圖像上的壓縮比信息；判斷步驟，用于通過所述壓縮比信息判斷是否可以生成超分辨率圖像；以及超分辨率圖像生成步驟，用于通過多個連續(xù)被攝體圖像生成超分辨率圖像，其中，所述超分辨率圖像生成步驟基于所述判斷步驟的判斷，當在適于生成超分辨率圖像的場景選擇了幀圖像時生成所述超分辨率圖像。全文摘要一種攝像設(shè)備和攝像方法以及再現(xiàn)設(shè)備和再現(xiàn)方法。如果將拍攝模式從非超分辨率模式改變?yōu)槌直媛誓Ｊ?，則該攝像設(shè)備降低壓縮單元中的壓縮比。另一方面，如果將拍攝模式從超分辨率模式改變?yōu)榉浅直媛誓Ｊ?，則該攝像設(shè)備提高壓縮單元中的壓縮比。文檔編號H04N5/917GK1984296SQ200610167288公開日2007年6月20日申請日期2006年12月15日優(yōu)先權(quán)日2005年12月16日發(fā)明者渡邊喜則申請人:佳能株式會社