專利名稱：圖像合成裝置、圖像合成方法、圖像合成程序、集成電路、攝像系統(tǒng)以及攝像方法
技術(shù)領(lǐng)域：
本發(fā)明涉及利用連續(xù)攝影的多張攝影圖像來(lái)生成合成圖像的技術(shù)。
背景技術(shù)：
在現(xiàn)有的數(shù)碼相機(jī)等攝像裝置中，具備連續(xù)攝影多張圖像的功能，并 且有的還具備將連續(xù)攝影的全部或者一部分張數(shù)的圖像合成而生成靜止圖 像的功能。另外，以下將"連續(xù)攝影"稱為"連拍"。例如，在專利文獻(xiàn)l 中公開了一種方法，將連拍的多張圖像暫時(shí)記錄到緩沖器中，并對(duì)暫時(shí)記 錄在緩沖器中的一部分張數(shù)的圖像進(jìn)行合成，由此生成與改變了快門速度 的靜止圖像等價(jià)的合成圖像。另夕卜，"快門速度"相當(dāng)于"曝光時(shí)間"、即 "進(jìn)行曝光的曝光區(qū)間的時(shí)間寬度"。
專利文獻(xiàn)1:日本特開2005-86228號(hào)公報(bào)
然而，在連拍的時(shí)間間隔(以下稱為"連拍間隔")比快門速度長(zhǎng)時(shí)， 在進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間存在沒有進(jìn)行曝光的區(qū)間(以 下稱為"無(wú)攝影區(qū)間")(參照?qǐng)D1 (b))。
但是，在對(duì)比文件1所公開的手法中不過(guò)是將所連拍的多張圖像簡(jiǎn)單 地進(jìn)行圖像合成，因此在對(duì)以比快門速度長(zhǎng)的連拍間隔連拍的多張攝影圖 像進(jìn)行了合成的情況下，成為無(wú)攝影區(qū)間的圖像被排除了的圖像、即頻閃 合成那樣的圖像。這樣存在的問題為，從所連拍的多張攝影圖像，不能夠 生成與比實(shí)際的快門速度慢的快門速度的靜止圖像近似的合成圖像。
如果以使連拍間隔與快門速度大致相同的方式進(jìn)行調(diào)整并進(jìn)行連拍， 則能夠解決上述問題，但是如下所述，不一定能夠?qū)⒍哒{(diào)整得成為相同。 由于連拍間隔由攝像裝置的性能制約，因此尤其是在白天那樣明亮的場(chǎng)所 進(jìn)行攝影的情況下，有時(shí)即使將光圈縮小到極限，為了配合曝光也不得不 使快門速度比連拍間隔短。

發(fā)明內(nèi)容
因此，本發(fā)明的目的在于提供圖像合成裝置、圖像合成方法、圖像合 成程序、集成電路、攝像系統(tǒng)以及攝像方法，從以比曝光時(shí)間長(zhǎng)的時(shí)間間 隔而連續(xù)攝影的攝影圖像，能夠生成與靜止圖像近似的合成圖像，該靜止 圖像是如果以比實(shí)際的曝光時(shí)間長(zhǎng)的曝光時(shí)間來(lái)攝影則能夠得到。
為了實(shí)現(xiàn)上述目的的本發(fā)明的圖像合成裝置為，利用以規(guī)定時(shí)間間隔 連續(xù)攝影的攝影圖像來(lái)生成規(guī)定時(shí)間區(qū)間的合成圖像，其具備插補(bǔ)部， 根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn) 行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖 像；和合成部，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間
的上述插補(bǔ)部生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素 重疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
并且，本發(fā)明的圖像合成方法為，利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝
影圖像來(lái)生成涉及規(guī)定時(shí)間區(qū)間的合成圖像，其具備插補(bǔ)步驟，根據(jù)與 無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光 的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和
合成步驟，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上 述插補(bǔ)步驟生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重 疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
并且，本發(fā)明的圖像合成程序?yàn)?，使?jì)算機(jī)作為圖像合成裝置，該圖 像合成裝置利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝影圖像來(lái)生成規(guī)定時(shí)間區(qū)間
的合成圖像，使該計(jì)算機(jī)執(zhí)行插補(bǔ)步驟，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰 接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光 區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和合成步驟，根據(jù)在規(guī)定 時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)步驟生成的插補(bǔ) 圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成該規(guī)定 時(shí)間區(qū)間的合成圖像。
并且，本發(fā)明的集成電路為，利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝影圖 像來(lái)生成涉及規(guī)定時(shí)間區(qū)間的合成圖像，其具備插補(bǔ)電路，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝 光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和合成
電路，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插 補(bǔ)電路生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的 方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
發(fā)明的效果為根據(jù)上述的圖像合成裝置、圖像合成方法、圖像合成 程序以及集成電路，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的 攝影圖像，制作對(duì)該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像，并對(duì)攝影圖像添加 插補(bǔ)圖像來(lái)進(jìn)行合成圖像的生成。因此，從以比曝光區(qū)間的時(shí)間寬度(曝 光時(shí)間)長(zhǎng)的時(shí)間間隔而連續(xù)攝影的攝影圖像，能夠生成與靜止圖像近似 的合成圖像，該靜止圖像是如果以比實(shí)際的曝光時(shí)間長(zhǎng)的曝光時(shí)間來(lái)攝影 則能夠得到。
在上述圖像合成裝置中，也可以是，上述插補(bǔ)部以上述無(wú)攝影區(qū)間全 部被插補(bǔ)的方式生成1張以上的插補(bǔ)圖像。
據(jù)此，由于無(wú)攝影區(qū)間的全部時(shí)間被插補(bǔ)圖像填補(bǔ)，因此能夠得到?jīng)] 有時(shí)間排除的合成圖像。
在上述圖像合成裝置中，也可以是，在上述無(wú)攝影區(qū)間的時(shí)間寬度為 上述曝光區(qū)間的時(shí)間寬度的N (N為正整數(shù))倍時(shí)，上述插補(bǔ)部生成N張 的插補(bǔ)圖像。
據(jù)此，在無(wú)攝影區(qū)間全部被插補(bǔ)圖像填補(bǔ)、且攝影圖像與插補(bǔ)圖像在 時(shí)間上不會(huì)重復(fù)，并且對(duì)1個(gè)無(wú)攝影區(qū)間生成2張以上的插補(bǔ)圖像的情況 下，插補(bǔ)圖像彼此也在時(shí)間上不重復(fù)地生成合成圖像。因此，能夠生成與 以相同于時(shí)間區(qū)間的曝光時(shí)間而攝影的靜止圖像大致等價(jià)的合成圖像。
在上述圖像合成裝置中，也可以是，在上述無(wú)攝影區(qū)間的時(shí)間寬度不 是上述曝光區(qū)間的時(shí)間寬度的正整數(shù)倍時(shí)，上述插補(bǔ)部求得上述曝光區(qū)間 的時(shí)間寬度的(N-l)倍比上述無(wú)攝影區(qū)間的時(shí)間寬度小、且上述曝光區(qū)間
的時(shí)間寬度的N倍比上述無(wú)攝影區(qū)間的時(shí)間寬度大那樣的正整數(shù)N，并生 產(chǎn)N張的插補(bǔ)圖像。
據(jù)此，在將攝影圖像與插補(bǔ)圖像在時(shí)間上重復(fù)的期間抑制為最小限度、 并且對(duì)1個(gè)無(wú)攝影區(qū)間生成2張以上的插補(bǔ)圖像的情況下，將插補(bǔ)圖像彼此在時(shí)間上重復(fù)的期間也一直到最小限度，并且生成無(wú)攝影區(qū)間全部被插 補(bǔ)圖像填補(bǔ)的合成圖像。因此，能夠生成相對(duì)于靜止圖像沒有時(shí)間排除、 重復(fù)期間少的合成圖像，該靜止圖像是如果以相同于時(shí)間區(qū)間的曝光時(shí)間 而攝影則應(yīng)該能夠得到的。
在上述圖像合成裝置中，也可以是，上述插補(bǔ)部，通過(guò)根據(jù)在上述雙 方的曝光區(qū)間的攝影圖像間活動(dòng)的部分的各上述攝影圖像各自中的位置、 以及對(duì)上述無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像的張數(shù)，來(lái)決定上述插補(bǔ)圖像 的該活動(dòng)部分的位置，由此進(jìn)行上述插補(bǔ)圖像的生成。
據(jù)此，能夠簡(jiǎn)單地進(jìn)行插補(bǔ)圖像的生成。
本發(fā)明的攝像系統(tǒng)為，具備攝像部；控制部，控制上述攝像部的連
續(xù)攝影，以使進(jìn)行連續(xù)攝影的時(shí)間間隔成為進(jìn)行曝光的曝光區(qū)間的時(shí)間寬
度的正整數(shù)倍；插補(bǔ)部，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū) 間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝 影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；以及合成部，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影 的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)部生成的插補(bǔ)圖像，以攝影圖像與 插補(bǔ)圖像的相同位置的像素重疊的方式，生成涉及該規(guī)定時(shí)間區(qū)間的合成 圖像。
本發(fā)明的攝像方法為，具備控制步驟，控制攝像部的連續(xù)攝影，以 使進(jìn)行連續(xù)攝影的時(shí)間間隔成為進(jìn)行曝光的曝光區(qū)間的時(shí)間寬度的正整數(shù) 倍；插補(bǔ)步驟，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影 圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn) 行插補(bǔ)的插補(bǔ)圖像；以及合成步驟，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影 圖像和由該時(shí)間區(qū)間的上述插補(bǔ)步驟生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ) 圖像的相同位置的像素重疊的方式，生成涉及該規(guī)定時(shí)間區(qū)間的合成圖像。
根據(jù)上述攝像系統(tǒng)以及攝像方法，在存在無(wú)攝影區(qū)間的情況下，能夠 以無(wú)攝影區(qū)間的時(shí)間寬度為曝光區(qū)間的時(shí)間寬度的整數(shù)倍進(jìn)行連續(xù)攝影。 因此，在無(wú)攝影區(qū)間全部被插補(bǔ)圖像填補(bǔ)、且攝影圖像與插補(bǔ)圖像在時(shí)間 上不會(huì)重復(fù)，并且對(duì)1個(gè)無(wú)攝影區(qū)間生成2張以上的插補(bǔ)圖像的情況下， 插補(bǔ)圖像彼此也在時(shí)間上不重復(fù)地生成合成圖像。


圖1是用于說(shuō)明連拍間隔與快門開放期間的關(guān)系的圖。
圖2 (a)是第l實(shí)施方式的攝像裝置的主視圖、(b)是攝像裝置的后 視圖。
圖3是圖2的攝像裝置的功能框圖。
圖4是圖3的幀插補(bǔ)電路的插補(bǔ)圖像的生成處理的說(shuō)明圖。
圖5表示圖3的攝像裝置進(jìn)行的圖像合成處理的流程的流程圖。
圖6是表示用于設(shè)定圖5的圖像合成處理中所顯示的合成開始位置以
及合成結(jié)束位置的GUI的一個(gè)例子的圖。
圖7是表示圖3的攝像裝置進(jìn)行的圖像合成處理的一個(gè)例子的圖。
圖8是表示圖3的攝像裝置進(jìn)行的圖像合成處理的其他例子的圖。
圖9是表示圖3的攝像裝置進(jìn)行的圖像合成處理的又一其他例子的圖。
圖10是第2實(shí)施方式的攝像裝置的功能框圖。
圖11表示圖10的攝像裝置進(jìn)行的連拍處理的流程的流程圖。
圖12是表示用于設(shè)定圖11的連拍處理中所顯示連拍間隔的GUI的一
個(gè)例子的圖。 符號(hào)說(shuō)明-1攝像裝置 51 CPU 52存儲(chǔ)器
53攝像光學(xué)系統(tǒng)機(jī)構(gòu) 54聚焦驅(qū)動(dòng)電路 55焦距驅(qū)動(dòng)電路 56光圈驅(qū)動(dòng)電路 57攝像元件 58攝影控制電路 59前端部 60 DSP
61幀插補(bǔ)電路 62幀合成電路63壓縮解壓縮電路 64存儲(chǔ)卡具體實(shí)施方式
《第1實(shí)施方式》以下，參照附圖對(duì)本發(fā)明的第l實(shí)施方式的攝像裝置。 (連拍間隔與快門開放期間的關(guān)系)在說(shuō)明本實(shí)施方式攝像裝置1的構(gòu)成以及動(dòng)作之前，首先參照?qǐng)D1對(duì) 連拍間隔與快門開放期間的關(guān)系進(jìn)行說(shuō)明。圖1是用于說(shuō)明連拍間隔與快 門開放期間的關(guān)系的圖。另外，"連拍間隔"相當(dāng)于"連續(xù)攝影的時(shí)間間隔"。 "快門開放期間"相當(dāng)于曝光的"曝光時(shí)間"，該時(shí)間區(qū)間相當(dāng)于"曝光區(qū) 間"。曝光區(qū)間與下一曝光區(qū)間之間的快門沒有開放的時(shí)間區(qū)間、即沒有曝 光的時(shí)間區(qū)間相當(dāng)于"無(wú)攝影區(qū)間"。圖1 (a)表示連拍間隔At與快門開放期間At'相等時(shí)二者的關(guān)系。在 連拍間隔At與快門開放期間At，相等時(shí)(At=At，)，曝光區(qū)間在時(shí)間上連 續(xù)、不存在無(wú)攝影區(qū)間。圖1 (b)表示連拍間隔At比快門開放期間At'長(zhǎng)時(shí)二者的關(guān)系。在連 拍間隔At比快門開放期間At，長(zhǎng)時(shí)(At>At')，在曝光區(qū)間與下一曝光區(qū) 間之間快門未開放、即存在未曝光的期間At-ZU'的無(wú)攝影區(qū)間。但是，本發(fā)明的主要注目于，從以比曝光時(shí)間長(zhǎng)的時(shí)間間隔而連續(xù)攝 影的攝影圖像生成規(guī)定時(shí)間區(qū)間所涉及的合成圖像。根據(jù)該情況，以下主 要說(shuō)明與連續(xù)攝影的"時(shí)間間隔"相當(dāng)?shù)?連拍間隔"比與"進(jìn)行曝光的 曝光區(qū)間的時(shí)間寬度(曝光時(shí)間)"相當(dāng)?shù)?快門開放期間"長(zhǎng)的情況。另 外，將用于對(duì)無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的圖像稱為"插補(bǔ)圖像"。 (攝像裝置的外觀)參照?qǐng)D2對(duì)本實(shí)施方式的攝像裝置1的外觀進(jìn)行說(shuō)明。圖2 (a)是本 實(shí)施方式的攝像裝置1的主視圖、(b)是其后視圖。在攝像裝置1的上面設(shè)置有攝影指示用的攝影按鈕2、連拍攝影設(shè)定 用的連拍模式開關(guān)3以及模式轉(zhuǎn)盤4，在其正面上設(shè)置有鏡頭5。并且，在 攝像裝置1的背面上設(shè)置有焦點(diǎn)露出固定按鈕6、功能按鈕7、中心鍵8以 8e，還設(shè)置有液晶監(jiān)視器9。 (攝像裝置的功能構(gòu)成)圖2的攝像裝置1使用與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間 的攝影圖像、生成用于插補(bǔ)該無(wú)攝影區(qū)間的1張以上的插補(bǔ)圖像。并且， 攝像裝置1使用規(guī)定時(shí)間區(qū)間內(nèi)的攝影圖像以及插補(bǔ)圖像生成該規(guī)定時(shí)間 區(qū)間所涉及的合成圖像。其中，規(guī)定時(shí)間區(qū)間在本實(shí)施方式中是用戶指定 的，在以下將"規(guī)定時(shí)間區(qū)間"稱為"圖像合成區(qū)間"。以下，參照?qǐng)D3說(shuō)明圖2的攝像裝置1的功能構(gòu)成。圖3是圖2的攝 像裝置1的功能框圖。攝像裝置1具備CPU (Central Processing Unit) 51;存儲(chǔ)器52;攝 像光學(xué)系統(tǒng)機(jī)構(gòu)53，其具有主鏡頭53a、焦距鏡頭53b以及光圈53c;聚焦驅(qū)動(dòng)電路54;焦距驅(qū)動(dòng)電路55;光圈驅(qū)動(dòng)電路56;攝像元件57;攝影控 制電路58;前端部59; DSP (Digital Signal Processer) 60; SD卡或標(biāo)準(zhǔn)閃 存(注冊(cè)商標(biāo))存儲(chǔ)器等存儲(chǔ)卡64。CPU51進(jìn)行攝像裝置1整體的控制。存儲(chǔ)器52例如是半導(dǎo)體存儲(chǔ)器， 在存儲(chǔ)器52中記錄有用于控制攝像裝置1的各種控制程序或各種應(yīng)用程序 等。并且，在存儲(chǔ)器52中記錄有圖像數(shù)據(jù)等。聚焦驅(qū)動(dòng)電路54、焦距驅(qū)動(dòng)電路55以及光圈驅(qū)動(dòng)電路56由CPU51 控制。并且，攝像光學(xué)系統(tǒng)機(jī)構(gòu)53的主鏡頭53a由聚焦驅(qū)動(dòng)電路54驅(qū)動(dòng)， 焦距鏡頭53b由焦距驅(qū)動(dòng)電路55驅(qū)動(dòng)，光圈53c由光圈驅(qū)動(dòng)電路57驅(qū)動(dòng)。 從被寫體入射的光經(jīng)由主鏡頭53a、焦距鏡頭53b以及光圈53c而導(dǎo)入到攝 像元件57。攝像元件57由CCD (Charge Coupled Device)圖像傳感器或CMOS (Complementary Metal Oxide Semiconductor)圖像傳感器等構(gòu)成。攝影控 制電路58例如在連拍時(shí)由CPU51設(shè)定連拍間隔△ t以及快門開放期間A t'， 并根據(jù)所設(shè)定的連拍間隔M以及快門開放期間Af來(lái)進(jìn)行攝像元件57的 控制。由此，攝像元件57在連拍時(shí)在連拍間隔At中進(jìn)行根據(jù)快門開放期 間At'的電荷的蓄積、以及與蓄積的電荷量相對(duì)應(yīng)的模擬值的輸出。前端部59將從攝像元件57輸出的模擬值轉(zhuǎn)換為數(shù)字?jǐn)?shù)據(jù)，并輸出數(shù) 字?jǐn)?shù)據(jù)。DSP60對(duì)從前端部59輸出的數(shù)字?jǐn)?shù)據(jù)進(jìn)行加工，而轉(zhuǎn)換為RGB、YCbCr、 YUV等在色空間中表現(xiàn)的圖像數(shù)據(jù)(以下稱為"攝影圖像數(shù)據(jù)")， 并將攝影圖像數(shù)據(jù)記錄到存儲(chǔ)器52中。另外，攝影圖像數(shù)據(jù)具有攝影圖像 的各像素的像素值的信息。幀插補(bǔ)電路61，使用與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的攝影區(qū)間的 存儲(chǔ)器52所記錄的攝影圖像的攝影圖像數(shù)據(jù)，生成用于插補(bǔ)該無(wú)攝影區(qū)間 的插補(bǔ)圖像的圖像數(shù)據(jù)(以下稱為"插補(bǔ)圖像數(shù)據(jù)")，將生成的插補(bǔ)圖像 數(shù)據(jù)記錄到存儲(chǔ)器52中。另外，插補(bǔ)圖像數(shù)據(jù)具有與攝影圖像的各像素分 別對(duì)應(yīng)的像素的像素值的信息。幀合成電路62為，使圖像合成區(qū)間內(nèi)的攝影圖像與插補(bǔ)圖像的相同位 置的像素重疊而生成與圖像合成區(qū)間有關(guān)的合成圖像。具體地說(shuō)，幀合成 圖像62對(duì)于每個(gè)像素，將存儲(chǔ)器52所記錄的圖像合成區(qū)間內(nèi)的攝影圖像 的攝影圖像數(shù)據(jù)與插補(bǔ)圖像的插補(bǔ)圖像數(shù)據(jù)相加，并通過(guò)使相加而得到的 數(shù)據(jù)除以圖像合成區(qū)間內(nèi)的攝影圖像以及插補(bǔ)圖像的合計(jì)張數(shù)，由此生成 合成圖像的圖像數(shù)據(jù)(以下稱為"合成圖像數(shù)據(jù)")，并將生成的合成圖像 數(shù)據(jù)記錄到存儲(chǔ)器52中。另外，合成圖像數(shù)據(jù)具有與攝影圖像的各像素分 別對(duì)應(yīng)的像素值的信息。另外，基于幀插補(bǔ)電路61的插補(bǔ)圖像的生成處理的詳細(xì)，將使用圖4 而后述。并且，從攝影圖像到合成圖像的生成為止的幀插補(bǔ)電路61以及幀 合成電路62的處理動(dòng)作將使用圖5以及圖6而后述，其具體例子將使用圖 7到圖9而后述。壓縮解壓縮電路63進(jìn)行存儲(chǔ)器52或者存儲(chǔ)卡64所記錄的數(shù)據(jù)的壓縮 或者解壓縮，將在該處理中得到的數(shù)據(jù)記錄到存儲(chǔ)器52或者存儲(chǔ)卡64中。 (插補(bǔ)圖像的生成)以下，參照?qǐng)D4說(shuō)明幀插補(bǔ)電路61進(jìn)行的插補(bǔ)圖像的生成處理。圖4 是用于說(shuō)明圖3的幀插補(bǔ)電路61進(jìn)行的插補(bǔ)圖像的生成處理的圖。其中， 設(shè)連續(xù)的曝光區(qū)間的攝影圖像為PA、 PB，連拍間隔為At，快門開放期間 為At'。另外，使連拍間隔At比快門開放期間At，長(zhǎng)(At>At，)。幀插補(bǔ)電路61使用連拍間隔At和快門開放期間At'，計(jì)算對(duì)1個(gè)無(wú)攝 影區(qū)間進(jìn)行查補(bǔ)的插補(bǔ)圖像的張數(shù)(以下稱為"插補(bǔ)張數(shù)")。例如，幀插 補(bǔ)電路61通過(guò)從連拍間隔At減去快門開放期間At'，由此求出無(wú)攝影區(qū)間的時(shí)間寬度At-At，，接著求出滿足(N-l) X At，〈At-At，^NX At，的N (N 為正整數(shù))，將求得的N作為插補(bǔ)張數(shù)。但是，在無(wú)攝影區(qū)間的時(shí)間寬度為曝光區(qū)間的時(shí)間寬度的N (N為正 整數(shù))倍的情況下，幀插補(bǔ)電路61使用于插補(bǔ)1個(gè)無(wú)攝影區(qū)間的插補(bǔ)張數(shù) 為N張，并生成N張插補(bǔ)圖像。并且，在在無(wú)攝影區(qū)間的時(shí)間寬度不是曝 光區(qū)間的時(shí)間寬度的整數(shù)倍的情況下，幀插補(bǔ)電路61求得如下的正整數(shù)N: 曝光區(qū)間的時(shí)間寬度的(N-l)倍比無(wú)攝影區(qū)間的時(shí)間寬度小、且曝光區(qū)間 的時(shí)間寬度的N倍比無(wú)攝影區(qū)間的時(shí)間寬度大，并生成N張插補(bǔ)圖像。并 且，在連拍間隔At與快門開放期間At'相等的情況下(At=At')，幀插補(bǔ) 電路61將0作為插補(bǔ)張數(shù)N，不進(jìn)行插補(bǔ)圖像的生成。幀插補(bǔ)電路61使用攝影圖像PA與攝影圖像PB來(lái)進(jìn)行活動(dòng)檢索，并 找到攝影圖像PA與攝影圖像PB之間活動(dòng)的部分。其中，作為活動(dòng)檢索的 方法利用如下的方法檢索在MPEG (Moving Picture Experts Group)等中 利用的每個(gè)矩形區(qū)域的差分絕對(duì)值和較小的部分，并根據(jù)差分絕對(duì)值的大 小來(lái)推測(cè)矩形區(qū)域的活動(dòng)矢量。另外，在圖4的例子中，例如為攝影圖像 PA的部分Pa活動(dòng)到攝影圖像PB的部分Pb。之后，幀插補(bǔ)電路61對(duì)于n為1以上N以下的各個(gè)，將檢測(cè)到的活 動(dòng)矢量為n/ (N+l)倍而進(jìn)行活動(dòng)矢量的修正，將修正圖像中的活動(dòng)的部 分的位置決定為修正的活動(dòng)矢量的表示位置，以活動(dòng)的部分來(lái)到修正的活 動(dòng)矢量的表示位置的方式生成插補(bǔ)圖像。例如，幀插補(bǔ)電路61使活動(dòng)的部 分Pa來(lái)到與其對(duì)應(yīng)的所修正的活動(dòng)矢量的表示位置，即，向圖4的部分 Pab活動(dòng)的那樣生成插補(bǔ)圖像PAB。其中，在插補(bǔ)圖像PAB是從快門開放 期間At'的攝影圖像PA、 PB生成的情況下，插補(bǔ)圖像PAB與快門開放期 間為At'的圖像相當(dāng)。另外，插補(bǔ)圖像的生成手法不限于上述的手法，只要是能夠生成插補(bǔ) 圖像的手法，不特別限定。 (攝像裝置的動(dòng)作)以下，說(shuō)明圖3的攝像裝置1進(jìn)行的連拍處理以及圖像合成處理。 [攝影處理]說(shuō)明圖3的攝像裝置1進(jìn)行的連拍處理。當(dāng)通過(guò)用戶操作而連拍模式開關(guān)3被活動(dòng)到連拍模式的位置上時(shí)， CPU51對(duì)攝影控制電路58設(shè)定連拍間隔At以及快門開放期間At'，控制 光圈驅(qū)動(dòng)電路56而進(jìn)行光圈53c的調(diào)節(jié)。當(dāng)通過(guò)用戶操作而攝影按鈕2被按下時(shí)，CPU51對(duì)攝影控制電路58 指示攝影開始，攝影元件57被攝影控制電路58控制，根據(jù)連拍間隔At 與快門開放期間A t'而進(jìn)行電荷的蓄積以及與蓄積的電荷量相對(duì)應(yīng)的模擬 值的輸出。前端部59將從攝像元件57輸出的模擬值轉(zhuǎn)換為數(shù)字?jǐn)?shù)據(jù)并輸 出，DSP60將從前端部59輸出的數(shù)字?jǐn)?shù)據(jù)轉(zhuǎn)換為在色空間中表現(xiàn)的攝影圖 像數(shù)據(jù)，并記錄到存儲(chǔ)器52中。該處理被進(jìn)行直到攝影按鈕2的按下停止、 或者存儲(chǔ)器52沒有空間，而CPU51對(duì)攝影控制電路58指示攝像結(jié)束。由此，以連拍間隔At、快門開放期間At'所連拍的多張攝像圖像的攝 像圖像數(shù)據(jù)被記錄到存儲(chǔ)器52中。但是，在從攝像圖像生成合成圖像時(shí)利 用連拍間隔At與快門開放期間At'，因此相對(duì)于實(shí)現(xiàn)圖像數(shù)據(jù)組連拍間隔 △t與快門開放期間At'被賦予對(duì)應(yīng)地記錄到存儲(chǔ)器52中。[圖像合成處理]參照?qǐng)D5說(shuō)明圖3的攝像裝置1進(jìn)行的圖像合成處理。圖5表示圖3 的攝像裝置1進(jìn)行的圖像合成處理的流程的流程圖。CPU51判斷用戶是否利用功能按鈕7、中心鍵8a以及上下左右方向的 按鍵8b 8e而進(jìn)行了圖像合成的指示操作(步驟Sll)。 CPU51進(jìn)行步驟 Sll的處理直到用戶進(jìn)行圖像合成的指示操作(Sll:否)。另一方面，當(dāng)用戶進(jìn)行圖像合成的指示操作時(shí)(Sll:是)，CPU51從 用戶接受圖像合成區(qū)間的開始位置和結(jié)束位置，對(duì)幀合成電路62進(jìn)行從用 戶接受的圖像合成區(qū)間的開始位置和結(jié)束位置的設(shè)定(步驟S12)。從用戶 的圖像合成區(qū)間的開始位置和結(jié)束位置的接受，例如如下進(jìn)行將用于制 定圖像合成區(qū)間的開始位置和結(jié)束位置的、圖6表示一個(gè)例子的GUI顯示 在液晶監(jiān)視器9上，接受利用了該GUI的用戶操作。在圖6中，P1 P5表 示攝影圖像的圖標(biāo)，S以及E分別表示圖像合成區(qū)間的開始位置和結(jié)束位 置的指定用的指示器。在圖6表示一個(gè)例子的GUI中，在時(shí)間軸上顯示攝 像圖像的圖標(biāo)，如果用戶指定了顯示中的圖標(biāo)則顯示對(duì)應(yīng)的攝影圖像，用 戶通過(guò)使指示器S以及E移動(dòng)，由此能夠指定圖像合成區(qū)間的開始位置和結(jié)束位置。另外，圖像合成區(qū)間的開始位置和結(jié)束位置的設(shè)定方法，不限 于此，例如也可以是指定將攝影圖像從第幾張到第幾張為止進(jìn)行合成的方 法。
幀插補(bǔ)電路61根據(jù)存儲(chǔ)器52所記錄的連拍間隔A t和快門開放期間A t'，計(jì)算用于插補(bǔ)1個(gè)無(wú)攝影區(qū)間的插補(bǔ)圖像的插補(bǔ)張數(shù)N (步驟S13)。
幀合成電路62，根據(jù)在步驟S12設(shè)定的圖像合成區(qū)間的開始位置和結(jié) 束位置、和在步驟S13所計(jì)算的插補(bǔ)張數(shù)N，計(jì)算進(jìn)行圖像合成的攝影圖 像以及插補(bǔ)圖像的合計(jì)張數(shù)(以下稱為"合成圖像張數(shù)")NT (步驟S14)。 例如，當(dāng)設(shè)圖像合成區(qū)間的最初攝影圖像之前的插補(bǔ)圖像的張數(shù)為NA、圖 像合成區(qū)間內(nèi)的攝影圖像的張數(shù)為NB、對(duì)1個(gè)無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ) 圖像的張數(shù)為NC (通過(guò)步驟S13的計(jì)算求出的N)、圖像合成區(qū)間的最后 攝影圖像之后的插補(bǔ)圖像的張數(shù)為ND時(shí)，合計(jì)張數(shù)NT為NA+NB+NCX (NB-1) +ND。另外，在用戶所指定的開始位置或者結(jié)束位置與攝影圖像 以及插補(bǔ)圖像的先頭位置或者結(jié)束位置不一致的情況下，進(jìn)行修正以使圖 像合成區(qū)間的開始位置和結(jié)束位置與攝影圖像以及插補(bǔ)圖像的先頭位置或 者結(jié)束位置一致。
幀合成電路62將循環(huán)變數(shù)i初始化為0 (步驟S15)，并將合成圖像數(shù) 據(jù)OUT清零地初始化(步驟S16)。其中，合成圖像數(shù)據(jù)OUT表示與攝影
圖像的各像素相對(duì)應(yīng)的像素的值。另外，圖像合成區(qū)間內(nèi)的攝影圖像以及 插補(bǔ)圖像從時(shí)間早的開始為循環(huán)變數(shù)i與O、 1、 2、、 NT-1相當(dāng)?shù)膱D像。
幀合成電路62判斷與循環(huán)變數(shù)i相當(dāng)?shù)膱D像(以下稱為"圖像i")是 否為攝影圖像(步驟S17)。在圖像i相當(dāng)于攝影圖像時(shí)(S17:是)，幀合 成電路62將圖像i的攝影圖像數(shù)據(jù)設(shè)定為加法圖像數(shù)據(jù)I (步驟S18)，并 將合成圖像數(shù)據(jù)OUT與加法圖像數(shù)據(jù)I相加，并將相加結(jié)果作為合成圖示 數(shù)據(jù)OUT，由此進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S22)。另外，以各 圖像(攝影圖像、插補(bǔ)圖像)之間相同位置像素的像素值相加的方式，進(jìn) 行合成圖像數(shù)據(jù)OUT與加法圖像數(shù)據(jù)I的加法處理。
另一方面，在圖像i不相當(dāng)于攝影圖像、即是插補(bǔ)圖像的情況下(步 驟S17:否)，幀插補(bǔ)電路61確定圖像i的插補(bǔ)對(duì)象的無(wú)攝影區(qū)間，并確定 與確定的無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像(步驟
15S19)。幀插補(bǔ)電路61使用在步驟S19中確定的插補(bǔ)圖像生成用的2張攝影 圖像的攝影圖像數(shù)據(jù)，生成與圖像i相當(dāng)?shù)牟逖a(bǔ)圖像的插補(bǔ)圖像數(shù)據(jù)，將 生成的插補(bǔ)圖像數(shù)據(jù)記錄到存儲(chǔ)器52中(步驟S20)。另外，還在掌握了 圖像i是對(duì)插補(bǔ)對(duì)象的無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的第幾張圖像的基礎(chǔ)上，進(jìn)行 步驟S20的處理。
幀合成電路62將在步驟S20生成的插補(bǔ)圖像的插補(bǔ)圖像數(shù)據(jù)設(shè)定為加 法圖像數(shù)據(jù)I (步驟S21)，將合成圖像數(shù)據(jù)OUT與加法圖像數(shù)據(jù)I相加， 并將相加結(jié)果作為合成圖像數(shù)據(jù)OUT,由此進(jìn)行合成圖像數(shù)據(jù)OUT的更 新(步驟S22)。另外，以各圖像(攝影圖像、插補(bǔ)圖像)之間相同位置像 素的像素值相加的方式，進(jìn)行合成圖像數(shù)據(jù)OUT與加法圖像數(shù)據(jù)I的加法 處理。
幀合成電路62將循環(huán)變數(shù)i加上1 (步驟S23)，判斷相加后的循環(huán)變 數(shù)i是否小于合成圖像張數(shù)NT (步驟S24)。如果循環(huán)變數(shù)i小于合成圖像 張數(shù)NT(S24:是)，則圖像合成區(qū)間內(nèi)的全部攝影圖像以及插補(bǔ)圖像的相 加未結(jié)束，因此進(jìn)行步驟S17的處理。另一方面，如果循環(huán)變數(shù)i不小于 合成圖像張數(shù)NT (S24:否)，則像合成區(qū)間內(nèi)的全部攝影圖像以及插補(bǔ)圖 像的相加結(jié)束，因此幀合成電路62使與合成圖像數(shù)據(jù)OUT的各像素對(duì)應(yīng) 的值除以合成圖像張數(shù)NT，將除算結(jié)果作為合成圖像數(shù)據(jù)OUT，由此進(jìn) 行合成圖像數(shù)據(jù)OUT的更新，將更新后的合成圖像數(shù)據(jù)OUT記錄到存儲(chǔ) 器52中(步驟S25)。
如此，合成圖像除了攝影圖像還使用插補(bǔ)圖像來(lái)生成，因此合成圖像 成為與將圖像合成區(qū)間的時(shí)間寬度作為快門開放期間而攝影的靜止圖像近 似的圖像。
(圖像合成處理的例子)
參照?qǐng)D7到圖9說(shuō)明由圖3的攝像裝置1進(jìn)行的圖像合成處理。其中， 設(shè)連拍間隔的時(shí)間寬度為Ta、曝光區(qū)間的時(shí)間寬度為Tb、無(wú)攝影區(qū)間的時(shí) 間寬度為Tc。
圖7是表示連拍間隔的時(shí)間寬度Ta是曝光區(qū)間的時(shí)間寬度Tb的整數(shù) 倍時(shí)、攝像裝置1進(jìn)行的圖像合成處理的一個(gè)例子的圖。其中，連拍間隔的時(shí)間寬度Ta是曝光區(qū)間的時(shí)間寬度Tb的2倍(Ta=2Tb)，圖像合成區(qū) 間如圖7所示。另外，在該例子中，無(wú)攝影區(qū)間的時(shí)間寬度是曝光區(qū)間的 時(shí)間寬度的1倍(Tb-Tc)。
CPU51對(duì)幀合成電路62進(jìn)行圖像合成區(qū)間的開始位置與結(jié)束位置的 設(shè)定(步驟Sll、 S12)。幀插補(bǔ)電路61計(jì)算用于插補(bǔ)1個(gè)無(wú)攝影區(qū)間的插 補(bǔ)圖像的插補(bǔ)張數(shù)N，此處N-1 (步驟S13)。并且，幀合成電路62計(jì)算 進(jìn)行圖像合成的攝影圖像以及插補(bǔ)圖像的合計(jì)張數(shù)(合成圖像張數(shù))NT， 此處NT-7(步驟S14)。幀合成電路62對(duì)循環(huán)變數(shù)i以及合成圖像數(shù)據(jù)OUT 進(jìn)行初始化(步驟S15、 S16)。
與循環(huán)變數(shù)的值"0"相當(dāng)?shù)膱D像為攝影圖像A3 (步驟S17的是)，因 此幀合成電路62將攝影圖像A3的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與 合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S18、S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"1"小于 圖像合成張數(shù)"7"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"1"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 A3、 A4的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像Bl的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像Bl的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)c
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"2"小于 圖像合成張數(shù)"7"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"2"相 當(dāng)?shù)膱D像是攝影圖像A4 (步驟S17的是)，因此幀合成電路62將攝影圖像 A4的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn) 行合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"3"小于 圖像合成張數(shù)"7"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"3"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 A4、 A5的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像B2的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像B2的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"4"小于 圖像合成張數(shù)"7"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"4"相 當(dāng)?shù)膱D像是攝影圖像A5 (步驟S17的是)，因此幀合成電路62將攝影圖像 A5的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn) 行合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"5"小于 圖像合成張數(shù)"7"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"5"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 A5、 A6的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像B3的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像B3的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"6"小于 圖像合成張數(shù)"7"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"6"相 當(dāng)?shù)膱D像是攝影圖像A6 (步驟S17的是)，因此幀合成電路62將攝影圖像 A6的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn) 行合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。另夕卜，合成圖像數(shù)據(jù)OUT 的圖像成為圖7的合成圖像C。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"7"不小 于圖像合成張數(shù)"7"(步驟S23、步驟S24的否)。幀合成電路62使合成 圖像C的合成圖像數(shù)據(jù)OUT除以圖像合成張數(shù)"7"，進(jìn)行合成圖像數(shù)據(jù) OUT的更新(步驟S25)。另外，合成圖像數(shù)據(jù)OUT的圖像成為圖7的合 成圖像D。
在該例子中，合成圖像成為與靜止圖像等價(jià)的圖像，該靜止圖像為， 在圖像合成區(qū)間內(nèi)沒有時(shí)間排除、且沒有重復(fù)期間，使圖像合成區(qū)間的時(shí) 間寬度為快門開放期間。
圖8是表示連拍間隔的時(shí)間寬度Ta為曝光區(qū)間的時(shí)間寬度Tb的整數(shù) 倍時(shí)的、攝像裝置1進(jìn)行的圖像合成處理的其他例子的圖。其中，連拍間隔的時(shí)間寬度Ta為曝光區(qū)間的時(shí)間寬度Tb的3倍(Ta=3Tb)，圖像合成 區(qū)間如圖8所示。另外，在該例子中，無(wú)攝影區(qū)間的時(shí)間寬度為曝光區(qū)間 的時(shí)間寬度的2倍(2Tb=Tc)。
CPU51對(duì)幀合成電路62進(jìn)行圖像合成區(qū)間的開始位置與結(jié)束位置的 設(shè)定(步驟Sll、 S12)。幀插補(bǔ)電路61計(jì)算用于插補(bǔ)1個(gè)無(wú)攝影區(qū)間的插 補(bǔ)圖像的插補(bǔ)張數(shù)N，此處N-2 (步驟S13)。并且，幀合成電路62計(jì)算
進(jìn)行圖像合成的攝影圖像以及插補(bǔ)圖像的合計(jì)張數(shù)(合成圖像張數(shù))NT， 此處NT:8(步驟S14)。幀合成電路62對(duì)循環(huán)變數(shù)i以及合成圖像數(shù)據(jù)OUT 進(jìn)行初始化(步驟S15、 S16)。
與循環(huán)變數(shù)的值"0"相當(dāng)?shù)膱D像為攝影圖像E2 (步驟S17的是)，因 此幀合成電路62將攝影圖像E2的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與 合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"1"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"1"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 E2、 E3的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像F1的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像Fl的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"2"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"2"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 E2、 E3的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像F2的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像F2的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"3"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"3"相 當(dāng)?shù)膱D像是攝影圖像E3 (步驟S17的是)，因此幀合成電路62將攝影圖像 E3的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行
19合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"4"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"4"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 E3、 E4的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像F3的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像F3的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"5"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"5"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 E3、 E4的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像F4的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像F4的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"6"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"6"相 當(dāng)?shù)膱D像是攝影圖像E4 (步驟S17的是)，因此幀合成電路62將攝影圖像 E4的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行 合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"7"小于 圖像合成張數(shù)"8"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"7"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 E4、 E5的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像F5的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像F5的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。另外，合成圖像數(shù)據(jù)OUT的圖像成為圖8的合成圖像G。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"8"不小 于圖像合成張數(shù)"8"(步驟S23、步驟S24的否)。幀合成電路62使合成 圖像G的合成圖像數(shù)據(jù)OUT除以圖像合成張數(shù)"8"，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S25)。另外，合成圖像數(shù)據(jù)OUT的圖像成為圖8的合 成圖像H。
在該例子中，合成圖像成為與靜止圖像等價(jià)的圖像，該靜止圖像為， 在圖像合成區(qū)間內(nèi)沒有時(shí)間排除、且沒有重復(fù)期間，使圖像合成區(qū)間的時(shí) 間寬度為快門開放期間。
圖9是表示連拍間隔的時(shí)間寬度Ta不是曝光區(qū)間的時(shí)間寬度Tb的整 數(shù)倍時(shí)的、攝像裝置1進(jìn)行的圖像合成處理的例子的圖。其中，連拍間隔 的時(shí)間寬度Ta比曝光區(qū)間的時(shí)間寬度Tb的3倍大、4倍小(3Tb〈Ta〈4Tb)， 圖像合成區(qū)間如圖9所示。另外，在該例子中，無(wú)攝影區(qū)間的時(shí)間寬度Tc 比曝光區(qū)間的時(shí)間寬度的2倍大、3倍小(2Tb<Tc<3Tb)。
CPU51對(duì)幀合成電路62進(jìn)行圖像合成區(qū)間的開始位置與結(jié)束位置的 設(shè)定(步驟Sll、 S12)。幀插補(bǔ)電路61計(jì)算用于插補(bǔ)1個(gè)無(wú)攝影區(qū)間的插 補(bǔ)圖像的插補(bǔ)張數(shù)N，此處N-3 (步驟S13)。并且，幀合成電路62計(jì)算 進(jìn)行圖像合成的攝影圖像以及插補(bǔ)圖像的合計(jì)張數(shù)(合成圖像張數(shù))NT， 此處NT=9(步驟S14)。幀合成電路62對(duì)循環(huán)變數(shù)i以及合成圖像數(shù)據(jù)OUT 進(jìn)行初始化(步驟S15、 S16)。
與循環(huán)變數(shù)的值"0"相當(dāng)?shù)膱D像為攝影圖像I2 (步驟S17的是)，因 此幀合成電路62將攝影圖像12的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合 成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"1"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"1"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 12、 13的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像J1的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像Jl的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"2"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"2"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像12、 13的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像J2的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像J2的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"3"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"3"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像
12、 13的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像J3的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像J3的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"4"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"4"相 當(dāng)?shù)膱D像是攝影圖像I3 (步驟S17的是)，因此幀合成電路62將攝影圖像 13的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行 合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"5"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"5"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像
13、 14的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像J4的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像J4的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"6"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"6"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 13、 14的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像J5的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像J5的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"7"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"7"相 當(dāng)?shù)膱D像不是攝影圖像(步驟S17的否)，因此幀插補(bǔ)電路61從攝影圖像 13、 14的攝影圖像數(shù)據(jù)生成插補(bǔ)圖像J6的插補(bǔ)圖像數(shù)據(jù)(步驟S19、 20)。 并且，幀合成電路62將插補(bǔ)圖像J6的插補(bǔ)圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I 而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行合成圖像數(shù)據(jù)OUT的更新(步驟S21、 S22)。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"8"小于 圖像合成張數(shù)"9"(步驟S23、步驟S24的是)。與循環(huán)變數(shù)的值"8"相 當(dāng)?shù)膱D像是攝影圖像I4 (步驟S17的是)，因此幀合成電路62將攝影圖像 14的攝影圖像數(shù)據(jù)作為加法圖像數(shù)據(jù)I而與合成圖像數(shù)據(jù)OUT相加，進(jìn)行 合成圖像數(shù)據(jù)OUT的更新(步驟S18、 S22)。另外，合成圖像數(shù)據(jù)OUT 的圖像成為圖9的合成圖像K。
接著，幀合成電路62判斷為加了 1之后的循環(huán)變數(shù)i的值"9"不小 于圖像合成張數(shù)"9 "(步驟S23、步驟S24的否)。幀合成電路62使合成 圖像K的合成圖像數(shù)據(jù)OUT除以圖像合成張數(shù)"9"，進(jìn)行合成圖像數(shù)據(jù) OUT的更新(步驟S25)。另外，合成圖像數(shù)據(jù)OUT的圖像成為圖9的合 成圖像L。
在該例子中，合成圖像成為與靜止圖像非常相似的圖像，該靜止圖像 為，攝影圖像與插補(bǔ)圖像一部分重復(fù)、插補(bǔ)圖像彼此也一部分重復(fù)，但是 在圖像合成區(qū)間內(nèi)沒有時(shí)間排除，使圖像合成區(qū)間的時(shí)間寬度為快門開放 期間。
《第2實(shí)施方式》
以下，參照附圖對(duì)本發(fā)明第2實(shí)施方式進(jìn)行說(shuō)明。其中，本實(shí)施方式 的攝像裝置la是對(duì)第1實(shí)施方式的攝像裝置1附加了如下功能進(jìn)行連拍 間隔A t以及快門開放期間At'的調(diào)整，以使拍間隔A t成為快門開放期間A t，的正整數(shù)倍。另夕卜，在攝像裝置la中，除了拍間隔At為快門開放期間A t'的1倍的情況，無(wú)攝影區(qū)間的時(shí)間寬度為曝光區(qū)間的時(shí)間寬度的正整數(shù) 倍。
攝像裝置la進(jìn)行與攝像裝置1進(jìn)行的圖像合成處理(參照?qǐng)D5)實(shí)質(zhì)上相同的圖像合成處理，從攝影圖像生成合成圖像。 (攝像裝置的功能構(gòu)成)
參照?qǐng)D10說(shuō)明本實(shí)施方式的攝像裝置la的功能構(gòu)成。圖10是本實(shí)施 方式的攝像裝置la的功能框圖。另外，在本實(shí)施方式中，將與第一實(shí)施方 式的構(gòu)成要素實(shí)質(zhì)上相同的構(gòu)成要素賦予相同的符號(hào)，其說(shuō)明適用本實(shí)施 方式所以省略對(duì)其說(shuō)明。
攝像裝置la的CPU51a，進(jìn)行連拍間隔At以及快門開放期間At'的決 定、以使拍間隔At成為快門開放期間At，的正整數(shù)倍，并且進(jìn)行光圈53c 的光圈值的決定。CPU51a進(jìn)行光圈驅(qū)動(dòng)電路56的控制以便成為決定的光 圈值。并且，CPU51a進(jìn)行攝影控制電路58的控制，以便以決定的連拍間 隔At以及快門開放期間At'進(jìn)行連拍。 (攝像裝置的動(dòng)作)
以下，參照?qǐng)D11說(shuō)明圖10的攝像裝置la進(jìn)行的連拍處理。圖11是 表示圖10的攝像裝置la進(jìn)行的連拍處理的流程的流程圖。其中，CPU51a 從存儲(chǔ)器52讀出記述有圖11所示的動(dòng)作流程的程序，并執(zhí)行讀出的程序。 另夕卜，用戶指定連拍間隔At， CPU51a進(jìn)行快門開放期間At'的決定，以使 所指定的連拍間隔A t成為快門開放期間A t'的正整數(shù)倍。
當(dāng)通過(guò)用戶操作而連拍模式開關(guān)3被活動(dòng)到連拍模式的位置上時(shí)， CPU51a將攝像裝置la的攝影模式設(shè)定為連拍模式(步驟S51)。 CPU51a 將用于從用戶接受的連拍間隔At的、例如圖12表示1個(gè)例子的GUI顯示 在液晶監(jiān)視器9上。用戶利用GUI的輸入?yún)^(qū)域9a而進(jìn)行連拍間隔At的指 定，CPU51a將由用戶指定的連拍間隔At設(shè)定到攝影控制電路58 (步驟 S52)。
CPU51 a根據(jù)當(dāng)前的光量確定允許的快門開放期間，并求得由用戶指定 的連拍間隔At成為快門開放期間At，的正整數(shù)倍那樣的、確定的快門開放 期間范圍內(nèi)的快門開放期間At'，將求得的快門開放期間At'設(shè)定到攝影控 制電路58中(步驟S53)。 CPU51a利用與當(dāng)前的光量相對(duì)應(yīng)的存儲(chǔ)器52 所記錄的快門開放期間與光圈值的關(guān)系，求得與在不知S53所求得的快門 開放期間At，相對(duì)應(yīng)的光圈值，根據(jù)求得的光圈值進(jìn)行光圈驅(qū)動(dòng)電路56的 控制，由此進(jìn)行光圈53c的調(diào)節(jié)(步驟S54)。CPU51a判斷是否進(jìn)行了攝影按鈕2的按下(步驟S55)，在進(jìn)行攝影 按鈕2的按下之前(S55:否)進(jìn)行步驟S55的處理。當(dāng)進(jìn)行了攝影按鈕2 的按下時(shí)(S55:是)，在進(jìn)行攝影按鈕2的按下的期間(S56:否)，由CPU51a 控制的攝影控制電路58進(jìn)行攝像元件57的控制，以使攝影元件57根據(jù)連 拍間隔At以及快門開放期間At'反復(fù)進(jìn)行電荷的蓄積以及與蓄積的電荷相 對(duì)應(yīng)的模擬值的輸出。由此，攝像元件57根據(jù)連拍間隔At以及快門開放 期間At'反復(fù)進(jìn)行電荷的蓄積以及與蓄積的電荷相對(duì)應(yīng)的模擬值的輸出。從 攝像元件57輸出的模擬值通過(guò)前端部59轉(zhuǎn)換為數(shù)字?jǐn)?shù)據(jù)，從前端部59輸 出的數(shù)字?jǐn)?shù)據(jù)通過(guò)DSP60而轉(zhuǎn)換為在色空間表現(xiàn)的攝影圖像數(shù)據(jù)，攝影圖 像數(shù)據(jù)被記錄到存儲(chǔ)器52中(步驟S57)。當(dāng)攝影按鈕2的按下結(jié)束時(shí)(S56: 是)，攝像裝置la結(jié)束連拍處理。另外，在圖ll的動(dòng)作流程中，在攝影按 鈕2被按下的期間迸行連拍處理，但是在存儲(chǔ)器52成為沒有空間的情況下 也可以結(jié)束連拍處理。
但是，在實(shí)施方式中，幀插補(bǔ)電路61以及幀合成電路62利用如上所 述那樣得到的多張攝影圖像進(jìn)行合成圖像處理(參照?qǐng)D5)。在本實(shí)施方式 中，沒有無(wú)攝影區(qū)間、或者無(wú)攝影區(qū)間的時(shí)間寬度為曝光區(qū)間的時(shí)間寬度 的整數(shù)倍，因此能夠得到在圖像合成區(qū)間沒有時(shí)間排除、且沒有重復(fù)期間 的合成圖像。 《補(bǔ)充》
本發(fā)明不限于在上述實(shí)施方式中說(shuō)明的內(nèi)容，在為了實(shí)現(xiàn)本發(fā)明的目 的以及與其關(guān)聯(lián)或者附隨的目的的所有方式中都能夠?qū)嵤缫部梢匀?下那樣-
(1) 在上述各實(shí)施方式中，說(shuō)明了幀插補(bǔ)電路61以及幀合成電路62 處于攝像裝置1、 la內(nèi)的情況，但是不限于此，也可以使攝像裝置以外的 其他裝置具備幀插補(bǔ)電路16以及幀合成電路17。另外，例如將其他裝置與 攝像裝置有線連接，其他裝置從攝像裝置入手所連拍的多張攝影圖像的攝 影圖像數(shù)據(jù)。
(2) 在上述各實(shí)施方式中，幀插補(bǔ)電路61在設(shè)連拍間隔為At、快門 開放期間為At'時(shí)，生成N (N為正整數(shù))張插補(bǔ)圖像，該N滿足(N-l) X At，<At-At，^NX At，，但是不限于此，例如也可以生成如下的張數(shù)的插補(bǔ)圖像。
在上述各實(shí)施方式中，在無(wú)攝影區(qū)間的時(shí)間寬度為攝影區(qū)間的時(shí)間寬
度的N (N為正整數(shù))倍時(shí)，幀插補(bǔ)電路61也可以生成比N多的張數(shù)的插 補(bǔ)圖像，并且也可以生成比N少的張數(shù)的插補(bǔ)圖像。
在上述第1實(shí)施方式中，在無(wú)攝影區(qū)間的時(shí)間寬度不是攝影區(qū)間的時(shí) 間寬度的整數(shù)倍時(shí)，幀插補(bǔ)電路61也可以生成滿足NX At'<At-At'的N (N為正整數(shù))張的插補(bǔ)圖像，在該情況下能夠得到圖像(攝影圖像、插 補(bǔ)圖像)彼此不重復(fù)的合成圖像。尤其是，如果幀插補(bǔ)電路61生成滿足N X △ t'< △ t- △ t'的最大N (N為正整數(shù))張的插補(bǔ)圖像，則能夠進(jìn)行圖像(攝 影圖像、插補(bǔ)圖像)彼此不重復(fù)、沒有時(shí)間排除的合成圖像的生成。
并且，在上述第1實(shí)施方式中，在無(wú)攝影區(qū)間的時(shí)間寬度不是攝影區(qū) 間的時(shí)間寬度的整數(shù)倍時(shí)，幀插補(bǔ)電路61也可以生成滿足At-At'〈 (N-l) XAt'的N (N為正整數(shù))張的插補(bǔ)圖像。
(3) 在上述第1實(shí)施方式中說(shuō)明的插補(bǔ)圖像的生成中，在無(wú)攝影區(qū)間 的時(shí)間寬度不是攝影區(qū)間的時(shí)間寬度的整數(shù)倍時(shí)，也可以生成插補(bǔ)圖像以 使圖像(攝影圖像、插補(bǔ)圖像)彼此重復(fù)部分的期間相互相等，也可以生 成插補(bǔ)圖像以使其相互不相等。
(4) 在上述第1實(shí)施方式中說(shuō)明的插補(bǔ)圖像的生成中，利用2張攝影 圖像來(lái)生成插補(bǔ)圖像，但是不限于此，例如也可以利用3張以上的攝影圖 像生成插補(bǔ)圖像。并且，也可以從圖9的插補(bǔ)圖像Jl和攝影圖像I3生成插 補(bǔ)圖像J2等、從插補(bǔ)圖像和攝影圖像生成插補(bǔ)圖像，也可以從圖8的插補(bǔ) 圖像Jl和插補(bǔ)圖像J3生成插補(bǔ)圖像J2等、從插補(bǔ)圖像和插補(bǔ)圖像生成插 補(bǔ)圖像。
(5) 在上述第2實(shí)施方式中，用戶指定連拍間隔At，并計(jì)算連拍間 隔At成為快門開放期間At'的正整數(shù)倍那樣的快門開放期間At'，由此使連 拍間隔At成為快門開放期間At'的正整數(shù)倍。但是，不限于此，例如也可 以是如下的情況。用戶計(jì)算與調(diào)節(jié)的光圈值相對(duì)應(yīng)的快門開放期間At'、或 者用戶指定快門開放期間At'，并計(jì)算連拍間隔At成為快門開放期間At' 的正整數(shù)倍那樣的連拍間隔A t，由此使連拍間隔A t成為快門開放期間A t' 的正整數(shù)倍。(6) 在上述第1實(shí)施方式中，也可以將記述了參照?qǐng)D5的動(dòng)作流程進(jìn) 行了說(shuō)明的圖像合成處理的程序存儲(chǔ)到存儲(chǔ)器中，例如CPU讀出并執(zhí)行存 儲(chǔ)器所記錄的程序，CPU作為執(zhí)行幀插補(bǔ)電路61以及幀合成電路62的處 理等的功能部動(dòng)作。并且，也可以將該程序記錄到記錄媒體中并進(jìn)行發(fā)布。
在上述第2實(shí)施方式中，也可以將記述了參照?qǐng)D11的動(dòng)作流程進(jìn)行了 說(shuō)明的攝像處理的程序記錄到記錄媒體中，并進(jìn)行發(fā)布。并且，圖ll的動(dòng) 作流程所表示的處理內(nèi)容也可以由CPU51a以外的器件執(zhí)行。
另外，在變形例中也同樣。
(7) 在上述各實(shí)施方式等的各構(gòu)成，典型地也可以作為集成電路、即 LSI (Large Scale Integration)來(lái)實(shí)現(xiàn)。這些也可以個(gè)別地單芯片化，也可 以單芯片化為包括各實(shí)施方式全部構(gòu)成或者一部分構(gòu)成。
此處，成為L(zhǎng)SI，但是根據(jù)集成度的不同有時(shí)也稱為IC (Integrated Circuit)、系統(tǒng)LSI、超LSI、超級(jí)LSI。
并且，集成電路化的手法不限于LSI，也可以通過(guò)專用電路或通用處 理器來(lái)實(shí)現(xiàn)。在LSI制造后，也可以利用能夠編程的FPGA (Field Programmable Gate Array)、或能夠再構(gòu)成LSI內(nèi)部的電路單元的連接或設(shè) 定的可重構(gòu)的硅柔性處理器(silicon flexible processor)。
并且，如果由于半導(dǎo)體技術(shù)的進(jìn)步或者派生的其他技術(shù)而置換LSI的 集成電路化的技術(shù)出現(xiàn)，則當(dāng)然也可以使用該技術(shù)進(jìn)行功能塊的集成化。 生物技術(shù)的適應(yīng)等也有可能。
產(chǎn)業(yè)可利用性
本發(fā)明在從連拍的攝像圖像生成曝光時(shí)間比實(shí)際的曝光時(shí)間長(zhǎng)的合成 圖像的情況下是有用的。
權(quán)利要求
1、一種圖像合成裝置，利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝影圖像來(lái)生成規(guī)定時(shí)間區(qū)間的合成圖像，其特征在于，具備插補(bǔ)部，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和合成部，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)部生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
2、 如權(quán)利要求l所述的圖像合成裝置，其特征在于，上述插補(bǔ)部以上述無(wú)攝影區(qū)間全部被插補(bǔ)的方式生成1張以上的插補(bǔ)圖像。
3、 如權(quán)利要求2所述的圖像合成裝置，其特征在于，在上述無(wú)攝影區(qū)間的時(shí)間寬度為上述曝光區(qū)間的時(shí)間寬度的N倍時(shí)，上述插補(bǔ)部生成N張的插補(bǔ)圖像；N為正整數(shù)。
4、 如權(quán)利要求2所述的圖像合成裝置，其特征在于，在上述無(wú)攝影區(qū)間的時(shí)間寬度不是上述曝光區(qū)間的時(shí)間寬度的正整數(shù)倍時(shí)，上述插補(bǔ)部求得上述曝光區(qū)間的時(shí)間寬度的(N-l)倍比上述無(wú)攝影區(qū)間的時(shí)間寬度小、且上述曝光區(qū)間的時(shí)間寬度的N倍比上述無(wú)攝影區(qū)間的時(shí)間寬度大那樣的正整數(shù)N，并生產(chǎn)N張的插補(bǔ)圖像。
5、 如權(quán)利要求l所述的圖像合成裝置，其特征在于，上述插補(bǔ)部，通過(guò)根據(jù)在上述雙方的曝光區(qū)間的攝影圖像間活動(dòng)的部分的各上述攝影圖像各自中的位置、以及對(duì)上述無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像的張數(shù)，來(lái)決定上述插補(bǔ)圖像的該活動(dòng)部分的位置，由此進(jìn)行上述插補(bǔ)圖像的生成。
6、 一種圖像合成方法，利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝影圖像來(lái)生成涉及規(guī)定時(shí)間區(qū)間的合成圖像，其特征在于，具備插補(bǔ)步驟，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和合成步驟，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)步驟生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
7、 一種圖像合成程序，使計(jì)算機(jī)作為圖像合成裝置，該圖像合成裝置利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝影圖像來(lái)生成涉及規(guī)定時(shí)間區(qū)間的合成圖像，其特征在于，使該計(jì)算機(jī)執(zhí)行插補(bǔ)步驟，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和合成步驟，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)步驟生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
8、 一種集成電路，利用以規(guī)定時(shí)間間隔連續(xù)攝影的攝影圖像來(lái)生成規(guī)定時(shí)間區(qū)間的合成圖像，其特征在于，具備插補(bǔ)電路，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；和合成電路，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)電路生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
9、 一種攝像系統(tǒng)，其特征在于，具備攝像部；控制部，控制上述攝像部的連續(xù)攝影，以使進(jìn)行連續(xù)攝影的時(shí)間間隔成為進(jìn)行曝光的曝光區(qū)間的時(shí)間寬度的正整數(shù)倍；插補(bǔ)部，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；以及合成部，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)部生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
10、 一種攝像方法，其特征在于，具備控制步驟，控制攝像部的連續(xù)攝影，以使進(jìn)行連續(xù)攝影的時(shí)間間隔成為進(jìn)行曝光的曝光區(qū)間的時(shí)間寬度的正整數(shù)倍；插補(bǔ)步驟，根據(jù)與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方的曝光區(qū)間的攝影圖像，生成對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像；以及合成步驟，根據(jù)在規(guī)定時(shí)間區(qū)間中所攝影的攝影圖像和由該時(shí)間區(qū)間的上述插補(bǔ)步驟生成的插補(bǔ)圖像，以攝影圖像與插補(bǔ)圖像的相同位置的像素重疊的方式，生成涉及該規(guī)定時(shí)間區(qū)間的合成圖像。
全文摘要
幀插補(bǔ)電路(61)，基于與無(wú)攝影區(qū)間在時(shí)間上鄰接的雙方曝光區(qū)間的攝影圖像，來(lái)生成用于對(duì)進(jìn)行曝光的曝光區(qū)間與下一曝光區(qū)間之間的該無(wú)攝影區(qū)間進(jìn)行插補(bǔ)的插補(bǔ)圖像。并且，幀合成電路(62)，基于在規(guī)定時(shí)間區(qū)間所攝影的攝影圖像和該時(shí)間區(qū)間的由幀插補(bǔ)電路(61)生成的插補(bǔ)圖像，生成該規(guī)定時(shí)間區(qū)間的合成圖像。
文檔編號(hào)H04N5/225GK101658028SQ200880011010
公開日2010年2月24日 申請(qǐng)日期2008年12月26日 優(yōu)先權(quán)日2008年2月4日
發(fā)明者手塚忠則, 淵上郁雄 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社