專利名稱：信息處理系統(tǒng)、信息處理裝置、方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種信息處理系統(tǒng)、信息處理裝置、方法和程序，尤其涉及一種可以拍攝預(yù)定區(qū)域的圖像、并且可以拍攝該預(yù)定區(qū)域中的活動(dòng)體的圖像的信息處理系統(tǒng)、信息處理裝置、方法和程序。
背景技術(shù)：
近年來(lái)，為了確保安全，例如在有自動(dòng)柜員機(jī)(automaticteller machine，ATM)的銀行、停車區(qū)和住宅等中經(jīng)常安裝多地點(diǎn)照相機(jī)監(jiān)控系統(tǒng)(多照相機(jī)系統(tǒng))。
如上所述的這種多照相機(jī)系統(tǒng)包括多個(gè)視頻照相機(jī)和用于記錄由該視頻照相機(jī)獲取的圖像的記錄裝置。已經(jīng)提出了利用如上所述的這種多照相機(jī)系統(tǒng)的裝置，其中，如例如在日本特開(kāi)平10-108163號(hào)公報(bào)中所公開(kāi)的，按比例縮小多個(gè)圖像，并將其合成為一幀圖像。還提出了一種設(shè)備，其中，如例如在日本特開(kāi)2000-243062號(hào)公報(bào)中所公開(kāi)的，收集來(lái)自多個(gè)視頻照相機(jī)圖像，并將其記錄在記錄介質(zhì)例如錄像帶上。
圖1示出相關(guān)技術(shù)的多照相機(jī)系統(tǒng)的例子的外觀圖。
參考圖1，所示的多照相機(jī)系統(tǒng)1包括四個(gè)照相機(jī)11-1到11-4。照相機(jī)11-1到11-4是拍攝方向固定的固定照相機(jī)或者拍攝方向可變的全方位移動(dòng)變焦(pan tilt zoom)照相機(jī)。例如在停車區(qū)，照相機(jī)11-1到11-4監(jiān)控直徑40m的圓形廣范圍的區(qū)域21。
圖2示出圖1中所示的多照相機(jī)系統(tǒng)1的結(jié)構(gòu)的例子。
參考圖2，每個(gè)照相機(jī)11-1到11-4拍攝圖像。照相機(jī)11-1到11-4被分別連接到記錄裝置41，并將通過(guò)圖像拍攝所獲得的圖像的模擬信號(hào)提供給記錄裝置41。記錄裝置41記錄圖像數(shù)據(jù)，該圖像數(shù)據(jù)是通過(guò)從照相機(jī)11-1到11-4提供的圖像的模擬信號(hào)的A/D轉(zhuǎn)換而獲得的圖像的數(shù)字信號(hào)。此外，記錄裝置41被連接到顯示裝置42，并使顯示裝置42顯示與該圖像數(shù)據(jù)相對(duì)應(yīng)的圖像。
然而，在圖2中的多照相機(jī)系統(tǒng)1中，可被連接到記錄裝置41的照相機(jī)僅限于四個(gè)照相機(jī)11-1到11-4，因此多照相機(jī)系統(tǒng)1的可擴(kuò)展性差。
圖3示出圖1中的多照相機(jī)系統(tǒng)1的結(jié)構(gòu)的另一例子。
參考圖3，通過(guò)網(wǎng)絡(luò)51將照相機(jī)11-1到11-4連接到個(gè)人計(jì)算機(jī)(PC)52。每個(gè)照相機(jī)11-1到11-4拍攝圖像，并根據(jù)IP(Internet Protocol，網(wǎng)絡(luò)協(xié)議)通過(guò)網(wǎng)絡(luò)51將通過(guò)圖像拍攝所獲得的圖像數(shù)據(jù)傳輸給PC 52。PC 52記錄該圖像數(shù)據(jù)并顯示與該圖像數(shù)據(jù)相對(duì)應(yīng)的圖像。
現(xiàn)在，參考圖4對(duì)將被記錄在圖2中所示的記錄裝置41或圖3中所示的PC 52中的圖像數(shù)據(jù)進(jìn)行說(shuō)明。
從圖4可以看出，記錄裝置41或PC 52記錄由照相機(jī)11-1到11-4所獲得的所有圖像數(shù)據(jù)。因此，在多照相機(jī)系統(tǒng)1被用于監(jiān)控的情況下，即使根據(jù)預(yù)定的壓縮方法對(duì)圖像數(shù)據(jù)進(jìn)行壓縮，將被記錄在記錄裝置41或PC 52中的圖像數(shù)據(jù)量仍非常大。
例如，在24小時(shí)記錄根據(jù)JPEG(Joint PhotographicExperts Group，聯(lián)合圖像專家組)系統(tǒng)在預(yù)定的條件下(50KB/幀，10幀/秒)所壓縮的圖像數(shù)據(jù)的情況下，在由四個(gè)照相機(jī)11-1到11-4形成的多照相機(jī)系統(tǒng)1中，將被記錄在記錄裝置41或PC 52中的圖像數(shù)據(jù)量約為164GB。此外，在由八個(gè)照相機(jī)形成多照相機(jī)系統(tǒng)1的情況下，圖像數(shù)據(jù)量約為328GB，在由十六個(gè)照相機(jī)形成多照相機(jī)系統(tǒng)1的情況下，圖像數(shù)據(jù)量約為656GB。
這樣，在多照相機(jī)系統(tǒng)1中，為了監(jiān)控區(qū)域21，需要四個(gè)照相機(jī)11-1到11-4。因此，照相機(jī)的安裝很麻煩，且多照相機(jī)系統(tǒng)1的成本高。此外，在獲取高清晰度的圖像的情況下，必須在高攝像倍率(magnification)的條件下進(jìn)行圖像拍攝，因此，需要更多數(shù)量的照相機(jī)11-1到11-4。此外，在不增加照相機(jī)11-1到11-4的數(shù)量而想要獲取高清晰度的圖像的情況下，難以獲取關(guān)于整個(gè)區(qū)域21的高清晰度圖像。因此，通常需要操作者監(jiān)控正常圖像并指定所期望的區(qū)域，以獲取該區(qū)域的高清晰度的圖像。
因而，有這樣一種監(jiān)控照相機(jī)其可利用單個(gè)照相機(jī)通過(guò)在順序改變攝像方向的同時(shí)順序拍攝對(duì)象的圖像以獲得由多個(gè)單元圖像形成的整個(gè)對(duì)象的全景圖像來(lái)監(jiān)控廣范圍的狀況。
發(fā)明內(nèi)容
然而，利用剛剛所述的監(jiān)控照相機(jī)，為了產(chǎn)生整個(gè)被攝體的圖像，需要獲取形成整個(gè)被攝體的圖像的所有單元圖像，并需要大量時(shí)間以產(chǎn)生整個(gè)被攝體的圖像。因此，難以完全捕獲在短時(shí)間內(nèi)出現(xiàn)在圖像拍攝的范圍內(nèi)的狀況下的任何微小的變化。
特別地，在獲取整個(gè)攝像范圍的圖像之后直到獲取整個(gè)攝像范圍的下一圖像為止，以高速度活動(dòng)的活動(dòng)體(活動(dòng)被攝體)有時(shí)在一段時(shí)間內(nèi)會(huì)移出圖像拍攝的范圍。
此外，實(shí)際上，在監(jiān)控照相機(jī)移動(dòng)到拍攝活動(dòng)體的圖像的位置的時(shí)間段內(nèi)，監(jiān)控照相機(jī)也拍攝圖像。因而，在監(jiān)控照相機(jī)移動(dòng)到其可以拍攝活動(dòng)體的圖像的位置的過(guò)程中所拍攝的圖像的數(shù)量，即在執(zhí)行如水平轉(zhuǎn)動(dòng)、高低俯仰或變焦處理時(shí)所拍攝的圖像的數(shù)量，可能大于在由該監(jiān)控照相機(jī)捕獲該活動(dòng)體時(shí)所拍攝的圖像的數(shù)量。因此，監(jiān)控照相機(jī)存在需要解決的課題，因?yàn)榭赡茉佻F(xiàn)大量不希望觀察的圖像。
期望提供一種信息處理系統(tǒng)、信息處理裝置、方法和程序，其中，可以拍攝預(yù)定區(qū)域的圖像，并且可以準(zhǔn)確地拍攝該預(yù)定區(qū)域中的活動(dòng)體的圖像。
根據(jù)本發(fā)明的實(shí)施例，提供一種信息處理系統(tǒng)，包括區(qū)域圖像拍攝裝置，用于拍攝預(yù)定區(qū)域的圖像；檢測(cè)裝置，用于基于由所述區(qū)域圖像拍攝裝置通過(guò)圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；活動(dòng)體圖像拍攝裝置，用于拍攝由所述檢測(cè)裝置檢測(cè)到的活動(dòng)體的圖像；計(jì)算裝置，用于計(jì)算由所述檢測(cè)裝置檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)裝置，用于存儲(chǔ)由所述計(jì)算裝置所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制裝置，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制所述活動(dòng)體圖像拍攝裝置的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制裝置，用于在由所述第一活動(dòng)體圖像拍攝控制裝置控制所述活動(dòng)體圖像拍攝裝置后的定時(shí)，基于由所述第一活動(dòng)體圖像拍攝控制裝置控制了其圖像拍攝的該特定活動(dòng)體的視角信息，控制所述活動(dòng)體圖像拍攝裝置的圖像拍攝。
在該信息處理系統(tǒng)中，拍攝預(yù)定區(qū)域的圖像，并基于通過(guò)該圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的任何活動(dòng)體。然后，拍攝檢測(cè)到的活動(dòng)體的圖像，并計(jì)算每一檢測(cè)到的活動(dòng)體的視角。此外，存儲(chǔ)所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息，并基于來(lái)自所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制圖像拍攝。然后，在控制該圖像拍攝后的定時(shí)，基于其圖像拍攝被控制的特定活動(dòng)體的視角信息，控制圖像拍攝。
根據(jù)本發(fā)明的另一實(shí)施例，提供一種信息處理裝置，包括檢測(cè)裝置，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算裝置，用于計(jì)算由所述檢測(cè)裝置檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)裝置，用于存儲(chǔ)由所述計(jì)算裝置計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制裝置，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制所述活動(dòng)體圖像拍攝裝置的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制裝置，用于在由所述第一活動(dòng)體圖像拍攝控制裝置控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝。
根據(jù)本發(fā)明的又一實(shí)施例，提供一種信息處理方法，包括以下步驟檢測(cè)步驟，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算步驟，用于計(jì)算通過(guò)該檢測(cè)步驟中的處理檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)步驟，用于存儲(chǔ)通過(guò)該計(jì)算步驟中的處理所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制步驟，用于基于來(lái)自通過(guò)該視角信息存儲(chǔ)步驟中的處理所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制步驟，用于在通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制了其圖像拍攝的該特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
根據(jù)本發(fā)明的再一實(shí)施例，提供一種用于使計(jì)算機(jī)執(zhí)行處理的程序，包括以下步驟檢測(cè)步驟，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算步驟，用于計(jì)算通過(guò)該檢測(cè)步驟中的處理檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)步驟，用于存儲(chǔ)通過(guò)該計(jì)算步驟中的處理所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制步驟，用于基于來(lái)自通過(guò)該視角信息存儲(chǔ)步驟中的處理所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制步驟，用于在通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制活動(dòng)體的圖像拍攝后的定時(shí)，基于通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制其圖像拍攝的該特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
根據(jù)本發(fā)明的又一實(shí)施例，提供一種信息處理系統(tǒng)，包括區(qū)域圖像拍攝部分，用于拍攝預(yù)定區(qū)域的圖像；檢測(cè)部分，用于基于由所述區(qū)域圖像拍攝部分通過(guò)圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；活動(dòng)體圖像拍攝部分，用于拍攝由所述檢測(cè)部分檢測(cè)到的該活動(dòng)體的圖像；計(jì)算部分，用于計(jì)算由所述檢測(cè)部分檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)部分，用于存儲(chǔ)由所述計(jì)算部分所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制部分，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)部分中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，來(lái)控制所述活動(dòng)體圖像拍攝部分的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制部分，用于在由所述第一活動(dòng)體圖像拍攝控制部分控制所述活動(dòng)體圖像拍攝部分后的定時(shí)，基于由所述第一活動(dòng)體圖像拍攝控制部分控制了其圖像拍攝的該特定活動(dòng)體的視角信息，來(lái)控制所述活動(dòng)體圖像拍攝部分的圖像拍攝。
根據(jù)本發(fā)明的又一實(shí)施例，提供一種信息處理裝置，包括檢測(cè)部分，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算部分，用于計(jì)算由所述檢測(cè)部分檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)部分，用于存儲(chǔ)由所述計(jì)算部分所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制部分，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)部分中的活動(dòng)體視角的信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，來(lái)控制所述活動(dòng)體圖像拍攝部分的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制部分，用于在由所述第一活動(dòng)體圖像拍攝控制部分控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
在該信息處理裝置、方法和程序中，基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的任何活動(dòng)體，并且計(jì)算每一檢測(cè)到的活動(dòng)體的視角。此外，存儲(chǔ)所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息，并基于來(lái)自所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝。然后，在控制特定的活動(dòng)體的圖像拍攝后的定時(shí)，基于其圖像拍攝被控制的特定的活動(dòng)體的視角，控制該活動(dòng)體的圖像拍攝。
該信息處理裝置可以是獨(dú)立的裝置和執(zhí)行信息處理的模塊中的任何一個(gè)。
利用該信息處理系統(tǒng)、信息處理裝置、方法和程序，可以準(zhǔn)確地拍攝圖像拍攝區(qū)域中特定的活動(dòng)體的圖像。
通過(guò)下面結(jié)合附圖的說(shuō)明和所附的權(quán)利要求書(shū)，本發(fā)明的上述和其它目的、特征和優(yōu)點(diǎn)將變得很明顯，其中在所有的附圖中，相同的部分或元件用相同的附圖標(biāo)記來(lái)表示。
圖1是示出傳統(tǒng)多照相機(jī)系統(tǒng)的例子的外觀的示意圖；圖2是示出圖1中的多照相機(jī)系統(tǒng)的結(jié)構(gòu)的例子的示意圖；圖3是類似但示出圖1中的多照相機(jī)系統(tǒng)的結(jié)構(gòu)的另一例子的視圖；圖4是示出記錄在圖2中所示的記錄裝置或圖3中所示的PC中的圖像數(shù)據(jù)的略圖；圖5是示出應(yīng)用本發(fā)明的監(jiān)控系統(tǒng)的結(jié)構(gòu)的例子的視圖；圖6是示出圖5中所示的監(jiān)控系統(tǒng)的結(jié)構(gòu)的示意圖；圖7是示出圖6中所示的客戶機(jī)PC的結(jié)構(gòu)的例子的框圖；圖8是示出圖6中所示的客戶機(jī)PC的功能結(jié)構(gòu)的例子的框圖；圖9是示出登記在圖8中所示的活動(dòng)體跟蹤順序數(shù)據(jù)庫(kù)中的活動(dòng)體信息的例子的視圖；圖10是示出由圖8中所示的傳感器圖像獲取模塊執(zhí)行的傳感器圖像獲取處理的流程圖；圖11是示出由圖8中所示的攝像視角計(jì)算模塊執(zhí)行的攝像視角計(jì)算處理的流程圖；圖12是示出由圖8中所示的活動(dòng)體檢測(cè)模塊執(zhí)行的活動(dòng)體檢測(cè)處理的流程圖；圖13是示出由圖8中所示的跟蹤對(duì)象全方位移動(dòng)變焦模塊執(zhí)行的跟蹤對(duì)象全方位移動(dòng)變焦處理的流程圖；圖14是示出由圖8中所示的附加跟蹤對(duì)象全方位移動(dòng)模塊執(zhí)行的附加跟蹤對(duì)象全方位移動(dòng)處理的流程圖；圖15是示出由圖8中所示的變焦圖像獲取模塊執(zhí)行的變焦圖像獲取處理的流程圖；圖16是示出由圖8中所示的結(jié)果顯示模塊執(zhí)行的結(jié)果顯示處理的流程圖；圖17是示出由圖5的監(jiān)控系統(tǒng)執(zhí)行的一系列處理的流程圖；以及圖18和19是示出圖5中所示的監(jiān)控系統(tǒng)的結(jié)構(gòu)的不同的例子的示意圖。
具體實(shí)施例方式
在詳細(xì)說(shuō)明本發(fā)明的優(yōu)選實(shí)施例之前，對(duì)在所附權(quán)利要求書(shū)中敘述的幾個(gè)特征與下面說(shuō)明的優(yōu)選實(shí)施例的特定要素之間的對(duì)應(yīng)關(guān)系進(jìn)行說(shuō)明。然而，該說(shuō)明僅用于確認(rèn)在本發(fā)明的實(shí)施例的說(shuō)明中公開(kāi)了支持如在權(quán)利要求書(shū)中所敘述的本發(fā)明的特定要素。因此，即使一些在實(shí)施例的說(shuō)明中敘述的特定要素在以下說(shuō)明中沒(méi)有被敘述為其中一個(gè)特征，這并不意味著該特定要素不與特征相對(duì)應(yīng)。相反，即使一些特定要素被敘述為與其中一個(gè)特征相對(duì)應(yīng)的要素，這也并不意味著該要素不與除該要素以外的任何其它特征相對(duì)應(yīng)。
此外，以下說(shuō)明不意味著與本發(fā)明的實(shí)施例中所述的特定要素相對(duì)應(yīng)的本發(fā)明都在權(quán)利要求書(shū)中進(jìn)行了說(shuō)明。換句話說(shuō)，以下說(shuō)明不否認(rèn)存在一種發(fā)明，其對(duì)應(yīng)于在本發(fā)明的實(shí)施例的說(shuō)明中所述的特定要素，但是沒(méi)有在權(quán)利要求書(shū)中進(jìn)行敘述，即，該說(shuō)明不否認(rèn)存在一種發(fā)明，其可以以分案專利申請(qǐng)申請(qǐng)專利或可作為對(duì)權(quán)利要求書(shū)的隨后修改的結(jié)果被附加包括在本專利申請(qǐng)中。
根據(jù)本發(fā)明的信息處理系統(tǒng)包括區(qū)域圖像拍攝裝置(例如，圖8中所示的傳感器照相機(jī)121)，用于拍攝預(yù)定區(qū)域的圖像；檢測(cè)裝置(例如，圖8中所示的活動(dòng)體檢測(cè)模塊303)，用于基于由區(qū)域圖像拍攝裝置通過(guò)圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的任何活動(dòng)體；活動(dòng)體圖像拍攝裝置，用于拍攝通過(guò)該檢測(cè)裝置檢測(cè)到的任何活動(dòng)體的圖像；計(jì)算裝置(例如，圖8中所示的計(jì)算部分302a)，用于計(jì)算通過(guò)檢測(cè)裝置檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)裝置(例如，圖8中所示的活動(dòng)體跟蹤順序管理DB 304)，用于存儲(chǔ)通過(guò)該計(jì)算裝置所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制裝置(例如，圖8中所示的跟蹤對(duì)象全方位移動(dòng)變焦模塊305)，用于基于來(lái)自存儲(chǔ)在該視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，來(lái)控制活動(dòng)體圖像拍攝裝置的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制裝置(例如，圖8中所示的附加跟蹤對(duì)象全方位移動(dòng)模塊306)，用于在通過(guò)第一活動(dòng)體圖像拍攝控制裝置控制活動(dòng)體圖像拍攝裝置之后的定時(shí)，基于由第一活動(dòng)體圖像拍攝控制裝置控制了其圖像拍攝的特定活動(dòng)體的視角信息，來(lái)控制活動(dòng)體圖像拍攝裝置的圖像拍攝。
根據(jù)本發(fā)明的信息處理裝置包括檢測(cè)裝置(例如，圖8中所示的活動(dòng)體檢測(cè)模塊303)，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的任何活動(dòng)體；計(jì)算裝置(例如，圖8中所示的計(jì)算部分302a)，用于計(jì)算通過(guò)該檢測(cè)裝置檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)裝置(例如，圖8中所示的活動(dòng)體跟蹤順序管理DB 304)，用于存儲(chǔ)通過(guò)該計(jì)算裝置所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制裝置(例如，圖8中所示的跟蹤對(duì)象全方位移動(dòng)變焦模塊305)，用于基于來(lái)自存儲(chǔ)在視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，來(lái)控制活動(dòng)體圖像拍攝裝置的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制裝置(例如，圖8中所示的附加跟蹤對(duì)象全方位移動(dòng)模塊306)，用于基于在通過(guò)第一活動(dòng)體圖像拍攝控制裝置控制了活動(dòng)體的圖像拍攝之后的定時(shí)的特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
該信息處理裝置還可以包括優(yōu)先級(jí)設(shè)置裝置(例如，圖8中所示的等級(jí)確定部分302b)，用于基于預(yù)定的條件，設(shè)置存儲(chǔ)在視角信息存儲(chǔ)裝置中的活動(dòng)體各自的視角信息的優(yōu)先級(jí)；第一活動(dòng)體圖像拍攝控制裝置，可操作其按照通過(guò)優(yōu)先級(jí)設(shè)置裝置所設(shè)置的優(yōu)先程度的遞減順序，從存儲(chǔ)在視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)，選擇特定的活動(dòng)體，并基于所選擇的活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝。
根據(jù)本發(fā)明的信息處理方法包括檢測(cè)步驟(例如，圖12的流程圖的步驟S41中的處理)，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的任何活動(dòng)體；計(jì)算步驟(例如，圖11的流程圖中的步驟S23的處理)，用于計(jì)算通過(guò)檢測(cè)步驟中的處理檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)步驟(例如，圖11的流程圖中的步驟S25的處理)，用于存儲(chǔ)通過(guò)計(jì)算步驟中的處理所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制步驟(例如，圖13的流程圖中的步驟S64和S68的處理)，用于基于來(lái)自通過(guò)視角信息存儲(chǔ)步驟中的處理所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制步驟(例如，圖14的流程圖中的步驟S84的處理)，用于在通過(guò)第一活動(dòng)體圖像拍攝控制步驟中的處理控制特定的活動(dòng)體的圖像拍攝后的定時(shí)，基于通過(guò)第一活動(dòng)體圖像拍攝控制步驟中的處理控制了其圖像拍攝的該活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝。
應(yīng)該注意，根據(jù)本發(fā)明的程序包括與上述的信息處理方法相同的步驟，在此省略其重復(fù)說(shuō)明以免冗余。
下面，參考附圖對(duì)本發(fā)明的特定實(shí)施例進(jìn)行詳細(xì)說(shuō)明。
圖5示出應(yīng)用本發(fā)明的監(jiān)控系統(tǒng)101的外觀的例子。
參考圖5，所示的監(jiān)控系統(tǒng)101包括照相機(jī)單元111。參考圖6，該照相機(jī)單元111包括傳感器照相機(jī)121，用于拍攝廣范圍的區(qū)域；以及變焦照相機(jī)122，用于在變焦(放大)狀態(tài)下拍攝預(yù)定活動(dòng)體的圖像。傳感器照相機(jī)121拍攝廣范圍的區(qū)域的圖像，變焦照相機(jī)122變焦并拍攝從由傳感器照相機(jī)121通過(guò)圖像拍攝所獲得的傳感器圖像151內(nèi)檢測(cè)到的活動(dòng)體的圖像。因而，根據(jù)監(jiān)控系統(tǒng)101，例如，在將其用于停車區(qū)中的情況下，可以監(jiān)控例如停車區(qū)中直徑約為40m的圓柱形廣范圍的區(qū)域21。
結(jié)果，與圖1中所示的多照相機(jī)系統(tǒng)1相比較，圖5中所示的監(jiān)控系統(tǒng)101需要較少數(shù)量的照相機(jī)，并且可以容易地安裝和以較低的成本進(jìn)行生產(chǎn)。
自然地，圖5的監(jiān)控系統(tǒng)101的結(jié)構(gòu)僅是例子，并可以將其修正成使得例如提高變焦照相機(jī)122的倍率因子以擴(kuò)大監(jiān)控范圍，或者另外提供一個(gè)或多個(gè)附加的變焦照相機(jī)，以便可以獲取更高清晰度的圖像。
圖6示出監(jiān)控系統(tǒng)101的結(jié)構(gòu)的例子。
參考圖6，監(jiān)控系統(tǒng)101包括照相機(jī)單元111，其包括傳感器照相機(jī)121和變焦照相機(jī)122；網(wǎng)絡(luò)131；以及客戶機(jī)PC 132。監(jiān)控系統(tǒng)101將由傳感器照相機(jī)121所獲取的傳感器圖像151和利用變焦照相機(jī)122通過(guò)圖像拍攝所獲得的變焦圖像152，通過(guò)網(wǎng)絡(luò)131記錄在客戶機(jī)PC 132中，并利用客戶機(jī)PC 132再現(xiàn)相應(yīng)的傳感器圖像151和變焦圖像152。
照相機(jī)單元111的傳感器照相機(jī)121包括作為單一部件而形成的全方位移動(dòng)部分121A和照相機(jī)部分121B。全方位移動(dòng)部分121A作為可轉(zhuǎn)動(dòng)臺(tái)而形成，用于例如關(guān)于水平轉(zhuǎn)動(dòng)和高低俯仰的兩個(gè)軸(水平方向和垂直方向)自由改變攝像方向。照相機(jī)部分121B被設(shè)置在形成全方位移動(dòng)部分121A的可轉(zhuǎn)動(dòng)臺(tái)上，并在客戶機(jī)P C 132的控制下控制全方位移動(dòng)部分121A，以調(diào)整攝像方向的水平或垂直方向，且改變攝像視角以擴(kuò)大或縮小拍攝作為活動(dòng)圖片的廣范圍的(被攝體的)圖像的攝像倍率。特別地，例如，照相機(jī)部分121B順序改變攝像方向，以拍攝被攝體的圖像從而獲取多個(gè)單元圖像，并產(chǎn)生由該多個(gè)單元圖像組成的全景圖像的傳感器圖像151。因此，傳感器照相機(jī)121可以是任何照相機(jī)，只要其具有拍攝全方位圖像的圖像拍攝功能即可，例如其可以使用全景照相機(jī)。
照相機(jī)部分121B通過(guò)網(wǎng)絡(luò)131將通過(guò)圖像拍攝所獲得的傳感器圖像151提供給客戶機(jī)PC 132。在圖6中，傳感器照相機(jī)121拍攝包括活動(dòng)體161和162的廣范圍的圖像，以獲取包括活動(dòng)體161和162的傳感器圖像151。
與傳感器照相機(jī)121類似，變焦照相機(jī)122包括作為單一部件而形成的全方位移動(dòng)部分122A和照相機(jī)部分122B。與全方位移動(dòng)部分121A類似，全方位移動(dòng)部分122A作為可轉(zhuǎn)動(dòng)臺(tái)而形成，用于例如關(guān)于水平轉(zhuǎn)動(dòng)和高低俯仰的兩個(gè)軸自由改變攝像方向。照相機(jī)部分122B被設(shè)置在形成全方位移動(dòng)部分122A的可轉(zhuǎn)動(dòng)臺(tái)上，并在客戶機(jī)PC 132的控制下，控制全方位移動(dòng)部分122A以調(diào)整攝像方向的水平或垂直方向，且改變攝像視角以增大或減小攝像倍率以拍攝預(yù)定活動(dòng)體作為變焦后的活動(dòng)圖片。
客戶機(jī)PC 132檢測(cè)包括在從傳感器照相機(jī)121提供給其的傳感器圖像151中的活動(dòng)體161和162，并確定圍繞每一活動(dòng)體161或162的預(yù)定區(qū)域(例如，矩形區(qū)域)作為活動(dòng)體框171或172。
客戶機(jī)PC 132將例如傳感器圖像151上的活動(dòng)體框172的四個(gè)頂點(diǎn)A到D(四邊形活動(dòng)體框的頂點(diǎn)A到D)在X軸(圖6中的水平方向上的軸)和Y軸(垂直方向上的軸)上的坐標(biāo)提供給變焦照相機(jī)122。變焦照相機(jī)122基于該坐標(biāo)執(zhí)行活動(dòng)體162的(活動(dòng)體框172的)變焦圖像拍攝以獲取變焦圖像152。應(yīng)該注意，在下面的說(shuō)明中，以幀為單位獲取傳感器圖像151和變焦圖像152。變焦照相機(jī)122通過(guò)網(wǎng)絡(luò)131將變焦圖像152提供給客戶機(jī)PC 132。
網(wǎng)絡(luò)131是允許數(shù)據(jù)的雙向通信的通信網(wǎng)絡(luò)，例如可以是通過(guò)電話線路連接到客戶機(jī)的PC 132的因特網(wǎng)、或者連接到TA(Terminal Adapter，終端適配器)或調(diào)制解調(diào)器的ISDN(Integrated Services Digital Network，綜合業(yè)務(wù)數(shù)字網(wǎng))/B(寬帶)-ISDN、或LAN(Local Area Network，局域網(wǎng))等。
例如由個(gè)人計(jì)算機(jī)形成客戶機(jī)132，客戶機(jī)132通過(guò)網(wǎng)絡(luò)131控制傳感器照相機(jī)121和變焦照相機(jī)122。此外，客戶機(jī)132記錄來(lái)自傳感器照相機(jī)121的傳感器圖像151和來(lái)自變焦照相機(jī)122的變焦圖像152，并再現(xiàn)所記錄的傳感器圖像151和變焦圖像152，以對(duì)其進(jìn)行顯示。
圖7是示出圖6中所示的客戶機(jī)PC 132的結(jié)構(gòu)的例子的框圖。
參考圖7，中央處理單元(CPU)201通過(guò)總線204與只讀存儲(chǔ)器(ROM)202和隨機(jī)存取存儲(chǔ)器(RAM)203連接。另外，輸入/輸出接口205被連接到總線204。
CPU 201根據(jù)存儲(chǔ)在ROM 202中的程序或存儲(chǔ)在RAM 203中的程序執(zhí)行各種處理。ROM 202具有存儲(chǔ)于其中的各種程序。RAM 203存儲(chǔ)通過(guò)通信部分209獲取的程序。此外，RAM 203適當(dāng)存儲(chǔ)CPU 201執(zhí)行各種處理所需的數(shù)據(jù)等。
包括鍵盤(pán)、鼠標(biāo)、以及麥克風(fēng)等的輸入部分206、包括液晶顯示器(LCD)單元以及揚(yáng)聲器等的輸出部分207、由硬盤(pán)等形成的存儲(chǔ)器部分208和由TA以及調(diào)制解調(diào)器等形成的通信部分209被連接到輸入/輸出接口205。通信部分209被連接到圖6中的網(wǎng)絡(luò)131，并通過(guò)網(wǎng)絡(luò)131與傳感器照相機(jī)121和變焦照相機(jī)122進(jìn)行通信。
必要時(shí)將驅(qū)動(dòng)器210與輸入/輸出接口205適當(dāng)連接，從裝入驅(qū)動(dòng)器210中的可移動(dòng)介質(zhì)211中讀出程序，并將其安裝在存儲(chǔ)器部分208中。CPU 201將安裝在存儲(chǔ)器部分208中的該程序載入例如RAM 203中，并執(zhí)行該程序。
圖8是示出圖6中所示的客戶機(jī)PC 132的功能結(jié)構(gòu)的例子的框圖。
參考圖8，所示的客戶機(jī)PC 132包括傳感器圖像獲取模塊301、攝像視角計(jì)算模塊302、活動(dòng)體檢測(cè)模塊303、跟蹤對(duì)象全方位移動(dòng)變焦模塊305、附加跟蹤對(duì)象全方位移動(dòng)模塊306、變焦圖像獲取模塊307、結(jié)果顯示模塊308以及定時(shí)器模塊309，它們都是例如由圖7中所示的CPU 201執(zhí)行的程序模塊?？蛻魴C(jī)PC 132還包括活動(dòng)體跟蹤順序管理DB 304，其對(duì)應(yīng)于例如圖7中所示的存儲(chǔ)器部分208。
此外，圖8中由塊表示的每一模塊可被視為具有單一功能的硬件(例如，芯片組)。特別地，圖8可被視為軟件功能框圖或硬件框圖，其中，每一模塊具有一種功能。
從響應(yīng)于用戶操作的輸入部分206將獲取傳感器圖像151的指令提供給傳感器圖像獲取模塊301，并根據(jù)該指令控制傳感器照相機(jī)121。傳感器照相機(jī)121在傳感器圖像獲取模塊301的控制下拍攝廣范圍區(qū)域21的圖像，并將通過(guò)圖像拍攝所獲得的傳感器圖像151和表示傳感器照相機(jī)121本身并且對(duì)傳感器照相機(jī)121唯一的ID(下文稱之為照相機(jī)ID)提供給傳感器圖像獲取模塊301。傳感器圖像獲取模塊301將來(lái)自傳感器照相機(jī)121的傳感器圖像151提供給攝像視角計(jì)算模塊302和結(jié)果顯示模塊308。
攝像視角計(jì)算模塊302將從傳感器圖像獲取模塊301提供給其的傳感器圖像151提供給活動(dòng)體檢測(cè)模塊303，使得活動(dòng)體檢測(cè)模塊303計(jì)算傳感器圖像151中所拍攝的每一活動(dòng)體的圖像的位置和大小，并提供計(jì)算的結(jié)果。
攝像視角計(jì)算模塊302的計(jì)算部分302a基于來(lái)自活動(dòng)體檢測(cè)模塊303的信息，將從傳感器圖像151的頂端幀開(kāi)始的檢測(cè)到活動(dòng)體出現(xiàn)的傳感器圖像151中的那一幀的位置識(shí)別為當(dāng)再現(xiàn)與該活動(dòng)體相對(duì)應(yīng)的傳感器圖像151時(shí)的再現(xiàn)開(kāi)始位置。此外，攝像視角計(jì)算模塊302確定例如捕獲檢測(cè)到活動(dòng)體出現(xiàn)的該活動(dòng)體的四邊形活動(dòng)體框172(171)。然后，攝像視角計(jì)算模塊302計(jì)算該活動(dòng)體框172的頂點(diǎn)A到D的坐標(biāo)，作為該活動(dòng)體的出現(xiàn)位置(視角)，并將視角ID賦給每一出現(xiàn)位置。此外，攝像視角計(jì)算模塊302基于從定時(shí)器模塊309提供的并表示當(dāng)前日期和時(shí)間的日期和時(shí)間信息，產(chǎn)生由活動(dòng)體的出現(xiàn)日期和時(shí)間、消失日期和時(shí)間以及出現(xiàn)位置、視角ID、再現(xiàn)開(kāi)始位置、以及從傳感器照相機(jī)121提供的照相機(jī)ID形成的活動(dòng)體信息。此外，等級(jí)確定部分302b讀出活動(dòng)體跟蹤順序管理DB 304，確定活動(dòng)體跟蹤等級(jí)，并將其與如上所述再現(xiàn)的信息一起登記到活動(dòng)體跟蹤順序管理DB 304中(在等級(jí)確定部分302b進(jìn)行登記之前登記了活動(dòng)體信息的情況下，重新排列并更新包括該時(shí)間以前的活動(dòng)體信息的活動(dòng)體信息的順序)。
跟蹤對(duì)象全方位移動(dòng)變焦模塊305基于活動(dòng)體跟蹤順序管理DB 304的信息以預(yù)定的時(shí)間間隔控制變焦照相機(jī)122的全方位移動(dòng)變焦，并從目前仍沒(méi)有被拍攝圖像的活動(dòng)體中選擇跟蹤等級(jí)最高的視角ID。然后，跟蹤對(duì)象全方位移動(dòng)變焦模塊305使得變焦照相機(jī)122根據(jù)與所選擇的出現(xiàn)位置信息相對(duì)應(yīng)的視角拍攝活動(dòng)體的變焦圖像，并將所拍攝的圖像提供給變焦圖像獲取模塊307。之后，跟蹤對(duì)象全方位移動(dòng)變焦模塊305重復(fù)執(zhí)行上述的處理。
在通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305控制變焦照相機(jī)122以開(kāi)始圖像拍攝后，附加跟蹤對(duì)象全方位移動(dòng)模塊306以遠(yuǎn)遠(yuǎn)短于跟蹤對(duì)象全方位移動(dòng)變焦模塊305的處理中的時(shí)間間隔的預(yù)定的時(shí)間間隔，獲取與通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305所選擇的視角ID相對(duì)應(yīng)的最新的出現(xiàn)位置信息。然后，附加跟蹤對(duì)象全方位移動(dòng)模塊306控制變焦照相機(jī)122，以根據(jù)與所獲取的出現(xiàn)位置信息相對(duì)應(yīng)的視角拍攝該活動(dòng)體的變焦圖像，并將所拍攝的圖像提供給變焦圖像獲取模塊307。之后，附加跟蹤對(duì)象全方位移動(dòng)模塊306重復(fù)執(zhí)行上述處理。
特別地，在跟蹤對(duì)象全方位移動(dòng)變焦模塊305利用一個(gè)視角ID的一個(gè)視角控制變焦照相機(jī)122的全方位移動(dòng)變焦的同時(shí)(對(duì)于每一視角ID僅執(zhí)行一次全方位移動(dòng)變焦)，附加跟蹤對(duì)象全方位移動(dòng)模塊306以遠(yuǎn)遠(yuǎn)短于跟蹤對(duì)象全方位移動(dòng)變焦模塊305的處理中的時(shí)間間隔的時(shí)間間隔，利用一個(gè)視角ID的多個(gè)視角控制變焦照相機(jī)122的全方位移動(dòng)變焦。
通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305和附加跟蹤對(duì)象全方位移動(dòng)模塊306控制變焦圖像獲取模塊307的打開(kāi)和關(guān)閉，變焦圖像獲取模塊307獲取從變焦照相機(jī)122提供的變焦圖像，并將其提供給結(jié)果顯示模塊308。
結(jié)果顯示模塊308獲取從變焦圖像獲取模塊307提供的變焦圖像和從傳感器圖像獲取模塊301提供的傳感器圖像，并使未示出的顯示單元來(lái)顯示所獲取的圖像。
定時(shí)器模塊309測(cè)量當(dāng)前的日期和時(shí)間，并將表示測(cè)量到的日期和時(shí)間的日期和時(shí)間信息提供給傳感器圖像獲取模塊301、跟蹤對(duì)象全方位移動(dòng)變焦模塊305和附加跟蹤對(duì)象全方位移動(dòng)模塊306。
現(xiàn)在，參考圖9對(duì)登記在圖8中所示的活動(dòng)體跟蹤順序管理DB304中的活動(dòng)體信息進(jìn)行說(shuō)明。
從圖9可以看出，活動(dòng)體跟蹤順序管理DB 304包括活動(dòng)體的(跟蹤)等級(jí)、出現(xiàn)日期和時(shí)間、消失日期和時(shí)間以及出現(xiàn)位置、視角ID、再現(xiàn)開(kāi)始位置、以及照相機(jī)ID的信息。在活動(dòng)體跟蹤順序管理DB 304中，對(duì)每一管理時(shí)區(qū)產(chǎn)生一個(gè)文件。應(yīng)該注意，當(dāng)對(duì)每一日期從9:00(9點(diǎn))開(kāi)始按順序以1小時(shí)對(duì)一天進(jìn)行劃界時(shí)，在以下說(shuō)明的管理時(shí)區(qū)中被定義為以一小時(shí)為單位。然而，管理時(shí)區(qū)的劃界不限于此。
此外，圖9示出在活動(dòng)體跟蹤順序管理DB 304中用于從2004年1月10日10:00到11:00的管理時(shí)區(qū)的文件中登記的活動(dòng)體跟蹤順序管理信息的例子。從圖9中可以看出，攝像視角計(jì)算模塊302在2004年1月10日的11:00檢測(cè)到活動(dòng)體的消失，其中該活動(dòng)體的出現(xiàn)是在同一天的10:00檢測(cè)到的、并將視角ID“1”賦給該活動(dòng)體。此外，攝像視角計(jì)算模塊302確定視角ID為“1”的活動(dòng)體的活動(dòng)體框(例如，圖6中所示的活動(dòng)體框171或172)，并將該活動(dòng)體框的頂點(diǎn)A到D的坐標(biāo)(1，2)、(1，5)、(2，5)和(2，2)識(shí)別為出現(xiàn)位置。
此外，在檢測(cè)到視角ID為“1”的活動(dòng)體的出現(xiàn)的傳感器圖像151的幀為從幀的頂端開(kāi)始的第一幀的幀#1，并且攝像視角計(jì)算模塊302將幀#1識(shí)別為再現(xiàn)開(kāi)始位置。應(yīng)該注意，在以下的說(shuō)明中，從幀的頂端開(kāi)始的第一幀被稱為幀#1。此外，攝像視角計(jì)算模塊302接收作為傳感器照相機(jī)121的照相機(jī)ID提供給其的“1”，其中通過(guò)該傳感照相機(jī)121獲取檢測(cè)到活動(dòng)體ID為“1”的活動(dòng)體的出現(xiàn)的傳感器圖像151。
此外，攝像視角計(jì)算模塊302在2004年1月10日的10:30檢測(cè)到活動(dòng)體的消失，其中該活動(dòng)體的出現(xiàn)是在同一天的10:05檢測(cè)到的、并將視角ID“2”賦給該活動(dòng)體。攝像視角計(jì)算模塊302確定視角ID為“2”的活動(dòng)體的活動(dòng)體框(例如，圖6中所示的活動(dòng)體框171或172)，并將該活動(dòng)體框的頂點(diǎn)A到D的坐標(biāo)(3，5)、(3，9)、(5，9)和(5，5)識(shí)別為出現(xiàn)位置。
而且，在檢測(cè)到視角ID為“2”的活動(dòng)體的出現(xiàn)的傳感器圖像151的幀為幀#2，并且攝像視角計(jì)算模塊302將幀#2識(shí)別為再現(xiàn)開(kāi)始位置。此外，傳感器圖像獲取模塊301接收作為傳感器照相機(jī)121的照相機(jī)ID提供給其的“1”，其中通過(guò)該傳感器照相機(jī)121，獲取在檢測(cè)到視角ID為“2”的活動(dòng)體的出現(xiàn)的傳感器圖像151。
此外，在圖9中，通過(guò)等級(jí)確定部分302b將視角ID＝1的活動(dòng)體的跟蹤等級(jí)設(shè)置為第一等級(jí)，將視角ID＝2的活動(dòng)體的跟蹤等級(jí)設(shè)置為第二等級(jí)。
應(yīng)該注意，等級(jí)確定部分302b參考優(yōu)先條件來(lái)確定活動(dòng)體的等級(jí)，該優(yōu)先條件例如活動(dòng)體移動(dòng)時(shí)的時(shí)間點(diǎn)的前后關(guān)系、在傳感器圖像中的活動(dòng)體的視角位置(例如，優(yōu)先選擇傳感器圖像中上面位置處所顯示的視角)、傳感器圖像中的活動(dòng)體的大小(例如，優(yōu)先選擇傳感器圖像中所顯示的活動(dòng)體中具有相對(duì)較大的大小的活動(dòng)體的圖像)、或活動(dòng)體的高寬比。
換句話說(shuō)，通過(guò)根據(jù)用于優(yōu)先級(jí)的各種條件排列活動(dòng)體，可以容易地捕獲將被優(yōu)先捕獲的活動(dòng)體。
例如，在為了優(yōu)先捕獲傳感器圖像中相對(duì)較高位置處的活動(dòng)體，將照相機(jī)放置在房間中相對(duì)較低的位置處(2到3m)的情況下，可以容易地捕獲人臉，因?yàn)槠浯嬖谟谳^高位置處。
然而，在為了優(yōu)先捕獲傳感器圖像中較低位置處的活動(dòng)體，將照相機(jī)放置在較高位置處(10m或更高)，例如戶外建筑物的屋頂上的情況下，可以捕獲距離照相機(jī)相對(duì)較近的人、汽車等的移動(dòng)，而不是天空、建筑物的較高位置等。
此外，如果優(yōu)先捕獲傳感器圖像中較大大小的活動(dòng)體，則當(dāng)例如與位于距離照相機(jī)較遠(yuǎn)的活動(dòng)體相比時(shí)，可以優(yōu)先捕獲距離照相機(jī)較近的活動(dòng)體(當(dāng)活動(dòng)體距離傳感器照相機(jī)121越近時(shí)，通過(guò)傳感器照相機(jī)121所捕獲的該活動(dòng)體的圖像的大小越大)。
此外，如果優(yōu)先捕獲傳感器圖像中較小大小的活動(dòng)體，則當(dāng)與位于距離照相機(jī)較近的活動(dòng)體的移動(dòng)相比時(shí)，可以優(yōu)先捕獲位于距離該照相機(jī)較遠(yuǎn)的人或汽車等的移動(dòng)。
此外，如果優(yōu)先捕獲傳感器圖像中垂直延伸的活動(dòng)體，則可以容易地捕獲人。特別地，在人正在行走并注意此人的體格的情況下，可以容易地將人作為傳感器照相機(jī)121的傳感器圖像中的垂直延伸的活動(dòng)體進(jìn)行捕獲。
現(xiàn)在，參考圖10對(duì)圖8中所示的傳感器圖像獲取模塊301的傳感器圖像獲取處理進(jìn)行說(shuō)明。當(dāng)用戶操作輸入部分206以發(fā)出獲取傳感器圖像151的指令時(shí)，執(zhí)行該傳感器圖像獲取處理。
在步驟S1，傳感器圖像獲取模塊301向傳感器照相機(jī)121發(fā)出獲取傳感器圖像151的請(qǐng)求。傳感器照相機(jī)121的照相機(jī)部分121B控制全方位移動(dòng)部分121A以調(diào)整攝像方向的水平方向或垂直方向，并以預(yù)定的攝像比率拍攝廣范圍的區(qū)域的圖像作為活動(dòng)圖片。傳感器照相機(jī)121將傳感器圖像151和傳感器照相機(jī)121的照相機(jī)ID提供給傳感器圖像獲取模塊301，以響應(yīng)來(lái)自傳感器圖像獲取模塊301的請(qǐng)求。
在步驟S1中的處理之后，處理進(jìn)入步驟S2。在步驟S2，傳感器圖像獲取模塊301從傳感器照相機(jī)121獲取傳感器圖像151和照相機(jī)ID。之后，處理進(jìn)入步驟S3。在步驟S3，傳感器圖像獲取模塊301將來(lái)自傳感器照相機(jī)121的傳感器圖像151和照相機(jī)ID輸入給攝像視角計(jì)算模塊302。之后，處理進(jìn)入步驟S4。
在步驟S4，傳感器圖像獲取模塊301更新傳感器照相機(jī)121的客戶機(jī)返回緩沖器。之后，處理進(jìn)入步驟S5。在步驟S5，傳感器圖像獲取模塊301判定是否從輸入部分206發(fā)出結(jié)束獲取傳感器圖像151和變焦圖像152的請(qǐng)求，即用戶是否操作輸入部分206以發(fā)出結(jié)束該處理的指令。如果判定沒(méi)有發(fā)出結(jié)束該處理的請(qǐng)求，則處理返回到步驟S1，以重復(fù)執(zhí)行所述處理。
另一方面，如果在步驟S5判定從輸入部分206發(fā)出了結(jié)束該處理的請(qǐng)求，則結(jié)束該處理。
現(xiàn)在，參考圖11對(duì)攝像視角計(jì)算模塊302的攝像視角計(jì)算處理進(jìn)行說(shuō)明。
在步驟S21，攝像視角計(jì)算模塊302將從傳感器圖像獲取模塊301提供給其的傳感器圖像提供給活動(dòng)體檢測(cè)模塊303。
此時(shí)，活動(dòng)體檢測(cè)模塊303執(zhí)行活動(dòng)體檢測(cè)處理。
在此參考圖12的流程圖對(duì)活動(dòng)體檢測(cè)模塊303的活動(dòng)體檢測(cè)處理進(jìn)行說(shuō)明。
在步驟S41，活動(dòng)體檢測(cè)模塊303基于輸入給其的傳感器圖像，計(jì)算每一活動(dòng)體的位置和大小。
在步驟S42，活動(dòng)體檢測(cè)模塊303將基于所輸入的傳感器圖像計(jì)算出的活動(dòng)體的位置和大小的信息返回給從其接收所輸入的傳感器圖像的攝像視角計(jì)算模塊302。
返回參考圖11的流程圖，在步驟S22，攝像視角計(jì)算模塊302接收從活動(dòng)體檢測(cè)模塊303提供給其的所有活動(dòng)體的位置和大小的信息。
在步驟S23，攝像視角計(jì)算模塊302使得計(jì)算部分302a基于活動(dòng)體的位置和大小的信息，計(jì)算每一活動(dòng)體的視角，即每一活動(dòng)體的活動(dòng)體框(例如，圖6中所示的活動(dòng)體框171或172)的頂點(diǎn)A到D的坐標(biāo)，作為活動(dòng)體的出現(xiàn)位置(視角)。此時(shí)，計(jì)算部分302a對(duì)可以在傳感器圖像中相互結(jié)合的多個(gè)活動(dòng)體計(jì)算一個(gè)視角?；蛘撸诖_定與預(yù)先登記在活動(dòng)體跟蹤順序管理DB 304中的任何一個(gè)視角ID相對(duì)應(yīng)的活動(dòng)體的視角的情況下，計(jì)算部分302a計(jì)算每一活動(dòng)體的視角，以便繼續(xù)所登記的視角ID。
在步驟S24，攝像視角計(jì)算模塊302讀出活動(dòng)體跟蹤順序管理DB 304中的信息，并控制等級(jí)確定部分302b以確定包括當(dāng)前所計(jì)算的視角的跟蹤等級(jí)。應(yīng)該注意，可以預(yù)先對(duì)如上文所述的優(yōu)先捕獲的活動(dòng)體的一個(gè)或多個(gè)特征設(shè)置跟蹤等級(jí)，并確定跟蹤等級(jí)以滿足諸如以下條件活動(dòng)體移動(dòng)時(shí)的時(shí)間點(diǎn)的前后關(guān)系、傳感器圖像中的活動(dòng)體的視角的位置、傳感器圖像中的活動(dòng)體的大小、或活動(dòng)體的高寬比。
在步驟S25，攝像視角計(jì)算模塊302將作為每一活動(dòng)體的出現(xiàn)位置的視角ID用于設(shè)置每一所計(jì)算的活動(dòng)體框的四個(gè)視角的坐標(biāo)。此外，攝像視角計(jì)算模塊302產(chǎn)生活動(dòng)體信息，該活動(dòng)體信息包括活動(dòng)體的出現(xiàn)日期和時(shí)間、消失日期和時(shí)間以及出現(xiàn)位置、視角ID、再現(xiàn)開(kāi)始位置、以及從傳感器照相機(jī)121提供的照相機(jī)ID。然后，攝像視角計(jì)算模塊302將該活動(dòng)體信息存儲(chǔ)在活動(dòng)體跟蹤順序管理DB 304中(在已經(jīng)存儲(chǔ)了活動(dòng)體信息的情況下，更新該活動(dòng)體信息)。
在每一預(yù)定的時(shí)間間隔后，分別由傳感器圖像獲取模塊301、攝像視角計(jì)算模塊302和活動(dòng)體檢測(cè)模塊303重復(fù)執(zhí)行上述傳感器圖像獲取處理、攝像視角計(jì)算處理和活動(dòng)體檢測(cè)處理。從而，通常將最新的活動(dòng)體信息存儲(chǔ)在活動(dòng)體跟蹤順序管理DB 304中。應(yīng)該注意，優(yōu)選在之后重復(fù)執(zhí)行傳感器圖像獲取處理、攝像視角計(jì)算處理和活動(dòng)體檢測(cè)處理的該預(yù)定的時(shí)間間隔短于在之后執(zhí)行跟蹤對(duì)象全方位移動(dòng)變焦處理和附加跟蹤對(duì)象全方位移動(dòng)處理的時(shí)間間隔。
現(xiàn)在，參考圖13的流程圖對(duì)跟蹤對(duì)象全方位移動(dòng)變焦模塊305的跟蹤對(duì)象全方位移動(dòng)變焦處理進(jìn)行說(shuō)明。
在步驟S61，跟蹤對(duì)象全方位移動(dòng)變焦模塊305讀出存儲(chǔ)在活動(dòng)體跟蹤順序管理DB 304中的活動(dòng)體信息，并在步驟S 62判定在傳感器圖像中是否存在活動(dòng)體。特別地，例如，判定在傳感器圖像中不存在與以下視角ID相對(duì)應(yīng)的活動(dòng)體對(duì)于該視角ID，設(shè)置例如包括在活動(dòng)體信息中的消失時(shí)間。因此，如果對(duì)活動(dòng)體信息內(nèi)的所有視角ID設(shè)置消失時(shí)間，則判定不存在活動(dòng)體。在這種情況下，處理進(jìn)入步驟S70。
另一方面，如果沒(méi)有設(shè)置與某個(gè)視角ID相對(duì)應(yīng)的消失時(shí)間，則判定存在活動(dòng)體，并且處理進(jìn)入步驟S63。
在步驟S63，跟蹤對(duì)象全方位移動(dòng)變焦模塊305計(jì)算將變焦照相機(jī)122全方位移動(dòng)到的位置，即，活動(dòng)體信息內(nèi)的垂直方向上的仰角(elevation angle)和水平方向上的俯角(depression angle)的值(全方位移動(dòng)值)，其為視角信息并對(duì)應(yīng)于優(yōu)先級(jí)最高的未被處理的視角ID，其中，基于出現(xiàn)位置的信息控制變焦照相機(jī)122到該垂直方向上的仰角和水平方向上的俯角。
在步驟S64，跟蹤對(duì)象全方位移動(dòng)變焦模塊305基于步驟S 63中的處理所計(jì)算的全方位移動(dòng)值，控制變焦照相機(jī)122，以執(zhí)行全方位移動(dòng)。此時(shí)，變焦照相機(jī)122的照相機(jī)部分122B根據(jù)該請(qǐng)求控制全方位移動(dòng)部分122A，并將變焦照相機(jī)122設(shè)置為所請(qǐng)求的仰角和俯角。
在步驟S65，跟蹤對(duì)象全方位移動(dòng)變焦模塊305將變焦圖像獲取模塊307的圖像更新標(biāo)記設(shè)置為ON。換句話說(shuō)，通過(guò)剛才所述的處理，變焦圖像獲取模塊307被置于可以從變焦照相機(jī)122獲取圖像的狀態(tài)。
在步驟S66，跟蹤對(duì)象全方位移動(dòng)變焦模塊305激活下文所述的附加跟蹤對(duì)象全方位移動(dòng)模塊306。
在步驟S67，跟蹤對(duì)象全方位移動(dòng)變焦模塊305將當(dāng)前正由此處理的視角ID傳輸給附加跟蹤對(duì)象全方位移動(dòng)模塊306。
在步驟S68，跟蹤對(duì)象全方位移動(dòng)變焦模塊305基于作為視角ID的視角信息的出現(xiàn)位置的信息，計(jì)算倍率，并向變焦照相機(jī)122發(fā)出變焦指令。
在步驟S69，跟蹤對(duì)象全方位移動(dòng)變焦模塊305判定是否發(fā)出結(jié)束該處理的請(qǐng)求。如果判定沒(méi)有發(fā)出結(jié)束該處理的指令，則處理進(jìn)入步驟S70。
在步驟S70，跟蹤對(duì)象全方位移動(dòng)變焦模塊305判定預(yù)定的時(shí)間段是否過(guò)去，并重復(fù)該判定直到其判定該預(yù)定時(shí)間過(guò)去后為止。換句話說(shuō)，跟蹤對(duì)象全方位移動(dòng)變焦模塊305保持待機(jī)狀態(tài)直到該預(yù)定的時(shí)間段過(guò)去后為止。然后，當(dāng)在步驟S70一判定該預(yù)定的時(shí)間段過(guò)去時(shí)，則處理返回到步驟S61，以重復(fù)從步驟S61開(kāi)始的步驟中的處理。
另一方面，如果在步驟S69判定發(fā)出了結(jié)束該處理的指令，則結(jié)束該處理。
通過(guò)上述處理，在預(yù)定的時(shí)間間隔檢測(cè)活動(dòng)體的有/無(wú)，直到存在一個(gè)或多個(gè)活動(dòng)體為止，對(duì)該活動(dòng)體按照優(yōu)先度的遞減順序設(shè)置全方位移動(dòng)值，以便可以順序拍攝該活動(dòng)體的圖像。
現(xiàn)在，參考圖14的流程圖對(duì)附加跟蹤對(duì)象全方位移動(dòng)模塊306的附加跟蹤對(duì)象全方位移動(dòng)處理進(jìn)行說(shuō)明。
在步驟S81，附加跟蹤對(duì)象全方位移動(dòng)模塊30判定是否從跟蹤對(duì)象全方位移動(dòng)變焦模塊305接收到激活指令，并重復(fù)步驟S 81的處理直到接收到激活指令后為止。如果例如作為圖13的流程圖中的步驟S66的處理的結(jié)果，將激活指令傳輸給附加跟蹤對(duì)象全方位移動(dòng)模塊306，則激活附加跟蹤對(duì)象全方位移動(dòng)模塊306，并且處理進(jìn)入步驟S82。應(yīng)該注意，嚴(yán)格地說(shuō)，如果附加跟蹤對(duì)象全方位移動(dòng)模塊306是由CPU 201執(zhí)行的程序模塊，則CPU 201根據(jù)來(lái)自跟蹤對(duì)象全方位移動(dòng)變焦模塊305的指令激活附加跟蹤對(duì)象全方位移動(dòng)模塊306。另一方面，在由硬件形成附加跟蹤對(duì)象全方位移動(dòng)模塊306的情況下，開(kāi)始附加跟蹤對(duì)象全方位移動(dòng)模塊306的操作。
在步驟S82，例如，附加跟蹤對(duì)象全方位移動(dòng)模塊306獲取例如作為步驟S67中的處理的結(jié)果、從跟蹤對(duì)象全方位移動(dòng)變焦模塊305傳輸?shù)?、?dāng)前指示給變焦照相機(jī)122的視角的視角ID。
在步驟S83，附加跟蹤對(duì)象全方位移動(dòng)模塊306從存儲(chǔ)在跟蹤對(duì)象順序管理DB 304中的活動(dòng)體信息內(nèi)，讀出從跟蹤對(duì)象全方位移動(dòng)變焦模塊305提供給其的視角ID的出現(xiàn)位置的信息。
在步驟S84，附加跟蹤對(duì)象全方位移動(dòng)模塊306基于與所讀出的視角ID相對(duì)應(yīng)的視角的出現(xiàn)位置的信息，計(jì)算將變焦照相機(jī)122全方位移動(dòng)到的位置，即變焦照相機(jī)122將被控制到的垂直方向上的仰角和水平方向上的俯角的值(全方位移動(dòng)值)。
在步驟S85，附加跟蹤對(duì)象全方位移動(dòng)模塊306基于通過(guò)步驟S84中的處理所判定的全方位移動(dòng)值控制變焦照相機(jī)122以執(zhí)行全方位移動(dòng)。此時(shí)，變焦照相機(jī)122的照相機(jī)部分122B根據(jù)該請(qǐng)求控制全方位移動(dòng)部分122A以將變焦照相機(jī)122設(shè)置成預(yù)定的仰角和俯角。
在步驟S86，附加跟蹤對(duì)象全方位移動(dòng)模塊306判定步驟S82到S85中的處理是否被重復(fù)指定的次數(shù)。如果判定該處理沒(méi)有被重復(fù)該指定的次數(shù)，則處理進(jìn)入步驟S87。
在步驟S87，附加跟蹤對(duì)象全方位移動(dòng)模塊306判定在步驟S87預(yù)定的時(shí)間段是否過(guò)去，并重復(fù)該處理直到判定該預(yù)定的時(shí)間段過(guò)去后為止。當(dāng)判定該預(yù)定的時(shí)間段已過(guò)去時(shí)，處理返回到步驟S82，以便重復(fù)從步驟S82開(kāi)始的步驟中的處理。應(yīng)該注意，在步驟S87的處理中該預(yù)定的時(shí)間段遠(yuǎn)遠(yuǎn)短于圖13中的流程圖的步驟S70的處理中的預(yù)定的時(shí)間段。
另一方面，如果在步驟S86判定步驟S82到S85中的處理已被重復(fù)該指定的次數(shù)，則處理進(jìn)入步驟S88。在步驟S88，附加跟蹤對(duì)象全方位移動(dòng)模塊306將變焦圖像獲取模塊307的圖像更新標(biāo)記設(shè)置為OFF。
然后在步驟S89，附加跟蹤對(duì)象全方位移動(dòng)模塊306判定是否發(fā)出結(jié)束該處理的請(qǐng)求。如果判定沒(méi)有發(fā)出結(jié)束該處理的請(qǐng)求，則處理返回到步驟S81，以便重復(fù)從步驟S81開(kāi)始的步驟中的處理。
另一方面，如果在步驟S89判定發(fā)出了結(jié)束該處理的請(qǐng)求，則結(jié)束該處理。
通過(guò)上述處理，還在通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305將變焦照相機(jī)122設(shè)置成基于具有相對(duì)較高的優(yōu)先級(jí)的活動(dòng)體的視角ID的視角之后，可以控制變焦照相機(jī)122以短的時(shí)間間隔按指定的次數(shù)跟蹤活動(dòng)體的視角的變化。結(jié)果，即使通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305將變焦照相機(jī)122設(shè)置成例如具有相對(duì)較高的優(yōu)先級(jí)的活動(dòng)體的視角，并且在直到進(jìn)入變焦照相機(jī)122的全方位移動(dòng)狀態(tài)的時(shí)間間隔中該活動(dòng)體實(shí)際上在移動(dòng)(例如，即使過(guò)去了幾秒，而變焦照相機(jī)122自身旋轉(zhuǎn)180°并且活動(dòng)體到達(dá)與通過(guò)傳感器照相機(jī)121捕獲該活動(dòng)體的位置不同的位置)，可以更新變焦照相機(jī)122的全方位移動(dòng)值，以基于在隨后較短的時(shí)間間隔處的仍最新的出現(xiàn)位置的信息，來(lái)控制變焦照相機(jī)122。因此，在完成變焦前的時(shí)間段，可以捕獲活動(dòng)體。因此，例如，可以消除以下這種狀況活動(dòng)體移出活動(dòng)體框，從而作為變焦結(jié)果的不能進(jìn)行該活動(dòng)體的圖像拍攝。
現(xiàn)在，參考圖15的流程圖對(duì)變焦圖像獲取模塊307的變焦圖像獲取處理進(jìn)行說(shuō)明。
在步驟S101，變焦圖像獲取模塊307向變焦照相機(jī)122發(fā)出獲取圖像的請(qǐng)求。此時(shí)，變焦照相機(jī)122根據(jù)該請(qǐng)求提供圖像。
結(jié)果，在步驟S102，變焦圖像獲取模塊307獲取從變焦照相機(jī)122傳輸給其的圖像。
在步驟S103，變焦圖像獲取模塊307判定圖像更新標(biāo)記是否為ON。例如，如果通過(guò)圖13的流程圖的步驟S65中的處理將圖像更新標(biāo)記設(shè)置為ON，并隨后在圖14的流程圖的步驟S88中沒(méi)有將其設(shè)置為OFF，則變焦圖像獲取模塊307判定圖像更新標(biāo)記為ON。然后，處理進(jìn)入步驟S104。
在步驟S104，變焦圖像獲取模塊307利用從變焦照相機(jī)122傳輸給其的圖像來(lái)更新未示出的客戶機(jī)返回緩沖器。
另一方面，如果在步驟S103判定圖像更新標(biāo)記為OFF，則跳過(guò)步驟S104中的處理。
在步驟S105，變焦圖像獲取模塊307判定是否接收到結(jié)束請(qǐng)求。例如，如果判定沒(méi)有接收到結(jié)束請(qǐng)求，則處理返回到步驟S101，而如果判定接收到結(jié)束請(qǐng)求，則結(jié)束該處理。
通過(guò)上述處理，在圖像更新標(biāo)記保持為ON時(shí)，可以利用通過(guò)變焦圖像獲取模塊307所獲取的變焦圖像順序更新客戶機(jī)返回緩沖器。
現(xiàn)在，參考圖16中的流程圖對(duì)結(jié)果顯示模塊308的結(jié)果顯示處理進(jìn)行說(shuō)明。
在步驟S121，結(jié)果顯示模塊308獲取存儲(chǔ)在傳感器圖像獲取模塊301中的未示出的緩沖器中的傳感器圖像。
在步驟S122，結(jié)果顯示模塊308獲取存儲(chǔ)在變焦圖像獲取模塊307中的未示出的另一緩沖器中的變焦圖像。
在步驟S123，結(jié)果顯示模塊308使例如顯示單元顯示該傳感器圖像和該變焦圖像。
由于通過(guò)如上所述的處理顯示傳感器圖像和變焦圖像，因此，僅當(dāng)檢測(cè)到活動(dòng)體時(shí)，才可以顯示傳感器圖像和變焦圖像。應(yīng)該注意，可以讀出存儲(chǔ)在跟蹤對(duì)象順序管理DB 304中的活動(dòng)體信息并對(duì)其進(jìn)行顯示。
上述圖5的監(jiān)控系統(tǒng)101的處理可被總結(jié)為如圖17中的時(shí)序圖所示。參考圖17，以預(yù)定的時(shí)間間隔重復(fù)傳感器圖像獲取處理(圖10)。然后，在基于通過(guò)攝像視角計(jì)算處理(圖11)的步驟S21中的處理所提供的傳感器圖像，通過(guò)活動(dòng)體檢測(cè)處理(圖12)檢測(cè)到活動(dòng)體之后，通過(guò)攝像視角計(jì)算處理計(jì)算該活動(dòng)體的視角。然后，使用作為活動(dòng)體的出現(xiàn)位置的計(jì)算出的視角來(lái)產(chǎn)生活動(dòng)體信息，并將活動(dòng)體的跟蹤等級(jí)存儲(chǔ)在跟蹤對(duì)象順序管理DB 304中。重復(fù)所述處理的序列。
特別地，跟蹤對(duì)象全方位移動(dòng)變焦模塊305基于存儲(chǔ)在跟蹤對(duì)象順序管理DB 304中的活動(dòng)體信息，按照優(yōu)先級(jí)的遞減順序，在與每一活動(dòng)體的視角ID相對(duì)應(yīng)的出現(xiàn)位置(視角)，在圖17中的最上段所表示的從時(shí)刻t0到時(shí)刻t1的時(shí)間段(圖17中的PT的范圍)，控制變焦照相機(jī)122的全方位移動(dòng)。
然后，從圖17中的最上段可以看出，跟蹤對(duì)象全方位移動(dòng)變焦模塊305在時(shí)刻t 1開(kāi)始調(diào)整變焦照相機(jī)122的變焦。此外，在時(shí)刻t1，從圖17中的最下段可以看出，開(kāi)始將由變焦照相機(jī)122所拍攝的變焦圖像存儲(chǔ)在變焦圖像獲取模塊307的客戶機(jī)返回緩沖器中，以更新客戶機(jī)返回緩沖器(客戶機(jī)返回緩沖器變?yōu)镺N)。因此，附加跟蹤對(duì)象全方位移動(dòng)模塊306以預(yù)定的短的時(shí)間間隔(圖17中的附加PT1的范圍)，重復(fù)在圖17中的次上段示出的附加跟蹤全方位移動(dòng)處理指定的次數(shù)。應(yīng)該注意，從圖17中的次下段可以看出，在通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305完成變焦的時(shí)刻t2之后，另外可以執(zhí)行附加跟蹤對(duì)象全方位移動(dòng)處理。
結(jié)果，對(duì)于由結(jié)果顯示模塊308所顯示的變焦圖像，由于從圖17可以看出，在通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦處理大幅度全方位移動(dòng)變焦照相機(jī)122的時(shí)間段，客戶機(jī)返回緩沖器為O FF，因此不拍攝變焦圖像，從而可以顯示平滑的全方位移動(dòng)變焦圖像。此時(shí)，因?yàn)橐远逃诟檶?duì)象全方位移動(dòng)變焦處理的時(shí)間間隔的時(shí)間間隔，重復(fù)附加跟蹤對(duì)象全方位移動(dòng)處理，所以即使活動(dòng)體在移動(dòng)，也基于最新的視角來(lái)順序更新變焦照相機(jī)122將被設(shè)置成的視角。因此，可以拍攝在其中準(zhǔn)確捕獲活動(dòng)體的變焦圖像。應(yīng)該注意，還是在這種情況下，盡管使用了全方位移動(dòng)處理，由于在跟蹤對(duì)象全方位移動(dòng)變焦處理中通過(guò)全方位移動(dòng)處理已經(jīng)將變焦照相機(jī)122設(shè)置到大致的水平轉(zhuǎn)動(dòng)和高低俯仰位置的狀態(tài)下，以較短的時(shí)間間隔重復(fù)附加跟蹤全方位移動(dòng)處理，所以該全方位移動(dòng)處理不包括變焦照相機(jī)122的大量的移動(dòng)。因此，可以再現(xiàn)平滑的圖像。
應(yīng)該注意，在上述說(shuō)明中，附加跟蹤對(duì)象全方位移動(dòng)模塊306以遠(yuǎn)遠(yuǎn)短于通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦模塊305重復(fù)跟蹤對(duì)象全方位移動(dòng)變焦處理的時(shí)間間隔的時(shí)間間隔，重復(fù)附加跟蹤對(duì)象全方位移動(dòng)處理，以便在通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦處理水平轉(zhuǎn)動(dòng)和高低俯仰變焦照相機(jī)122后的定時(shí)，變焦照相機(jī)122跟蹤活動(dòng)體的移動(dòng)。然而，由于在通過(guò)跟蹤對(duì)象全方位移動(dòng)變焦處理水平轉(zhuǎn)動(dòng)和高低俯仰變焦照相機(jī)122后的定時(shí)，活動(dòng)體有時(shí)會(huì)顯示沒(méi)有移動(dòng)，因此例如當(dāng)在跟蹤對(duì)象全方位移動(dòng)變焦處理的全方位移動(dòng)后執(zhí)行的有/無(wú)活動(dòng)體的移動(dòng)的檢測(cè)期間檢測(cè)到活動(dòng)體的某個(gè)移動(dòng)時(shí)，可以以預(yù)定的短的時(shí)間間隔另外附加地重復(fù)附加跟蹤對(duì)象全方位移動(dòng)處理。
此外，在上述說(shuō)明中，盡管將傳感器照相機(jī)121用作用于拍攝所監(jiān)控的整個(gè)區(qū)域的圖像的裝置，但是圖像拍攝裝置不局限于此，而可以使用任何圖像拍攝裝置，只要其可以拍攝整個(gè)區(qū)域的圖像即可。例如，可以用如圖18中所見(jiàn)的靜態(tài)照相機(jī)451代替圖6中所示的傳感器照相機(jī)121，其中該靜態(tài)照相機(jī)451可以實(shí)時(shí)地執(zhí)行360度的全方位圖像拍攝。
此外，如圖19中所見(jiàn)，可以另外提供靜態(tài)照相機(jī)471，并將其連接到網(wǎng)絡(luò)131。在這種情況下，客戶機(jī)PC 132的活動(dòng)體檢測(cè)模塊303還檢測(cè)固定圖像中的活動(dòng)體，并使得在需要時(shí)顯示該靜態(tài)圖像，其中該固定圖像是利用靜態(tài)照相機(jī)471通過(guò)圖像拍攝所獲得的活動(dòng)圖片。
此外，盡管上述說(shuō)明中的傳感器照相機(jī)121和變焦照相機(jī)122為采用了全方位移動(dòng)型驅(qū)動(dòng)系統(tǒng)的類型，但是它們不局限于此，而可以使用任何其它驅(qū)動(dòng)系統(tǒng)的照相機(jī)，只要其可以拍攝區(qū)域21的圖像即可。
此外，盡管上文所述的監(jiān)控系統(tǒng)101使用包括傳感器照相機(jī)121和變焦照相機(jī)122的照相機(jī)單元111，但是可以用具有傳感器照相機(jī)121的功能和變焦照相機(jī)122的功能的單個(gè)照相機(jī)來(lái)代替該照相機(jī)單元111。
此外，盡管上述說(shuō)明涉及將本發(fā)明應(yīng)用于監(jiān)控系統(tǒng)的例子，但是本發(fā)明可以應(yīng)用于有效拍攝活動(dòng)體的圖像的任何系統(tǒng)，并且本發(fā)明的應(yīng)用不局限于監(jiān)控系統(tǒng)。
根據(jù)上述監(jiān)控系統(tǒng)，由于在活動(dòng)體移動(dòng)到可以拍攝該活動(dòng)體的圖像的位置的過(guò)程中的圖像(在執(zhí)行例如全方位移動(dòng)變焦處理的處理時(shí)的圖像)被最小化，因此可以拍攝預(yù)定區(qū)域的圖像，并可以準(zhǔn)確拍攝該區(qū)域中的活動(dòng)體的圖像。結(jié)果，可以滿意地觀察所拍攝的圖像。
盡管可以通過(guò)硬件執(zhí)行上述一系列處理，但是也可以通過(guò)軟件來(lái)執(zhí)行。在通過(guò)軟件來(lái)執(zhí)行該一系列處理的情況下，將編寫(xiě)該軟件的程序從記錄介質(zhì)安裝在包含于專用硬件中的計(jì)算機(jī)中，或者例如安裝在通過(guò)安裝各種程序可以執(zhí)行各種功能的通用個(gè)人計(jì)算機(jī)中。
在其上或其中記錄程序的記錄介質(zhì)可作為如圖7中所示的可移動(dòng)介質(zhì)211而形成，該可移動(dòng)介質(zhì)211例如磁盤(pán)(包括軟盤(pán))、光盤(pán)(包括CD-ROM(只讀式光盤(pán))和DVD(數(shù)字多功能光盤(pán)))、磁光盤(pán)(包括MD(迷你光盤(pán)))、或半導(dǎo)體存儲(chǔ)器，具有記錄在其上或其中的該程序，并對(duì)其進(jìn)行分發(fā)以將該程序獨(dú)立于計(jì)算機(jī)提供給用戶，或者作為包括在存儲(chǔ)器部分208中的硬盤(pán)而形成，該存儲(chǔ)器部分208具有記錄在其中或其上的該程序，并以包含在計(jì)算機(jī)中的形式將其提供給用戶。
應(yīng)該注意，在本說(shuō)明書(shū)中，說(shuō)明記錄在記錄介質(zhì)中或記錄介質(zhì)上的程序的步驟可以但不是必須按照所述順序的時(shí)間序列來(lái)處理，該步驟包括被并行或單獨(dú)執(zhí)行的處理，而不按照時(shí)間序列來(lái)處理(例如，并行處理或基于對(duì)象的處理)。
此外，可以由單個(gè)計(jì)算機(jī)來(lái)處理該程序，或者由多個(gè)計(jì)算機(jī)分散處理該程序。此外，可以將該程序傳輸?shù)竭h(yuǎn)程計(jì)算機(jī)并由該遠(yuǎn)程計(jì)算機(jī)來(lái)執(zhí)行該程序。
盡管使用特定條件說(shuō)明了本發(fā)明的優(yōu)選實(shí)施例，但是該說(shuō)明僅僅是為了例示性的目的，并且應(yīng)該理解，在不脫離以下權(quán)利要求書(shū)的精神或范圍的情況下，可以做出改變和變化。
權(quán)利要求
1.一種信息處理系統(tǒng)，包括區(qū)域圖像拍攝裝置，用于拍攝預(yù)定區(qū)域的圖像；檢測(cè)裝置，用于基于由所述區(qū)域圖像拍攝裝置通過(guò)圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；活動(dòng)體圖像拍攝裝置，用于拍攝由所述檢測(cè)裝置檢測(cè)到的活動(dòng)體的圖像；計(jì)算裝置，用于計(jì)算由所述檢測(cè)裝置檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)裝置，用于存儲(chǔ)由所述計(jì)算裝置所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制裝置，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制所述活動(dòng)體圖像拍攝裝置的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制裝置，用于在由所述第一活動(dòng)體圖像拍攝控制裝置控制所述活動(dòng)體圖像拍攝裝置后的定時(shí)，基于由所述第一活動(dòng)體圖像拍攝控制裝置控制了其圖像拍攝的該特定活動(dòng)體的視角信息，控制所述活動(dòng)體圖像拍攝裝置的圖像拍攝。
2.一種信息處理裝置，包括檢測(cè)裝置，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算裝置，用于計(jì)算由所述檢測(cè)裝置檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)裝置，用于存儲(chǔ)由所述計(jì)算裝置計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制裝置，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制所述活動(dòng)體圖像拍攝裝置的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制裝置，用于在由所述第一活動(dòng)體圖像拍攝控制裝置控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝。
3.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，還包括優(yōu)先級(jí)設(shè)置裝置，該優(yōu)先級(jí)設(shè)置裝置用于基于預(yù)定的條件，設(shè)置存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體各自的視角信息的優(yōu)先級(jí)；所述第一活動(dòng)體圖像拍攝控制裝置如下操作按照來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的由所述優(yōu)先級(jí)設(shè)置裝置所設(shè)置的優(yōu)先度的遞減順序，來(lái)選擇該特定的活動(dòng)體，并基于所選擇的活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝。
4.根據(jù)權(quán)利要求3所述的信息處理裝置，其特征在于，該預(yù)定條件包括活動(dòng)體移動(dòng)的時(shí)刻、區(qū)域圖像中的活動(dòng)體的位置、區(qū)域圖像中的活動(dòng)體的大小或活動(dòng)體的高寬比。
5.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，所述第一活動(dòng)體圖像拍攝控制裝置基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)裝置中的活動(dòng)體的視角信息內(nèi)的該特定活動(dòng)體的視角信息，控制圖像拍攝時(shí)活動(dòng)體的水平方向上的位置、垂直方向上的位置和望遠(yuǎn)倍率。
6.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，所述第二活動(dòng)體圖像拍攝控制裝置在由所述第一活動(dòng)體圖像拍攝控制裝置控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，控制圖像拍攝時(shí)該活動(dòng)體的水平方向上的位置和垂直方向上的位置。
7.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，所述第二活動(dòng)體圖像拍攝控制裝置在由所述第一活動(dòng)體圖像拍攝控制裝置控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，以預(yù)定的時(shí)間間隔按預(yù)定的次數(shù)控制該活動(dòng)體的圖像拍攝。
8.根據(jù)權(quán)利要求2所述的信息處理裝置，其特征在于，在由所述第一活動(dòng)體圖像拍攝控制裝置控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，開(kāi)始該特定活動(dòng)體的圖像拍攝。
9.一種信息處理方法，包括以下步驟檢測(cè)步驟，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算步驟，用于計(jì)算通過(guò)該檢測(cè)步驟中的處理檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)步驟，用于存儲(chǔ)通過(guò)該計(jì)算步驟中的處理所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制步驟，用于基于來(lái)自通過(guò)該視角信息存儲(chǔ)步驟中的處理所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制步驟，用于在通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制了其圖像拍攝的該特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
10.一種用于使計(jì)算機(jī)執(zhí)行處理的程序，包括以下步驟檢測(cè)步驟，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算步驟，用于計(jì)算通過(guò)該檢測(cè)步驟中的處理檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)步驟，用于存儲(chǔ)通過(guò)該計(jì)算步驟中的處理所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制步驟，用于基于來(lái)自通過(guò)該視角信息存儲(chǔ)步驟中的處理所存儲(chǔ)的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，控制該活動(dòng)體的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制步驟，用于在通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制活動(dòng)體的圖像拍攝后的定時(shí)，基于通過(guò)該第一活動(dòng)體圖像拍攝控制步驟中的處理控制其圖像拍攝的該特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
11.一種信息處理系統(tǒng)，包括區(qū)域圖像拍攝部分，用于拍攝預(yù)定區(qū)域的圖像；檢測(cè)部分，用于基于由所述區(qū)域圖像拍攝部分通過(guò)圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；活動(dòng)體圖像拍攝部分，用于拍攝由所述檢測(cè)部分檢測(cè)到的該活動(dòng)體的圖像；計(jì)算部分，用于計(jì)算由所述檢測(cè)部分檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)部分，用于存儲(chǔ)由所述計(jì)算部分所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制部分，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)部分中的活動(dòng)體的視角信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，來(lái)控制所述活動(dòng)體圖像拍攝部分的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制部分，用于在由所述第一活動(dòng)體圖像拍攝控制部分控制所述活動(dòng)體圖像拍攝部分后的定時(shí)，基于由所述第一活動(dòng)體圖像拍攝控制部分控制了其圖像拍攝的該特定活動(dòng)體的視角信息，來(lái)控制所述活動(dòng)體圖像拍攝部分的圖像拍攝。
12.一種信息處理裝置，包括檢測(cè)部分，用于基于通過(guò)預(yù)定區(qū)域的圖像拍攝所獲得的區(qū)域圖像，來(lái)檢測(cè)存在于該預(yù)定區(qū)域中的活動(dòng)體；計(jì)算部分，用于計(jì)算由所述檢測(cè)部分檢測(cè)到的每一活動(dòng)體的視角；視角信息存儲(chǔ)部分，用于存儲(chǔ)由所述計(jì)算部分所計(jì)算的一個(gè)以上活動(dòng)體各自的視角信息；第一活動(dòng)體圖像拍攝控制部分，用于基于來(lái)自存儲(chǔ)在所述視角信息存儲(chǔ)部分中的活動(dòng)體視角的信息內(nèi)的特定的一個(gè)活動(dòng)體的視角信息，來(lái)控制所述活動(dòng)體圖像拍攝部分的圖像拍攝；以及第二活動(dòng)體圖像拍攝控制部分，用于在由所述第一活動(dòng)體圖像拍攝控制部分控制該活動(dòng)體的圖像拍攝后的定時(shí)，基于該特定活動(dòng)體的視角信息，來(lái)控制該活動(dòng)體的圖像拍攝。
全文摘要
公開(kāi)了一種信息處理系統(tǒng)、信息處理裝置、方法和程序，該信息處理裝置可以準(zhǔn)確拍攝活動(dòng)體的詳細(xì)的圖像。跟蹤對(duì)象全方位移動(dòng)變焦模塊以預(yù)定的時(shí)間間隔讀出存儲(chǔ)在活動(dòng)體跟蹤等級(jí)管理數(shù)據(jù)庫(kù)中的活動(dòng)體信息，并基于作為與具有最高優(yōu)先級(jí)的活動(dòng)體的視角相對(duì)應(yīng)的出現(xiàn)信息的視角信息，控制變焦照相機(jī)的全方位移動(dòng)。此時(shí)，以遠(yuǎn)遠(yuǎn)短于重復(fù)跟蹤對(duì)象全方位移動(dòng)變焦處理的時(shí)間間隔的預(yù)定的時(shí)間間隔，附加跟蹤對(duì)象全方位移動(dòng)模塊讀出活動(dòng)體跟蹤等級(jí)管理數(shù)據(jù)庫(kù)的最新的活動(dòng)體信息，并進(jìn)一步重復(fù)控制變焦照相機(jī)的全方位移動(dòng)。
文檔編號(hào)H04N5/92GK1829319SQ200610058250
公開(kāi)日2006年9月6日 申請(qǐng)日期2006年2月28日 優(yōu)先權(quán)日2005年2月28日
發(fā)明者宮牧秀宇, 鈴木雅晴, 田村朝子 申請(qǐng)人:索尼株式會(huì)社