監(jiān)視方法和攝像的制造方法
【專利摘要】提供一種方法和系統(tǒng)用于通過監(jiān)視攝像機(1)監(jiān)視一區(qū)域。在監(jiān)視區(qū)域(2)內(nèi)限定保護(hù)區(qū)(5),并且檢測作為既出現(xiàn)在保護(hù)區(qū)內(nèi)又出現(xiàn)在保護(hù)區(qū)外的對象的可疑對象(9a,9b)。確定可疑對象的關(guān)鍵位置,并確定關(guān)鍵位置是在保護(hù)區(qū)(5)內(nèi)還是在保護(hù)區(qū)(5)外。如果關(guān)鍵位置在保護(hù)區(qū)外,則觸發(fā)第一動作。
【專利說明】監(jiān)視方法和攝像機
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及用監(jiān)視攝像機監(jiān)視一區(qū)域的方法和系統(tǒng)。
【背景技術(shù)】
[0002]監(jiān)視攝像機目前被用于許多不同領(lǐng)域,用于監(jiān)視室內(nèi)和室外環(huán)境。攝像機可例如用于監(jiān)視人從柜臺后面為客戶服務(wù)的區(qū)域,和僅限柜臺服務(wù)人員接近的用于存儲物品或設(shè)備的柜臺內(nèi)部區(qū)域。這些環(huán)境的例子可以是賓館的前臺,銀行的柜臺,接待臺,酒吧,快餐的柜臺,加油站的收銀臺,或者機場登記處柜臺。另一例子是在配有服務(wù)員的柜臺賣香水、珠寶或手表的商場或精品店。當(dāng)柜臺服務(wù)員在為客戶服務(wù)的時候,他/她可能很難了解其它接近柜臺并可能試圖接近僅由柜臺服務(wù)員管理的商品或設(shè)備的人。因此,期望提供改進(jìn)的解決方法以幫助管理柜臺的服務(wù)員阻止非法接近柜臺后面的區(qū)域。
【發(fā)明內(nèi)容】
[0003]基于以上原因,本發(fā)明的目的是提供用于監(jiān)視諸如零售柜臺之類的區(qū)域的改進(jìn)的方法。
[0004]根據(jù)本發(fā)明的第一方面,提供一種用監(jiān)視攝像機監(jiān)視一區(qū)域的方法,該方法包含以下步驟:
[0005]限定監(jiān)視區(qū)域內(nèi)的保護(hù)區(qū),
[0006]檢測作為既出現(xiàn)在保護(hù)區(qū)內(nèi)又出現(xiàn)在保護(hù)區(qū)外的對象的可疑對象,
[0007]確定所述可疑對象的關(guān)鍵位置,
[0008]確定所述關(guān)鍵位置是在所述保護(hù)區(qū)內(nèi)還是在所述保護(hù)區(qū)外,并且
[0009]如果所述關(guān)鍵位置在所述保護(hù)區(qū)外,則觸發(fā)第一動作。
[0010]使用該方法,可以一種有效并且無干擾的方式來監(jiān)視柜臺周圍的區(qū)域,運行建立只允許具有某些特性的對象接近某些區(qū)域的規(guī)則。換言之,本方法使得有可能容易地且有效的建立對象位置辨別規(guī)則。本方法具有靈活性,可被用于不同的監(jiān)視情景以及各種不同的實際實施。
[0011]本方法可進(jìn)一步包括限定所述監(jiān)視區(qū)域內(nèi)的遮擋區(qū)的步驟,其中所述第一動作包括執(zhí)行以下步驟:確定所述關(guān)鍵位置是否在所述遮擋區(qū)外,以及如果所述關(guān)鍵位置在所述遮擋區(qū)外,則觸發(fā)第二動作。這引入了附加的可能以對不同的監(jiān)視情景調(diào)整該方法,不同的監(jiān)視情景例如期望允許從某一方向進(jìn)入保護(hù)區(qū)。
[0012]限定保護(hù)區(qū)的步驟可包括檢測圍繞所述保護(hù)區(qū)的至少一部分的物理要素的邊界。以這種方式,有可能通過讓系統(tǒng)檢測柜臺的邊界并將保護(hù)區(qū)限定為例如柜臺后面的區(qū)域或柜臺內(nèi)部的空間,來進(jìn)行監(jiān)視系統(tǒng)的自動建立。
[0013]附加地或可替代地,限定保護(hù)區(qū)的步驟可包括獲取預(yù)先限定的保護(hù)區(qū)的坐標(biāo)。以這種方式,用戶可以例如在提供用戶友好方式來建立系統(tǒng)的圖形用戶界面中畫出保護(hù)區(qū)的界限。這可與自動檢測物理要素的邊界相結(jié)合,如由用戶通過用戶界面確認(rèn)檢測到的邊界。[0014]限定保護(hù)區(qū)的步驟可包括限定三維保護(hù)空間,并且確定關(guān)鍵位置是在保護(hù)區(qū)內(nèi)還是在保護(hù)區(qū)外的步驟可包括確定可疑對象是在保護(hù)空間的二維投影內(nèi)還是在保護(hù)空間的二維投影外。這使得有可能將柜臺后面并在柜臺的上表面以下的空間設(shè)定為保護(hù)區(qū),而且還能夠忽視站在柜臺后面的人。
[0015]檢測可疑對象的步驟可包括檢測保護(hù)區(qū)內(nèi)的對象像素,并確定對象像素所屬的對象是否出現(xiàn)在保護(hù)區(qū)外。這就提供了一種易實現(xiàn)并且高效的檢測可疑對象的方法。
[0016]確定可疑對象的關(guān)鍵位置的步驟可包括將關(guān)鍵位置設(shè)定為可疑對象中包括的像素的像素坐標(biāo)的平均位置。這就提供了一種易實現(xiàn)并且高效的尋找關(guān)鍵位置的方法,該方法可被用于三維和二維的對象表示。
[0017]確定關(guān)鍵位置的步驟可包括將關(guān)鍵位置設(shè)定為可疑對象的最高點的位置。如果監(jiān)視系統(tǒng)中包括具有高度測量能力的攝像機如具有三維成像能力的圖像傳感器時,這將是一種方便的選擇。為增加魯棒性,最高點位置可被選為對象的十個最高點位置的平均值或中值。一個人的最高點通常是他的頭部,意味著在大多數(shù)情況下這會是這個人站在哪里的正確估計。
[0018]確定關(guān)鍵位置的步驟可包括如果可疑對象中包括的預(yù)定百分比的像素在保護(hù)區(qū)夕卜,則將關(guān)鍵位置設(shè)定為保護(hù)區(qū)外的位置。這對可用對象的三維表示以及可用對象的二維表示都是一種方便的選擇。如果使用熱感攝像機,這也是一種方便的選擇。百分比例如可被選為50%或70%或例如通過反復(fù)試驗給出正確的估計而確定的任何值。
[0019]確定關(guān)鍵位置的步驟可包括將關(guān)鍵位置設(shè)定為可疑對象的最高溫度的位置。人的溫度通常在頭部區(qū)域最高,意味著這通常是人的身體位于哪里的正確估計。為增加魯棒性,可以將最高溫度位置設(shè)定為例如十個最高溫度位置的平均值或中值。還可以添加其它標(biāo)準(zhǔn)使得最高溫度必須被合理的高溫區(qū)域圍繞。
[0020]確定關(guān)鍵位置的步驟可包括將關(guān)鍵位置設(shè)定為使用一系列對象類別符檢測到的可疑對象的一部分,一系列的對象類別符例如為臉,頭,雙肩,帽子中之一。這使得能夠輕松地將這種關(guān)鍵位置確定適用于各種不同的監(jiān)視情景。
[0021]根據(jù)本發(fā)明的第二方面,用于監(jiān)視一區(qū)域的監(jiān)視系統(tǒng)包括監(jiān)視攝像機、被布置為限定監(jiān)視區(qū)域內(nèi)的保護(hù)區(qū)的區(qū)限定單元、被布置為檢測作為既出現(xiàn)在保護(hù)區(qū)內(nèi)又出現(xiàn)在保護(hù)區(qū)外的對象的可疑對象的可疑對象檢測單元、被布置為確定可疑對象的關(guān)鍵位置并確定關(guān)鍵位置是在保護(hù)區(qū)內(nèi)還是在保護(hù)區(qū)外的對象位置確定單元,以及被布置為如果關(guān)鍵位置被確定在保護(hù)區(qū)外時觸發(fā)第一動作的動作觸發(fā)單元。
[0022]為確定對象的關(guān)鍵位置,對象位置確定單元可包括對象類別符單元,高度測量單元或熱度測量單元中的一個或多個,來確定對象類別符,對象的高度或?qū)ο蟮臏囟取?br>
[0023]根據(jù)本發(fā)明的第三個方面,一種計算機可讀記錄介質(zhì),其上記錄有當(dāng)在具有處理能力的裝置上執(zhí)行時實施根據(jù)權(quán)利要求1-12中的任意一項的方法的程序。
[0024]本發(fā)明的第二方面和第三方面都具備以上關(guān)于第一方面所述的同樣優(yōu)點。
[0025]本發(fā)明的進(jìn)一步的適用范圍會從下面所給出的詳細(xì)描述而變得更加明顯。然而,應(yīng)該理解,詳細(xì)描述和具體例子,雖然指出了本發(fā)明的優(yōu)先實施例,但卻僅用于例示,因為對本領(lǐng)域技術(shù)人員來說從這些詳細(xì)描述來看對本發(fā)明范圍內(nèi)的各種變化和修改是顯而易見的。因此,應(yīng)該理解本發(fā)明并不局限于所描述的裝置的特殊的構(gòu)成部分或者所描述的方法的步驟,因為這些裝置和方法是會變化的。也應(yīng)該理解,本文中用到的術(shù)語僅為了描述特定實施例,并非為了限制。必須注意,如被用于說明書和權(quán)利要求,冠詞“一”,“所述”是為了表示除非在文中有清楚的指明外,否則還存在一個或多個元素。因此,例如提到“一傳感器”或“所述傳感器”可包括若干個裝置,等等。而且,詞語“包括”并不排除其它元素或者步驟。
【專利附圖】
【附圖說明】
[0026]現(xiàn)將通過例子并參照所附示意圖對本發(fā)明進(jìn)行更詳細(xì)描述,附圖中:
[0027]圖1示出監(jiān)視攝像機監(jiān)視一區(qū)域。
[0028]圖2以俯視圖例示監(jiān)視區(qū)域。
[0029]圖3以俯視圖例不另一監(jiān)視區(qū)域。
[0030]圖4以剖視圖例示再一監(jiān)視區(qū)域。
[0031]圖5示出監(jiān)視系統(tǒng)。
[0032]圖6示出監(jiān)視一區(qū)域的方法。
【具體實施方式】
[0033]圖1例示監(jiān)視攝像機I被布置為監(jiān)視區(qū)域3的示例性情形。監(jiān)視攝像機I可代表一組具有不同成像能力的監(jiān)視攝像機或包括若干圖像傳感器的攝像機。這個或這些攝像機可以例如包括捕獲可見光圖像的圖像傳感器,產(chǎn)生監(jiān)視區(qū)域內(nèi)的溫度的圖像的熱傳感器,或者捕獲三維圖像的圖像傳感器,例如飛行時間TOF圖像傳感器,它給出到不同像素的距離的圖像,以此有可能計算出監(jiān)視區(qū)域及其中對象的深度或者高度。
[0034]監(jiān)視區(qū)域3包含保護(hù)區(qū)5,保護(hù)區(qū)5在所例示的示例中通過例如柜臺形式的物理要素7限定。對象9a、9b、9c出現(xiàn)在監(jiān)視區(qū)域3內(nèi)。圖2為圖1所例示情況的俯視圖。換言之,圖2示意性地例示出由攝像機I捕獲的圖像??梢宰⒁獾?,如果使用具有三維成像能力的監(jiān)視系統(tǒng),則可通過一個或多個平面限定保護(hù)區(qū),或者如果使用具有二維成像能力的監(jiān)視系統(tǒng),則可通過一條或多條線來限定保護(hù)區(qū)。
[0035]在圖1和2所示的情況下,有可疑目的的客戶,對象9a,站在柜臺7旁邊并且觸及柜臺后面的區(qū)域,例如保護(hù)區(qū)5,試圖獲得僅通過柜臺出售的貴重物品。代表柜臺店員的對象9b正忙于與另一個客戶對象9c交談。因此,對象9b沒有注意到對象9a正在非法接近柜臺后面的物品。
[0036]根據(jù)在此介紹的方法和裝置,通過分析由監(jiān)視攝像機捕獲的圖像,以在第一步驟中找到同時出現(xiàn)在保護(hù)區(qū)內(nèi)和保護(hù)區(qū)外的對象,可防止從柜臺后面的盜竊。由于這些對象是需要進(jìn)一步分析以確定他們是否在進(jìn)行不被允許的行為的對象,因此可將這些對象標(biāo)示為可疑對象。
[0037]可以不同的方式進(jìn)行可疑對象的檢測。一種選擇是,找到保護(hù)區(qū)內(nèi)的任何對象像素,然后確定與那些對象像素相關(guān)聯(lián)的對象是否也存在于保護(hù)區(qū)外。后者可例如通過檢查是否有屬于同一對象的其它對象像素,以及那些其它對象像素中是否有在保護(hù)區(qū)外的來進(jìn)行。
[0038]如下文更詳細(xì)論述的那樣,也可使用對象的關(guān)鍵位置來直接確定對象是否存在于保護(hù)區(qū)外以及它的關(guān)鍵位置是否在保護(hù)區(qū)外。
[0039]另一選擇是對穿越劃定保護(hù)區(qū)5的邊界的線或平面進(jìn)行檢測。當(dāng)這樣的線或平面被穿越的時候,可假定某對象既出現(xiàn)的保護(hù)區(qū)內(nèi)也出現(xiàn)在保護(hù)區(qū)外,也就是說,與穿越線或平面有關(guān)的對象是可疑對象并且需要被進(jìn)一步核查。
[0040]返回圖1和圖2,顯然對象9a以及正把它的胳膊放在柜臺上并可能正伸手到柜臺外例如去給客戶9c看一件商品的店員9b都會被確定為可疑對象。為了忽略對象9b并僅對對象9a作出反應(yīng),對圖像作進(jìn)一步分析以找出既在保護(hù)區(qū)內(nèi)又在保護(hù)區(qū)外的每個對象,即對象9a和9b的關(guān)鍵位置。
[0041]當(dāng)發(fā)現(xiàn)一可疑對象具有在保護(hù)區(qū)外的關(guān)鍵位置時,以例如如下形式觸發(fā)一動作:光或聲音告警、錄入日志、開始從攝像機記錄圖像,或者其它形式的監(jiān)視動作,例如開始分析來自例如另一監(jiān)視裝置的圖像或傳感器輸入。本文所用的術(shù)語“動作”應(yīng)在廣義上被解釋,并應(yīng)理解它包含諸如攝像機檢測事件,或被檢測的事件正被攝像機傳送給例如視頻分析引擎之類的動作。因此,在該示例中,會針對對象9a觸發(fā)一動作。而對于店員對象9b來說,由于他的關(guān)鍵位置在保護(hù)區(qū)內(nèi),因此不會觸發(fā)動作。為了完整性,可以注意到,對象9c僅出現(xiàn)在保護(hù)區(qū)外,因此沒有必要找到他的關(guān)鍵位置。
[0042]對象的關(guān)鍵位置被設(shè)定為對象身體的主要部位可能位于的位置,或在某種意義上,對象所站的位置。有許多不同的選擇來確定對象的關(guān)鍵位置,并且不同的選擇可以合適的方式相結(jié)合以使得確定更加準(zhǔn)確。
[0043]一個例子是計算被確定屬于某一對象的像素的像素坐標(biāo)的平均值,并將對象的關(guān)鍵位置設(shè)定為所計算出的平均坐標(biāo)值。無論是在二維區(qū)域還是在三維空間,這也可被視為是確定對象的質(zhì)量中心或重心。
[0044]如果監(jiān)視系統(tǒng)中包括能夠確定監(jiān)視區(qū)域內(nèi)的對象的深度或高度的監(jiān)視攝像機,就可使用對象的最高點作為其關(guān)鍵位置。對象的最高點在大多數(shù)情況下是對象的頭在哪里的準(zhǔn)確度量。如果關(guān)于高度測量的正確性存在不確定性,為增加魯棒性,可將對象的最高點位置設(shè)定為例如測得的對象內(nèi)的十個最高點的坐標(biāo)的平均或中間位置。
[0045]另一選擇是,如果某一對象包括的預(yù)定的百分比的像素在保護(hù)區(qū)外,則判定該對象的關(guān)鍵位置在保護(hù)區(qū)外。這個百分比可為例如50%或70%或被視為適合本目的的其它值。
[0046]若監(jiān)視系統(tǒng)中包括熱敏攝像機,則可使用對象的溫度來設(shè)定關(guān)鍵位置。人的溫度通常在頭部區(qū)域最高,手和胳膊通常較冷。由此得出,可將檢測的對象的最高溫度的位置用作關(guān)鍵位置。例如為了區(qū)分對象的手中握著點燃的香煙的情況,也可以加入其它標(biāo)準(zhǔn),例如最高溫度必須被具有合理高溫的對象區(qū)域所環(huán)繞。若關(guān)于溫度測量的正確性存在不確定性,像最高點測量那樣,為增加魯棒性,可以將對象的最高溫度位置設(shè)定為如測量的對象內(nèi)的十個最高溫度的坐標(biāo)的中間位置。
[0047]對象的關(guān)鍵位置也可被設(shè)定為使用一系列對象類別符(classifier)檢測的對象的一部分的位置。對象類別符可以是例如:臉、頭、雙肩和帽子中之一。對象類別符的概念已如在US7,099,510中描述。
[0048]應(yīng)注意所描述的確定對象關(guān)鍵位置的所有方式都可在捕獲二維圖像以及捕獲包括深度坐標(biāo)的三維圖像時使用。
[0049]尋找可疑對象關(guān)鍵位置的不同方法可相互結(jié)合,若能得到關(guān)于對象的移動歷史的信息,則也可與其結(jié)合使用。通常,代表試圖非法接近柜臺后面的區(qū)域人的對象,將會具有在保護(hù)區(qū)外的區(qū)域內(nèi)接近柜臺的移動歷史。在柜臺工作的店員通常會有包括柜臺后面各個位置的移動歷史。另一選擇是將關(guān)于可疑對象的關(guān)鍵位置的信息與對象的不同特征相結(jié)合,例如若店員有其特定的著裝,這會被檢測到并用作附加的標(biāo)準(zhǔn)來忽略被歸為可疑對象的對象。
[0050]在找到可疑對象的步驟之前,可已分析攝像機捕捉的圖像來將前景從背景分離,并且已使用對象分割將攝像機影像中的對象分割。
[0051]當(dāng)分析對象時,可能發(fā)生需要拆分在圖像分析檢測中混合了的兩個對象的情況。這可能是如當(dāng)?shù)陠T正在與客戶握手或遞給客戶一件商品的情況。這可以通過增加以下步驟來避免:通過“切斷”那些具有胳膊厚度并且屬于關(guān)鍵位置在保護(hù)區(qū)外的對象的部分,然后計算與保護(hù)區(qū)內(nèi)的對象像素具有同一種類的對象的數(shù)量。如果該數(shù)量大于一,則是有兩個相混合的對象的指示,很有可能意味著沒有企圖盜竊發(fā)生。如果該數(shù)量等于一,則是有盜竊發(fā)生并應(yīng)當(dāng)觸發(fā)動作的指示。
[0052]圖3中示出另一種另外限定了遮擋(occlusion)區(qū)11的情況。這可被用于期望允許對象從某一方向進(jìn)入保護(hù)區(qū)5,并不觸發(fā)告警動作的情況。在這種情況下,當(dāng)發(fā)現(xiàn)一個對象,本例中的對象9d時,觸發(fā)第一動作,對象9d滿足上述兩個條件一既出現(xiàn)在保護(hù)區(qū)內(nèi)又出現(xiàn)在保護(hù)區(qū)外且其關(guān)鍵位置在保護(hù)區(qū)外。在這種情況下的第一動作是另外檢查該對象的關(guān)鍵位置是在遮擋區(qū)11內(nèi)還是在遮擋區(qū)11外。
[0053]在圖3所示的情況下,對象9d的關(guān)鍵位置在遮擋區(qū)11內(nèi),因此將不會觸發(fā)第二動作。如果對象9d的關(guān)鍵位置在遮擋區(qū)外,則觸發(fā)暗示發(fā)生不正當(dāng)?shù)倪M(jìn)入保護(hù)區(qū)的行為的第二動作,如與上述參照圖1和圖2所述例子同類的動作。
[0054]圖4例示了利用在此所介紹的理論的另一種方式。在圖4中,保護(hù)區(qū)被限定為柜臺下面的空間。對象9a正試圖接近存放于柜臺內(nèi)的商品12。對象%,柜臺的服務(wù)員正在看另一個方向并沒有注意到企圖盜竊。當(dāng)對象9a將他的手10伸進(jìn)保護(hù)區(qū)5時,他將被檢測為可疑對象并被檢查他的關(guān)鍵位置是位于保護(hù)區(qū)5內(nèi)還是位于保護(hù)區(qū)5外,由于其顯然在保護(hù)區(qū)外,因此將觸發(fā)一動作。
[0055]為了將被允許的通常由店員9b接近柜臺內(nèi)部空間與企圖盜竊相區(qū)分,將柜臺后面的空間或區(qū)域限定為遮擋區(qū)11。當(dāng)對象9a伸手到保護(hù)區(qū)時所觸發(fā)的動作將是另外檢查可疑對象的關(guān)鍵位置是否在遮擋區(qū)11內(nèi)。在圖4中并不在其內(nèi),因此會觸發(fā)另一動作,如聲音或光告警,錄入日志或開始記錄。如果是對象%伸手到保護(hù)區(qū)5,則由于對象9b的關(guān)鍵位置在遮擋區(qū)內(nèi),因此不會觸發(fā)第二動作。
[0056]圖5示意性例示出監(jiān)視系統(tǒng)13。監(jiān)視系統(tǒng)包括監(jiān)視攝像機I以及布置為限定由監(jiān)視攝像機I監(jiān)視的區(qū)域3內(nèi)的保護(hù)區(qū)的限定單元15。保護(hù)區(qū)5可以例如由區(qū)限定單元15使用圖像分析來檢測圍繞保護(hù)區(qū)的至少一部分的物理要素7的邊界來限定。
[0057]另一選擇是區(qū)限定單元15獲取預(yù)定的保護(hù)區(qū)的坐標(biāo)。這些坐標(biāo)可已由用戶在用戶界面中限定,例如通過在圖形用戶界面畫出或由用戶輸入坐標(biāo)。一個選擇是限定穿過監(jiān)視區(qū)域的線,并限定保護(hù)區(qū)為線的一側(cè)的區(qū)域。也可以限定一個或多個平面來界定保護(hù)區(qū)。
[0058]保護(hù)區(qū)可被限定為區(qū)域或三維空間。在限定為三維空間的情況下,通常與使用3D攝像機相結(jié)合。在圖1-3所示的示例中,則可將保護(hù)區(qū)限定為柜臺后面,并在柜臺上表面相應(yīng)的水平面以下的空間。在圖4中,如已經(jīng)提到的,保護(hù)區(qū)被限定為柜臺的內(nèi)部空間。
[0059]如果限定了三維保護(hù)區(qū),當(dāng)確定可疑對象的關(guān)鍵位置是在其內(nèi)還是在其外時,使用它的二維投影可能是恰當(dāng)?shù)?。是否使用二維投影應(yīng)基于三維保護(hù)區(qū)是如何限定的而定。例如,若圖1中的保護(hù)區(qū)被限定為柜臺后面并在其表面的水平面下方的空間,當(dāng)確定可疑對象的關(guān)鍵位置是在保護(hù)區(qū)內(nèi)還是在保護(hù)區(qū)外時,使用它的二維投影可能更加方便。對象9b則肯定具有在保護(hù)區(qū)內(nèi)的關(guān)鍵位置,如果使用保護(hù)區(qū)的三維表示,則可能不是這樣。
[0060]遮擋區(qū)可以用與保護(hù)區(qū)同樣的方式由區(qū)限定單元15限定。應(yīng)該注意,例如如果期望允許從多于一個方向進(jìn)入柜臺后面的保護(hù)區(qū),則可使用一個以上的遮擋區(qū)。
[0061]監(jiān)視系統(tǒng)還包含可疑對象檢測單元17,其使用來自攝像機I的圖像數(shù)據(jù)和關(guān)于被限定的保護(hù)區(qū)5的數(shù)據(jù),來檢測作為既出現(xiàn)在保護(hù)區(qū)內(nèi)也出現(xiàn)在保護(hù)區(qū)外的對象的可疑對象。當(dāng)發(fā)現(xiàn)這樣的對象時,提供對象位置確定單元19來確定可疑對象的關(guān)鍵位置,并確定關(guān)鍵位置是在保護(hù)區(qū)5內(nèi)還是在保護(hù)區(qū)5外。
[0062]最后,提供動作觸發(fā)單元21,來在確定關(guān)鍵位置在保護(hù)區(qū)外時,觸發(fā)動作。如上所述,這個動作可以是光或聲音告警、錄入日志或開始一段記錄。如果限定了遮擋區(qū)11,這個動作(第一動作)將是由對象位置確定單元19開始檢查,來看關(guān)鍵位置是在遮擋區(qū)11內(nèi)還是在遮擋區(qū)11外。在那種情況下,如果確定可疑對象的關(guān)鍵位置也在遮擋區(qū)外,則動作觸發(fā)單元21將被用于觸發(fā)第二動作,第二動作則可以是如光或聲音告警、錄入日志、開始一段記錄。
[0063]單元15、17、19、21可以用硬件或元件或其組合來實現(xiàn)??梢岳缫栽诒O(jiān)視攝像機中的處理器上運行的軟件的形式或者以監(jiān)視攝像機中包括的硬件的形式,在監(jiān)視攝像機中提供單元15、17、19、21。單元15、17、19、21中的一個或多個也可被布置在分離的裝置中,它們也可被分在幾個裝置上。
[0064]圖6中例示根據(jù)本發(fā)明的實施例的方法600。在第一步驟601中,限定保護(hù)區(qū)。在第二步驟603中,檢測作為既出現(xiàn)在保護(hù)區(qū)內(nèi)又出現(xiàn)在保護(hù)區(qū)外的對象的可疑對象。
[0065]在下一步驟605中,檢測可疑對象的關(guān)鍵位置,并且在步驟607中確定關(guān)鍵位置是在保護(hù)區(qū)內(nèi)還是在保護(hù)區(qū)外。如果關(guān)鍵位置在保護(hù)區(qū)外,則在步驟609中觸發(fā)第一動作。如上文所述,這個動作可以是例如聲音或光告警、錄入日志或開始圖像的記錄。如果關(guān)鍵位置在保護(hù)區(qū)內(nèi),該方法會或者如圖6所例示,返回到檢測可疑對象的步驟603,或者返回到步驟601并用不同的方式限定保護(hù)區(qū)。另一個選擇是返回到步驟605并確定先前在步驟603中已檢測到的另一可疑對象的關(guān)鍵位置。
[0066]如果使用遮擋區(qū),這個區(qū)將在步驟611中被定義,并且在步驟609中觸發(fā)的動作一第一動作會是在步驟613中檢查關(guān)鍵位置是在遮擋區(qū)內(nèi)還是在遮擋區(qū)外。如果確定關(guān)鍵位置在遮擋區(qū)外,則在步驟615中觸發(fā)另一動作一第二動作。第二動作可以例如是聲音或者光告警、錄入日志或開始圖像的記錄,或者如上文所述關(guān)于沒有遮擋區(qū)情況的任何其它動作。
[0067]如果關(guān)鍵位置在遮擋區(qū)內(nèi),則不觸發(fā)動作,并且該方法可如圖6所例示返回到檢測可疑對象的步驟603,或該方法可返回到步驟601并用不同的方式限定保護(hù)區(qū),或該方法可返回到步驟611并用不同的方式限定遮擋區(qū)。另一種選擇是返回到步驟605并確定先前在步驟603中檢測到的另一可疑對象的關(guān)鍵位置。[0068]應(yīng)該理解,本領(lǐng)域的技術(shù)人員能夠以各種方式修改上述實施例并仍然利用上述實施例中所示的本發(fā)明的優(yōu)點。應(yīng)該注意,本文所介紹理論的延伸,使用一個以上的保護(hù)區(qū)是簡單明了的。
[0069]如果存在多于一臺攝像機或圖像傳感器,例如如果存在可見光攝像機和熱感攝像機或3D攝像機,則可以使用可見光攝像機來限定保護(hù)區(qū),并切換到使用熱感攝像機或3D攝像機來進(jìn)行對象的檢測和關(guān)鍵位置的分析。
[0070]因此,本發(fā)明并不局限于所示實施例,而應(yīng)僅由所附權(quán)利要求限定。
[0071]附圖標(biāo)記列表
[0072]1:監(jiān)視攝像機
[0073]3:監(jiān)視區(qū)域
[0074]5:保護(hù)區(qū)
[0075]7:物理要素
[0076]9a-d:對象
[0077]10:對象的手
[0078]11:遮擋區(qū)
[0079]12:存放于柜臺中的商品
[0080]13:監(jiān)視系統(tǒng)
[0081]15:區(qū)限定單元
[0082]17:可疑對象限定單元
[0083]19:對象位置確定單元
[0084]21:動作觸發(fā)單元
【權(quán)利要求】
1.用監(jiān)視攝像機(I)監(jiān)視一區(qū)域的方法,包括以下步驟: 限定(601)監(jiān)視區(qū)域(2)內(nèi)的保護(hù)區(qū)(5); 檢測(603)作為既出現(xiàn)在所述保護(hù)區(qū)內(nèi)又出現(xiàn)在所述保護(hù)區(qū)外的對象的可疑對象(9a,9b); 確定(605)所述可疑對象的關(guān)鍵位置; 確定(607)所述關(guān)鍵位置是在所述保護(hù)區(qū)(5)內(nèi)還是在所述保護(hù)區(qū)(5)外,并且 如果所述關(guān)鍵位置在所述保護(hù)區(qū)外,則觸發(fā)(609)第一動作; 其中所述可疑對象的關(guān)鍵位置是所述對象的身體的主要部分有可能位于的位置或所述對象所站的位置; 其中限定(601)保護(hù)區(qū)的步驟包括限定三維的保護(hù)空間;并且其中確定(605)所述關(guān)鍵位置是在所述保護(hù)區(qū)內(nèi)還是在所述保護(hù)區(qū)外的步驟包括確定所述關(guān)鍵位置是在所述保護(hù)空間的二維投影內(nèi)還是在所述保護(hù)空間的二維投影外。
2.如權(quán)利要求1所述的方法,進(jìn)一步包括以下步驟: 限定(611)所述監(jiān)視區(qū)域(2)內(nèi)的遮擋區(qū)(11); 其中所述第一動作包括執(zhí)行以下步驟:確定(613)所述關(guān)鍵位置是否在所述遮擋區(qū)外,以及如果所述關(guān)鍵位置在所述遮擋區(qū)外,則觸發(fā)(615)第二動作;并且 其中所述遮擋區(qū)是監(jiān)視區(qū)域的一部分,限定允許從某個方向進(jìn)入所述保護(hù)區(qū)。
3.如權(quán)利要求1所述的方法,其中限定保護(hù)區(qū)(5)的步驟包括檢測圍繞所述保護(hù)區(qū)的至少一部分的物理要素(7)的邊界。
4.如權(quán)利要求1所述的方法,其中限定保護(hù)區(qū)(5)的步驟包括獲取預(yù)先限定的保護(hù)區(qū)的坐標(biāo)。
5.如權(quán)利要求1所述的方法,其中檢測可疑對象的步驟包括檢測所述保護(hù)區(qū)內(nèi)的對象像素,并且確定所述對象像素所屬的對象是否出現(xiàn)在所述保護(hù)區(qū)外。
6.如權(quán)利要求1所述的方法,其中確定所述可疑對象的關(guān)鍵位置包括將所述關(guān)鍵位置設(shè)置為所述可疑對象中包括的像素的像素坐標(biāo)的平均位置。
7.如權(quán)利要求1所述的方法,其中確定關(guān)鍵位置的步驟包括將所述關(guān)鍵位置設(shè)置為所述可疑對象的最高點的位置。
8.如權(quán)利要求1所述的方法,其中確定關(guān)鍵位置的步驟包括:如果所述可疑對象中包括的預(yù)定百分比的像素在保護(hù)區(qū)外時,則將所述關(guān)鍵位置設(shè)置為所述保護(hù)區(qū)外的位置。
9.如權(quán)利要求1所述的方法,其中確定關(guān)鍵位置的步驟包括將所述關(guān)鍵位置設(shè)置為所述可疑對象的最高溫度的位置。
10.如權(quán)利要求1所述的方法,其中確定關(guān)鍵位置的步驟包括將所述關(guān)鍵位置設(shè)置為使用一系列對象類別符檢測的可疑對象的一部分的位置。
11.如權(quán)利要求10所述的方法,其中使用一系列對象類別符檢測的可疑對象的一部分是下列中之一:臉、頭、雙肩和帽子。
12.一種用于監(jiān)視一區(qū)域(2)的監(jiān)視系統(tǒng)(13),包括: 監(jiān)視攝像機(I); 區(qū)限定單元(15),被布置為限定監(jiān)視區(qū)域(2)內(nèi)的保護(hù)區(qū)(5); 可疑對象檢測單元(17),被布置為檢測作為既出現(xiàn)在所述保護(hù)區(qū)內(nèi)又出現(xiàn)在所述保護(hù)區(qū)外的對象的可疑對象; 對象位置確定單元(19),被布置為確定所述可疑對象的關(guān)鍵位置,并確定所述關(guān)鍵位置是在所述保護(hù)區(qū)內(nèi)還是在所述保護(hù)區(qū)外;和 動作觸發(fā)單元(21),被布置為如果所述關(guān)鍵位置被確定為在所述保護(hù)區(qū)外,則觸發(fā)第一動作; 其中所述可疑對象的關(guān)鍵位置是所述對象的身體的主要部分有可能位于的位置或所述對象所站的位置; 其中所述區(qū)限定單元(15)被布置為限定三維的保護(hù)空間;并且其中所述對象位置確定單元(19)被布置為確定所述可疑對象是在所述保護(hù)空間的二維投影內(nèi)還是在所述保護(hù)空間的二維投影外。
13.如權(quán)利要求12所述的監(jiān)視系統(tǒng),其中所述對象位置確定單元(19)包括下列中的一個或多個: 對象類別符單元,高度測量單元,和/或熱度測量單元。
14.一種計算機可讀記錄介質(zhì),在該介質(zhì)上記錄有用于在具有處理能力的設(shè)備上執(zhí)行時實施根據(jù)權(quán)利要求1所述 的方法的程序。
【文檔編號】H04N7/18GK103813138SQ201310481272
【公開日】2014年5月21日 申請日期:2013年10月15日 優(yōu)先權(quán)日:2012年11月12日
【發(fā)明者】丹尼爾·古斯塔夫松, 維·塞奇法爾克, 約納坦·卡爾斯特倫, 古斯塔·特雷夫 申請人:安訊士有限公司