種來判定是否符合該屬性。在此例中,作為外觀所涉及的屬性規(guī)定了是否戴口罩或是否戴墨鏡這兩種。另夕卜,作為狀態(tài)所涉及的屬性規(guī)定了是否移動速度快或是否以不能拍攝到面部的狀態(tài)進行移動這兩種。
[0039]下面詳細地進行敘述,圖像處理處理器4截取所輸入的視頻圖像中拍攝到的人的面部,判定是否符合外觀所涉及的屬性。另外,圖像處理處理器4追蹤所輸入的視頻圖像中拍攝到的人,判定是否符合狀態(tài)(移動狀態(tài))所涉及的屬性。
[0040]另外,圖像處理處理器4具有相當(dāng)于在本發(fā)明中所說的輸出圖像生成部的結(jié)構(gòu),生成基于針對上述屬性的判定結(jié)果的輸出圖像。
[0041]該圖像處理處理器4相當(dāng)于執(zhí)行本發(fā)明的圖像處理方法(執(zhí)行圖像處理程序)的計算機。
[0042]屬性判定結(jié)果數(shù)據(jù)庫5是如下這樣的數(shù)據(jù)庫:針對所輸入的視頻圖像中拍攝到的人,相關(guān)聯(lián)地登記了識別此人的ID、此人的面部圖像(從拍攝到此人的幀圖像中截取的面部圖像)、針對預(yù)定的多種屬性判定出的判定結(jié)果、以及所輸入的視頻圖像的再現(xiàn)開始位置(表示此人在視頻圖像中被拍攝的位置的時間數(shù)據(jù))。圖2是示出其屬性判定結(jié)果數(shù)據(jù)庫的結(jié)構(gòu)的圖。在此圖2中,O表示符合對應(yīng)的屬性,X表示不符合對應(yīng)的屬性。另外,對于符合面部隱藏的人(圖2所示的ID為0006的人),雖然也可以不登記面部圖像,但在此例中登記了圖像以能確認其打扮。屬性判定結(jié)果數(shù)據(jù)庫5是相當(dāng)于在本發(fā)明中所說的屬性判定結(jié)果存儲部的結(jié)構(gòu)。
[0043]操作部6具有鼠標(biāo)或鍵盤等輸入設(shè)備,接受操作者對圖像處理裝置I主體的輸入操作。操作者在操作部6中進行后述的物體的屬性種類指定所涉及的輸入操作等。圖像處理處理器4具有相當(dāng)于在本發(fā)明中所說的屬性指定接受部的結(jié)構(gòu),其接受由操作者在操作部6中進行的輸入操作所指定的物體的屬性種類。
[0044]輸出部7輸出圖像處理處理器4所生成的輸出圖像或?qū)D像輸入部3輸入的視頻圖像(再現(xiàn)圖像)。在輸出部7上連接顯示裝置(未圖示)。該顯示裝置顯示輸出部7所輸出的圖像。
[0045]以下,說明該圖像處理裝置I的動作。該圖像處理裝置I執(zhí)行以下所示的屬性判定結(jié)果數(shù)據(jù)庫作成處理、輸出圖像生成處理、再現(xiàn)處理等。
[0046]圖3是示出該圖像處理裝置中的屬性判定結(jié)果數(shù)據(jù)庫作成處理的流程圖。該圖像處理裝置I利用圖像處理處理器4按照時間順序來處理輸入圖像輸入部3的視頻圖像所涉及的幀圖像。
[0047]圖像處理處理器4檢測處理對象的幀圖像中拍攝的物體(Si)。在此例中,檢測的物體是人。在物體的檢測中,例如針對根據(jù)幀間差分圖像或背景差分圖像檢測出的每個移動體,通過模式匹配(pattern matching)將像人的形狀的物體檢測為人。
[0048]圖像處理處理器4作成按照在Si中檢測出的每個人,對應(yīng)關(guān)聯(lián)了用于識別處理對象的幀圖像的幀編號、從該幀圖像中截取出的此人的拍攝圖像、以及幀圖像上的位置(坐標(biāo))的檢測記錄(s2)。
[0049]圖像處理處理器4針對在s2中作成了檢測記錄的每個人,判定是否是在上次處理對象的幀圖像中也拍攝到的已檢測過的人(s3)。當(dāng)在s3中判定為是在上次處理對象的幀圖像中沒有拍攝到的人(即,在上次處理對象的幀圖像的拍攝時機與本次處理對象的幀圖像的拍攝時機之間出現(xiàn)的人)時,圖像處理處理器4對此人賦予ID (s4)。另外,圖像處理處理器4作成在s4中賦予的ID所涉及的人的物體映射圖(object map) (s5)。在s5中,采用在s4中賦予的ID來作成已登記在s2中作成的檢測記錄的物體映射圖。針對賦予了 ID的每個人區(qū)別地作成該物體映射圖。
[0050]另外,圖像處理處理器4當(dāng)在S3中判定為是已檢測過的人時,判定已經(jīng)賦予給此人的ID (s6)。另外,圖像處理處理器4對在s6中判定出的ID所涉及的物體映射圖進行追加登記在s2中作成的檢測記錄的物體映射圖的更新(s7)。
[0051]如上所述,針對在s2中作成了檢測記錄的每個人進行該s3?s7的處理。
[0052]圖像處理處理器4提取在上次處理對象的幀圖像中拍攝到而在本次處理對象的幀圖像中沒有拍攝到的人(完成檢測的人)(s8)。
[0053]圖像處理處理器4針對在s8中提取的每個人進行判定此人的屬性的屬性判定處理(s9)。在s9中,針對在s8中提取出的每個人,判定是否符合以下4個屬性:
[0054](I)是否戴口罩;
[0055](2)是否戴墨鏡;
[0056](3)是否移動速度快;
[0057](4)是否以不能拍攝到面部的狀態(tài)進行移動。
[0058]下面詳細地敘述該s9的屬性判定處理。另外,該s9的屬性判定處理與圖3所示的其它處理分離,也可以構(gòu)成為與該圖3所示的處理并行執(zhí)行。
[0059]圖像處理處理器4判定在輸入圖像輸入部3的視頻圖像中是否存在未處理的幀圖像(SlO)。當(dāng)存在未處理的幀圖像時,圖像處理處理器4將處理對象的幀圖像更新為時間上領(lǐng)先一個幀圖像的幀圖像(sll),并返回至Si。
[0060]另外,當(dāng)輸入圖像輸入部3的視頻圖像中不存在未處理的幀圖像時,圖像處理處理器4對在此時刻沒有判定屬性的人進行屬性判定處理(sl2)。sl2是與s9相同的處理,設(shè)置sl2是為了對于在輸入圖像輸入部3的視頻圖像的最后的幀圖像中拍攝到的人也判定屬性。
[0061]這里對s9以及sl2的屬性判定處理進行說明。圖4是示出該屬性判定處理的流程圖。該s9以及12的處理相當(dāng)于在本發(fā)明中所說的屬性判定步驟。
[0062]圖像處理處理器4針對要判定屬性的每個對象者反復(fù)地進行圖4所示的處理。即,圖4表示針對I個對象者的屬性判定處理。
[0063]圖像處理處理器4讀出針對對象者作成的物體映射圖(s21)。在該物體映射圖中,如上所述地,登記有按照拍攝了該對象者的每個幀圖像,對應(yīng)關(guān)聯(lián)了從該幀圖像中截取的對象者的拍攝圖像、幀圖像上的位置(坐標(biāo))的檢測記錄。
[0064]圖像處理處理器4從s21讀出的物體映射圖中檢測對象者的移動路徑以及移動速度(s22)。移動路徑根據(jù)在物體映射圖中登記的各檢測記錄的幀圖像上的位置(坐標(biāo))來獲得。移動速度根據(jù)幀圖像上的位置的變化量來獲得,因此,幀圖像上的距離與實際空間上的距離的關(guān)系是必要的。當(dāng)輸入圖像輸入部3的視頻圖像是利用設(shè)置在特定場所的攝像機拍攝的視頻圖像時,可以通過預(yù)先設(shè)定幀圖像上的距離與實際空間上的距離之間的關(guān)系,來檢測實際空間中的對象者的移動速度。
[0065]另一方面,在輸入圖像輸入部3的視頻圖像不是利用特定的攝像機拍攝的視頻圖像的情況(對根據(jù)此時的狀況輸入的視頻圖像進行拍攝的攝像機不同的情況)下,難以預(yù)先設(shè)定幀圖像上的距離與實際空間上的距離之間的關(guān)系。由于這樣的理由,在此例中構(gòu)成為不檢測實際空間上的移動速度而檢測幀圖像上的移動速度。
[0066]圖像處理處理器4根據(jù)在s22中檢測出的對象者的移動路徑來判定該對象者是否向能拍攝到面部的方向移動(s23)。例如,在對象者的移動方向是背向拍攝該視頻圖像的攝像機而遠離的方向時,判定為該對象者向無法拍攝到