用于生成人的活動總結(jié)的系統(tǒng)和方法
【專利說明】用于生成人的活動總結(jié)的系統(tǒng)和方法
[0001]相關(guān)申請的交叉引用
本申請要求美國臨時專利申請N0.61/700490(2012年9月13日提交，標(biāo)題為“Act1nbased video summarizat1n for convenience stores”)的權(quán)益，通過引用將其完整地結(jié)合到本文中。
【背景技術(shù)】
[0002]本文所公開的主題一般涉及生成人的活動總結(jié)。更具體來說，本主題涉及用于生成包括商業(yè)場所或環(huán)境中的人所執(zhí)行的潛在可疑動作的活動總結(jié)的系統(tǒng)和方法。
[0003]商業(yè)場所(例如百貨商店、便利店、小賣部、制造工廠、醫(yī)院等)面臨因安全問題、例如盜竊引起的收益的重大損失。
[0004]在努力減輕這種盜竊中，這些商業(yè)場所的一部分實現(xiàn)了用于檢測盜竊的自動跟蹤系統(tǒng)。這類自動跟蹤系統(tǒng)趨于具有許多缺陷。例如，由于盜竊行為的細微和復(fù)雜性，自動跟蹤系統(tǒng)一般構(gòu)造為對發(fā)出報警的事件極為敏感。這類自動跟蹤系統(tǒng)往往發(fā)出假報警，從而引起對例如客戶和便利店的保安人員的不便。備選地，自動化系統(tǒng)可降低靈敏度，并且遺漏大量盜竊活動。
[0005]因此，需要用于檢測這類盜竊的增強系統(tǒng)和方法。

【發(fā)明內(nèi)容】

[0006]按照本技術(shù)的一個方面，公開一種方法。該方法包括從一個或多個圖像捕獲裝置接收一個或多個視頻。該方法還包括從一個或多個視頻來生成人的視頻循環(huán)。視頻循環(huán)包括商業(yè)場所中的人的行程。該方法還包括從視頻循環(huán)來生成動作剪輯。動作剪輯包括商業(yè)場所中的人所執(zhí)行的可疑動作。該方法還包括生成人的活動總結(jié)，其中包括視頻循環(huán)和動作剪輯。
[0007]按照當(dāng)前系統(tǒng)的一個方面，公開一種系統(tǒng)。該系統(tǒng)包括跟蹤模塊，以用于從一個或多個圖像捕獲裝置接收一個或多個視頻，并且從一個或多個視頻來生成人的視頻循環(huán)。視頻循環(huán)包括商業(yè)場所中的人的行程。該系統(tǒng)還包括分析模塊，以用于從視頻循環(huán)來生成動作剪輯。動作剪輯包括商業(yè)場所中的人所執(zhí)行的可疑動作。該系統(tǒng)還包括總結(jié)生成器，以用于生成人的活動總結(jié)，其中包括視頻循環(huán)和動作剪輯。
[0008]按照本技術(shù)的一個方面，公開對指令進行編碼的計算機程序產(chǎn)品。指令在由處理器運行時使該處理器從一個或多個圖像捕獲裝置接收一個或多個視頻。指令還使處理器從一個或多個視頻來生成人的視頻循環(huán)。視頻循環(huán)包括商業(yè)場所中的人的行程。指令還使處理器從視頻循環(huán)來生成動作剪輯。動作剪輯包括商業(yè)場所中的人所執(zhí)行的可疑動作。指令還使處理器生成人的活動總結(jié)，其中包括視頻循環(huán)和動作剪輯。
【附圖說明】
[0009]通過參照附圖閱讀以下詳細描述，將會更好地了解本發(fā)明的這些及其他特征、方面和優(yōu)點，附圖中，相似標(biāo)號在附圖中通篇表示相似部件，附圖包括:
圖1是示出按照一個實施例、用于生成活動總結(jié)的系統(tǒng)的框圖；
圖2是示出按照一個實施例的視頻分析器的框圖；
圖3是按照一個實施例、包括商業(yè)場所中的人的活動總結(jié)的用戶界面的圖解表示；
圖4是按照一個實施例、用于生成商業(yè)場所中的人的活動總結(jié)的方法的流程圖；以及圖5是按照另一個實施例、用于生成商業(yè)場所中的人的活動總結(jié)的方法的流程圖。
【具體實施方式】
[0010]在以下說明書和權(quán)利要求書中，將參照定義成具有下列含意的多個術(shù)語。
[0011]單數(shù)形式“一”、“一個”、“該”和“所述”包括復(fù)數(shù)引用，除非上下文另加明確說明。
[0012]如本文所使用的術(shù)語“非暫時計算機可讀介質(zhì)”意在表示按照任何方法或技術(shù)所實現(xiàn)以用于信息(例如計算機可讀指令、數(shù)據(jù)結(jié)構(gòu)、程序模塊和子模塊或者任何裝置中的其他數(shù)據(jù))的短期和長期存儲的任何有形的基于計算機的裝置。因此，本文所述的方法可編碼為包含在有形非暫時計算機可讀介質(zhì)(非限制性地包括存儲裝置和/或存儲器裝置)中的可執(zhí)行指令。這類指令在由處理器運行時使該處理器執(zhí)行本文所述方法的至少一部分。此外，如本文所使用的術(shù)語“非暫時計算機可讀介質(zhì)”包括所有有形計算機可讀介質(zhì)，非限制性地包括非暫時計算機存儲裝置(非限制性地包括易失性和非易失性介質(zhì)、可拆卸和不可拆卸介質(zhì)，例如固件、物理的虛擬存儲裝置、CD-ROM、DVD)和任何其他數(shù)字源(例如網(wǎng)絡(luò)或因特網(wǎng))以及有待開發(fā)的數(shù)字部件，其中唯一例外是暫時傳播信號。
[0013]如本文所使用的術(shù)語“軟件”和“固件”是可互換的，并且包括存儲器中存儲的任何計算機程序，以供非限制性地包括移動裝置集群、個人計算機、工作站、客戶端和服務(wù)器的裝置執(zhí)行。
[0014]如本文所使用的術(shù)語“計算機”及相關(guān)術(shù)語、例如“計算裝置”并不局限于本領(lǐng)域稱作計算機的集成電路，而是廣義地表示至少一個微控制器、微處理器、可編程邏輯控制器(PLC)、專用集成電路以及其他可編程電路，并且這些術(shù)語在本文中可互換地使用。
[0015]本文所使用的近似語言在本說明書和權(quán)利要求書中通篇可適用于修改可準(zhǔn)許改變的任何定量表示，而沒有引起與其相關(guān)的基本功能的變化。相應(yīng)地，通過諸如“大約”和“基本上”之類的一個或多個術(shù)語所修改的值并不局限于所指定的精確值。在至少一些情況下，近似語言可對應(yīng)于用于測量該值的儀器的準(zhǔn)確度。在這里并且在整個說明書和權(quán)利要求書中，范圍限制可經(jīng)過組合和/或互換，這類范圍被標(biāo)識，并且包括其中包含的所有子范圍，除非上下文或語言另加說明。
[0016]本文描述用于生成人的活動總結(jié)的系統(tǒng)和方法。圖1示出按照一個實施例、用于生成活動總結(jié)的系統(tǒng)100的框圖。所示系統(tǒng)100包括多個圖像捕獲裝置120a、120b、120η(單獨或共同稱作圖像捕獲裝置120)和視頻分析器130，其經(jīng)由網(wǎng)絡(luò)170在通信上耦入口 ο
[0017]多個圖像捕獲裝置120是配置成記錄視頻的裝置類型，例如照相裝置、數(shù)字錄像機、攝像機、閉嘴電視、網(wǎng)絡(luò)攝像機等。在一個實施例中，圖像捕獲裝置120的至少一個還配置成測量深度數(shù)據(jù)，其表示物理世界的點與圖像捕獲裝置120之間的幾何距離。在一個實施例中，圖像捕獲裝置120安裝在商業(yè)場所(例如百貨商店、小賣部、便利店、保健診所、沙龍、機場、制造工廠等)，并且配置成記錄商業(yè)場所中的場景的視頻。
[0018]按照一個實施例，圖像捕獲裝置120經(jīng)由網(wǎng)絡(luò)170向視頻分析器130傳送所記錄的視頻和深度數(shù)據(jù)。圖像捕獲裝置120a、120b和120η分別經(jīng)由信號線125a、125b和125η在通信上耦合到網(wǎng)絡(luò)170。雖然在所示實施例中示出多個圖像捕獲裝置120，但是在其他實施例中，單個圖像捕獲裝置可耦合到網(wǎng)絡(luò)170。
[0019]視頻分析器130是任何類型的裝置，其配置用于分析從圖像捕獲裝置120所接收的視頻，并且生成活動總結(jié)。在一個實施例中，視頻分析器130接收商業(yè)場所的一個或多個視頻(其中包括例如深度數(shù)據(jù)等特征)，并且生成商業(yè)場所中一人或多人的活動總結(jié)。在所示系統(tǒng)100中，視頻分析器130包括視頻分析應(yīng)用140和顯示裝置150。視頻分析器130經(jīng)由信號線135在通信上耦合到網(wǎng)絡(luò)170。雖然在所示實施例中示出一個視頻分析器130，但是在其他實施例中，多個視頻分析器130可耦合到網(wǎng)絡(luò)170。下面參照圖2更詳細描述視頻分析器130。
[0020]在所示實施例中，顯示裝置150用來顯示視頻圖像和/或活動總結(jié)。雖然這個實施例示出顯示裝置150，但是用于包括其他告警的后處理數(shù)據(jù)的其他實施例處于本系統(tǒng)的范圍之內(nèi)。另外，顯示裝置150不必耦合到視頻分析器130，以及視頻圖像和活動總結(jié)能夠傳送給遠程顯示裝置150。
[0021]雖然所示實施例示出經(jīng)由網(wǎng)絡(luò)170在通信上耦合的圖像捕獲裝置120，但是在一個實施例，視頻分析器130耦合到圖像捕獲裝置120，使得在圖像捕獲裝置中執(zhí)行處理。
[0022]網(wǎng)絡(luò)170可以是有線或無線類型，并且可具有任何數(shù)量的配置，例如星形配置、令牌環(huán)配置或者其他已知配置。此外，網(wǎng)絡(luò)170可包括局域網(wǎng)(LAN)、廣域網(wǎng)(WAN)