專利名稱：基于視頻摘要、視頻檢索的視頻分析方法
技術(shù)領(lǐng)域：
本發(fā)明屬于視頻處理技術(shù)領(lǐng)域，涉及一種視頻分析方法，具體而言涉及一種基于視頻摘要、視頻檢索，進而自動獲取人的幾個關(guān)鍵特征的方法。
背景技術(shù)：
隨著視頻監(jiān)控網(wǎng)絡(luò)的發(fā)展，利用監(jiān)控視頻作為破案線索的視頻偵查已成為公安刑偵偵查的重要手段，極大程度地打擊了違法份子的犯罪行為。但是，目前的視頻偵查主要通過肉眼查看視頻來進行，效率低下而且很容易遺漏目標。即使得到了嫌疑目標如人的照片和視頻片段，其進一步應(yīng)用也只能通過人工偵查方式進行，對細節(jié)信息的獲取停留在經(jīng)驗層面，沒有流程保障。

發(fā)明內(nèi)容
為克服現(xiàn)有技術(shù)中的缺點，本發(fā)明的目的在于提供一種基于視頻摘要、視頻檢索的視頻分析方法，該視頻分析方法能提高視頻偵查尤其是嫌疑目標是人的偵查效率。為實現(xiàn)上述技術(shù)目的，達到上述技術(shù)效果，本發(fā)明通過以下技術(shù)方案實現(xiàn)一種基于視頻摘要、視頻檢索的視頻分析方法，其包括以下步驟步驟I)原始視頻導(dǎo)入從視頻監(jiān)控平臺獲取或本地存儲介質(zhì)拷貝獲取原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器；步驟2)判斷原始視頻是否需要進行視頻濃縮處理在視頻濃縮檢索客戶端上根據(jù)實際需要判斷原始視頻是否需要進行視頻濃縮處理，如果需要則進入步驟3，否則，直接則進入步驟4 ；步驟3)視頻濃縮處理首先，通過視頻濃縮檢索服務(wù)器進行視頻濃縮處理，得到包括所有運動目標的視頻摘要和所有運動目標的全快照；然后，根據(jù)所得的視頻摘要和全快照進行視頻檢索處理；步驟4)視頻檢索處理通過視頻濃縮檢索服務(wù)器進行視頻檢索處理，得到按特征相似度排列的運動目標的目標快照；步驟5)判斷是否需要進行圖像增強處理如果嫌疑目標的快照或視頻片段不夠清晰則進入步驟6，否則，直接進入步驟7 ;步驟6)圖像增強處理首先，調(diào)用圖像增強系統(tǒng)進行圖像增強處理，并進行局部區(qū)域的放大；所述圖像增強系統(tǒng)的圖像去模糊的過程，主要是通過模糊內(nèi)核對模糊圖像解卷積實現(xiàn)；然后，進行人像偵查處理；步驟7)人像偵查處理
在視頻濃縮檢索客戶端上調(diào)用人像偵查系統(tǒng)進行人像偵查，人像偵查系統(tǒng)可自動輸出人的幾個明顯特征，包括人臉特寫、上衣、手部、鞋子及背包特寫照片；步驟8)所述的特寫照片可以直接作為線索，也可以作為特征輸入視頻濃縮檢索系統(tǒng)中以圖搜圖，進一步檢索獲取更多信息；步驟9)將得到的人臉特寫結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)或違法犯罪信息資源查詢系統(tǒng)等進行進一步偵查。優(yōu)選的，在步驟I中，通過硬盤快速拷貝方法進行快速拷貝實現(xiàn)原始視頻的導(dǎo)入。進一步的，視頻濃縮檢索服務(wù)器處理時包括以下步驟首先，采用了動態(tài)紋理建模方法，精確處理視頻背景變化，進行背景建模；然后，視頻的邊界檢測，找出視頻中的突變和漸變變化，挨幀進行視頻的分割，提取運動目標對象，將獲取的運動目標相關(guān)信息如大小、顏色或運動方向存入數(shù)據(jù)庫；最后，根據(jù)數(shù)據(jù)庫的內(nèi)容得到檢索結(jié)果，或者列出所有運動目標的照片，或者進行視頻拼接，將運動目標拼接回背景中形成時間大為縮短的濃縮視頻。進一步的，在步驟5之間還包括以下步驟通過人工對視頻摘要、全快照或目標照片的偵查，找到嫌疑目標的快照及對應(yīng)的視頻片段。本發(fā)明的有益效果是1、提聞海量視頻偵查的效率，減少目標遺漏的可能；2、采用了圖像增強處理，提高運動模糊、散焦模糊等不良圖像的質(zhì)量；3、如果嫌疑目標是人，能自動獲取人的幾個關(guān)鍵特征，包括臉部特寫，上衣尤其是logo，手部特寫，鞋子、背包的照片，使視頻智能分析的結(jié)果應(yīng)用更智能。上述說明僅是本發(fā)明技術(shù)方案的概述，為了能夠更清楚了解本發(fā)明的技術(shù)手段，并可依照說明書的內(nèi)容予以實施，以下以本發(fā)明的較佳實施例并配合附圖詳細說明如后。本發(fā)明的具體實施方式
由以下實施例及其附圖詳細給出。


此處所說明的附圖用來提供對本發(fā)明的進一步理解，構(gòu)成本申請的一部分，本發(fā)明的示意性實施例及其說明用于解釋本發(fā)明，并不構(gòu)成對本發(fā)明的不當限定。在附圖中圖1本發(fā)明的基于視頻摘要、視頻檢索的視頻分析方法的流程示意圖。
具體實施例方式下面將參考附圖并結(jié)合實施例，來詳細說明本發(fā)明。參見圖1所示，一種基于視頻摘要、視頻檢索的視頻分析方法，其包括以下步驟步驟I)原始視頻導(dǎo)入從視頻監(jiān)控平臺獲取或本地存儲介質(zhì)拷貝獲取原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器；步驟2)判斷原始視頻是否需要進行視頻濃縮處理在視頻濃縮檢索客戶端上根據(jù)實際需要判斷原始視頻是否需要進行視頻濃縮處理，如果需要則進入步驟3，否則，直接則進入步驟4 ；步驟3)視頻濃縮處理
首先，通過視頻濃縮檢索服務(wù)器進行視頻濃縮處理，得到包括所有運動目標的視頻摘要和所有運動目標的全快照；然后，根據(jù)所得的視頻摘要和全快照進行視頻檢索處理；步驟4)視頻檢索處理通過視頻濃縮檢索服務(wù)器進行視頻檢索處理，得到按特征相似度排列的運動目標的目標快照；步驟5)判斷是否需要進行圖像增強處理如果嫌疑目標的快照或視頻片段不夠清晰則進入步驟6，否則，直接進入步驟7 ；步驟6)圖像增強處理首先，調(diào)用圖像增強系統(tǒng)進行圖像增強處理，并進行局部區(qū)域的放大；然后，進行人像偵查處理；步驟7)人像偵查處理在視頻濃縮檢索客戶端上調(diào)用人像偵查系統(tǒng)進行人像偵查，人像偵查系統(tǒng)可自動輸出人的幾個明顯特征，包括人臉特寫、上衣、手部、鞋子及背包特寫照片；步驟8)所述的特寫照片可以直接作為線索，也可以作為特征輸入視頻濃縮檢索系統(tǒng)中以圖搜圖，進一步檢索獲取更多信息；步驟9)將得到的人臉特寫結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)或違法犯罪信息資源查詢系統(tǒng)進行進一步偵查。實施例1 :如果某地發(fā)生重大搶劫傷人案，從偽裝和逃竄等方式來看，這是一起經(jīng)過精心謀劃的作案。其他偵查方式未果后轉(zhuǎn)向視頻偵查，準備從嫌犯踩點作為突破口。但問題是需要查看的視頻數(shù)量過大。通常需要查看的視頻包括案發(fā)前一個月的視頻。周圍雖然只有5個強相關(guān)的攝像頭，但晝夜錄像，視頻總量為3600小時。即使10個人每天看12小時，也需要看一個月，工作量太大，且很容易遺漏目標。那通過這本實施例的基于視頻摘要、視頻檢索的視頻分析方法會是怎樣處理呢？1:從監(jiān)控平臺或本地存儲介質(zhì)中拷貝原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器。如果本地服務(wù)器資源緊張，還可以通過公安專網(wǎng)，調(diào)用其他地方的服務(wù)器。2 :需要處理的視頻中有白天的視頻也有黑夜的視頻，且目標特征未知，先將原始視頻提交濃縮分析即進行視頻濃縮處理；3 :視頻濃縮檢索服務(wù)器進行視頻濃縮處理，得到包括所有運動目標的視頻摘要和所有活動目標的全快照。通常情況下，夜晚視頻的濃縮比例能超過30倍，白天視頻濃縮比例也能達到10倍。這樣通過視頻濃縮處理后，查看視頻所需時間將會大為減少，而且還有快照作為輔助；4 :觀看上述步驟中產(chǎn)生的視頻摘要，結(jié)合人工偵查，找到嫌疑人的目標快照及對應(yīng)的視頻片段。一旦找到有用信息，則可以根據(jù)這個信息的特征，對其他視頻進行檢索操作，獲取更多嫌疑人的活動狀況視頻和快照；5 :有部分嫌疑人的目標快照和視頻片段由于對焦模糊等原因不夠清晰，調(diào)用圖像增強系統(tǒng)進行去模糊處理，局部區(qū)域需要進行放大；
6 :在視頻濃縮檢索客戶端上用人像偵查系統(tǒng)對嫌疑人進行人像偵查，自動獲取嫌疑人的幾個明顯特征，包括臉部特寫，上衣尤其是logo，手部特寫，鞋子、背包的照片，以流程來保證嫌疑人的信息能被充分收集。根據(jù)這些信息，確定嫌疑人的可能就大大增加；7:至此視頻偵查工作已經(jīng)完成，如果需要，可以將所述的人像明顯特征，結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)、違法犯罪信息資源查詢等系統(tǒng)進行進一步偵查；以上所述僅為本發(fā)明的優(yōu)選實施例而已，并不用于限制本發(fā)明，對于本領(lǐng)域的技術(shù)人員來說，本發(fā)明可以有各種更改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進等，均應(yīng)包含在本發(fā)明的保護范圍之內(nèi)。
權(quán)利要求
1.基于視頻摘要、視頻檢索的視頻分析方法，其特征在于，包括以下步驟步驟I)原始視頻導(dǎo)入從視頻監(jiān)控平臺獲取或本地存儲介質(zhì)拷貝獲取原始視頻，將原始視頻從視頻濃縮檢索客戶端上傳到視頻濃縮檢索服務(wù)器；步驟2)判斷原始視頻是否需要進行視頻濃縮處理在視頻濃縮檢索客戶端上根據(jù)實際需要判斷原始視頻是否需要進行視頻濃縮處理，如果需要則進入步驟3，否則，直接則進入步驟4 ;步驟3)視頻濃縮處理首先，通過視頻濃縮檢索服務(wù)器進行視頻濃縮處理，得到包括所有運動目標的視頻摘要和所有運動目標的全快照；然后，根據(jù)所得的視頻摘要和全快照進行視頻檢索處理；步驟4)視頻檢索處理通過視頻濃縮檢索服務(wù)器進行視頻檢索處理，得到按特征相似度排列的運動目標的目標快照；步驟5)判斷是否需要進行圖像增強處理如果嫌疑目標的快照或視頻片段不夠清晰則進入步驟6，否則，直接進入步驟7 ；步驟6)圖像增強處理首先，調(diào)用圖像增強系統(tǒng)進行圖像增強處理，并進行局部區(qū)域的放大；然后，進行人像偵查處理；步驟7)人像偵查處理在視頻濃縮檢索客戶端上調(diào)用人像偵查系統(tǒng)進行人像偵查，人像偵查系統(tǒng)可自動輸出人的幾個明顯特征，包括人臉特寫、上衣、手部、鞋子及背包特寫照片。
2.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，還包括 步驟8)所述的特寫照片可以直接作為線索，也可以作為特征輸入視頻濃縮檢索系統(tǒng)中以圖搜圖，進一步檢索獲取更多信息。
3.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，還包括 步驟9)將得到的人臉特寫結(jié)合公安現(xiàn)有的戶籍管理系統(tǒng)或違法犯罪信息資源查詢等系統(tǒng)進行進一步偵查。
4.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于步驟I 中，通過硬盤快速拷貝方法進行快速拷貝實現(xiàn)原始視頻的導(dǎo)入。
5.根據(jù)權(quán)利要求1所述的基于視頻摘要及檢索的視頻分析方法，其特征在于所述圖像增強系統(tǒng)的圖像去模糊的過程，主要是通過模糊內(nèi)核對模糊圖像解卷積實現(xiàn)。
6.根據(jù)權(quán)利要求1、2、3、4或5所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，視頻濃縮檢索服務(wù)器處理時包括以下步驟首先，采用了動態(tài)紋理建模方法，精確處理視頻背景變化，進行背景建模；然后，視頻的邊界檢測，找出視頻中的突變和漸變變化，挨幀進行視頻的分割，提取運動目標對象，將獲取的運動目標相關(guān)信息如大小、顏色或運動方向存入數(shù)據(jù)庫；最后，根據(jù)數(shù)據(jù)庫的內(nèi)容得到檢索結(jié)果，或者列出所有運動目標的照片，或者進行視頻拼接，將運動目標拼接回背景中形成時間大為縮短的濃縮視頻。
7.根據(jù)權(quán)利1、2、3、4或5所述的基于視頻摘要及檢索的視頻分析方法，其特征在于，在步驟5之間還包括以下步驟通過人工對視頻摘要、全快照或目標照片的偵查，找到嫌疑目標的快照及對應(yīng)的視頻片段。
全文摘要
本發(fā)明公開了一種基于視頻摘要、視頻檢索的視頻分析方法，其包括以下步驟步驟1)原始視頻導(dǎo)入；步驟2)判斷原始視頻是否需要進行視頻濃縮處理；步驟3)視頻濃縮處理；步驟4)視頻檢索處理；步驟5)判斷是否需要進行圖像增強處理；步驟6)圖像增強處理；步驟7)人像偵查處理。該視頻分析方法能提高了海量視頻偵查的效率，減少目標遺漏的可能。
文檔編號G06F17/30GK103020275SQ20121057887
公開日2013年4月3日 申請日期2012年12月28日 優(yōu)先權(quán)日2012年12月28日
發(fā)明者姚領(lǐng)眾 申請人:蘇州千視通信科技有限公司