一種基于視頻摘要和視頻檢索的視頻偵查流程的制作方法
【專利摘要】本發(fā)明公開(kāi)了一種基于視頻摘要和視頻檢索的視頻偵查流程，首先系統(tǒng)從視頻監(jiān)控平臺(tái)或者本地獲取與案件相關(guān)的原始視頻，在添加案件基本信息，進(jìn)行編目處理后儲(chǔ)存到存儲(chǔ)服務(wù)器，然后系統(tǒng)對(duì)視頻進(jìn)行分析，先對(duì)視頻進(jìn)行濃縮，去掉沒(méi)有活動(dòng)目標(biāo)的幀，保留具有活動(dòng)目標(biāo)的幀，得到濃縮視頻以及所有活動(dòng)目標(biāo)的全快照根據(jù)濃縮視頻和目標(biāo)快照，結(jié)合人工甄別，采用視頻比對(duì)等方式，確定嫌疑目標(biāo)，獲取嫌疑目標(biāo)的視頻片段以及嫌疑目標(biāo)快照。本發(fā)明能從海量的原始視頻中去獲取嫌疑目標(biāo)的視頻片段和快照作為線索，提高公安視頻偵查的效率。
【專利說(shuō)明】一種基于視頻摘要和視頻檢索的視頻偵查流程
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種計(jì)算機(jī)視覺(jué)領(lǐng)域，具體涉及一種基于視頻摘要和視頻檢索的視頻偵查流程。
【背景技術(shù)】
[0002]隨著“平安城市”與“天網(wǎng)工程”的推進(jìn)，利用監(jiān)控視頻作為破案線索的視頻偵查已成為公安刑偵偵查的重要手段，極大程度地打擊了違法份子的犯罪行為。但之前通過(guò)人工觀看海量視頻進(jìn)行視頻刑偵的方式效率低下，且容易遺漏目標(biāo)。
[0003]視頻偵查時(shí)一般只關(guān)注活動(dòng)目標(biāo)，通過(guò)目擊證人或者前期偵查還能得到嫌疑目標(biāo)的一些特征。通過(guò)視頻濃縮摘要以及視頻檢索技術(shù)，可以略去無(wú)活動(dòng)目標(biāo)的畫(huà)面，并且在運(yùn)動(dòng)目標(biāo)里根據(jù)目標(biāo)特征檢索嫌疑目標(biāo)，大大提高視頻偵查的效率。

【發(fā)明內(nèi)容】

[0004]本發(fā)明的目的在于克服現(xiàn)有技術(shù)存在的以上問(wèn)題，提供一種基于視頻摘要和視頻檢索的視頻偵查流程，本發(fā)明能從海量的原始視頻中去獲取嫌疑目標(biāo)的視頻片段和快照作為線索，提高公安視頻偵查的效率。
[0005]為實(shí)現(xiàn)上述技術(shù)目的，達(dá)到上述技術(shù)效果，本發(fā)明通過(guò)以下技術(shù)方案實(shí)現(xiàn):
一種基于視頻摘要和視頻檢索的視頻偵查流程，包括以下步驟:
步驟I)從監(jiān)控平臺(tái)或本地拷貝視頻，將視頻按案件管理需要進(jìn)行編目后存儲(chǔ)到存儲(chǔ)服務(wù)器；
步驟2)在客戶端上根據(jù)配置分析參數(shù)，從存儲(chǔ)服務(wù)器選擇視頻，根據(jù)需要確定需要濃縮還是檢索；
步驟3)系統(tǒng)自動(dòng)云計(jì)算，進(jìn)行負(fù)荷分擔(dān)，選擇負(fù)荷小的濃縮和檢索服務(wù)器進(jìn)行分析；步驟4)濃縮服務(wù)器進(jìn)行視頻濃縮，得到包括所有運(yùn)動(dòng)目標(biāo)的濃縮視頻和所有活動(dòng)目標(biāo)全快照；
步驟5)根據(jù)需要，檢索服務(wù)器根據(jù)目標(biāo)特征進(jìn)行視頻檢索，得到根據(jù)相似度排列的目標(biāo)快照；
步驟6)觀看濃縮視頻或?yàn)g覽目標(biāo)快照，確定嫌疑目標(biāo)的目標(biāo)快照，標(biāo)注后存到案件管理服務(wù)器；
步驟7)根據(jù)嫌疑目標(biāo)的目標(biāo)快照，得到嫌疑目標(biāo)的原始視頻片段，標(biāo)注后存到案件管理服務(wù)器；
步驟8)將嫌疑目標(biāo)各原始視頻片段結(jié)合電子地圖，拼接成嫌疑目標(biāo)運(yùn)動(dòng)軌跡；
步驟9)將嫌疑目標(biāo)的快照與運(yùn)動(dòng)軌跡歸檔成案件線索，生成案件報(bào)告，供進(jìn)一步偵查與展示。
[0006]進(jìn)一步的，所述步驟2)中沒(méi)有選擇檢索，則跳過(guò)步驟5)。
[0007]本發(fā)明的有益效果是: 1、減小人工查看海量視頻的壓力，方便從海量視頻中查找嫌疑目標(biāo)；
2、完善的權(quán)限控制功能保障信息安全，但客戶端點(diǎn)播以及標(biāo)注等功能又讓有權(quán)限的辦案人員能夠?qū)崿F(xiàn)信息共享，提高破案效率；
3、系統(tǒng)結(jié)合刑偵實(shí)際來(lái)實(shí)現(xiàn)，案件管理簡(jiǎn)單有序；視頻拼接生成的嫌疑目標(biāo)運(yùn)動(dòng)軌跡結(jié)合輸出的案件報(bào)告，讓結(jié)果展示方便快捷。
[0008]上述說(shuō)明僅是本發(fā)明技術(shù)方案的概述，為了能夠更清楚了解本發(fā)明的技術(shù)手段，并可依照說(shuō)明書(shū)的內(nèi)容予以實(shí)施，以下以本發(fā)明的較佳實(shí)施例并配合附圖詳細(xì)說(shuō)明如后。本發(fā)明的【具體實(shí)施方式】由以下實(shí)施例及其附圖詳細(xì)給出。
【專利附圖】

【附圖說(shuō)明】
[0009]此處所說(shuō)明的附圖用來(lái)提供對(duì)本發(fā)明的進(jìn)一步理解，構(gòu)成本申請(qǐng)的一部分，本發(fā)明的示意性實(shí)施例及其說(shuō)明用于解釋本發(fā)明，并不構(gòu)成對(duì)本發(fā)明的不當(dāng)限定。在附圖中:
圖1是本發(fā)明的流程示意圖；
圖2是本發(fā)明的拓?fù)鋱D。
【具體實(shí)施方式】
[0010]下面將參考附圖并結(jié)合實(shí)施例，來(lái)詳細(xì)說(shuō)明本發(fā)明。
[0011]參照?qǐng)D1所示，一種基于視頻摘要和視頻檢索的視頻偵查流程，包括以下步驟: 步驟I)從監(jiān)控平臺(tái)獲取或從本地拷貝原始視頻，將視頻按照案件管理需要，進(jìn)行編目、
添加案件和視頻基本信息后存儲(chǔ)到存儲(chǔ)服務(wù)器；
步驟2)根據(jù)需要，在濃縮和檢索客戶端上配置分析參數(shù)；如果視頻偵查前不知道嫌疑目標(biāo)的特征，則只進(jìn)行濃縮操作；如果偵查前或隨著偵查的進(jìn)行，已經(jīng)知道嫌疑目標(biāo)的某些特征，就可以根據(jù)特征還進(jìn)行視頻檢索；從存儲(chǔ)服務(wù)器上選擇所需要的視頻提交分析。提交時(shí)可以批量提交多個(gè)視頻，可配置的參數(shù)包括代表白天黑夜等不同場(chǎng)景的靈敏度，所關(guān)注的感興趣區(qū)域和不感興趣區(qū)域，以及目標(biāo)對(duì)象的顏色，如果目標(biāo)對(duì)象是人，還可以區(qū)分上下半身顏色；
步驟3)系統(tǒng)自動(dòng)采用云計(jì)算技術(shù)，進(jìn)行負(fù)荷分擔(dān)，選擇服務(wù)器組中負(fù)荷小的濃縮服務(wù)器或檢索服務(wù)器進(jìn)行分析；如果所有服務(wù)器都已滿負(fù)荷運(yùn)轉(zhuǎn)，則這些提交的任務(wù)進(jìn)入隊(duì)列中排隊(duì)等候；在任務(wù)分配時(shí)，還涉及優(yōu)先級(jí)調(diào)度，優(yōu)先級(jí)高的任務(wù)將被插到隊(duì)列的最前面；步驟4)濃縮服務(wù)器中進(jìn)行視頻濃縮摘要，得到包括所有活動(dòng)目標(biāo)的濃縮視頻和所有活動(dòng)目標(biāo)全快照；采用的是動(dòng)態(tài)紋理建模算法，先提取視頻背景，然后將各運(yùn)動(dòng)目標(biāo)提取出來(lái)，分析其特征并將信息存到數(shù)據(jù)庫(kù)；最后通過(guò)圖像拼接技術(shù)，將各運(yùn)動(dòng)目標(biāo)鑲嵌回背景中，不同時(shí)間點(diǎn)的活動(dòng)目標(biāo)可以出現(xiàn)在濃縮視頻的同一畫(huà)面，這樣得到的濃縮比高且包括所有活動(dòng)目標(biāo)，點(diǎn)擊濃縮視頻中的目標(biāo)或者活動(dòng)目標(biāo)的快照，通過(guò)之前分析時(shí)建立的快照與原始視頻的映射關(guān)系，可以快速跳轉(zhuǎn)原始視頻，查看目標(biāo)在原始視頻中的狀態(tài)；
步驟5 )檢索服務(wù)器根據(jù)步驟2 )中配置的參數(shù)，在數(shù)據(jù)庫(kù)中根據(jù)特征進(jìn)行視頻檢索，得到根據(jù)目標(biāo)特征相似度排列的目標(biāo)快照；點(diǎn)擊該目標(biāo)快照，可以快速跳轉(zhuǎn)原始視頻，查看目標(biāo)在原始視頻中的狀態(tài)；如果前面步驟2)中沒(méi)有選擇檢索，則跳過(guò)這一步；
步驟6)通過(guò)觀看濃縮視頻或檢索的目標(biāo)快照，找到嫌疑目標(biāo)的目標(biāo)快照，添加標(biāo)注，例如“嫌疑人A”后存到案件管理服務(wù)器上；
步驟7)在嫌疑目標(biāo)快照的基礎(chǔ)上，找到嫌疑目標(biāo)各原始視頻片段。在確定嫌疑片段時(shí)，可以進(jìn)行視頻對(duì)比播放；確定嫌疑視頻片段后，添加必要的標(biāo)注后存到案件管理服務(wù)器上；
步驟8)在上一步的基礎(chǔ)上，將嫌疑目標(biāo)的各原始視頻片段結(jié)合電子地圖，采用視頻拼接技術(shù)，拼接成嫌疑目標(biāo)運(yùn)動(dòng)軌跡，并保存到案件管理服務(wù)器；
步驟9)將嫌疑目標(biāo)的目標(biāo)快照與目標(biāo)運(yùn)動(dòng)軌跡歸檔形成案件線索，生成視頻偵查案件報(bào)告，供進(jìn)一步偵查或展示；具有相關(guān)權(quán)限的辦案人員，可以在客戶端點(diǎn)播相關(guān)視頻，查看快照；根據(jù)預(yù)定格式生成的案件報(bào)告，是案件展示最直觀的方式。
[0012]本實(shí)施例的工作原理如下:
例如某貴重物品店發(fā)生搶劫案，為了得到犯罪嫌疑人的照片以及視頻片段以確定身份和逃竄線路，需要查看各卡口 100個(gè)攝像頭，踩點(diǎn)及案發(fā)前后共5天的視頻。如果依靠人力查看，視頻總時(shí)長(zhǎng)為I萬(wàn)2千小時(shí)。50個(gè)人晝夜不休也需要觀看10天，影響辦案效率的同時(shí)因?yàn)槿说纳硐拗七€很容易遺漏目標(biāo)。使用視頻摘要、視頻檢索的視頻偵查系統(tǒng)后，其具體實(shí)例如下:
I:案發(fā)后，從監(jiān)控平臺(tái)或本地拷貝視頻。將視頻按案件管理需要進(jìn)行編目后存儲(chǔ)到存儲(chǔ)服務(wù)器，添加的信息包括案件基本信息，所獲取的視頻來(lái)自哪個(gè)攝像頭等；
2:因?yàn)橹恍桕P(guān)注運(yùn)動(dòng)目標(biāo)，在開(kāi)始還不知道嫌疑人的特征。初次分析時(shí)在客戶端上選擇輸出濃縮視頻和全快照。如果隨著偵查的進(jìn)行，后續(xù)可以對(duì)這些視頻進(jìn)行再次進(jìn)行檢索分析。從存儲(chǔ)服務(wù)器選擇視頻提交分析，并設(shè)定這些視頻的優(yōu)先級(jí)，與案件強(qiáng)相關(guān)例如現(xiàn)場(chǎng)附近一公里的優(yōu)先級(jí)設(shè)為高；
3:系統(tǒng)自動(dòng)云計(jì)算，進(jìn)行負(fù)荷分擔(dān)，選擇負(fù)荷小的某一臺(tái)或者某幾臺(tái)濃縮檢索服務(wù)器進(jìn)行分析；
4:濃縮服務(wù)器進(jìn)行視頻濃縮，得到包括所有運(yùn)動(dòng)目標(biāo)的濃縮視頻。通過(guò)觀看這個(gè)濃縮視頻，相比觀看原始視頻，大大節(jié)省了時(shí)間。如果找到一些感興趣的視頻片段，以及嫌疑目標(biāo)的一些特征照片，則可以根據(jù)特征進(jìn)行檢索了。
[0013]5:檢索服務(wù)器根據(jù)特征進(jìn)行檢索，得到的目標(biāo)快照中符合特征的排在最前面，為了避免因光照條件差異等引起目標(biāo)遺漏，其他相似度更低的目標(biāo)也列在后面；
6:對(duì)檢索出來(lái)的目標(biāo)快照進(jìn)行人工偵查，找到嫌疑人的目標(biāo)快照，標(biāo)注如“嫌疑人A”后，添加案件信息后存到案件管理服務(wù)器
7:根據(jù)嫌疑人的各目標(biāo)快照，得到嫌疑目標(biāo)的各原始視頻片段，標(biāo)注后存到案件管理服務(wù)器
8:將嫌疑人的各原始視頻片段結(jié)合電子地圖，拼接成運(yùn)動(dòng)軌跡。根據(jù)這個(gè)運(yùn)動(dòng)軌跡，就可以確定嫌疑目標(biāo)的運(yùn)動(dòng)狀態(tài)甚至是身份；
9:將嫌疑目標(biāo)的快照與運(yùn)動(dòng)軌跡歸檔成案件線索，生成案件報(bào)告，供進(jìn)一步偵查與展
/Jn o
[0014]以上所述僅為本發(fā)明的優(yōu)選實(shí)施例而已，并不用于限制本發(fā)明，對(duì)于本領(lǐng)域的技術(shù)人員來(lái)說(shuō)，本發(fā)明可以有各種更改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
【權(quán)利要求】
1.一種基于視頻摘要和視頻檢索的視頻偵查流程，其特征在于:包括以下步驟: 步驟I)從監(jiān)控平臺(tái)或本地拷貝視頻，將視頻按案件管理需要進(jìn)行編目后存儲(chǔ)到存儲(chǔ)服務(wù)器； 步驟2)在客戶端上根據(jù)配置分析參數(shù)，從存儲(chǔ)服務(wù)器選擇視頻，根據(jù)需要確定需要濃縮還是檢索； 步驟3)系統(tǒng)自動(dòng)云計(jì)算，進(jìn)行負(fù)荷分擔(dān)，選擇負(fù)荷小的濃縮和檢索服務(wù)器進(jìn)行分析；步驟4)濃縮服務(wù)器進(jìn)行視頻濃縮，得到包括所有運(yùn)動(dòng)目標(biāo)的濃縮視頻和所有活動(dòng)目標(biāo)全快照； 步驟5)根據(jù)需要，檢索服務(wù)器根據(jù)目標(biāo)特征進(jìn)行視頻檢索，得到根據(jù)相似度排列的目標(biāo)快照； 步驟6)觀看濃縮視頻或?yàn)g覽目標(biāo)快照，確定嫌疑目標(biāo)的目標(biāo)快照，標(biāo)注后存到案件管理服務(wù)器； 步驟7)根據(jù)嫌疑目標(biāo)的目標(biāo)快照，得到嫌疑目標(biāo)的原始視頻片段，標(biāo)注后存到案件管理服務(wù)器； 步驟8)將嫌疑目標(biāo)各原始視頻片段結(jié)合電子地圖，拼接成嫌疑目標(biāo)運(yùn)動(dòng)軌跡； 步驟9)將嫌疑目標(biāo)的快照與運(yùn)動(dòng)軌跡歸檔成案件線索，生成案件報(bào)告，供進(jìn)一步偵查與展示。
2.根據(jù)權(quán)利要求1所述的一種基于視頻摘要和視頻檢索的視頻偵查流程，其特征在于:所述步驟2)中沒(méi)有選擇檢索，則跳過(guò)步驟5)。
【文檔編號(hào)】G06F17/30GK103778159SQ201210414091
【公開(kāi)日】2014年5月7日 申請(qǐng)日期:2012年10月26日 優(yōu)先權(quán)日:2012年10月26日
【發(fā)明者】姚領(lǐng)眾 申請(qǐng)人:蘇州千視通信科技有限公司