專利名稱：視頻濃縮檢索分析方法及其系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明屬于安防技術(shù)領(lǐng)域，涉及視頻監(jiān)控，尤其是涉及一種視頻濃縮檢索分析方法及其系統(tǒng)。
背景技術(shù)：
隨著平安城市的建設(shè)，現(xiàn)階段視頻監(jiān)控遍布各省各市，但普遍存在攝像機(jī)位置不合理，有效信息少等缺點，在分析過程中往往需要花費大量的人力、時間查看海量錄像資料，嚴(yán)重制約了工作效率。傳統(tǒng)人工的檢索取證工作還存在不可避免的人為的漏判誤判等，故在利用監(jiān)控錄像獲取信息的實戰(zhàn)中，視頻審看效率低下的問題亟需解決。為此，人們進(jìn)行了長期的探索，提出了各種各樣的解決方案。視頻摘要又稱視頻濃縮，是對視頻內(nèi)容的一個簡單概括，以自動或半自動的方式，先通過運動目標(biāo)分析，提取運動目標(biāo)，然后對各個目標(biāo)的運動軌跡進(jìn)行分析，將不同的目標(biāo)拼接到一個共同的背景場景中，并將它們以某種方式進(jìn)行組合。例如，中國專利文獻(xiàn)公開了一種基于視頻監(jiān)控網(wǎng)絡(luò)的視頻自動濃縮方法[申請?zhí)?01110208090.X]，其是從兩個具有重疊區(qū)域的攝像機(jī)獲得第一視頻源和第二視頻源并對運動目標(biāo)分割和跟蹤，提取背景圖像和視頻監(jiān)控網(wǎng)絡(luò)運動軌跡；根據(jù)背景圖像生成基于視頻監(jiān)控網(wǎng)絡(luò)的全景圖像，得到兩個攝像機(jī)各自對應(yīng)于全景圖像的投影矩陣并實時更新基于視頻監(jiān)控網(wǎng)絡(luò)背景的全景圖像；利用兩個攝像機(jī)全景圖像的投影矩陣，把軌跡投影到全景圖像空間得到投影軌跡；采用圖匹配，基于隨機(jī)游走思想對兩個攝像機(jī)的視頻源的投影軌跡匹配，得到匹配軌跡對，對重疊區(qū)域的匹配軌跡進(jìn)行選擇和融合，得到完整的大場景軌跡；對大場景軌跡按時間重新排列，在全景圖像上對完整的大場景軌跡進(jìn)行展現(xiàn)，得到基于全景圖像的視頻濃縮?！队嬎銠C(jī)工程與應(yīng)用》2008年第25期公開了一種基于運動分析的視頻檢索方法(作者薛立勤；張秀娟)，介紹了人們從不同的應(yīng)用目的出發(fā)，提出了許多不同的視頻中運動分析的方法。概括起來，這些分析方法可以分成四類光流估算法、運動矢量估算法、基于直方圖的統(tǒng)計分析方法、參數(shù)化的全局運動分析法。上述方案雖然在一定程度上實現(xiàn)了視頻濃縮，但是仍然存在著難以方便地獲取視頻中所需要的信息，僅僅是縮短了整個視頻的長度，而對視頻的效果、細(xì)節(jié)等并沒有做出任何處理。

發(fā)明內(nèi)容
本發(fā)明的目的是針對上述問題，提供一種大幅將視頻時間縮短，能夠方便地獲取視頻中所需要的信息，提高工作效率的視頻濃縮檢索分析方法。本發(fā)明的另一目的是提供一種能夠方便地獲取視頻中所需要的信息，提高工作效率的視頻濃縮檢索分析系統(tǒng)。為達(dá)到上述目的，本發(fā)明采用了下列技術(shù)方案本視頻濃縮檢索分析方法，其特征在于，本方法包括下述步驟
A、動態(tài)分析利用基于運動分析的視頻檢索技術(shù)，將監(jiān)控錄像視頻中的靜止片斷自動跳過或快進(jìn)，并獲得按幀截取的運動視頻片段；B、編碼重組將按幀截取的運動視頻片段進(jìn)行視頻重組，獲得重組后的運動視頻；C、結(jié)果標(biāo)記同時播放原始圖像畫面和重組后的運動視頻畫面，且將已播放的運動視頻按照不同的運動體在播放時間軸上做區(qū)分標(biāo)記。在上述的視頻濃縮檢索分析方法中，本方法還包括D、行為分析對運動視頻中不同運動體的運動狀況進(jìn)行分析，若運動體的運動速度超過該運動體設(shè)定的速度閥值，則發(fā)出報警信號。在上述的視頻濃縮檢索分析方法中，在上述的步驟D中，設(shè)定人物正常走動的速度不大于2m/s，若達(dá)到或超過2m/s則為奔跑，且人物奔跑時發(fā)出警報信號；設(shè)定車輛正常行駛的速度不大于22m/s，若達(dá)到或超過22m/s則為車輛超速，且車輛超速時發(fā)出警報信號。在上述的視頻濃縮檢索分析方法中，本方法還包括E、渲染補(bǔ)償對某一幀圖像進(jìn)行存檔后，在良好視覺條件下再次模擬捕捉同一攝像機(jī)同一視角的圖像，然后根據(jù)捕捉到的圖像對存檔的圖像進(jìn)行后期渲染補(bǔ)償，提供對比。在上述的視頻濃縮檢索分析方法中，在上述的步驟C中，設(shè)定已播放的僅有人物運動的時間段區(qū)分標(biāo)記顯示第一顏色，已播放的僅有車輛運動的時間段區(qū)分標(biāo)記顯示第二顏色，已播放的同時有人物和車輛運動的時間段區(qū)分標(biāo)記顯示第三顏色。在上述的視頻濃縮檢索分析方法中，本方法還包括F、跟蹤標(biāo)記選定運動視頻中的運動體，并對該運動體做出標(biāo)記，且當(dāng)選定的運動體繼續(xù)運動時，所述的標(biāo)記跟隨運動體運動。在上述的視頻濃縮檢索分析方法中，本方法還包括G、視頻摘要對不同時間出現(xiàn)的同一運動體分別進(jìn)行截圖備份，形成摘要圖片，并在摘要圖片上顯示具體時間，當(dāng)選中某一摘要圖片時，自動播放該摘要圖片所在視頻片段中連貫的前若干秒和后若干秒。一種實施上述視頻濃縮檢索分析方法的視頻濃縮檢索分析系統(tǒng)，其特征在于，本系統(tǒng)包括動態(tài)分析模塊，用于利用基于運動分析的視頻檢索技術(shù)，將監(jiān)控錄像視頻中的靜止片斷自動跳過或快進(jìn)，并獲得按幀截取的運動視頻片段；編碼重組模塊，用于將按幀截取的運動視頻片段進(jìn)行視頻重組，獲得重組后的運動視頻；結(jié)果標(biāo)記模塊，用于同時播放原始圖像畫面和重組后的運動視頻畫面，且將已播放的運動視頻按照不同的運動體在播放時間軸上做區(qū)分標(biāo)記；所述的動態(tài)分析模塊與編碼重組模塊相連，所述的結(jié)果標(biāo)記模塊連接在編碼重組模塊上。在上述的視頻濃縮檢索分析系統(tǒng)中，本系統(tǒng)還包括行為分析模塊，用于對運動視頻中不同運動體的運動狀況進(jìn)行分析，若運動體的運動速度超過該運動體設(shè)定的速度閥值，則發(fā)出報警信號；
渲染補(bǔ)償模塊，用于對某一幀圖像進(jìn)行存檔后，在良好視覺條件下再次模擬捕捉同一攝像機(jī)同一視角的圖像，然后根據(jù)捕捉到的圖像對存檔的圖像進(jìn)行后期渲染補(bǔ)償，提供對比；所述的行為分析模塊和渲染補(bǔ)償模塊均與編碼重組模塊相連。在上述的視頻濃縮檢索分析系統(tǒng)中，本系統(tǒng)還包括跟蹤標(biāo)記模塊用于選定運動視頻中的運動體，并對該運動體做出標(biāo)記，且當(dāng)選定的運動體繼續(xù)運動時，所述的標(biāo)記跟隨運動體運動。視頻摘要模塊用于對不同時間出現(xiàn)的同一運動體分別進(jìn)行截圖備份，形成摘要圖片，并在摘要圖片上顯示具體時間，當(dāng)選中某一摘要圖片時，自動播放該摘要圖片所在視頻片段中連貫的前若干秒和后若干秒；所述的跟蹤標(biāo)記模塊和視頻摘要模塊均與編碼重組模塊相連。與現(xiàn)有的技術(shù)相比，本視頻濃縮檢索分析方法及其系統(tǒng)的優(yōu)點在于跳過或快進(jìn)視頻中靜止片斷，將視頻時間大幅縮短，能夠方便地獲取視頻中所需要的信息，大幅節(jié)約時間，提高工作效率，并且能方便地對所需的信息進(jìn)行檢索和標(biāo)記，在視頻中不連續(xù)的信息間建立聯(lián)系，易于操作實施。


圖1是本發(fā)明提供的結(jié)構(gòu)框圖。圖中，動態(tài)分析模塊1、編碼重組模塊2、結(jié)果標(biāo)記模塊3、行為分析模塊4、渲染補(bǔ)償模塊5、跟蹤標(biāo)記模塊6、視頻摘要模塊7。
具體實施例方式如圖1所示，本視頻濃縮檢索分析方法包括下述步驟A、動態(tài)分析利用基于運動分析的視頻檢索技術(shù)，將監(jiān)控錄像視頻中的靜止片斷自動跳過或快進(jìn)，并獲得按幀截取的運動視頻片段；B、編碼重組將按幀截取的運動視頻片段進(jìn)行視頻重組，獲得重組后的運動視頻；C、結(jié)果標(biāo)記同時播放原始圖像畫面和重組后的運動視頻畫面，且將已播放的運動視頻按照不同的運動體在播放時間軸上做區(qū)分標(biāo)記。設(shè)定已播放的僅有人物運動的時間段區(qū)分標(biāo)記顯示第一顏色，已播放的僅有車輛運動的時間段區(qū)分標(biāo)記顯示第二顏色，已播放的同時有人物和車輛運動的時間段區(qū)分標(biāo)記顯示第三顏色。本發(fā)明中的基于運動分析的視頻檢索技術(shù)和視頻片段的編碼重組均在可利用現(xiàn)有技術(shù)實施。本方法還包括D、行為分析對運動視頻中不同運動體的運動狀況進(jìn)行分析，若運動體的運動速度超過該運動體設(shè)定的速度閥值，則發(fā)出報警信號。設(shè)定人物正常走動的速度不大于2m/S，若達(dá)到或超過2m/s則為奔跑，且人物奔跑時發(fā)出警報信號；設(shè)定車輛正常行駛的速度不大于22m/s，若達(dá)到或超過22m/s則為車輛超速，且車輛超速時發(fā)出警報信號。本方法還包括E、渲染補(bǔ)償對某一幀圖像進(jìn)行存檔后，在良好視覺條件下再次模擬捕捉同一攝像機(jī)同一視角的圖像，然后根據(jù)捕捉到的圖像對存檔的圖像進(jìn)行后期渲染補(bǔ)償，提供對比。本方法還包括F、跟蹤標(biāo)記選定運動視頻中的運動體，并對該運動體做出標(biāo)記，且當(dāng)選定的運動體繼續(xù)運動時，所述的標(biāo)記跟隨運動體運動。本方法還包括G、視頻摘要對不同時間出現(xiàn)的同一運動體分別進(jìn)行截圖備份，形成摘要圖片，并在摘要圖片上顯示具體時間，當(dāng)選中某一摘要圖片時，自動播放該摘要圖片所在視頻片段中連貫的前若干秒和后若干秒。一種實施上述視頻濃縮檢索分析方法的視頻濃縮檢索分析系統(tǒng)包括動態(tài)分析模塊1，用于利用基于運動分析的視頻檢索技術(shù)，將監(jiān)控錄像視頻中的靜止片斷自動跳過或快進(jìn)，并獲得按幀截取的運動視頻片段；編碼重組模塊2，用于將按幀截取的運動視頻片段進(jìn)行視頻重組，獲得重組后的運動視頻；結(jié)果標(biāo)記模塊3，用于同時播放原始圖像畫面和重組后的運動視頻畫面，且將已播放的運動視頻按照不同的運動體在播放時間軸上做區(qū)分標(biāo)記；所述的動態(tài)分析模塊I與編碼重組模塊2相連，所述的結(jié)果標(biāo)記模塊3連接在編碼重組模塊2上。本系統(tǒng)還包括行為分析模塊4，用于對運動視頻中不同運動體的運動狀況進(jìn)行分析，若運動體的運動速度超過該運動體設(shè)定的速度閥值，則發(fā)出報警信號；渲染補(bǔ)償模塊5，用于對某一幀圖像進(jìn)行存檔后，在良好視覺條件下再次模擬捕捉同一攝像機(jī)同一視角的圖像，然后根據(jù)捕捉到的圖像對存檔的圖像進(jìn)行后期渲染補(bǔ)償，提供對比；行為分析模塊4和渲染補(bǔ)償模塊5均與編碼重組模塊2相連。本系統(tǒng)還包括跟蹤標(biāo)記模塊6 :用于選定運動視頻中的運動體，并對該運動體做出標(biāo)記，且當(dāng)選定的運動體繼續(xù)運動時，所述的標(biāo)記跟隨運動體運動。視頻摘要模塊7 :用于對不同時間出現(xiàn)的同一運動體分別進(jìn)行截圖備份，形成摘要圖片，并在摘要圖片上顯示具體時間，當(dāng)選中某一摘要圖片時，自動播放該摘要圖片所在視頻片段中連貫的前若干秒和后若干秒；跟蹤標(biāo)記模塊6和視頻摘要模塊7均與編碼重組模塊2相連。本實施例中，自動播放該摘要圖片所在視頻片段中連貫的前十秒和后十秒。本文中所描述的具體實施例僅僅是對本發(fā)明精神作舉例說明。本發(fā)明所屬技術(shù)領(lǐng)域的技術(shù)人員可以對所描述的具體實施例做各種各樣的修改或補(bǔ)充或采用類似的方式替代，但并不會偏離本發(fā)明的精神或者超越所附權(quán)利要求書所定義的范圍。盡管本文較多地使用了動態(tài)分析模塊1、編碼重組模塊2、結(jié)果標(biāo)記模塊3、行為分析模塊4、渲染補(bǔ)償模塊5、跟蹤標(biāo)記模塊6、視頻摘要模塊7等術(shù)語，但并不排除使用其它術(shù)語的可能性。使用這些術(shù)語僅僅是為了更方便地描述和解釋本發(fā)明的本質(zhì)；把它們解釋成任何一種附加的限制都是與本發(fā)明精神相違背的。
權(quán)利要求
1.一種視頻濃縮檢索分析方法，其特征在于，本方法包括下述步驟:A、動態(tài)分析:利用基于運動分析的視頻檢索技術(shù)，將監(jiān)控錄像視頻中的靜止片斷自動跳過或快進(jìn)，并獲得按幀截取的運動視頻片段；B、編碼重組:將按幀截取的運動視頻片段進(jìn)行視頻重組，獲得重組后的運動視頻；C、結(jié)果標(biāo)記:同時播放原始圖像畫面和重組后的運動視頻畫面，且將已播放的運動視頻按照不同的運動體在播放時間軸上做區(qū)分標(biāo)記。
2.根據(jù)權(quán)利要求1所述的視頻濃縮檢索分析方法，其特征在于，本方法還包括:D、行為分析:對運動視頻中不同運動體的運動狀況進(jìn)行分析，若運動體的運動速度超過該運動體設(shè)定的速度閥值，則發(fā)出報警信號。
3.根據(jù)權(quán)利要求2所述的視頻濃縮檢索分析方法，其特 征在于，在上述的步驟D中，設(shè)定人物正常走動的速度不大于2m/s，若達(dá)到或超過2m/s則為奔跑，且人物奔跑時發(fā)出警報信號；設(shè)定車輛正常行駛的速度不大于22m/s，若達(dá)到或超過22m/s則為車輛超速，且車輛超速時發(fā)出警報信號。
4.根據(jù)權(quán)利要求1或2或3所述的視頻濃縮檢索分析方法，其特征在于，本方法還包括:E、渲染補(bǔ)償:對某一幀圖像進(jìn)行存檔后，在良好視覺條件下再次模擬捕捉同一攝像機(jī)同一視角的圖像，然后根據(jù)捕捉到的圖像對存檔的圖像進(jìn)行后期渲染補(bǔ)償，提供對比。
5.根據(jù)權(quán)利要求1或2或3所述的視頻濃縮檢索分析方法，其特征在于，在上述的步驟C中，設(shè)定已播放的僅有人物運動的時間段區(qū)分標(biāo)記顯示第一顏色，已播放的僅有車輛運動的時間段區(qū)分標(biāo)記顯示第二顏色，已播放的同時有人物和車輛運動的時間段區(qū)分標(biāo)記顯示第三顏色。
6.根據(jù)權(quán)利要求1或2或3所述的視頻濃縮檢索分析方法，其特征在于，本方法還包括:F、跟蹤標(biāo)記:選定運動視頻中的運動體，并對該運動體做出標(biāo)記，且當(dāng)選定的運動體繼續(xù)運動時，所述的標(biāo)記跟隨運動體運動。
7.根據(jù)權(quán)利要求1或2或3所述的視頻濃縮檢索分析方法，其特征在于，本方法還包括:G、視頻摘要:對不同時間出現(xiàn)的同一運動體分別進(jìn)行截圖備份，形成摘要圖片，并在摘要圖片上顯示具體時間，當(dāng)選中某一摘要圖片時，自動播放該摘要圖片所在視頻片段中連貫的前若干秒和后若干秒。
8.一種視頻濃縮檢索分析系統(tǒng)，其特征在于，本系統(tǒng)包括:動態(tài)分析模塊(I )，用于利用基于運動分析的視頻檢索技術(shù)，將監(jiān)控錄像視頻中的靜止片斷自動跳過或快進(jìn)，并獲得按幀截取的運動視頻片段；編碼重組模塊(2)，用于將按幀截取的運動視頻片段進(jìn)行視頻重組，獲得重組后的運動視頻；結(jié)果標(biāo)記模塊(3)，用于同時播放原始圖像畫面和重組后的運動視頻畫面，且將已播放的運動視頻按照不同的運動體在播放時間軸上做區(qū)分標(biāo)記；所述的動態(tài)分析模塊(I)與編碼重組模塊(2 )相連，所述的結(jié)果標(biāo)記模塊(3 )連接在編碼重組模塊(2)上。
9.根據(jù)權(quán)利要求8所述的視頻濃縮檢索分析系統(tǒng)，其特征在于，本系統(tǒng)還包括:行為分析模塊(4)，用于對運動視頻中不同運動體的運動狀況進(jìn)行分析，若運動體的運動速度超過該運動體設(shè)定的速度閥值，則發(fā)出報警信號；渲染補(bǔ)償模塊(5)，用于對某一幀圖像進(jìn)行存檔后，在良好視覺條件下再次模擬捕捉同一攝像機(jī)同一視角的圖像，然后根據(jù)捕捉到的圖像對存檔的圖像進(jìn)行后期渲染補(bǔ)償，提供對比；所述的行為分析模塊(4)和渲染補(bǔ)償模塊(5)均與編碼重組模塊(2)相連。
10.根據(jù)權(quán)利要求8所述的視頻濃縮檢索分析系統(tǒng)，其特征在于，本系統(tǒng)還包括:跟蹤標(biāo)記模塊(6):用于選定運動視頻中的運動體，并對該運動體做出標(biāo)記，且當(dāng)選定的運動體繼續(xù)運動時，所述的標(biāo)記跟隨運動體運動。視頻摘要模塊(7):用于對不同時間出現(xiàn)的同一運動體分別進(jìn)行截圖備份，形成摘要圖片，并在摘要圖片上顯示具體時間，當(dāng)選中某一摘要圖片時，自動播放該摘要圖片所在視頻片段中連貫的前若干秒和后若干秒；所述的跟蹤標(biāo)記模塊(6)和 視頻摘要模塊(7)均與編碼重組模塊(2)相連。
全文摘要
本發(fā)明屬于安防技術(shù)領(lǐng)域，涉及視頻監(jiān)控，尤其是涉及一種視頻濃縮檢索分析方法及其系統(tǒng)。它解決了現(xiàn)有技術(shù)費時費力，難以快速獲取所需信息等技術(shù)問題。本方法包括下述步驟A、動態(tài)分析；B、編碼重組；C、結(jié)果標(biāo)記。所述的動態(tài)分析模塊與編碼重組模塊相連，所述的結(jié)果標(biāo)記模塊連接在編碼重組模塊上。本視頻濃縮檢索分析方法及其系統(tǒng)的優(yōu)點在于跳過或快進(jìn)視頻中靜止片斷，將視頻時間大幅縮短，能夠方便地獲取視頻中所需要的信息，大幅節(jié)約時間，提高工作效率，并且能方便地對所需的信息進(jìn)行檢索和標(biāo)記，在視頻中不連續(xù)的信息間建立聯(lián)系，易于操作實施。
文檔編號G06F17/30GK103077227SQ201210594868
公開日2013年5月1日 申請日期2012年12月31日 優(yōu)先權(quán)日2012年12月31日
發(fā)明者胡宏宇, 何順蘭, 王程, 陳珂, 謝永兵 申請人:浙江元亨通信技術(shù)股份有限公司