專利名稱：一種視頻智能分析系統(tǒng)及其監(jiān)控錄像的存儲和播放方法
技術領域：
本發(fā)明涉及通信技術領域，具體涉及一種視頻智能分析系統(tǒng)及其監(jiān)控錄像的存儲和播放方法。
背景技術：
近些年來，智能視頻分析成為視頻監(jiān)控應用的一個重要發(fā)展方向，監(jiān)控值班人員面對成千上萬的攝像機，無法真正的在風險產(chǎn)生時預防或干預，多數(shù)靠事后回放相關的錄像。另外，對于面向視頻圖像的非安防應用，如人流統(tǒng)計、視頻診斷等，也都需要有相應的技術手段來支撐。隨著視頻智能分析系統(tǒng)的發(fā)展，視頻智能分析系統(tǒng)的錄像存儲變得越來越重要。視頻智能分析系統(tǒng)保存的錄像一方面需要保留其智能分析的結果，一方面又需要在必要的時候去掉其分析結果，便于觀看原始的信息。如圖1所示，傳統(tǒng)的視頻智能視頻分析系統(tǒng)包括視頻智能分析平臺、監(jiān)控前端(TO)、監(jiān)控客戶端(⑶)，其中:視頻智能分析平臺包括如下一些功能實體:中心管理服務器(CMS)、流媒體服務器(SS)、智能分析服務器(IAU)，其中:監(jiān)控前端(PU):對模擬視頻數(shù)據(jù)進行采集、編碼并通過網(wǎng)絡發(fā)送媒體流。監(jiān)控前端是作為一個用戶設備(UE)通過視頻智能分析平臺的CMS統(tǒng)一接入到視頻智能分析系統(tǒng)，由CMS統(tǒng)一進行安全接入認證。監(jiān)控客戶端(⑶):通過網(wǎng)絡接收媒體流，解碼并顯示出視頻圖像；配置對視頻圖像的智能分析策略，可以向媒體服務器(SS)或智能分析服務器(IAU)請求播放錄像。由視頻智能分析平臺的CMS統(tǒng)一進行安全接入認證。流媒體服務器(SS):通過網(wǎng)絡接收媒體流，支持將視頻碼流進行錄像并存儲在磁陣上，將需要進行智能分析的視頻碼流轉發(fā)給IAU。當監(jiān)控客戶端(CU)請求播放視頻錄像時，發(fā)送錄像視頻給監(jiān)控客戶端(CU)。智能分析服務器(IAU):通過網(wǎng)絡接收流媒體SS傳送過來的視頻碼流，根據(jù)⑶設置的智能分析策略對視頻碼流進行智能分析，支持將智能分析后的視頻碼流進行錄像，并保存在與IAU連接的磁陣上，此錄像圖像保留了智能分析的設置信息，比如在圖像上面劃的虛擬墻和警戒線信息，或者在人流量統(tǒng)時視頻圖像上疊加的人流量計數(shù)信息。目前，視頻智能分析系統(tǒng)監(jiān)控錄像存儲和用戶播放監(jiān)控錄像的方法只包括以下兩種:一種方法是:在IAU上存儲經(jīng)過智能分析后的錄像，監(jiān)控客戶端⑶可以向IAU請求查看經(jīng)過智能分析后的錄像，此種錄像存儲方法的好處是可以事后查看包含智能分析結果的視頻錄像。但是，缺點是無法查看原始錄像，比如，疊加的智能分析信息會遮擋到原始圖像畫面的部分顯示內(nèi)容，無法看到完整的原始圖像。另外一種方法是:在智能分析服務器IAU發(fā)送告警給中心管理服務器(CMS)后，中心管理服務器(CMS)要求SS進行錄像，流媒體服務器(SS)在從監(jiān)控前端獲取到原始視頻碼流后進行錄像，存儲了原始視頻錄像，所以，該視頻圖像中不包含智能分析的設置信息和分析后的結果信息。監(jiān)控客戶端⑶可以向SS請求查看原始視頻錄像，此種錄像存儲方法的缺點是在發(fā)生報警后需要查看告警錄像時，用戶只能查看到原始視頻錄像，不疊加智能分析設置和結果的圖像，不能查看到視頻分析的告警信息。因此，面對現(xiàn)有技術中的不足，急需提出一種改進的視頻智能分析系統(tǒng)存儲監(jiān)控錄像和用戶播放監(jiān)控錄像的方法，來克服上述用戶不能同時查看到原始視頻錄像和智能分析后的錄像的問題。

發(fā)明內(nèi)容
本發(fā)明需要解決的技術問題是提供一種視頻智能分析系統(tǒng)及其監(jiān)控錄像存儲和播放的方法，解決現(xiàn)有技術中用戶不能同時查看到原始視頻錄像和智能分析后的錄像的問題，提高視頻智能分析系統(tǒng)的實用性。為了解決上述技術問題，本發(fā)明提供了一種視頻智能分析系統(tǒng)監(jiān)控錄像的存儲方法，流媒體服務器SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲，其中:所述SS接收智能分析服務器IAU發(fā)送的智能分析結果進行存儲，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息。進一步地，所述SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲的同時，還包括:所述SS將所述原始視頻碼流發(fā)送給所述IAU進行智能分析。進一步地，所述智能分析信息包括:智能分析規(guī)則、根據(jù)所述智能分析規(guī)則分析所述原始視頻碼流后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。為了解決上述技術問題，本發(fā)明還提供了一種視頻智能分析系統(tǒng)監(jiān)控錄像的播放方法，包括:流媒體服務器SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲，并接收智能分析服務器IAU發(fā)送的智能分析結果進行存儲，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息；所述SS根據(jù)監(jiān)控客戶端⑶的請求，向所述⑶返回相應的錄像內(nèi)容。進一步地，所述SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲之后還包括:所述SS將所述原始視頻碼流發(fā)送給所述IAU進行智能分析。進一步地，所述智能分析信息包括:智能分析規(guī)則、根據(jù)所述智能分析規(guī)則對所述原始視頻碼流分析后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。進一步地,所述SS根據(jù)監(jiān)控客戶端⑶的請求，向所述⑶返回相應的錄像播放內(nèi)容，包括:若所述監(jiān)控客戶端CU請求播放原始視頻錄像,則所述SS向所述CU返回其存儲的原始視頻錄像。進一步地,所述SS根據(jù)監(jiān)控客戶端⑶的請求，向所述⑶返回相應的錄像播放內(nèi)容，包括:若所述監(jiān)控客戶端⑶請求播放經(jīng)過智能分析后的錄像，則所述SS向所述⑶返回其存儲的原始視頻錄像和所述智能分析結果。
為了解決上述技術問題，本發(fā)明還提供了一種視頻智能分析系統(tǒng)，包括:視頻智能分析平臺，所述視頻智能分析平臺包括:流媒體服務器SS、智能分析服務器IAU ;其中，所述SS，用于將從監(jiān)控前端PU獲取的原始視頻碼流進行錄像并存儲，其中:所述IAU，用于向所述SS返回對所述原始視頻碼流進行智能分析后的智能分析結果，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息；所述SS，還用于接收所述IAU發(fā)送的智能分析結果并存儲。進一步地，所述智能分析信息包括:智能分析規(guī)則、根據(jù)所述智能分析規(guī)則分析所述原始視頻碼流后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。進一步地，所述SS，還用于接收監(jiān)控客戶端⑶的請求，根據(jù)所述⑶的請求，向所述CU返回相應的錄像內(nèi)容。進一步地,若所述⑶請求播放原始視頻錄像，則所述SS向所述⑶返回其存儲的原始視頻錄像；若所述CU請求播放錄像的內(nèi)容是經(jīng)過智能分析后的錄像，則所述SS向所述CU返回其存儲的原始視頻錄像和所述智能分析結果。與現(xiàn)有技術相比，本發(fā)明提供的視頻智能分析系統(tǒng)及其監(jiān)控錄像存儲和播放的方法，不是簡單的將錄像進行保存，而是對錄像的存儲進行了分類，將原始視頻錄像和智能分析結果分開存儲，這樣在客戶端進行點播的時候，就可以根據(jù)用戶的需要來點播兩種不同的錄像，提高了視頻智能分析系統(tǒng)的實用性，并且能夠滿足同時向用戶播放兩種錄像的要求。


圖1是傳統(tǒng)的視頻智能視頻分析系統(tǒng)結構圖；圖2是實施例中視頻智能視頻分析系統(tǒng)結構圖；圖3是實施例中視頻智能分析系統(tǒng)監(jiān)控錄像存儲的方法流程圖；圖4是實施例中視頻智能分析系統(tǒng)監(jiān)控錄像播放的方法流程圖；圖5是一個應用示例中視頻智能分析系統(tǒng)監(jiān)控錄像存儲和播放的具體過程及信令交互流程圖。
具體實施例方式為使本發(fā)明的目的、技術方案和優(yōu)點更加清楚明白，下文中將結合附圖對本發(fā)明的實施例進行詳細說明。需要說明的是，在不沖突的情況下，本申請中的實施例及實施例中的特征可以相互任意組合。實施例:如圖2所示，本實施例提供了一種視頻智能分析系統(tǒng)，包括:視頻智能分析平臺、監(jiān)控前端PU、監(jiān)控客戶端⑶，所述視頻智能分析平臺包括:中心管理服務器CMS、流媒體服務器SS、智能分析服務器IAU ;其中，所述SS，用于將從監(jiān)控前端PU獲取的原始視頻碼流進行錄像并存儲，上述技術與現(xiàn)有技術相同，此處不再贅述。在本實施例中，智能分析服務器IAU用于:接收流媒體SS傳送過來的視頻碼流，根據(jù)監(jiān)控客戶端CU設置的智能分析規(guī)則對視頻碼流進行智能分析，并返回智能分析結果給流媒體服務SS，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息；其中，所述智能分析信息包括:監(jiān)控客戶端CU上設置的智能分析規(guī)則、根據(jù)智能分析規(guī)則分析后需要實時展示在畫面上的信息、智能分析告警的疊加畫面。這里，智能分析信息是數(shù)據(jù)量極小的文件。智能分析規(guī)則就是預先設置好的要分析的區(qū)域、內(nèi)容等信息。智能分析信息就是分析后的數(shù)據(jù)和信息，這個數(shù)據(jù)可能是疊加畫面，也可能是計數(shù)信息(統(tǒng)計經(jīng)過分析的區(qū)域的人數(shù))。這里，舉例來說明一下智能分析規(guī)則及智能分析信息，例如，在監(jiān)控視頻中會有警戒區(qū)域，作為一種智能分析規(guī)則，可以劃定一個警戒區(qū)域，如果有用戶進入該區(qū)域時則跟蹤或報警；IAU進行智能分析后的分析信息包括:如果有人進入該區(qū)域，就會把這個人標注出來，并勾畫出跟蹤這個人的行動軌跡，以及這個人進入該區(qū)域的時刻、時長，還包括用來警示用戶的畫面等等。在這個例子中，智能分析規(guī)則就是劃定的警戒區(qū)域，需要展示在畫面上的信息包括:對這個人的標注和行動軌跡的勾畫，所以，在客戶端CU請求獲取經(jīng)過智能分析后的錄像時，就需要將這些智能分析信息和原始視頻錄像發(fā)送給⑶，這樣，用戶就可以看到疊加了智能分析信息的視頻。智能分析規(guī)則以及智能分析信息包括多種種類和情況，此處不再贅述。所述SS，還用于接收所述IAU發(fā)送的智能分析結果并存儲。在本實施例中，SS對錄像的存儲進行了分類，即將原始視頻錄像和智能分析結果分開存儲，所以，在客戶端進行點播的時候，就可以根據(jù)用戶的需要請求播放兩種不同的錄像，SS可以根據(jù)所述CU請求播放的錄像內(nèi)容，向所述CU返回相應的錄像內(nèi)容。其中，CU向SS請求播放錄像時,若請求播放錄像的內(nèi)容是原始視頻錄像，SS向所述CU返回原始視頻錄像；CU將該原始視頻錄像直接為用戶播放；若請求播放錄像的內(nèi)容是經(jīng)過智能分析后的錄像，則所述SS向所述CU返回原始視頻錄像和所述智能分析結果；cu將返回的所述智能分析結果疊加到原始視頻錄像視頻上進行播放。如圖3所示，本實施例提供了視頻智能分析系統(tǒng)的錄像存儲方法，包括以下步驟:SlOl:流媒體服務器SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲；S102:流媒體服務器SS接收智能分析服務器IAU發(fā)送的智能分析結果并存儲。其中，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息，該智能分析信息包括:監(jiān)控客戶端CU上設置的智能分析規(guī)則、根據(jù)智能分析規(guī)則分析后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。上述步驟S102之前還包括:所述SS將所述原始視頻碼流發(fā)送給所述IAU進行智能分析。如圖4所示，本實施例提供了視頻智能分析系統(tǒng)的錄像播放方法，包括以下步驟:S201:流媒體服務器SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲；S202:流媒體服務器SS接收智能分析服務器IAU發(fā)送的智能分析結果并存儲；其中，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息，上述步驟S202之前還包括:所述SS將所述原始視頻碼流發(fā)送給所述IAU進行智能分析。S203:所述SS根據(jù)監(jiān)控客戶端⑶的請求，向所述⑶返回相應的錄像內(nèi)容；在步驟S203中,若所述監(jiān)控客戶端CU請求播放錄像的內(nèi)容是原始視頻錄像,貝Ij所述SS向所述CU返回原始視頻錄像；若所述監(jiān)控客戶端⑶請求播放錄像的內(nèi)容是經(jīng)過智能分析后的錄像，則所述SS向所述CU返回原始視頻錄像和所述智能分析結果。在本實施例中，在步驟S203之后還包括:S204:所述⑶收到所述SS返回的錄像內(nèi)容后，播放所述錄像內(nèi)容。其中，如果CU收到原始視頻錄像，則將原始視頻錄像直接進行播放；如果CU收到原始視頻錄像和所述智能分析結果，則將返回的所述智能分析結果疊加到原始視頻錄像視頻上進行播放。在一個應用示例中，如圖5所示，描述了本實施例中視頻智能分析系統(tǒng)監(jiān)控錄像存儲和播放的具體過程及信令交互流程，包括以下步驟:S301:監(jiān)控前端向中心管理服務器CMS發(fā)送接入請求，通過CMS接入到視頻智能分析系統(tǒng)中；S302:PU與流媒體服務器SS建立RTSP(Real Time Stream Protocol，會話初始協(xié)議)連接，向SS發(fā)送視頻碼流；S303:監(jiān)控客戶端⑶向CMS發(fā)送接入請求，通過CMS接入到視頻智能分析系統(tǒng)中；
S304:智能分析服務器IAU向CMS發(fā)送接入請求，通過CMS接入到視頻智能分析系統(tǒng)中；S305:在監(jiān)控客戶端⑶上設置對視頻碼流的智能分析規(guī)則；智能分析規(guī)則就是預先設置的需要進行分析的區(qū)域和內(nèi)容等信息，如上面例子中劃定的警戒區(qū)域；也可能是設置的某種規(guī)則，例如，設置一條線，當有物體跨域這種線的時候，就報警。S306 =CMS啟用對監(jiān)控前端I3U碼流的智能分析功能，將智能分析規(guī)則轉發(fā)給IAU ；S307:1AU收到所述智能分析規(guī)則后，啟用對監(jiān)控前端PU碼流的智能分析功能，向SS請求視頻碼流；S308:SS將接收到的視頻碼流轉發(fā)給IAU ；S309:SS發(fā)送碼流給IAU的同時，開始進行錄像，將錄像文件保存在本地磁陣；S310 =IAU將智能分析結果發(fā)送給SS ；其中，智能分析結果中包括對所述原始視頻碼流的智能分析信息，該智能分析信息包括:智能分析規(guī)則、根據(jù)智能分析規(guī)則分析后需要實時展示在畫面的數(shù)據(jù)信息、智能分
析告警的疊加畫面等等。S311:SS將智能分析結果保存在本地磁陣。至此，流媒體服務器SS將原始視頻碼流信息和智能分析結果均保存在了本地，下面，步驟S 312 S315中描述了監(jiān)控客戶端⑶請求播放原始錄像和請求播放經(jīng)過智能分析后的錄像的流程如下:S312:⑶向SS請求播放監(jiān)控錄像,如果請求播放原始視頻錄像,轉至步驟S313,如果請求播放疊加智能分析結果的視頻錄像，在轉至步驟S314 ；S313:SS發(fā)送原始視頻錄像給⑶，⑶進行播放；S314:SS發(fā)送原始視頻錄像和智能分析結果給⑶,⑶將原始視頻錄像和智能分析結果疊加，播放該視頻。
從上述實施例可以看出，相對于現(xiàn)有技術，上述實施例中提供的視頻智能分析系統(tǒng)及其監(jiān)控錄像存儲和播放的方法，不是簡單的將錄像進行保存，而是對錄像的存儲進行了分類，將原始視頻錄像和智能分析結果分開存儲，這樣在客戶端進行點播的時候，就可以根據(jù)用戶的需要來點播兩種不同的錄像，提高了視頻智能分析系統(tǒng)的實用性，并且能夠滿足同時向用戶播放兩種錄像的要求。本領域普通技術人員可以理解上述方法中的全部或部分步驟可通過程序來指令相關硬件完成，所述程序可以存儲于計算機可讀存儲介質中，如只讀存儲器、磁盤或光盤等?？蛇x地，上述實施例的全部或部分步驟也可以使用一個或多個集成電路來實現(xiàn)。相應地，上述實施例中的各模塊/單元可以采用硬件的形式實現(xiàn)，也可以采用軟件功能模塊的形式實現(xiàn)。本發(fā)明不限制于任何特定形式的硬件和軟件的結合。以上所述僅為本發(fā)明的優(yōu)選實施例而已，并非用于限定本發(fā)明的保護范圍。根據(jù)本發(fā)明的發(fā)明內(nèi)容，還可有其他多種實施例，在不背離本發(fā)明精神及其實質的情況下，熟悉本領域的技術人員當可根據(jù)本發(fā)明作出各種相應的改變和變形，凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進等，均應包含在本發(fā)明的保護范圍之內(nèi)。
權利要求
1.一種視頻智能分析系統(tǒng)監(jiān)控錄像的存儲方法，流媒體服務器SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲，其特征在于， 所述SS接收智能分析服務器IAU發(fā)送的智能分析結果進行存儲，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息。
2.如權利要求1所述的方法，其特征在于， 所述SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲的同時，還包括: 所述SS將所述原始視頻碼流發(fā)送給所述IAU進行智能分析。
3.如權利要求1所述的方法，其特征在于， 所述智能分析信息包括:智能分析規(guī)則、根據(jù)所述智能分析規(guī)則分析所述原始視頻碼流后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。
4.一種視頻智能分析系統(tǒng)監(jiān)控錄像的播放方法，包括: 流媒體服務器SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲，并接收智能分析服務器IAU發(fā)送的智能分析結果進行存儲，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息； 所述SS根據(jù)監(jiān)控客戶端CU的請求，向所述CU返回相應的錄像內(nèi)容。
5.如權利要求4所述的方法，其特征在于， 所述SS將從監(jiān)控前端獲取的原始視頻碼流進行錄像并存儲之后還包括: 所述SS將所述原始視頻碼流發(fā)送給所述IAU進行智能分析。
6.如權利要求4所述的方法，其特征在于， 所述智能分析信息包括:智能分析規(guī)則、根據(jù)所述智能分析規(guī)則對所述原始視頻碼流分析后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。
7.如權利要求4所述的方法，其特征在于， 所述SS根據(jù)監(jiān)控客戶端CU的請求，向所述CU返回相應的錄像播放內(nèi)容，包括: 若所述監(jiān)控客戶端CU請求播放原始視頻錄像，則所述SS向所述CU返回其存儲的原始視頻錄像。
8.如權利要求4所述的方法，其特征在于， 所述SS根據(jù)監(jiān)控客戶端CU的請求，向所述CU返回相應的錄像播放內(nèi)容，包括: 若所述監(jiān)控客戶端CU請求播放經(jīng)過智能分析后的錄像，則所述SS向所述CU返回其存儲的原始視頻錄像和所述智能分析結果。
9.一種視頻智能分析系統(tǒng)，包括:視頻智能分析平臺，所述視頻智能分析平臺包括:流媒體服務器SS、智能分析服務器IAU ;其中，所述SS，用于將從監(jiān)控前端PU獲取的原始視頻碼流進行錄像并存儲，其特征在于， 所述IAU，用于向所述SS返回對所述原始視頻碼流進行智能分析后的智能分析結果，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息； 所述SS，還用于接收所述IAU發(fā)送的智能分析結果并存儲。
10.如權利要求9所述的系統(tǒng)，其特征在于， 所述智能分析信息包括:智能分析規(guī)則、根據(jù)所述智能分析規(guī)則分析所述原始視頻碼流后需要實時展示在畫面的數(shù)據(jù)信息、智能分析告警的疊加畫面。
11.如權利要求10所述的系統(tǒng)，其特征在于，所述SS，還用于接收監(jiān)控客戶端CU的請求，根據(jù)所述CU的請求，向所述CU返回相應的錄像內(nèi)容。
12.如權利要求11所述的系統(tǒng)，其特征在于， 若所述CU請求播放原始視頻錄像,則所述SS向所述CU返回其存儲的原始視頻錄像；若所述CU請求播放錄像的內(nèi)容是經(jīng)過智能分析后的錄像，則所述SS向所述CU返回其存儲的原始視頻錄像和所述 智能分析結果。
全文摘要
本發(fā)明公開了一種視頻智能分析系統(tǒng)及其監(jiān)控錄像存儲和播放的方法，該系統(tǒng)包括視頻智能分析平臺，所述視頻智能分析平臺包括流媒體服務器SS、智能分析服務器IAU；其中，所述SS，用于將從監(jiān)控前端PU獲取的原始視頻碼流進行錄像并存儲，接收IAU發(fā)送的智能分析結果并存儲；根據(jù)監(jiān)控客戶端CU的請求，向所述CU返回相應的錄像內(nèi)容；所述IAU，用于向SS返回對所述原始視頻碼流進行智能分析后的智能分析結果，所述智能分析結果中包括對所述原始視頻碼流的智能分析信息。本發(fā)明提供的系統(tǒng)及方法可以根據(jù)用戶的需要來點播不同的錄像，提高了視頻智能分析系統(tǒng)的實用性。
文檔編號H04N21/231GK103188474SQ20111045630
公開日2013年7月3日 申請日期2011年12月30日 優(yōu)先權日2011年12月30日
發(fā)明者馬克迪 申請人:中興通訊股份有限公司