一種多媒體多信息同步重現(xiàn)的方法及其應(yīng)用
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種不同類(lèi)型信息同步重現(xiàn)的方法，特別是一種多媒體多信息同步重現(xiàn)的方法及其運(yùn)用。
【背景技術(shù)】
[0002]在對(duì)同時(shí)涉及聲音、圖像與文字和行蹤、行為這些信息在內(nèi)的多媒體多信息的集合進(jìn)行存儲(chǔ)、回放和檢索、查詢(xún)時(shí)，目前需要使用多種軟、硬件設(shè)備系統(tǒng)以及手段和方法才能達(dá)到目的。
[0003]一、常見(jiàn)的多媒體多信息集合包括:
(一)、公安部關(guān)于機(jī)動(dòng)車(chē)駕駛證領(lǐng)、考過(guò)程所包含的信息:
1.1、不少于兩個(gè)通道的實(shí)時(shí)視頻信息；
1.2、考車(chē)駕駛室內(nèi)的實(shí)時(shí)音頻信息；
1.3、監(jiān)控中心考試員與考生的實(shí)時(shí)對(duì)話(huà)信息；
1.4、考車(chē)行駛過(guò)程的實(shí)時(shí)位置信息；
1.5、考生考試時(shí)所使用的考試車(chē)輛即考車(chē)的信息；
1.6、負(fù)責(zé)監(jiān)考某個(gè)考生的考試員的信息；
1.7、正在進(jìn)行考試的考生信息；
1.8、考生的考試成績(jī)及其評(píng)判依據(jù)；
1.9、對(duì)考生進(jìn)行扣分評(píng)定時(shí)必須記錄的實(shí)時(shí)音頻和視頻信息、考車(chē)即時(shí)所處位置、當(dāng)時(shí)即時(shí)時(shí)刻等實(shí)時(shí)信息。
[0004]1.10、其它的國(guó)家標(biāo)準(zhǔn)沒(méi)有明確規(guī)定的并在某些考場(chǎng)認(rèn)為又需要附加的某些信息，如考生報(bào)名、學(xué)習(xí)、考試的過(guò)程以下一些信息:
1.101、對(duì)報(bào)名學(xué)習(xí)機(jī)動(dòng)車(chē)駕駛技能的人員以及駕駛員和其他人員的體檢過(guò)程進(jìn)行監(jiān)督所要記錄的信息:
1.102、監(jiān)督體檢過(guò)程的音頻、視頻信息；
1.103、體檢人與被體檢人的信息；
1.104、體檢單位的信息；
1.105、體檢結(jié)果的信息。
[0005](二)、對(duì)機(jī)動(dòng)車(chē)的安全、技術(shù)性能的檢驗(yàn)過(guò)程進(jìn)行監(jiān)督所要記錄的信息:
2.1、監(jiān)督及年檢過(guò)程的音頻、視頻信息；
2.2、機(jī)動(dòng)車(chē)年檢時(shí)需提供的相關(guān)信息；
2.3、年檢單位及檢驗(yàn)員、引車(chē)員的信息；
2.4、檢驗(yàn)結(jié)果的信息。
[0006](三)、各種事故現(xiàn)場(chǎng)的處理需要涉及到的信息:
3.1、現(xiàn)場(chǎng)勘探過(guò)程的音頻、視頻信息；
3.2、勘探、測(cè)量人員及產(chǎn)生的現(xiàn)場(chǎng)信息； 3.3、現(xiàn)場(chǎng)處理單位和負(fù)責(zé)當(dāng)時(shí)現(xiàn)場(chǎng)處理的人員的信息；
3.4、現(xiàn)場(chǎng)處理結(jié)果的信息。
[0007](四)、其它各種實(shí)時(shí)監(jiān)控過(guò)程需要涉及到的一些信息:
4.1、對(duì)運(yùn)鈔車(chē)、危險(xiǎn)物品運(yùn)輸車(chē)等執(zhí)行特種任務(wù)的車(chē)輛的日常監(jiān)督、實(shí)時(shí)跟蹤過(guò)程產(chǎn)生音頻、視頻和實(shí)時(shí)時(shí)間、行駛軌跡及相關(guān)的調(diào)度、管理等信息；
4.2、需要用聲音、圖像等手段嚴(yán)把產(chǎn)品監(jiān)督檢驗(yàn)過(guò)程各相應(yīng)階段的相關(guān)信息；
4.3、車(chē)輛上牌及4S店服務(wù)監(jiān)督時(shí)需要管理的各種信息；
4.4、銀行業(yè)務(wù)流程監(jiān)控過(guò)程必須的有關(guān)信息；
4.5、為用于作憑證使用的音、像、圖片及其對(duì)應(yīng)的所有其它資料。
[0008]二、現(xiàn)有多媒體多信息同步重現(xiàn)的方法:
在對(duì)同時(shí)涉及聲音、圖像與文字和行蹤、行為這些信息在內(nèi)的多媒體多信息的集合進(jìn)行存儲(chǔ)、回放和檢索、查詢(xún)時(shí)，目前是采用下列眾多技術(shù)進(jìn)行集成的:
1、通過(guò)音頻、視頻采集與記錄系統(tǒng)來(lái)對(duì)聲音、圖像進(jìn)行同步采集與記錄；
2、通過(guò)電腦數(shù)據(jù)庫(kù)系統(tǒng)來(lái)對(duì)非聲音、非圖像的信息進(jìn)行記錄；
3、在對(duì)多媒體多信息進(jìn)行朔源時(shí)，使用相應(yīng)聲音、圖像播放器進(jìn)行回放或復(fù)原的，對(duì)非聲音、非圖像的信息則是通過(guò)數(shù)據(jù)庫(kù)查詢(xún)系統(tǒng)進(jìn)行搜索、查詢(xún)與顯示的，對(duì)被監(jiān)控對(duì)象當(dāng)時(shí)所對(duì)應(yīng)的即時(shí)時(shí)刻所處位置是綜合應(yīng)用數(shù)據(jù)庫(kù)查詢(xún)系統(tǒng)和虛擬技術(shù)進(jìn)行模擬顯示和還原的。
[0009]三、現(xiàn)有多媒體多信息同步重現(xiàn)的方法的缺點(diǎn):
(一)在對(duì)過(guò)程信息進(jìn)行朔源時(shí)，同時(shí)須要使用多種沒(méi)有在時(shí)間問(wèn)題上存在有能夠同時(shí)一一對(duì)應(yīng)關(guān)聯(lián)的系統(tǒng)作手段，因此不管理論上還是實(shí)踐中都無(wú)法解決回放時(shí)聲音、圖像、圖片等信息與對(duì)應(yīng)的非聲音、非圖像、非圖片信息等其它多種信息的同步問(wèn)題，如:
記錄駕駛?cè)笋{駛技能考試過(guò)程時(shí)需要多個(gè)信息集文件，當(dāng)需要重現(xiàn)視頻和行駛軌跡時(shí)，不同步現(xiàn)象尤為明顯突出，只能異步地描繪出來(lái)的行駛軌跡與考試車(chē)輛實(shí)時(shí)記錄下來(lái)的視頻信號(hào)之間的時(shí)間差是不確定的，根本無(wú)法控制，這樣很容易引起視覺(jué)誤差，在有評(píng)判扣分點(diǎn)時(shí)，使觀察者認(rèn)為是一種評(píng)判錯(cuò)誤，甚至?xí)?dǎo)致對(duì)正確性產(chǎn)生懷疑或糾紛；
在對(duì)需要報(bào)名學(xué)習(xí)機(jī)動(dòng)車(chē)駕駛技能的人進(jìn)行報(bào)名前的體檢時(shí)，為了杜絕不正之風(fēng)、防止弄虛作假和確保公平、公證，新標(biāo)準(zhǔn)規(guī)定了不允許在受到車(chē)管所民警實(shí)時(shí)監(jiān)管下的指定設(shè)置在車(chē)管所內(nèi)部的體檢機(jī)構(gòu)進(jìn)行相應(yīng)的工作，而是讓不能受車(chē)管所直接干預(yù)的具有體檢資質(zhì)的中立醫(yī)院作為第三方進(jìn)行體檢的，這時(shí)為了確保體檢結(jié)果的真實(shí)性并實(shí)施有效的過(guò)程監(jiān)督，需要結(jié)合音、像信息作佐證，這時(shí)就會(huì)出現(xiàn)在進(jìn)行監(jiān)督檢查時(shí)重現(xiàn)的這些信息存在明顯的時(shí)間異步問(wèn)題:用文字表示的體檢結(jié)果與體檢過(guò)程的音、像沒(méi)有固定的時(shí)間關(guān)系。
[0010](二)用目前的數(shù)據(jù)庫(kù)技術(shù)對(duì)即時(shí)時(shí)刻發(fā)生的靜態(tài)信息及動(dòng)態(tài)信息進(jìn)行存儲(chǔ)時(shí)，由于接口的通用性和技術(shù)的開(kāi)放性問(wèn)題，使得其安全性得不到保障，會(huì)很容易地被不法份子篡改，從而破壞了信息數(shù)據(jù)的真實(shí)性。
[0011](三)用目前的數(shù)據(jù)庫(kù)技術(shù)對(duì)與時(shí)間無(wú)關(guān)的靜態(tài)信息及與時(shí)間存在著一一對(duì)應(yīng)關(guān)系的動(dòng)態(tài)信息進(jìn)行存儲(chǔ)時(shí)，分別保存于多個(gè)不同類(lèi)型的文件當(dāng)中，因此要查找起來(lái)就很麻煩，比較費(fèi)工、費(fèi)時(shí)，若要同步重現(xiàn)就更加困難，有時(shí)時(shí)差甚至超過(guò)了 10分鐘。

【發(fā)明內(nèi)容】

[0012]本發(fā)明的目的在于提供一種多媒體多信息同步重現(xiàn)的方法，以解決已有技術(shù)存在的上述問(wèn)題；利用本發(fā)明方法能做到:
①由于多媒體多信息文件被實(shí)時(shí)地同時(shí)保存在同一個(gè)文件當(dāng)中，因此可以保證在查詢(xún)時(shí)和回放時(shí)能夠高度地得到同步，避免了同一時(shí)刻發(fā)生的事件和現(xiàn)象不能在同一時(shí)刻重現(xiàn)回放的非實(shí)時(shí)性問(wèn)題；
②把存儲(chǔ)多媒體多信息的多個(gè)相關(guān)文件數(shù)量適當(dāng)合并在一起，可減少存儲(chǔ)空間的占用量;
③優(yōu)化傳統(tǒng)的多媒體多信息文件的存儲(chǔ)保存方法，在減少存儲(chǔ)空間的同時(shí)也提高了篡改信息的難度；
④提高查詢(xún)多媒體多信息的便利性和速度，減少時(shí)間的浪費(fèi)。
[0013]⑤提高多媒體多信息的安全性、保密性，使多媒體多信息文件在流轉(zhuǎn)、復(fù)制及查閱過(guò)程不易被泄漏、篡改、刪除。
[0014]為解決上述問(wèn)題，本發(fā)明采用的技術(shù)方案是:一種多媒體多信息同步重現(xiàn)的方法，該方法是通過(guò)“多信息調(diào)制單元”把具有關(guān)聯(lián)信息關(guān)系的多個(gè)相關(guān)文件或多種信息流合并在一起，然后再通過(guò)專(zhuān)用的能夠把多信息同步重現(xiàn)回放出來(lái)的播放器來(lái)同步再現(xiàn)的方法，該方法包括以下基本步驟:
A、多信息同步記錄步驟:
該步驟是通過(guò)“多信息調(diào)制單元”的“多信息混合器”把“非音頻、視頻信息”插入到“壓縮前的音頻、視頻流”或“壓縮后的音頻、視頻流或其文件”中，即在“壓縮前的音頻、視頻流”或“壓縮后的音頻、視頻流或其文件”中必需的“視頻幀”或“音頻幀”內(nèi)嵌入一些攜帶有“非音頻、視頻信息”的“附加信息塊”和/或是在必需的“視頻幀”、“音頻幀”之間創(chuàng)建或者插入一些攜帶有“非音頻、視頻信息”的“附加信息幀”，最終形成新的符合某種壓縮標(biāo)準(zhǔn)要求的音頻、視頻流CMSAV或其文件CMSAVF ；
B、多信息同步重現(xiàn)步驟:
該步驟是通過(guò)“多信息同步重現(xiàn)單元”即“多媒體多信息解調(diào)單元”將承載有“非音頻、非視頻信息”的表面上看來(lái)仍然是符合某種壓縮標(biāo)準(zhǔn)要求的音頻、視頻的“多媒體多信息文件CMSAVF ”經(jīng)過(guò)“多信息文件解調(diào)器”后，分別獲得“附加信息塊”、“音頻幀”、“視頻幀”共三種信息集合，之后將作為“多媒體流信息”基本單元的“音頻幀”、“視頻幀”送給“音頻、視頻解碼器或播放器”還原出錄制前的音頻、視頻信息和場(chǎng)景；而對(duì)從“多媒體多信息文件CMSAVF”中解調(diào)得到的“附加信息塊”再次進(jìn)行相應(yīng)的“解調(diào)”或稱(chēng)為“解碼”處理，還原出嵌入到“多媒體多信息文件CMSAVF”中的“非音頻、視頻信息”。
[0015]其進(jìn)一步技術(shù)方案是:所述A、多信息同步記錄步驟中，當(dāng)搭載“非音頻、非視頻信息”的“流媒體”是多路音頻、視頻信息時(shí)，需要它們能夠滿(mǎn)足“同步”的要求，對(duì)多路音頻、視頻的同步處理方法是:在A、多信息同步記錄步驟之前增加一個(gè)AO 預(yù)處理步驟”；
A01、通過(guò)數(shù)據(jù)采集單元的視頻預(yù)處理單元將多通道的視頻信息混合成單一通道的視頻信息CVS ；
其方法是:同時(shí)采集h個(gè)通道的模擬視頻攝像機(jī)信號(hào)并將其數(shù)字化或k個(gè)通道的數(shù)字視頻攝像機(jī)的實(shí)時(shí)動(dòng)態(tài)視頻信號(hào)，最后利用“視頻數(shù)字混合器”把它們合并成只需I個(gè)通道就能滿(mǎn)足國(guó)家標(biāo)準(zhǔn)要求和用戶(hù)特殊要求的數(shù)字視頻信號(hào)CVS供后級(jí)綜合處理或簡(jiǎn)單的存儲(chǔ)記錄使用；上述h、k的取值范圍是:h=0，l，2，……，24，k=0，l，2，……，24，h+k=l，2，3，……24 ；
A02、通過(guò)數(shù)據(jù)采集單元的音頻預(yù)處理單元將多通道的音頻信息混合成單一通道的音頻信息DAS:
其方法是；同時(shí)把m個(gè)通道來(lái)自模擬音頻拾音器的實(shí)時(shí)音頻模擬信號(hào)通過(guò)模擬音頻混合電路將其混合成單一通道的模擬音頻信號(hào)HAS，然后再進(jìn)行數(shù)字化處理并與η個(gè)通道數(shù)字音頻拾音器的實(shí)時(shí)音頻數(shù)字信號(hào)通過(guò)“數(shù)字音頻混合器”混合成只需I個(gè)通道就可以滿(mǎn)足國(guó)家標(biāo)準(zhǔn)要求和用戶(hù)特殊要求的單通道數(shù)字音頻信號(hào)DAS，作為“數(shù)字音頻拾音器”和模擬音頻拾音器的信號(hào)源，m、η的取值范圍是:m = O，I，2，……，24，n=0，l，2，……，24，m+η = I，2，3，......，24。
[0016]其更進(jìn)一步技術(shù)方案是:所述A、多信息同步記錄步驟中，對(duì)單路音頻、視頻信息的處理方法是:先同步地分別對(duì)“音頻信息DAS、視頻信息CVS”進(jìn)行數(shù)字化采集，獲得沒(méi)有經(jīng)過(guò)壓縮的原始數(shù)字音頻、視頻混合信息流AVS的信息流，然后根據(jù)不同的同步時(shí)差分別采取以下Al或A2兩種方法之一種或是同時(shí)采用兩種方法進(jìn)行處理:
Al:先把同步采集到的數(shù)字化“音頻、視頻信息” AVS通過(guò)“多信息混合器”插入“非音頻、非視頻信息”，形成對(duì)AVS添加了非音頻、非視頻信息后形成的多信息音頻、視頻流MSA