專利名稱：一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法
技術(shù)領(lǐng)域：
本發(fā)明涉及網(wǎng)絡(luò)多媒體內(nèi)容分發(fā)技術(shù)領(lǐng)域，特別是關(guān)于一種基于視頻內(nèi)容觸 發(fā)的輔助媒體播放方法。
技術(shù)背景近年來(lái)，互聯(lián)網(wǎng)流媒體技術(shù)得到了迅速的發(fā)展，其具休表現(xiàn)形式為在客戶 端的電腦屏幕上，通過(guò)一塊固定大小的播放器窗口在一定時(shí)間內(nèi)播放來(lái)自服務(wù)器 的音頻視頻數(shù)據(jù)。事實(shí)上，流媒體服務(wù)提供商在為用戶提供主要的視頻流媒體服 務(wù)(例如電影、電視劇等)的同時(shí)，還希望能夠給用戶展現(xiàn)一些其它的輔助媒體 信息，例如商業(yè)廣告或公益廣告、風(fēng)光短片等等?，F(xiàn)有技術(shù)下這些輔助媒體信息 的播放主要是通過(guò)在時(shí)間軸上打斷主視頻流的播放，并在相同播放器窗口位置插 入播放輔助視頻流的方式來(lái)實(shí)現(xiàn)的，而且通常情況下所插入的輔助媒體信息內(nèi)容 與當(dāng)前正在播放的主視頻流在情節(jié)和內(nèi)容并沒(méi)有必然的聯(lián)系。這種方式通常打斷 了用戶觀看主視頻時(shí)的興致，同時(shí)也非常的缺乏針對(duì)性，因而效率低下，效果往 往也并不理想。與電視機(jī)屏幕等傳統(tǒng)視頻顯示設(shè)備不同，在個(gè)人電腦上觀看視頻時(shí)播放器窗 口通常僅占據(jù)顯示器屏幕的一部分空間。如果已知某個(gè)用戶正在觀看某一具體視 頻內(nèi)容，就可以假設(shè)該用戶對(duì)該部分內(nèi)容感興趣，進(jìn)而可推知他對(duì)同該內(nèi)容有關(guān) 的視頻內(nèi)容也感興趣。這樣如果能夠利用個(gè)人電腦顯示器上主視頻流播放器窗口 周圍的部分空閑空間，在主視頻流播放的過(guò)程中適時(shí)彈出并播放一些與當(dāng)前視頻 播放內(nèi)容相關(guān)聯(lián)的輔助媒體信息，則對(duì)于娛樂(lè)用戶、吸引廣告商投資、提高流媒 體服務(wù)提供商增值業(yè)務(wù)收入等方面都會(huì)帶來(lái)很大的好處。輔助媒體的格式可以是 短的視頻、動(dòng)畫(huà)、圖像和文本等，內(nèi)容可以是廣告、提示信息等。例如，當(dāng)播放 某部影片的過(guò)程中主人公正在用手機(jī)打電話時(shí)，在播放器窗口的一側(cè)適時(shí)彈出一 個(gè)臨時(shí)窗口播放某品牌手機(jī)的廣告；當(dāng)正在播放的電視劇中出現(xiàn)某一位歷史人物 時(shí)，在播放器窗口的一側(cè)適時(shí)彈出一個(gè)臨時(shí)窗口顯示該人物的歷史圖片以及滾動(dòng) 文字介紹等等。授予孟智平的題目為"流媒體中加入廣告信息的方法與系統(tǒng)"的中國(guó)專利第CN 101072340號(hào)，是在被處理的流媒體文件中加入和流媒體文件內(nèi)容相關(guān)的廣告 信息，生成廣告描述文件，將所有的流媒體文件和廣告描述文件發(fā)送給用戶，在用戶的播放設(shè)備上通過(guò)描述文件取回廣告并進(jìn)行播放。該專利在播放流媒體文件 之前，需要首先由流媒體推送服務(wù)器把流媒體文件和廣告描述文件全部發(fā)送到客 戶端，這樣不僅使得用戶無(wú)法通過(guò)網(wǎng)絡(luò)實(shí)時(shí)在線點(diǎn)播流媒體服務(wù)器上的音頻、視 頻節(jié)目，而且在用戶數(shù)量增多的情況下難免會(huì)增大系統(tǒng)負(fù)擔(dān)。再者其中廣告媒體 的播放是根據(jù)描述文件中所指定的時(shí)間或視頻幀位置來(lái)確定的，其中時(shí)間并未指 出是機(jī)器的系統(tǒng)時(shí)間還是其它，視頻幀的位置在實(shí)際操作中并不容易確定，因此 可操作性受到限制。在其方案中的描述文件中沒(méi)有播放時(shí)長(zhǎng)參數(shù)，基于內(nèi)容觸發(fā) 的廣告的播放不能隨著音視頻內(nèi)容進(jìn)行調(diào)節(jié)，廣告如果不停播放將會(huì)引起用戶反 感。此外在其方案中的描述文件中僅有廣告內(nèi)容的播放時(shí)間而沒(méi)有下載時(shí)間，當(dāng) 需要播放某一廣告時(shí)才臨時(shí)從相應(yīng)的服務(wù)器上去下載，對(duì)于較大的廣告內(nèi)容來(lái)說(shuō)， 下載后再播放時(shí)主視頻內(nèi)容已發(fā)生變化，從而使播放的廣告內(nèi)容失去了與主音視 頻內(nèi)容的相關(guān)性。 發(fā)明內(nèi)容針對(duì)上述問(wèn)題，本發(fā)明的目的是提供一種根據(jù)預(yù)先從主視頻媒體流中抽取視 頻幀展現(xiàn)時(shí)間戳值來(lái)觸發(fā)輔助媒體對(duì)象播放的一種基于視頻內(nèi)容觸發(fā)的輔助媒體 播放方法。為實(shí)現(xiàn)上述目的，本發(fā)明采取以下技術(shù)方案 一種基于視頻內(nèi)容觸發(fā)的輔助 媒體播放方法，其特征在于每一個(gè)輔助媒體對(duì)象的播放是根據(jù)預(yù)先從主視頻流 中根據(jù)視頻內(nèi)容抽取的視頻幀展現(xiàn)時(shí)間戳值來(lái)觸發(fā)的，其包括以下步驟(a)在 服務(wù)器端為每個(gè)主視頻媒體文件編輯并生成一個(gè)輔助媒體對(duì)象描述文件，其中包 括零到多條輔助媒體對(duì)象記錄；(b)將輔助媒體對(duì)象描述文件下載到本地存儲(chǔ)設(shè) 備進(jìn)行緩存；(C)在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并下載輔助媒體 對(duì)象；(d)在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并播放輔助媒體對(duì)象； (e)當(dāng)播放某個(gè)輔助媒體對(duì)象的時(shí)間超過(guò)與之對(duì)應(yīng)的播放時(shí)間參數(shù)值時(shí)，則停止 該輔助媒體對(duì)象的播放或顯示，并關(guān)閉其播放窗口，結(jié)束媒體播放。所述步驟(a)中，對(duì)輔助媒體對(duì)象描述文件的每條輔助媒體對(duì)象記錄中包括 以下字段起始播放時(shí)間、起始下載時(shí)間、統(tǒng)一資源定位符、媒體類型、位置、 大小、播放時(shí)長(zhǎng)。所述輔助媒體對(duì)象描述文件的生成為手工生成或機(jī)器自動(dòng)生成，還可以是兩 者結(jié)合的方式。所述步驟(C)中，流媒體客戶端在播放主視頻流中的每一個(gè)視頻幀時(shí)，在輔 助媒體對(duì)象描述文件中査找起始下載時(shí)間字段值與當(dāng)前視頻幀所攜帶的展現(xiàn)時(shí)間戳值相一致的輔助媒體對(duì)象記錄。所述步驟(d)中，流媒體客戶端在播放主視頻流中的每一個(gè)視頻幀時(shí)，在輔 助媒體對(duì)象描述文件中査找起始播放時(shí)間字段值與當(dāng)前視頻幀所攜帶的展現(xiàn)時(shí)間戳值相一致的輔助媒體對(duì)象記錄。所述主視頻流媒體文件為邊下載邊播放。本發(fā)明由于采取以上技術(shù)方案，其具有以下優(yōu)點(diǎn)1、本發(fā)明能夠在用戶欣賞視頻節(jié)目的過(guò)程中，在不中斷主視頻流播放的前提下，在主播放窗口的周圍適時(shí) 彈出一個(gè)輔助窗口來(lái)顯示或播放與當(dāng)前時(shí)間點(diǎn)正在播放的視頻節(jié)目?jī)?nèi)容相關(guān)聯(lián)的輔助媒體信息(如廣告或提示信息等)。2、本發(fā)明由于適時(shí)彈出的輔助媒體信息 與正在播放的視頻內(nèi)容有一定的內(nèi)在聯(lián)系，同時(shí)是由預(yù)先從主視頻媒體流中抽取 的視頻幀展現(xiàn)時(shí)間戳值來(lái)觸發(fā)的，因此所發(fā)布的輔助媒體內(nèi)容更容易為用戶所記 憶，而作為提示信息則能夠進(jìn)一步加深用戶對(duì)視頻內(nèi)容的理解，從而形成一種為 媒體服務(wù)提供商和用戶都喜聞樂(lè)見(jiàn)的媒體發(fā)布和分發(fā)形式。3、本發(fā)明在根據(jù)主視 頻媒體編輯和生成輔助媒體描述文件時(shí)，可使用完全手工方式或機(jī)器自動(dòng)或二者 相結(jié)合的方式，因此不受到技術(shù)條件的限制。4、本發(fā)明使用主音視頻媒體流實(shí)時(shí) 在線點(diǎn)播的方式，大大節(jié)省了系統(tǒng)資源和用戶等待時(shí)間。5、本發(fā)明在描述文件中 設(shè)置輔助媒體的起始下載時(shí)間，這樣可以預(yù)先把一些較大的圖片和動(dòng)畫(huà)等輔助媒 體下載到本地，等起始播放時(shí)間一到便可以立即開(kāi)始播放，因此提高了播放質(zhì)量， 減少了由于網(wǎng)絡(luò)傳輸延時(shí)引起的中斷，使得所播放的輔助媒體內(nèi)容與觸發(fā)它的主 視頻媒體內(nèi)容高度一致。6、本發(fā)明在描述文件中設(shè)置了播放時(shí)長(zhǎng)參數(shù)，避免了輔 助媒體內(nèi)容頻繁無(wú)效果的連續(xù)播放。


圖1是本發(fā)明提供的基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法的流程圖 圖2是基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法舉例具體實(shí)施方式
下面結(jié)合附圖和實(shí)施例，對(duì)本發(fā)明進(jìn)行詳細(xì)的描述。如圖1所示，本發(fā)明提供的基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其操作步驟如下(1)編輯輔助媒體對(duì)象描述文件在服務(wù)器端對(duì)應(yīng)每一個(gè)主視頻媒體文件， 編輯并生成一個(gè)輔助媒體對(duì)象描述文件，其生成方式可以完全手工方式，也可以 是機(jī)器自動(dòng)，或者二者結(jié)合的方式，因此不受技術(shù)條件的任何限制；輔助媒體對(duì) 象描述文件包含零到多條輔助媒體對(duì)象記錄，每條輔助媒體對(duì)象記錄中包含以下字段起始播放時(shí)間(Playtime):與主視頻媒體文件中某一個(gè)視頻幀所攜帶的展現(xiàn) 時(shí)間戳相一致的時(shí)間戳信息，表示當(dāng)主視頻碼流播放到該時(shí)間戳位置時(shí)啟動(dòng)播放 當(dāng)前輔助媒體對(duì)象；起始下載時(shí)間(Downloadtirae):客戶端開(kāi)始啟動(dòng)下載當(dāng)前輔助媒體對(duì)象的時(shí) 間戳，該時(shí)間戳的值小于或等于起始播放時(shí)間(Playtime);統(tǒng)一資源定位符(URL):當(dāng)前輔助媒體對(duì)象所對(duì)應(yīng)的URL，客戶端通過(guò)該URL 能夠從網(wǎng)絡(luò)中獲取當(dāng)前輔助媒體對(duì)象的數(shù)據(jù)內(nèi)容；媒體類型(Mediatype):當(dāng)前輔助媒體對(duì)象的媒體類型，媒體類型可以是短 的視頻，動(dòng)畫(huà)(Flash),靜態(tài)或動(dòng)態(tài)圖片，靜態(tài)或動(dòng)態(tài)文本，等等；位置(Position):指定在主視頻播放窗口旁邊的什么位置來(lái)顯示或播放當(dāng)前輔助媒體對(duì)象，該字段為可選項(xiàng)；大小(Size):指定顯示或播放當(dāng)前輔助媒體對(duì)象的輔助窗口的大小，該字段 為可選項(xiàng)；播放時(shí)長(zhǎng)(Duration):指定顯示或播放當(dāng)前輔助媒體對(duì)象的時(shí)長(zhǎng)，超過(guò)該時(shí) 間長(zhǎng)度后將自動(dòng)關(guān)閉當(dāng)前輔助媒體對(duì)象的播放窗口，該字段為可選項(xiàng)。(2) 下載輔助媒體對(duì)象描述文件在流媒體客戶端開(kāi)始播放一個(gè)主視頻媒體 文件之前，首先從服務(wù)器將與該主視頻媒體文件所對(duì)應(yīng)的輔助媒體對(duì)象描述文件 下載到本地存儲(chǔ)設(shè)備進(jìn)行緩存；其主音視頻流媒體文件并不需要預(yù)先下載，而是 以流的方式邊下載邊播放。(3) 在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并下載輔助媒體對(duì)象流 媒體客戶端在播放主視頻流中的每一個(gè)視頻幀時(shí)，在輔助媒體對(duì)象描述文件中查 找起始下載時(shí)間(Downloadtime)字段值與當(dāng)前視頻幀所攜帶的展現(xiàn)時(shí)間戳值相-致的輔助媒體對(duì)象記錄，若找到匹配的記錄，則根據(jù)該記錄中的統(tǒng)一資源定位 符(URL)字段值從網(wǎng)絡(luò)下載相應(yīng)的輔助媒體對(duì)象并緩存于本地存儲(chǔ)設(shè)備，這樣可 以預(yù)先把一些較大的圖片和動(dòng)畫(huà)等輔助媒體下載到本地，等起始播放時(shí)間一到便 可以立即開(kāi)始播放；由于下載大的廣告媒體文件需要一段時(shí)間，因此若不預(yù)先下 載的話，當(dāng)視頻播放到某一鏡頭需要彈出相應(yīng)廣告時(shí)并不能立即彈出，從而失去 了基于內(nèi)容觸發(fā)播放的效果。(4) 在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并播放輔助媒體對(duì)象流 媒體客戶端在播放主視頻流中的每一個(gè)視頻幀時(shí)，在輔助媒體對(duì)象描述文件中査 找起始播放時(shí)間(Playtime)字段值與當(dāng)前視頻幀所攜帶的展現(xiàn)時(shí)間戳值相一致的輔助媒體對(duì)象記錄，若找到匹配的記錄，則根據(jù)該記錄中的統(tǒng)一資源定位符(URL)字段值從本地緩沖區(qū)中查找已下載并緩存的輔助媒體對(duì)象，如果尚未下載 則從網(wǎng)絡(luò)下載相應(yīng)的輔助媒體對(duì)象，然后根據(jù)該記錄的位置(Position)和大小(Size)字段值在主媒體播放器窗口旁邊的相應(yīng)位置彈出一個(gè)相應(yīng)大小的輔助媒 體播放窗口，啟動(dòng)該輔助媒體對(duì)象的顯示或播放，如果下載的輔助媒體對(duì)象描述 文件中沒(méi)有對(duì)應(yīng)的位置(Position)、大小(Position)或播放時(shí)間(Duration) 字段時(shí)，則按照由URL所確定的輔助媒體對(duì)象默認(rèn)的相應(yīng)參數(shù)值來(lái)進(jìn)行顯示或播 放。(5)結(jié)束輔助媒體對(duì)象的播放當(dāng)播放某個(gè)輔助媒體對(duì)象的時(shí)間超過(guò)與之對(duì)應(yīng)的播放時(shí)間(Duration)參數(shù)值時(shí)，則停止該輔助媒體對(duì)象的播放或顯示，并關(guān)閉其播放窗口。如圖2所示，是本發(fā)明提供的基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法的一個(gè) 例子當(dāng)主視頻流播放到時(shí)間點(diǎn)1時(shí)，主視頻窗口中出現(xiàn)一個(gè)人用手機(jī)打電話的畫(huà)面，這時(shí)將觸發(fā)彈出一個(gè)輔助播放窗口，播放一段手機(jī)廣告動(dòng)畫(huà)；當(dāng)主視頻流播放到時(shí)間點(diǎn)2時(shí)，主視頻窗口中一個(gè)歷史人物出場(chǎng)，這時(shí)將觸發(fā)彈出一個(gè)輔助播放窗口，顯示該歷史人物的相關(guān)圖片和背景資料。
權(quán)利要求
1、一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征在于每一個(gè)輔助媒體對(duì)象的播放是根據(jù)預(yù)先從主視頻流中根據(jù)視頻內(nèi)容抽取的視頻幀展現(xiàn)時(shí)間戳值來(lái)觸發(fā)的，其包括以下步驟(a)在服務(wù)器端為每個(gè)主視頻媒體文件編輯并生成一個(gè)輔助媒體對(duì)象描述文件，其中包括零到多條輔助媒體對(duì)象記錄；(b)將輔助媒體對(duì)象描述文件下載到本地存儲(chǔ)設(shè)備進(jìn)行緩存；(c)在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并下載輔助媒體對(duì)象；(d)在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并播放輔助媒體對(duì)象；(e)當(dāng)播放某個(gè)輔助媒體對(duì)象的時(shí)間超過(guò)與之對(duì)應(yīng)的播放時(shí)間參數(shù)值時(shí)，則停止該輔助媒體對(duì)象的播放或顯示，并關(guān)閉其播放窗口，結(jié)束媒體播放。
2、 如權(quán)利要求l所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征 在于所述步驟(a)中，對(duì)輔助媒體對(duì)象描述文件的每條輔助媒體對(duì)象記錄中包 括以下字段起始播放時(shí)間、起始下載時(shí)間、統(tǒng)一資源定位符、媒體類型、位置、 大小、播放時(shí)長(zhǎng)。
3、 如權(quán)利要求l所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征 在于所述輔助媒體對(duì)象描述文件的生成為手工生成或機(jī)器自動(dòng)生成，還可以是 兩者結(jié)合的方式。
4、 如權(quán)利要求2所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征 在于所述輔助媒體對(duì)象描述文件的生成為手工生成或機(jī)器自動(dòng)生成，還可以是 兩者結(jié)合的方式。
5、 如權(quán)利要求1或2或3或4中所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播 放方法，其特征在于所述步驟(C)中，流媒體客戶端在播放主視頻流中的每一個(gè)視頻幀時(shí)，在輔助媒體對(duì)象描述文件中查找起始下載時(shí)間字段值與當(dāng)前視頻幀 所攜帶的展現(xiàn)時(shí)間戳值相一致的輔助媒體對(duì)象記錄。
6、 如權(quán)利要求1或2或3或4中所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播 放方法，其特征在于所述步驟(d)中，流媒體客戶端在播放主視頻流中的每一 個(gè)視頻幀時(shí)，在輔助媒體對(duì)象描述文件中査找起始播放時(shí)間字段值與當(dāng)前視頻幀 所攜帶的展現(xiàn)時(shí)間戳值相一致的輔助媒體對(duì)象記錄。
7、 如權(quán)利要求5中所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征在于所述步驟(d)中，流媒體客戶端在播放主視頻流中的每一個(gè)視頻幀時(shí)，在輔助媒體對(duì)象描述文件中查找起始播放時(shí)間字段值與當(dāng)前視頻幀所攜帶的展現(xiàn) 時(shí)間戳值相一致的輔助媒體對(duì)象記錄。
8、 如權(quán)利要求1或2或3或4或7中所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒 體播放方法，其特征在于所述主視頻流媒體文件為邊下載邊播放。
9、 如權(quán)利要求5中所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征在于所述主視頻流媒體文件為邊下載邊播放。
10、 如權(quán)利要求6中所述的一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征在于所述主視頻流媒體文件為邊下載邊播放。
全文摘要
本發(fā)明涉及一種基于視頻內(nèi)容觸發(fā)的輔助媒體播放方法，其特征在于每一個(gè)輔助媒體對(duì)象的播放是根據(jù)預(yù)先從主視頻流中根據(jù)視頻內(nèi)容抽取的視頻幀展現(xiàn)時(shí)間戳值觸發(fā)的，其包括以下步驟(a)在服務(wù)器端為每個(gè)主音視頻媒體文件編輯并生成一個(gè)輔助媒體對(duì)象描述文件，其中包括零到多條輔助媒體對(duì)象記錄；(b)下載輔助媒體對(duì)象描述文件；(c)在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并下載輔助媒體對(duì)象；(d)在主視頻流的播放過(guò)程中基于時(shí)間戳匹配選擇并播放輔助媒體對(duì)象；(e)結(jié)束媒體播放?；诒痉椒òl(fā)布的輔助媒體內(nèi)容可作為提示信息則能夠進(jìn)一步加深用戶對(duì)視頻內(nèi)容的理解，從而形成一種對(duì)媒體服務(wù)提供商和用戶都有益的媒體發(fā)布和分發(fā)形式。
文檔編號(hào)H04N7/16GK101232612SQ20071017886
公開(kāi)日2008年7月30日 申請(qǐng)日期2007年12月6日 優(yōu)先權(quán)日2007年12月6日
發(fā)明者強(qiáng) 付, 周曉聰, 徐永澤, 霍龍社, 文 高 申請(qǐng)人:北京廣視通達(dá)網(wǎng)絡(luò)技術(shù)有限公司;北京大學(xué)