專利名稱：用于處理合成視頻圖像的方法和系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明總地涉及處理包括來自多個源的內(nèi)容的合成視頻圖像的領(lǐng)域，更具體但不 排他地涉及獨立于平臺和應(yīng)用的方法和系統(tǒng)。
背景技術(shù)：
不斷增長的數(shù)據(jù)傳輸帶寬、不斷降低的數(shù)據(jù)傳輸費用、以及VOIP的無所不在是導(dǎo) 致采用視頻會議作為通信工具的潮流的一些因素。這個潮流已經(jīng)使得專門用于視頻會議的 各種裝置持續(xù)增多，這種裝置類似于具有視頻會議功能的電話。然而，這些專門用于視頻會 議的裝置可以被設(shè)計為主要用于方便各種檔次的技術(shù)能力的用戶的使用。對于容易使用的 裝置的需求已經(jīng)導(dǎo)致這種裝置的裝置功能的簡化。對裝置功能的限制通常會簡化裝置的可用性。在這種情況下，一般僅要求裝置 傳送和接收視頻信號，以進行視頻會議。裝置的用戶將很難向接收方展示在諸如計算機、 PDA、移動電話、便攜式游戲控制裝置、和電視調(diào)諧器之類的至少一個輔助裝置(secondary device)上顯示的內(nèi)容。由于例如刷新率問題、圖像質(zhì)量/清晰度問題、以及分辨率問題 等，使用裝置的數(shù)碼相機來捕捉輔助裝置上顯示的內(nèi)容將導(dǎo)致接收者不希望出現(xiàn)的問題。 由于相機與輔助裝置之間的距離，導(dǎo)致相機可能不能清楚地捕捉內(nèi)容。從輔助裝置接口 (porting)內(nèi)容也可能需要簡化后的裝置不能提供的數(shù)據(jù)處理能力。

發(fā)明內(nèi)容
第一方面，提供了一種用于處理合成視頻圖像的方法。該方法包括使用通信設(shè) 備的圖像捕捉裝置獲取圖像；從連接至通信設(shè)備的至少一個輔助裝置獲取至少一個截屏圖 (screen capture)；在至少一個輔助裝置處將至少一個截屏圖編碼為通信設(shè)備能夠接收的 格式；將至少一個編碼后的截屏圖傳送至通信設(shè)備；在通信設(shè)備處對至少一個編碼后的截 屏圖進行解碼；以及由用戶或者根據(jù)預(yù)定設(shè)置在通信設(shè)備處組成所述圖像和所述至少一個 編碼后的截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費和向網(wǎng)絡(luò)傳輸。向網(wǎng)絡(luò)傳輸可以 是在用戶消費期間同時進行的。有利的是，至少一個截屏圖的編碼獨立于在至少一個輔助 裝置上運行的至少一個應(yīng)用。至少一個截屏圖可以具有或不具有音頻信號。至少一個截屏圖可以是全屏幕視圖或部分屏幕視圖。優(yōu)選地，至少一個編碼后的 截屏圖被作為序列流(sequential stream)傳送。至少一個截屏圖的源的變化或缺失會導(dǎo) 致合成視頻圖像的變化。優(yōu)選地，合成視頻圖像包括作為背景的至少一個編碼后的截屏圖 和覆蓋在至少一個編碼后的截屏圖上的圖像。至少一個輔助裝置例如可以是媒體播放器、計算機、PDA、移動電話、便攜式游戲控 制裝置、相機或者電視調(diào)諧器。第二方面，提供了另一種用于處理合成視頻圖像的方法。該方法包括使用通信 設(shè)備的圖像捕捉裝置獲取圖像；從連接至通信設(shè)備的至少一個輔助裝置獲取至少一個截屏 圖；在至少一個輔助裝置處將至少一個截屏圖編碼為通信設(shè)備能夠接收的格式；將至少一個編碼后的截屏圖傳送至通信設(shè)備；在通信設(shè)備處對至少一個編碼后的截屏圖進行解碼； 以及將多個數(shù)據(jù)流傳送至服務(wù)器，該服務(wù)器通過用戶或者根據(jù)預(yù)定設(shè)置在通信設(shè)備處組成 所述圖像和所述至少一個編碼后的截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費和進一 步向網(wǎng)絡(luò)傳輸。進一步向網(wǎng)絡(luò)傳輸可以是在用戶消費期間同時進行的。有利的是，至少一 個截屏圖的編碼獨立于在至少一個輔助裝置上運行的至少一個應(yīng)用。至少一個截屏圖可以 具有或不具有音頻信號。至少一個截屏圖可以是全屏幕視圖或者部分屏幕視圖。優(yōu)選地，至少一個編碼后 的截屏圖被作為序列流傳送。至少一個截屏圖的源的變化或缺失會導(dǎo)致合成視頻圖像的變 化。優(yōu)選地，合成視頻圖像包括作為背景的至少一個編碼后的截屏圖和覆蓋在至少一個編 碼后的截屏圖上的圖像。第三方面，提供了一種用于處理合成視頻圖像的系統(tǒng)。該系統(tǒng)包括通信設(shè)備的圖 像捕捉裝置，用于獲取圖像；連接至通信設(shè)備的至少一個輔助裝置，用于獲取至少一個截屏 圖；至少一個輔助裝置中的橋接編碼器，用于將至少一個截屏圖變換為通信設(shè)備能夠接收 的格式；耦合至至少一個輔助裝置中的橋接編碼器的發(fā)射機，用于將至少一個編碼后的截 屏圖傳送至通信設(shè)備的橋接解碼器；耦合至橋接解碼器的視頻合成器，該視頻合成器由用 戶控制或者根據(jù)通信設(shè)備中的預(yù)定設(shè)置而被控制，用于組成所述圖像和所述至少一個編碼 后的截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費和進一步向網(wǎng)絡(luò)傳輸。優(yōu)選地，至少一 個截屏圖的編碼獨立于在至少一個輔助裝置上運行的至少一個應(yīng)用。至少一個截屏圖可以 具有或不具有音頻信號。至少一個截屏圖可以是全屏幕視圖或者部分屏幕視圖。優(yōu)選地，至少一個編碼后 的截屏圖被作為序列流傳送。至少一個截屏圖的源的變化或缺失會導(dǎo)致合成視頻圖像的變 化。優(yōu)選地，合成視頻圖像包括作為背景的至少一個編碼后的截屏圖和覆蓋在至少一個編 碼后的截屏圖上的圖像。至少一個輔助裝置例如可以是媒體播放器、計算機、PDA、移動電話、便攜式游戲控 制裝置、相機、或電視調(diào)諧器。最后，提供了另一種用于處理合成視頻圖像的系統(tǒng)。該系統(tǒng)包括通信設(shè)備的圖 像捕捉裝置，用于獲取圖像；連接至通信設(shè)備的至少一個輔助裝置，用于獲取至少一個截屏 圖；至少一個輔助裝置中的橋接編碼器，用于將至少一個截屏圖變換為通信設(shè)備能夠接收 的格式；耦合至至少一個輔助裝置中的橋接編碼器的發(fā)射機，用于將至少一個編碼后的截 屏圖傳送至通信設(shè)備的橋接解碼器；位于能夠連接至通信設(shè)備的服務(wù)器上的視頻合成器， 該視頻合成器由用戶控制或者根據(jù)通信設(shè)備中的預(yù)定設(shè)置而被控制，用于組成所述圖像和 所述至少一個編碼后的截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費和進一步向網(wǎng)絡(luò)傳 輸。有利的是，至少一個截屏圖的編碼獨立于在至少一個輔助裝置上運行的至少一個應(yīng)用。


為了使本發(fā)明被完全理解并被很容易地付諸實施，現(xiàn)在參考所附的說明性附圖， 僅通過非限制性的示例來描述本發(fā)明的優(yōu)選實施例。圖1示出了第一實施例中的本發(fā)明的方法的流程圖。圖2示出了第一實施例中的本發(fā)明的系統(tǒng)的示意圖。
圖3示出了第一實施例的變形中的本發(fā)明的系統(tǒng)的示意圖。圖4示出了本發(fā)明的系統(tǒng)的概略圖。圖5示出了截屏圖的示例。圖6示出了使用通信設(shè)備的圖像捕捉裝置獲取的圖像的示例。圖7示出了使用本發(fā)明的方法和/或系統(tǒng)獲取的合成視頻圖像的示例。
具體實施例方式在圖1中所示的第一方面，提供了一種用于處理合成視頻圖像(這種合成圖像的示例200在圖7中示出)的方法20。方法20包括使用通信設(shè)備的圖像捕捉裝置獲取圖像 (這種圖像的示例300在圖6中示出)(22)。通信設(shè)備可以示例性地由圖2中的50和圖3 中的70表示。50和70表示通信設(shè)備的變形。圖4也示出了使用期間的通信設(shè)備100的表
7J\ ο方法20包括從連接至通信設(shè)備的至少一個輔助裝置獲取至少一個截屏圖(這種 截屏圖的示例400在圖5中示出)(24)。截屏圖例如包括圖表、表格、展示幻燈片、靜止圖 像、運動圖像等。至少一個輔助裝置例如可以是媒體播放器、計算機、PDA、移動電話、便攜式 游戲控制裝置、電視調(diào)諧器、相機等。輔助裝置可以示例性地表示為圖2和圖3中的40。圖 5也示出了輔助裝置的說明性表示，即筆記本120、移動電話140、便攜式游戲控制裝置160、 電視機中的電視調(diào)諧器180。到通信設(shè)備的連接可以經(jīng)由有線或無線連接。至少一個截屏 圖可以在至少一個輔助裝置處被編碼為用于傳輸至通信設(shè)備的格式(26)。在至少一個輔助 裝置處進行編碼期間，至少一個截屏圖還可以進行壓縮。音頻信號也可以在至少一個輔助 裝置處被捕捉。然后，至少一個編碼后的截屏圖可被作為序列流，經(jīng)由到通信設(shè)備的連接傳送至 通信設(shè)備(28)。類似地，音頻信號也可以被傳送至通信設(shè)備。然后，至少一個編碼后的截屏圖(和音頻信號)和使用圖像捕捉裝置獲取的圖像 可以被解碼、結(jié)合、并組合為合成音頻圖像(29)。合成圖像的合成可以取決于用戶，也可以 根據(jù)預(yù)定設(shè)置。例如，用戶可能喜歡使用截屏圖作為合成視頻圖像的背景，而圖像被覆蓋在 至少一個編碼后的截屏圖上。這在圖7中的合成圖像200中示出。至少一個編碼后的截屏 圖的源可以在任意情況下改變。當(dāng)至少一個編碼后的截屏圖的源被改變時，至少一個編碼 后的截屏圖可以具有不同的內(nèi)容，并且合成視頻圖像隨后被以不同內(nèi)容呈現(xiàn)。至少一個截 屏圖可以是全屏幕視圖或者部分屏幕視圖。預(yù)定設(shè)置可以包括涉及音頻混合、將圖像/截 屏圖分別布置或彼此相對布置等的設(shè)置。合成圖像可以被用于用戶消費(預(yù)覽合成圖像) 和向網(wǎng)絡(luò)傳輸。向網(wǎng)絡(luò)傳輸可以在用戶消費期間同時進行。應(yīng)該注意，用戶消費例如可以 包括觀看和編輯。在向網(wǎng)絡(luò)傳輸之前，合成圖像可以被編碼和壓縮。在至少一個編碼后的截屏圖(和音頻信號)順序傳輸至通信設(shè)備(28)之后，通信 設(shè)備可以交替地將至少一個編碼后的截屏圖(和音頻信號)和使用圖像捕捉裝置獲取的圖 像作為獨立流傳送至網(wǎng)絡(luò)(30)。獨立流可以在連接至網(wǎng)絡(luò)的服務(wù)器上被解碼、結(jié)合、并組 合為合成視頻圖像(32)。合成圖像的合成可以取決于用戶，也可以根據(jù)預(yù)定設(shè)置。至少一 個編碼后的截屏圖的源可以在任何情況下被改變。當(dāng)至少一個編碼后的截屏圖的源被改變 時，至少一個編碼后的截屏圖可以具有不同內(nèi)容(和音頻)，并且合成視頻圖像隨后被以不同內(nèi)容呈現(xiàn)。當(dāng)一個或多個輔助裝置被從通信設(shè)備斷開時，合成視頻圖像也可以被有差別 地呈現(xiàn)。預(yù)定設(shè)置可考慮到編碼后的截屏圖的源的缺失，而不會在與其他方通信期間對用 戶產(chǎn)生中斷。至少一個截屏圖可以是全屏幕視圖或者部分屏幕視圖。預(yù)定設(shè)置可以包括涉 及將圖像/截屏圖分別布置或彼此相對布置的設(shè)置。合成圖像可以被用于用戶消費或向網(wǎng) 絡(luò)傳輸。從服務(wù)器到網(wǎng)絡(luò)的傳輸可以在用戶消費期間同時進行。在向網(wǎng)絡(luò)傳輸之前，合成 圖像可以被編碼并壓縮。方法20的截屏、編碼和傳輸步驟可以在通信設(shè)備中由在例如ActiveX客戶端、 Java或?qū)Ｓ袘?yīng)用上運行的一組指令啟動。在這方面，該組指令，即ActiveX客戶端、Java applet/應(yīng)用或?qū)Ｓ袘?yīng)用可以駐留于通信設(shè)備本地。應(yīng)該注意，通信設(shè)備可以是USB大容 量存儲裝置，從而使得輔助裝置可以在沒有用戶介入的情況下下載該組指令用于執(zhí)行。通 信設(shè)備還可以充當(dāng)網(wǎng)絡(luò)服務(wù)器。通信設(shè)備還可以執(zhí)行作為網(wǎng)絡(luò)服務(wù)器的任務(wù)。優(yōu)選地，方 法20獨立于在至少一個輔助裝置上運行的至少一個應(yīng)用。這樣，方法20在至少一個應(yīng)用 被增強/升級/更新的時候仍可以被執(zhí)行。所以，方法20被啟動，而不論輔助裝置上的操 作系統(tǒng)、輔助裝置上的應(yīng)用以及輔助裝置上的應(yīng)用版本怎樣。諸如jpg、mp4、mp3等的廣泛 采用的用于傳輸?shù)奈募袷娇梢赃M一步幫助啟動將要啟動的方法20，而不論輔助裝置上的 操作系統(tǒng)、輔助裝置上的應(yīng)用、以及輔助裝置上的應(yīng)用版本如何。第二方面，在圖2中公開了一種用于處理合成視頻圖像(這種合成圖像的示例200 在圖7中示出)的系統(tǒng)41。系統(tǒng)41包括通信設(shè)備50的圖像捕捉裝置42，用于獲取圖像 (這種圖像的示例300在圖6中示出)。至少一個輔助裝置40可以被連接43至通信設(shè)備 50，用于獲取至少一個截屏圖44 (這種截屏圖的示例400在圖5中示出)。截屏圖例如可以 包括圖表、表格、展示幻燈片、靜止圖像、運動圖像等。音頻信號也可以在至少一個輔助裝置 處被捕捉。至少一個輔助裝置40例如可以是媒體播放器、計算機、PDA、移動電話、便攜式游 戲控制裝置、電視調(diào)諧器、相機等。圖4也示出了輔助裝置的說明性表示，即筆記本120、移 動電話140、便攜式游戲控制裝置160、電視機中的電視調(diào)諧器180。至少一個輔助裝置40可以包括用于將至少一個截屏圖44 (和音頻信號)變換為 用于傳輸至通信設(shè)備50的格式的橋接編碼器(bridgingenc0der)45。橋接編碼器45還可 以對至少一個截屏圖44進行壓縮。至少一個輔助裝置40可以包括用于將至少一個編碼后 的截屏圖(和音頻信號)以序列流的形式傳送至橋接解碼器49繼而傳送至通信設(shè)備50的 視頻合成器46的發(fā)射機47。視頻合成器46可以由用戶控制，或者根據(jù)預(yù)定設(shè)置控制。例如，用戶可能喜歡使 用截屏圖作為合成視頻圖像的背景，同時圖像被覆蓋在至少一個編碼后的截屏圖上。這在 圖7中的合成圖像200中示出。至少一個截屏圖44(和音頻信號)的源可以在任何情況下 被改變。當(dāng)至少一個截屏圖(和音頻信號)的源被改變時，至少一個編碼后的截屏圖可以具 有不同內(nèi)容，并且視頻合成器46相應(yīng)地以不同內(nèi)容呈現(xiàn)合成視頻圖像。當(dāng)一個或多個輔助 裝置40被從通信設(shè)備50斷開時，合成視頻圖像還可以被有區(qū)別地呈現(xiàn)。預(yù)定設(shè)置可考慮 到編碼后的截屏圖的源的缺失，而不會在與其他方通信期間對用戶造成任何中斷。預(yù)定設(shè) 置可以包括分別音頻混合、圖像/截屏圖的分別布置或彼此相對布置等的設(shè)置。至少一個 截屏圖可以是全屏幕視圖或部分屏幕視圖。合成圖像可以被用于顯示器60上的用戶消費 以及向網(wǎng)絡(luò)48傳輸。向網(wǎng)絡(luò)48傳輸可以在用戶消費的同時進行。應(yīng)該注意，用戶消費例如可以包括觀看和編輯。在向網(wǎng)絡(luò)傳輸之前，合成圖像可以被網(wǎng)絡(luò)編碼器51編碼并壓縮。系統(tǒng)41的第二方面的變形在圖3中示出。在這個變形中，通信設(shè)備70不具有視 頻合成器。通信設(shè)備70可以將至少一個編碼后的截屏圖(和音頻信號)和使用圖像捕捉 裝置獲取的圖像作為獨立流傳送至網(wǎng)絡(luò)48。獨立流可以由連接至網(wǎng)絡(luò)48的服務(wù)器90的視 頻合成器92結(jié)合并組合為合成視頻圖像。服務(wù)器90可以包括網(wǎng)絡(luò)解碼器94，以對來自網(wǎng) 絡(luò)48的信號進行解碼。視頻合成器92可以由用戶控制，也可以根據(jù)預(yù)定設(shè)置控制。例如， 用戶可能喜歡使用截屏圖作為合成視頻圖像的背景，同時圖像覆蓋在至少一個編碼后的截 屏圖上。至少一個截屏圖44的源可以在任何情況下被改變。當(dāng)至少一個截屏圖的源被改 變時，至少一個編碼后的截屏圖可以具有不同內(nèi)容，并且視頻合成器92相應(yīng)地以不同內(nèi)容 (和音頻)呈現(xiàn)合成視頻圖像。預(yù)定設(shè)置可以包括涉及音頻混合、圖像/截屏圖的分別布置 或彼此相對布置等的設(shè)置。至少一個截屏圖可以是全屏幕視圖或部分屏幕視圖。合成圖像 可以被用于顯示器60上的用戶消費以及向網(wǎng)絡(luò)48傳輸。向網(wǎng)絡(luò)48傳輸可以在用戶消費 期間同時進行。在向網(wǎng)絡(luò)48傳輸之前，合成圖像可以被網(wǎng)絡(luò)編碼器96編碼并壓縮。在系統(tǒng)41中，有利的是，至少一個截屏圖的編碼獨立于在至少一個輔助裝置上運 行的至少一個應(yīng)用。系統(tǒng)41的截屏、編碼和傳輸步驟可以由ActiveX客戶端、Java或者專 有應(yīng)用啟動。在這方面，該組指令，即ActiveX客戶端、Java applet/應(yīng)用或適當(dāng)應(yīng)用可以 駐留于通信設(shè)備70本地。應(yīng)該注意，通信設(shè)備70可以是USB大容量存儲裝置，從而輔助裝 置40可以在沒有用戶介入的情況下下載該組指令用于執(zhí)行。通信設(shè)備70還可以充當(dāng)網(wǎng)絡(luò) 服務(wù)器。這樣，編碼在至少一個應(yīng)用被增強/升級/更新時仍可以執(zhí)行。所以，編碼被啟動， 而不論輔助裝置上的操作系統(tǒng)、輔助裝置上的應(yīng)用、以及輔助裝置上的應(yīng)用版本如何。諸如 jpg、mp4、mp3等的廣泛采用的用于傳輸?shù)奈募袷降氖褂每梢赃M一步幫助啟動將要啟動的 方法30，而不論輔助裝置上的操作系統(tǒng)、輔助裝置上的應(yīng)用、以及輔助裝置上的應(yīng)用版本如 何。參考圖3，示出了本發(fā)明的系統(tǒng)的概略圖。通信設(shè)備100被示出為通過網(wǎng)絡(luò)102連 接至多個類似的通信設(shè)備100。網(wǎng)絡(luò)102可以是局域網(wǎng)或廣域網(wǎng)。應(yīng)該注意，通信設(shè)備100 可以是處理能力小于相同年代的計算機的設(shè)備。該系統(tǒng)的關(guān)鍵方面涉及無論輔助裝置上的 運行系統(tǒng)、輔助裝置上的應(yīng)用、以及輔助裝置上的應(yīng)用版本如何都能夠被連接至輔助裝置 的通信設(shè)備100?？梢钥吹?，諸如筆記本120、移動電話140、便攜式游戲控制裝置160、電視 機中的電視調(diào)諧器180等的輔助裝置被連接至通信設(shè)備100。通信設(shè)備100的顯示器104 示出了包括來自筆記本120的截屏圖106和由通信設(shè)備100的圖像捕捉裝置110獲取的圖 像108的合成圖像。根據(jù)系統(tǒng)41的變形的描述，服務(wù)器190被示出為連接至網(wǎng)絡(luò)102。盡管在前面的描述中描述了本發(fā)明的優(yōu)選實施例，但是本領(lǐng)域技術(shù)人員將理解， 在不脫離本發(fā)明的條件下，可以在設(shè)計或結(jié)構(gòu)的很多細節(jié)上作出變形或修改。
權(quán)利要求
一種用于處理合成視頻圖像的方法，所述方法包括使用通信設(shè)備的圖像捕捉裝置獲取圖像；從連接至所述通信設(shè)備的至少一個輔助裝置獲取至少一個截屏圖；在所述至少一個輔助裝置處將所述至少一個截屏圖編碼為所述通信設(shè)備能夠接收的格式；將至少一個編碼后的截屏圖傳送至所述通信設(shè)備；在所述通信設(shè)備處對所述至少一個編碼后的截屏圖進行解碼；以及由用戶或者根據(jù)預(yù)定設(shè)置在所述通信設(shè)備處組成所述圖像和所述至少一個編碼后的截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費和向網(wǎng)絡(luò)傳輸，其中所述至少一個截屏圖的編碼獨立于在所述至少一個輔助裝置上運行的至少一個應(yīng)用，并且其中所述至少一個截屏圖是從包括以下內(nèi)容的群組中選擇的類型具有音頻信號和不具有音頻信號。
2.根據(jù)權(quán)利要求1所述的方法，其中所述至少一個截屏圖是全屏幕視圖或部分屏幕視圖。
3.根據(jù)權(quán)利要求1所述的方法，其中所述向網(wǎng)絡(luò)傳輸是在用戶消費期間同時進行的。
4.根據(jù)權(quán)利要求1所述的方法，其中所述至少一個編碼后的截屏圖被作為序列流傳送。
5.根據(jù)權(quán)利要求1所述的方法，其中所述至少一個輔助裝置是從包括以下裝置的群組 中選擇的媒體播放器、計算機、PDA、移動電話、便攜式游戲控制終端、相機、以及電視調(diào)諧
6.根據(jù)權(quán)利要求1所述的方法，其中所述合成視頻圖像包括作為背景的所述至少一個 編碼后的截屏圖和覆蓋在所述至少一個編碼后的截屏圖上的所述圖像。
7.根據(jù)權(quán)利要求1所述的方法，其中所述至少一個截屏圖的源的變化或缺失導(dǎo)致所述 合成視頻圖像的變化。
8.一種用于處理合成視頻圖像的方法，所述方法包括 使用通信設(shè)備的圖像捕捉裝置獲取圖像；從連接至所述通信設(shè)備的至少一個輔助裝置獲取至少一個截屏圖； 在所述至少一個輔助裝置處將所述至少一個截屏圖編碼為所述通信設(shè)備能夠接收的 格式；將所述至少一個編碼后的截屏圖傳送至所述通信設(shè)備； 在所述通信設(shè)備處對所述至少一個編碼后的截屏圖進行解碼；以及 將多個數(shù)據(jù)流傳送至服務(wù)器，所述服務(wù)器通過用戶或者根據(jù)預(yù)定設(shè)置在所述通信設(shè)備 處組成所述圖像和所述至少一個編碼后的截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費 和進一步向網(wǎng)絡(luò)傳輸，其中所述至少一個截屏圖的編碼獨立于在所述至少一個輔助裝置上運行的至少一個 應(yīng)用，并且其中所述至少一個截屏圖是從包括以下內(nèi)容的群組中選擇出來的類型具有音 頻信號和不具有音頻信號。
9.根據(jù)權(quán)利要求8所述的方法，其中所述至少一個截屏圖是全屏幕視圖或部分屏幕視圖。
10.根據(jù)權(quán)利要求8所述的方法，其中所述進一步向網(wǎng)絡(luò)傳輸是在所述用戶消費期間 同時進行的。
11.根據(jù)權(quán)利要求8所述的方法，其中所述至少一個編碼后的截屏圖被作為序列流傳送。
12.根據(jù)權(quán)利要求8所述的方法，其中所述至少一個輔助裝置是從包括以下裝置的群 組中選擇的媒體播放器、計算機、PDA、移動電話、便攜式游戲控制裝置、相機、以及電視調(diào)諧器。
13.根據(jù)權(quán)利要求8所述的方法，其中所述合成視頻圖像包括作為背景的所述至少一 個編碼后的截屏圖和覆蓋在所述至少一個編碼后的截屏圖上的所述圖像。
14.根據(jù)權(quán)利要求8所述的方法，其中所述至少一個截屏圖的源的變化或缺失導(dǎo)致所 述合成視頻圖像的變化。
15.一種用于處理合成視頻圖像的系統(tǒng)，所述系統(tǒng)包括 通信設(shè)備的圖像捕捉裝置，用于獲取圖像；連接至所述通信設(shè)備的至少一個輔助裝置，用于獲取至少一個截屏圖； 所述至少一個輔助裝置中的橋接編碼器，用于將所述至少一個截屏圖變換為所述通信 設(shè)備能夠接收的格式；耦合至所述至少一個輔助裝置中的所述橋接編碼器的發(fā)射機，用于將所述至少一個編 碼后的截屏圖傳送至所述通信設(shè)備的橋接解碼器；耦合至所述橋接解碼器的視頻合成器，所述視頻合成器由用戶控制或根據(jù)所述通信設(shè) 備中的預(yù)定設(shè)置而被控制，用于組成所述圖像和所述至少一個編碼后的截屏圖的結(jié)合的合 成視頻圖像，以用于用戶消費和進一步向網(wǎng)絡(luò)傳輸，其中所述至少一個截屏圖的編碼獨立于在所述至少一個輔助裝置上運行的至少一個 應(yīng)用，并且其中所述至少一個截屏圖是從包括以下內(nèi)容的群組中選擇的類型具有音頻信 號和不具有音頻信號。
16.根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述至少一個截屏圖是全屏幕視圖或部分屏幕 視圖。
17.根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述進一步向網(wǎng)絡(luò)傳輸是在用戶消費期間同時 進行的。
18.根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述至少一個編碼后的截屏圖被作為序列流傳送。
19.根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述至少一個輔助裝置是從包括以下裝置的群 組中選擇的媒體播放器、計算機、PDA、移動電話、便攜式游戲控制裝置、相機、以及電視調(diào)諧器。
20.根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述合成視頻圖像包括作為背景的所述至少一 個編碼后的截屏圖和覆蓋在所述至少一個編碼后的截屏圖上的所述圖像。
21.根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述至少一個截屏圖的源的變化或缺失導(dǎo)致所 述合成視頻圖像的變化。
22.一種用于處理合成視頻圖像的系統(tǒng)，所述系統(tǒng)包括 通信設(shè)備的圖像捕捉裝置，用于獲取圖像；連接至所述通信設(shè)備的至少一個輔助裝置，用于獲取至少一個截屏圖； 所述至少一個輔助裝置中的橋接編碼器，用于將所述至少一個截屏圖變換為所述通信 設(shè)備能夠接收的格式；耦合至所述至少一個輔助裝置中的所述橋接編碼器的發(fā)射機，用于將所述至少一個編 碼后的截屏圖傳送至所述通信設(shè)備的橋接解碼器；設(shè)置在連接至所述通信設(shè)備的服務(wù)器上的視頻合成器，所述視頻合成器由用戶控制或 者根據(jù)所述通信設(shè)備中的預(yù)定設(shè)置而被控制，用于組成所述圖像和所述至少一個編碼后的 截屏圖的結(jié)合的合成視頻圖像，以用于用戶消費和進一步向網(wǎng)絡(luò)傳輸，其中所述至少一個截屏圖的編碼獨立于在所述至少一個輔助裝置上運行的至少一個 應(yīng)用，并且所述至少一個截屏圖是從包括以下內(nèi)容的群組中選擇的類型具有音頻信號和 不具有音頻信號。
23.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中所述至少一個截屏圖是全屏幕視圖或部分屏幕 視圖。
24.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中所述進一步向網(wǎng)絡(luò)傳輸是在用戶消費期間同時 進行的。
25.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中所述至少一個編碼后的截屏圖被作為序列流傳送。
26.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中所述至少一個輔助裝置是從包括以下裝置的群 組中選擇的媒體播放器、計算機、PDA、移動電話、便攜式游戲控制裝置、相機、以及電視調(diào)諧器。
27.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中所述合成視頻圖像包括作為背景的所述至少一 個編碼后的截屏圖和覆蓋在所述至少一個編碼后的截屏圖上的所述圖像。
28.根據(jù)權(quán)利要求22所述的系統(tǒng)，其中所述至少一個截屏圖的源的變化或缺失導(dǎo)致所 述合成視頻圖像的變化。
全文摘要
提供了用于處理合成視頻圖像的方法和系統(tǒng)。合成視頻圖像可以是由用戶或者根據(jù)預(yù)定設(shè)置組成的、用于用戶消費和向網(wǎng)絡(luò)傳輸?shù)膱D像和至少一個編碼后的截屏圖的結(jié)合。向網(wǎng)絡(luò)傳輸可以在用戶消費期間同時進行。有利的是，至少一個截屏圖的編碼獨立于在至少一個輔助裝置上運行的至少一個應(yīng)用。至少一個截屏圖可以具有或不具有音頻信號。
文檔編號H04N7/15GK101828392SQ200880112233
公開日2010年9月8日 申請日期2008年10月15日 優(yōu)先權(quán)日2007年10月19日
發(fā)明者道·恩·德斯蒙德·許 申請人:創(chuàng)新科技有限公司