用于促進(jìn)計(jì)算設(shè)備處基于情景感知模型的圖像合成及渲染的機(jī)制的制作方法
【專利摘要】根據(jù)本發(fā)明一個(gè)實(shí)施例，描述了用于促進(jìn)計(jì)算設(shè)備處被計(jì)算地合成及渲染的物理對(duì)象的虛擬模型和/或圖像的情景感知合成及渲染的機(jī)制。本發(fā)明實(shí)施例的一種方法包括根據(jù)多個(gè)計(jì)算設(shè)備的每一個(gè)關(guān)于場(chǎng)景的位置來(lái)執(zhí)行多個(gè)計(jì)算設(shè)備的初始校準(zhǔn)以便提供所述場(chǎng)景的視點(diǎn)位置，其中所述多個(gè)計(jì)算設(shè)備中的計(jì)算設(shè)備通過(guò)網(wǎng)絡(luò)彼此通信。所述方法可以進(jìn)一步包括基于所述多個(gè)計(jì)算設(shè)備的視點(diǎn)位置生成所述場(chǎng)景的情景感知視圖，其中每一個(gè)情景感知視圖與計(jì)算設(shè)備相對(duì)應(yīng)。所述方法可以進(jìn)一步包括基于所述場(chǎng)景的情景感知視圖生成所述場(chǎng)景的圖像，其中每一個(gè)圖像與計(jì)算設(shè)備相對(duì)應(yīng)，并且在其相對(duì)應(yīng)的計(jì)算設(shè)備處顯示每一個(gè)圖像。
【專利說(shuō)明】用于促進(jìn)計(jì)算設(shè)備處基于情景感知模型的圖像合成及渲染的機(jī)制
【技術(shù)領(lǐng)域】
[0001]本發(fā)明通常涉及計(jì)算設(shè)備，并且尤其涉及使用用于促進(jìn)計(jì)算設(shè)備處基于情景感知模型的圖像合成及渲染的機(jī)制。
【背景技術(shù)】
[0002]在計(jì)算設(shè)備上渲染對(duì)象的圖像(例如，三維(“3D”)圖像)是常見(jiàn)的。在顯示3D模型的情況下，可以旋轉(zhuǎn)并且從不同的觀察角查看所觀察的對(duì)象。然而，同時(shí)在多個(gè)視角下觀看具有挑戰(zhàn)性。例如，當(dāng)觀看單個(gè)屏幕時(shí)，用戶可以在全屏視圖中每次查看對(duì)象的一個(gè)視角或者選擇經(jīng)過(guò)多個(gè)較小窗口查看多個(gè)視角。然而，這些傳統(tǒng)的技術(shù)受限于單個(gè)用戶/設(shè)備并且依據(jù)多個(gè)視圖的實(shí)時(shí)合成及渲染。
【專利附圖】

【附圖說(shuō)明】
[0003]在附圖的圖示中通過(guò)示例而非限制的方式來(lái)說(shuō)明本發(fā)明的實(shí)施例，在附圖中，相同的附圖標(biāo)記指示相似的元件，并且其中:
[0004]圖1說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例使用情景感知圖像合成及渲染機(jī)制的計(jì)算設(shè)備，所述機(jī)制用于促進(jìn)計(jì)算設(shè)備處圖像的情景感知合成及渲染；
[0005]圖2說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例在計(jì)算設(shè)備處使用的情景感知圖像合成及渲染機(jī)制；
[0006]圖3A說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例的圖像的各種視角；
[0007]圖3B-3D說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例用于使用情景感知圖像合成及渲染機(jī)制的圖像的情景感知圖像合成及渲染的情況(scenario)；
[0008]圖4說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例用于在計(jì)算設(shè)備處使用情景感知圖像合成及渲染機(jī)制來(lái)促進(jìn)圖像的情景感知合成及渲染的一種方法；
[0009]圖5說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例的一種計(jì)算系統(tǒng)。
【具體實(shí)施方式】
[0010]根據(jù)本發(fā)明的一個(gè)實(shí)施例，本發(fā)明的實(shí)施例提供一種用于促進(jìn)計(jì)算設(shè)備處圖像的情景感知合成及渲染的機(jī)制。本發(fā)明的實(shí)施例的一種方法包括根據(jù)多個(gè)計(jì)算設(shè)備中的每一個(gè)關(guān)于場(chǎng)景的位置來(lái)執(zhí)行所述多個(gè)計(jì)算設(shè)備的初始校準(zhǔn)以便提供所述場(chǎng)景的視點(diǎn)位置，其中多個(gè)計(jì)算設(shè)備中的計(jì)算設(shè)備通過(guò)網(wǎng)絡(luò)彼此通信。所述方法可以進(jìn)一步包括基于所述多個(gè)計(jì)算設(shè)備的視點(diǎn)位置生成所述場(chǎng)景的情景感知視圖，其中，每一個(gè)情景感知視圖與計(jì)算設(shè)備相對(duì)應(yīng)。所述方法可以進(jìn)一步包括基于所述場(chǎng)景的所述情景感知視圖生成所述場(chǎng)景的圖像，其中，每一個(gè)圖像與計(jì)算設(shè)備相對(duì)應(yīng)，并且在其相對(duì)應(yīng)的計(jì)算設(shè)備處顯示每一個(gè)圖像。
[0011]而且，本發(fā)明的實(shí)施例的系統(tǒng)或裝置可以提供所述用于促進(jìn)計(jì)算設(shè)備處的圖像的情景感知合成及渲染的機(jī)制并且執(zhí)行上述過(guò)程以及貫穿整個(gè)文檔描述的其它方法和/或過(guò)程。例如，在一個(gè)實(shí)施例中，本發(fā)明的實(shí)施例的裝置可以包括用于執(zhí)行前述的初始校準(zhǔn)的第一邏輯，用于執(zhí)行前述的情景感知視圖的生成的第二邏輯，用于執(zhí)行前述的圖像的生成的第三邏輯，用于執(zhí)行前述的顯示的第四邏輯等等，例如，用于執(zhí)行在本文檔中描述的其它過(guò)程和/或方法的其它或相同的邏輯集合。
[0012]圖1說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例使用情景感知圖像合成及渲染機(jī)制的計(jì)算設(shè)備，用于促進(jìn)計(jì)算設(shè)備處圖像的情景感知合成及渲染。在一個(gè)實(shí)施例中，將計(jì)算設(shè)備100說(shuō)明為具有情景感知圖像處理及渲染(“CIPR”)機(jī)制108，以便在計(jì)算設(shè)備處提供圖像的情景感知合成及渲染。計(jì)算設(shè)備100可以包括移動(dòng)計(jì)算設(shè)備，例如包括智能手機(jī)(例如，蘋果手機(jī)?黑莓手機(jī)?等等)、手持計(jì)算設(shè)備和個(gè)人數(shù)字助理(PDA)等等的移動(dòng)電話，平板電
腦(例如，ipad?、Samsung?和Galaxy Tab?H )，便攜式計(jì)算機(jī)(例如，筆記本、上
網(wǎng)本等等)，電子閱讀器(例如，Kindle?、Nook?'等等)和機(jī)頂盒等等。計(jì)算設(shè)備100
可以進(jìn)一步包括大型計(jì)算設(shè)備，例如，臺(tái)式計(jì)算機(jī)，服務(wù)器計(jì)算機(jī)等等。
[0013]在一個(gè)實(shí)施例中，CIPR機(jī)制108促進(jìn)屏幕上視圖或圖像在任意數(shù)量的方向和角度等等方面的合成及渲染(例如，對(duì)象的圖像、場(chǎng)景、人等等)。進(jìn)而，在一個(gè)實(shí)施例中，如果多個(gè)計(jì)算設(shè)備通過(guò)網(wǎng)絡(luò)彼此通信，則多個(gè)計(jì)算設(shè)備中的每一個(gè)的每一個(gè)用戶(例如，觀察者)可以根據(jù)在每一個(gè)特定的計(jì)算設(shè)備上瀏覽的圖像的情景(例如，布置和位置等等)來(lái)合成及渲染視圖或圖像，并且將該渲染傳輸?shù)酵ㄟ^(guò)網(wǎng)絡(luò)通信的所有其它計(jì)算設(shè)備。將參照隨后的圖示對(duì)此進(jìn)行更進(jìn)一步的解釋。
[0014]計(jì)算設(shè)備100進(jìn)一步包括作為計(jì)算設(shè)備100的任意硬件或物理資源與用戶之間的接口的操作系統(tǒng)106。計(jì)算設(shè)備100進(jìn)一步包括一個(gè)或多個(gè)處理器102、存儲(chǔ)器設(shè)備104、網(wǎng)絡(luò)設(shè)備、驅(qū)動(dòng)器、顯示器等等，以及輸入/輸出源110，例如觸摸屏、觸控面板、觸摸板、虛擬或常規(guī)鍵盤、虛擬或常規(guī)鼠標(biāo)等等。值得注意的是，貫穿該文檔，可交換地并且同義地使用類似“機(jī)器”、“設(shè)備”、“計(jì)算設(shè)備”、“計(jì)算機(jī)”、“計(jì)算系統(tǒng)”等等的詞語(yǔ)。
[0015]圖2說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例在計(jì)算設(shè)備處使用的情景感知圖像合成及渲染機(jī)制。在一個(gè)實(shí)施例中，CIPR機(jī)制108包括校準(zhǔn)器202以便開(kāi)始視圖的視點(diǎn)(“P0V”)位置的初始校準(zhǔn)。校準(zhǔn)器202可以使用任意數(shù)量和類型的方法來(lái)執(zhí)行校準(zhǔn)。隨著用戶(例如，觀察者)使用用戶接口向計(jì)算設(shè)備輸入計(jì)算設(shè)備的當(dāng)前位置，可以初始化校準(zhǔn)，或者可以自動(dòng)地輸入這樣的位置，例如經(jīng)過(guò)“碰撞校準(zhǔn)”的方法，該方法允許兩個(gè)或更多個(gè)計(jì)算設(shè)備彼此碰撞并且確保他們?cè)谙嗤腜OV處，并且基于由一個(gè)或多個(gè)傳感器204獲得的值，可能觀察不同的方向。例如，兩個(gè)筆記本電腦可以背靠背地放置，從兩個(gè)相對(duì)的側(cè)面觀察虛擬對(duì)象。一旦執(zhí)行了初始校準(zhǔn)，傳感器204就檢測(cè)任何移動(dòng)并且接著將該移動(dòng)傳遞到圖像渲染系統(tǒng)(“渲染器”210)，用于經(jīng)過(guò)它的處理模塊212進(jìn)行處理。這一圖像渲染可以在單個(gè)計(jì)算設(shè)備上或者在每一個(gè)獨(dú)立的計(jì)算設(shè)備上執(zhí)行。一旦圖像被渲染，則接著經(jīng)由顯示模塊214在經(jīng)由網(wǎng)絡(luò)(例如，以太網(wǎng)和內(nèi)聯(lián)網(wǎng)等等)連接的每一個(gè)計(jì)算設(shè)備上對(duì)該圖像進(jìn)行顯示。為了進(jìn)一步解釋，將參照?qǐng)D3B到3D描述三種不同的相關(guān)情況。
[0016]在一個(gè)實(shí)施例中，CIPR機(jī)制108進(jìn)一步包括模型生成器206，以便使用覆蓋現(xiàn)實(shí)生活圖像的所有側(cè)面的一個(gè)或多個(gè)相機(jī)，并且然后例如使用一個(gè)或多個(gè)編程技術(shù)或算法來(lái)生成對(duì)象、場(chǎng)景等等的模型(例如，3D計(jì)算機(jī)模型)。主管CIPR機(jī)制108的計(jì)算設(shè)備可以進(jìn)一步使用一個(gè)或多個(gè)相機(jī)(未不出)或與該一個(gè)或多個(gè)相機(jī)通信。進(jìn)而，模型生成器206可以例如使用計(jì)算機(jī)圖像和/或例如基于幾何形狀、紋理、著色和場(chǎng)景光照等等的數(shù)學(xué)模型來(lái)生成這些模型圖像。模型生成器也可以基于描述圖像的對(duì)象(或場(chǎng)景、人等)如何隨著時(shí)間動(dòng)作、彼此交互以及對(duì)外部刺激(例如，用戶之一的虛擬觸摸等等)做出反應(yīng)的物理現(xiàn)象生成模型圖像。進(jìn)而，值得注意的是，這些模型圖像可以是靜態(tài)圖像或者例如視頻流中基于時(shí)間的多個(gè)圖像的序列。
[0017]CIPR機(jī)制108進(jìn)一步包括POV模塊208以便提供固定用戶/觀察者位置的視角P0V，該用戶/觀察者需要從空間中與模型的原始定位有關(guān)的具體方位和位置來(lái)觀看3D圖像。這里，在一個(gè)實(shí)施例中，視角POV可以指代需要從計(jì)算設(shè)備所處的位置渲染模型的計(jì)算設(shè)備的位置。視角視圖窗口(“視圖”)示出了從該P(yáng)OV看到的模型?？梢酝ㄟ^(guò)對(duì)模型應(yīng)用一個(gè)或多個(gè)圖像變換方法來(lái)獲得該視圖，這被稱為視角渲染。
[0018]一個(gè)或多個(gè)傳感器204 (例如，運(yùn)動(dòng)傳感器、位置傳感器等等)促進(jìn)計(jì)算設(shè)備確定其P0V。例如，計(jì)算設(shè)備可以枚舉其自身，從多個(gè)計(jì)算設(shè)備中選取主導(dǎo)計(jì)算設(shè)備，計(jì)算例如圍繞一個(gè)圓的等距點(diǎn)(例如，四個(gè)計(jì)算設(shè)備的90度間隔，等等)，在模型周圍選擇固定的POV等等。進(jìn)而，使用羅盤，可以自動(dòng)確定POV在模型周圍的圓上的旋轉(zhuǎn)角度。傳感器204可以是專用硬件傳感器，例如加速度計(jì)、陀螺儀、羅盤、傾角計(jì)和全球定位系統(tǒng)(GPS)等等，它們可以用于檢測(cè)運(yùn)動(dòng)、相對(duì)移動(dòng)、取向和位置。傳感器204可以包括使用例如檢測(cè)各種無(wú)線發(fā)射機(jī)的信號(hào)強(qiáng)度或計(jì)算設(shè)備周圍WiFi接入點(diǎn)的鄰近度來(lái)確定位置的機(jī)制的軟件傳感器。這樣的精細(xì)傳感器數(shù)據(jù)可以用于確定每一個(gè)用戶相對(duì)于模型在空間上的位置和取向。無(wú)論使用何種方法，計(jì)算或獲得的是這里具有相關(guān)性的傳感器數(shù)據(jù)。
[0019]可以預(yù)見(jiàn)的是，可以將任意數(shù)量和類型的部件添加到CIPR機(jī)制108或者從中移除以便促進(jìn)CIPR機(jī)制108的工作和可操作性，用于在計(jì)算設(shè)備之間提供計(jì)算設(shè)備處圖像的情景感知合成及渲染。為了簡(jiǎn)潔、清楚、容易理解及專注于CIPR機(jī)制108，這里并未示出或者討論各種設(shè)備的許多默認(rèn)或已知部件，例如計(jì)算設(shè)備和相機(jī)等等。
[0020]圖3A說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例的圖像的各種視角。如所說(shuō)明的，將各種對(duì)象302放置在一張桌子上?，F(xiàn)在我們假設(shè)，四個(gè)用戶帶著他們的計(jì)算設(shè)備(例如，平板電腦、筆記本、智能手機(jī)和臺(tái)式機(jī)等等)正坐在桌子周圍(或者在他們的計(jì)算設(shè)備上遠(yuǎn)程地觀看對(duì)象302的虛擬圖像)。如所說(shuō)明的，分別從四個(gè)不同的位置，北方、東方、南方和西方，看見(jiàn)這些圖像304、306、308和310是不同的，并且隨著用戶或他們的計(jì)算設(shè)備或桌上的對(duì)象302四處移動(dòng)，這些圖像也改變。例如，對(duì)象302之一在桌上移動(dòng)或從桌上移除，四個(gè)圖像302-310的每一個(gè)均根據(jù)桌上對(duì)象302的當(dāng)前放置的改變而改變。
[0021]例如，如所說(shuō)明的，如果圖像302-310是對(duì)象302在桌子上的3D模型的視圖，則每一個(gè)圖像提供虛擬對(duì)象302的不同3D視圖?，F(xiàn)在，在一個(gè)實(shí)施例中，如果在諸如圖像310的圖像中示出的虛擬對(duì)象通過(guò)用戶在其計(jì)算設(shè)備上在虛擬空間中進(jìn)行移動(dòng)(例如，使用鼠標(biāo)、鍵盤、觸控面板、觸摸板等等)，則在其各自計(jì)算設(shè)備上渲染的所有圖像304-310根據(jù)其自己的POV而改變，就好像移動(dòng)了真實(shí)對(duì)象302之一(與虛擬對(duì)象相對(duì))。類似地，在一個(gè)實(shí)施例中，諸如渲染圖像310的計(jì)算設(shè)備這樣的計(jì)算設(shè)備出于任何原因例如通過(guò)用戶或事故或某一其它原因被移動(dòng)，該圖像310在該計(jì)算設(shè)備上的渲染也改變。例如，如果使該計(jì)算設(shè)備更加靠近中心，則圖像310提供代表真實(shí)圖像302的虛擬圖像的放大或更大的視圖，并且相反，如果計(jì)算設(shè)備被移開(kāi)，則圖像310顯示虛擬對(duì)象的遠(yuǎn)離的、縮小的視圖。換言之，看起來(lái)或表現(xiàn)為好像真實(shí)的人正在觀看真實(shí)對(duì)象302。
[0022]可以預(yù)見(jiàn)的是，這里說(shuō)明的對(duì)象302僅僅用作示例并且為了簡(jiǎn)潔、清楚和易于理解，并且本發(fā)明的實(shí)施例對(duì)各種各樣的對(duì)象、事物、人物和場(chǎng)景等等是兼容且奏效的。例如，代替對(duì)象302，可以在圖像302-310中瀏覽建筑物。類似地，例如，足球比賽的各種側(cè)面或端部的各種實(shí)時(shí)高清3D視圖，例如，北方、東方、南方和西方，可以分別由相對(duì)應(yīng)的圖像304、306、308和310進(jìn)行渲染。更進(jìn)一步可預(yù)見(jiàn)的是，所述圖像并不局限于本文說(shuō)明的四個(gè)側(cè)面并且可以捕獲任何數(shù)量的側(cè)面，例如，東北方、西南方、上方、下方和圓等等。進(jìn)而，例如，在交互游戲的情況下，在一個(gè)實(shí)施例中，多個(gè)玩家可以坐在桌子周圍(或者在他們各自的家中或其它地方)玩游戲，例如，棋盤游戲，類似拼字游戲，每一個(gè)計(jì)算設(shè)備從其自己的方向視圖中查看游戲板。
[0023]例如，由兩個(gè)玩家使用兩個(gè)計(jì)算設(shè)備的兩個(gè)屏幕的網(wǎng)球游戲可以允許第一個(gè)用戶/玩家在家虛擬地?fù)糁胁⑶覍⒕W(wǎng)球傳送到虛擬球場(chǎng)的另一側(cè)以便傳給在辦公室的第二個(gè)用戶/玩家。第二個(gè)玩家接到虛擬網(wǎng)球并將其擊回給第一個(gè)玩家或未擊中或?qū)⑵涮摂M地?fù)舫鼋缤獾鹊取ｎ愃频?，四個(gè)用戶/玩家可以進(jìn)行雙打賽并且其它附加的用戶可以充當(dāng)基于他們自己關(guān)于例如虛擬網(wǎng)球場(chǎng)的物理位置/方位和環(huán)境從他們自己的單獨(dú)視角觀看虛擬比賽的觀眾。這些用戶可以位于相同的房間中或者分散在世界各地，在他們的家、辦公室、公園、海灘、街道、公共汽車、火車等等處。
[0024]圖3B說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例用于使用情景感知圖像合成及渲染機(jī)制進(jìn)行模型的情景感知合成及渲染的情況。在情況320中，在一個(gè)實(shí)施例中，多個(gè)計(jì)算設(shè)備322-328的集合通過(guò)網(wǎng)絡(luò)330 (例如，局域網(wǎng)(LAN)、無(wú)線局域網(wǎng)(WLAN)、廣域網(wǎng)(WAN)、城域網(wǎng)(MAN)、個(gè)域網(wǎng)(PAN)、藍(lán)牙、以太網(wǎng)和內(nèi)聯(lián)網(wǎng)等等)進(jìn)行通信，單個(gè)計(jì)算設(shè)備322包括模型206A并且負(fù)責(zé)基于從計(jì)算設(shè)備322-328接收到的位置數(shù)據(jù)對(duì)于多個(gè)計(jì)算設(shè)備322-328生成針對(duì)多個(gè)P0V336A、336B、336C和336D的視圖。每一個(gè)計(jì)算設(shè)備322-328可以具有其自己的POV模塊(如圖2的POV模塊208所示)，因此，P0V336A-336D可以通過(guò)每一個(gè)計(jì)算設(shè)備322-328確定并且傳輸?shù)接?jì)算設(shè)備322。將每一個(gè)P0V336A-336D添加到模型206A以使得渲染器210A可以生成所有視圖332A-332D。在所說(shuō)明的實(shí)施例中，每一個(gè)計(jì)算設(shè)備322、324,326和328具有其自己的P0V336A-336D，而在另一實(shí)施例中，計(jì)算設(shè)備322可以基于來(lái)自其它參與的計(jì)算設(shè)備334-328各自的傳感器204A-D的數(shù)據(jù)，生成針對(duì)該其它參與的計(jì)算設(shè)備334-328的P0V336B-336D。計(jì)算設(shè)備322-328可以包括智能手機(jī)、平板電腦、筆記本、上網(wǎng)本、電子閱讀器、臺(tái)式機(jī)等等，或者它們的任意組合。
[0025]在一個(gè)實(shí)施例中，計(jì)算設(shè)備322處的CIPR機(jī)制生成多個(gè)視圖332A到332D，然后使用傳送過(guò)程將多個(gè)視圖中的每一個(gè)發(fā)送到相對(duì)應(yīng)的計(jì)算設(shè)備322-328，所述傳送過(guò)程被已知為由顯示模塊結(jié)合參照?qǐng)D2的CIPR機(jī)制的渲染器210的處理模塊執(zhí)行的顯示重定向。顯示重定向的處理可以涉及視圖窗口的圖形內(nèi)容的前向編碼處理、壓縮所述內(nèi)容用于有效傳輸，以及將每一個(gè)視圖332B到332D發(fā)送到其相對(duì)應(yīng)的對(duì)象計(jì)算設(shè)備324-328，其中經(jīng)過(guò)處理模塊基于每一個(gè)計(jì)算設(shè)備324-328的顯示屏上的視圖332B-332D來(lái)對(duì)圖像進(jìn)行解壓縮、解碼及渲染的逆處理。關(guān)于主計(jì)算設(shè)備322，可以在內(nèi)部執(zhí)行進(jìn)程，以使得生成、為顯示重定向處理(前向及逆處理)及在計(jì)算設(shè)備322處的屏幕上顯示視圖332A。進(jìn)而，如所說(shuō)明的，提供傳感器204A-D以便感測(cè)每一個(gè)計(jì)算設(shè)備322到328關(guān)于對(duì)象或場(chǎng)景等等的情景感知位置和方位等等，瀏覽該對(duì)象或場(chǎng)景以使得可以合適地生成正確的P0V336A到336D和視圖332A到332D。
[0026]用戶輸入334A-334D指代由任意計(jì)算設(shè)備322-328的用戶在每一個(gè)計(jì)算設(shè)備322-328處經(jīng)由用戶接口和輸入設(shè)備(例如，鍵盤、觸控面板、鼠標(biāo)等等)提供的輸入。這些用戶輸入334A-334D可以涉及用戶，例如在計(jì)算設(shè)備326處，請(qǐng)求在計(jì)算設(shè)備326的顯示屏上瀏覽的任意對(duì)象或場(chǎng)景的改變或移動(dòng)。例如，用戶可以選定將所瀏覽的虛擬對(duì)象從屏幕的一個(gè)部分拖拉并移動(dòng)到另一部分，這然后能夠改變虛擬對(duì)象針對(duì)每一個(gè)其它用戶的視圖，并且因此，通過(guò)計(jì)算設(shè)備322處的CIPR機(jī)制生成并且渲染新的視圖332A到332D用于在自身和其它計(jì)算設(shè)備324-328處瀏覽?；蛘?，取決于對(duì)象從每一個(gè)設(shè)備322-328的POV是否可視，用戶可以從計(jì)算設(shè)備326的顯示屏添加或移除虛擬對(duì)象，這導(dǎo)致來(lái)自視圖332A到332D的虛擬對(duì)象的視圖的添加或移除。
[0027]現(xiàn)在參照?qǐng)D3C，說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例用于使用情景感知圖像合成及渲染機(jī)制進(jìn)行圖像的情景感知合成及渲染的情況。為了簡(jiǎn)便起見(jiàn)，這里將不再討論關(guān)于圖3B及其它先前的圖示討論的一些部件。在這一情況350中，每一個(gè)計(jì)算設(shè)備322-328包括模型206A-206B (例如，相同的模型)。這一模型206A到206D可以從中央服務(wù)器，例如從以太網(wǎng)，下載或流出，或者從通過(guò)網(wǎng)絡(luò)330通信的一個(gè)或多個(gè)參與的計(jì)算設(shè)備322-328服務(wù)。基于其自身的位置數(shù)據(jù)，每一個(gè)計(jì)算設(shè)備322-328執(zhí)行并且處理其自己的P0V336A-336D且生成相對(duì)應(yīng)的視圖332A到336D并執(zhí)行相關(guān)的轉(zhuǎn)換，包括顯示重定向處理及其前向及逆處理，并在其自己的顯示屏上渲染所產(chǎn)生的圖像。這一情況350可以獨(dú)立于每一個(gè)參與的計(jì)算設(shè)備322-328而使用附加的數(shù)據(jù)傳輸和內(nèi)容顯示的時(shí)間同步。進(jìn)而，隨著經(jīng)過(guò)用戶接口的用戶交互，可以允許每一個(gè)計(jì)算設(shè)備322到328更新其自己的模型206A到206D。
[0028]圖3D說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例用于使用情景感知圖像合成及渲染機(jī)制進(jìn)行圖像的情景感知合成及渲染的情況。為了簡(jiǎn)便起見(jiàn)，這里將不討論關(guān)于圖3B到3C和其它先前的圖示討論的各種部件。在這一情況370中，每一個(gè)計(jì)算設(shè)備322-328使用其自己的指向正在被觀察的對(duì)象或場(chǎng)景的相機(jī)342A到342D(例如，任意類型或形式的視頻捕捉設(shè)備)。作為示例，為了校準(zhǔn)計(jì)算設(shè)備322-328，可以將物理對(duì)象(例如，具有特定標(biāo)記的立方體)放置在計(jì)算設(shè)備322-328能夠面對(duì)該對(duì)象的某處并且可以調(diào)整該物理對(duì)象直到實(shí)現(xiàn)其正確的校準(zhǔn)。進(jìn)而，可以將包括3D相機(jī)位置的元數(shù)據(jù)標(biāo)注在壓縮的視頻比特流中。在一個(gè)實(shí)施例中，P0V336A-336D可以用于向渲染器210A傳輸物理場(chǎng)景或?qū)ο蟮膲嚎s視頻及其3D坐標(biāo)。
[0029]一旦完成校準(zhǔn)，可以將原始視圖332A到332D標(biāo)注在壓縮比特流中。進(jìn)而，當(dāng)移動(dòng)任意計(jì)算設(shè)備322-328(例如，輕微地或大范圍地移動(dòng)，完全移除參與或者如果添加計(jì)算設(shè)備以便參與等等)時(shí)，重新計(jì)算或確定其3D位置并且將物理視頻(或者靜態(tài)圖像)壓縮并傳輸?shù)絾蝹€(gè)/選定的計(jì)算設(shè)備322處的中央渲染器，如圖3B所示，或者傳輸?shù)蕉鄠€(gè)計(jì)算設(shè)備322-328處的多個(gè)渲染器，如圖3C所示。在每一個(gè)計(jì)算設(shè)備322-328處，所接收的視頻(或者靜態(tài)圖像)經(jīng)歷解壓縮及由比特流解碼器340進(jìn)行的解碼等等的逆處理，并且3D元數(shù)據(jù)用于將物理和虛擬模型合成到視頻緩沖器中。
[0030]在一個(gè)實(shí)施例中，校準(zhǔn)每一個(gè)計(jì)算設(shè)備322-328 —次，并且然后可以使用相機(jī)342A-342D連續(xù)地捕獲視頻或靜止圖像，接下來(lái)是比特流(和/或靜態(tài)圖像)的壓縮、標(biāo)注、傳輸及接收等等。接收(合成)計(jì)算設(shè)備322-328可以使用該比特流(和/或靜止圖像)和虛擬模型206A來(lái)構(gòu)建多個(gè)視圖332A-332B，該多個(gè)視圖332A到332B接下來(lái)被壓縮并傳輸并且接下來(lái)被接收并解壓縮并且接下來(lái)被顯示在計(jì)算設(shè)備322-328的顯示屏上。盡管可以針對(duì)每一個(gè)視圖332A到332D渲染模型206A，但是它也可以是改變的。例如，給定模型206A可以包括物理引擎，該物理引擎描述模型206A的各種部件如何隨著時(shí)間移動(dòng)以及如何彼此交互。進(jìn)而，用戶也能夠通過(guò)點(diǎn)擊或觸摸模型206A中的對(duì)象或情景或者通過(guò)使用任何其它接口機(jī)制(例如，鍵盤，鼠標(biāo)等等)與模型206A交互。在這樣的情況下，可以更新模型206A，這可能會(huì)影響或改變每一個(gè)獨(dú)立的視圖332A-332D。此外，如果模型206A由每一個(gè)單獨(dú)的計(jì)算設(shè)備322-328渲染，則模型206A的相關(guān)更新可以由渲染器210A傳輸或遞送到主計(jì)算設(shè)備322和其它計(jì)算設(shè)備324-328，以使得可以更新視圖332A-332D。接著可以在計(jì)算設(shè)備322-328的顯示屏上顯示更新的視圖332A-332D的變換的圖像。
[0031]圖4說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例用于使用計(jì)算設(shè)備處的情景感知圖像合成及渲染機(jī)制來(lái)促進(jìn)圖像的情景感知合成及渲染的方法。方法400可以由包括硬件(例如，電路、專用邏輯和可編程邏輯等等)、軟件(例如在處理設(shè)備上運(yùn)行的指令)或其組合的處理邏輯執(zhí)行。在一個(gè)實(shí)施例中，方法400可以在多個(gè)計(jì)算設(shè)備上由圖1的CIPR機(jī)制執(zhí)行。
[0032]方法400開(kāi)始于方塊405，校準(zhǔn)通過(guò)網(wǎng)絡(luò)通信的多個(gè)參與的計(jì)算設(shè)備以便實(shí)現(xiàn)正確的校準(zhǔn)和關(guān)于正在被瀏覽的對(duì)象或場(chǎng)景等等的POV位置。在方塊410，通過(guò)一個(gè)或多個(gè)傳感器檢測(cè)或感測(cè)計(jì)算設(shè)備和/或場(chǎng)景中的對(duì)象或某一事物的任何移動(dòng)。在方塊415，使所檢測(cè)的移動(dòng)與計(jì)算設(shè)備處的渲染器相關(guān)，根據(jù)一個(gè)實(shí)施例，該計(jì)算設(shè)備被選定為主管CIPR機(jī)制的主計(jì)算設(shè)備。在另一實(shí)施例中，多個(gè)設(shè)備可以使用CIPR機(jī)制。在方塊420，針對(duì)多個(gè)計(jì)算設(shè)備的每一個(gè)生成視圖。在方塊425，針對(duì)每一個(gè)視圖執(zhí)行顯示重定向(例如，前向處理和逆處理等等)以使得能夠生成視圖的相對(duì)應(yīng)的圖像。在方塊430，接著將這些圖像顯示在參與的計(jì)算設(shè)備的顯示屏上。
[0033]圖5說(shuō)明了根據(jù)本發(fā)明一個(gè)實(shí)施例使用情景感知圖像機(jī)制來(lái)促進(jìn)圖像的情景感知合成及渲染的計(jì)算系統(tǒng)。示例性計(jì)算系統(tǒng)500可以與圖1和圖3B-3D的計(jì)算設(shè)備100、322-328相同或者類似并且包括:1) 一個(gè)或多個(gè)處理器501，其中的至少一個(gè)可以包括以上描述的特征；2)芯片集502 (例如包括存儲(chǔ)器控制集線器(MCH)、I/O控制集線器(ICH)、平臺(tái)控制器集線器(PCH)和片上系統(tǒng)(SoC)等等)；3)系統(tǒng)存儲(chǔ)器503 (存在不同類型的系統(tǒng)存儲(chǔ)器，例如雙倍數(shù)據(jù)率RAM (DDR RAM)，擴(kuò)展數(shù)據(jù)輸出RAM (EDO RAM)等等)；4)高速緩存504 ；5)圖形處理器506 ;6)顯示器/屏幕507 (存在不同類型的顯示器/屏幕，例如陰極射線管(CRT)、薄膜晶體管(TFT)、發(fā)光二極管(LED)、分子有機(jī)LED (MOLED)、液晶顯示器(IXD)和數(shù)字光投影儀(DLP)等等)；以及8) —個(gè)或多個(gè)I/O設(shè)備508。
[0034]一個(gè)或多個(gè)處理器501執(zhí)行指令以便執(zhí)行計(jì)算系統(tǒng)實(shí)現(xiàn)的任何軟件例程。指令經(jīng)常涉及關(guān)于數(shù)據(jù)執(zhí)行的某種操作。數(shù)據(jù)和指令二者均保存在系統(tǒng)存儲(chǔ)器503和高速緩存504中。高速緩存504典型地設(shè)計(jì)為比系統(tǒng)存儲(chǔ)器503具有較短的等待時(shí)間。例如，可以將高速緩存504與處理器集成到相同的硅片上和/或使用較快的靜態(tài)RAM(SRAM)單元構(gòu)造，同時(shí)系統(tǒng)存儲(chǔ)器503可能使用較慢的動(dòng)態(tài)RAM(DRAM)單元構(gòu)造。通過(guò)傾向于將更加頻繁使用的指令和數(shù)據(jù)存儲(chǔ)在高速緩存504中而不是系統(tǒng)存儲(chǔ)器503中，計(jì)算系統(tǒng)的整體性能效率得到改善。
[0035]使系統(tǒng)存儲(chǔ)器503刻意地對(duì)計(jì)算系統(tǒng)內(nèi)的其它部件可用。例如，在軟件程序的實(shí)現(xiàn)中，從到計(jì)算系統(tǒng)的各種接口(例如，鍵盤和鼠標(biāo)、打印機(jī)端口、LAN、端口和調(diào)制解調(diào)器端口等等)接收到的數(shù)據(jù)或者從計(jì)算機(jī)系統(tǒng)的內(nèi)部存儲(chǔ)元件(例如，硬盤驅(qū)動(dòng))取回的數(shù)據(jù)經(jīng)常在被一個(gè)或多個(gè)處理器501操作之前被臨時(shí)地排隊(duì)列到系統(tǒng)存儲(chǔ)器503中。類似地，軟件程序確定應(yīng)該經(jīng)過(guò)計(jì)算系統(tǒng)接口之一從計(jì)算系統(tǒng)發(fā)送到外部實(shí)體的數(shù)據(jù)，或者存儲(chǔ)在內(nèi)部存儲(chǔ)元件中的數(shù)據(jù)，在被傳輸或存儲(chǔ)之前，經(jīng)常被臨時(shí)地排隊(duì)列到系統(tǒng)存儲(chǔ)器503中。
[0036]芯片集502 (例如，ICH)可以負(fù)責(zé)確保這樣的數(shù)據(jù)在系統(tǒng)存儲(chǔ)器503和其適當(dāng)?shù)南鄬?duì)應(yīng)的計(jì)算系統(tǒng)接口(以及內(nèi)部存儲(chǔ)設(shè)備，如果這樣設(shè)計(jì)計(jì)算系統(tǒng))之間經(jīng)過(guò)。芯片集502(例如，MCH)可以負(fù)責(zé)管理相對(duì)于彼此近似同時(shí)出現(xiàn)的處理器501、接口和內(nèi)部存儲(chǔ)元件之間對(duì)系統(tǒng)存儲(chǔ)器503存取的各種競(jìng)爭(zhēng)的請(qǐng)求。
[0037]一個(gè)或多個(gè)I/O設(shè)備508也可以在典型的計(jì)算系統(tǒng)中實(shí)現(xiàn)。I/O設(shè)備通常負(fù)責(zé)向和/或自計(jì)算系統(tǒng)(例如，網(wǎng)絡(luò)適配器)傳輸數(shù)據(jù)；或者負(fù)責(zé)計(jì)算系統(tǒng)(例如，硬盤驅(qū)動(dòng))內(nèi)的大規(guī)模非易失性存儲(chǔ)器。芯片集502的ICH可以在其自身和所觀察的I/O設(shè)備508之間提供雙向點(diǎn)對(duì)點(diǎn)鏈路。
[0038]本發(fā)明的各種實(shí)施例的部分可以提供為計(jì)算機(jī)程序產(chǎn)品，該計(jì)算機(jī)程序產(chǎn)品可以包括具有存儲(chǔ)在其上的計(jì)算機(jī)程序指令的計(jì)算機(jī)可讀介質(zhì)，可以用于對(duì)計(jì)算機(jī)(或其它電子設(shè)備)進(jìn)行編程以便執(zhí)行根據(jù)本發(fā)明實(shí)施例的過(guò)程。機(jī)器可讀介質(zhì)可以包括但不局限于:軟盤、光盤、壓縮盤只讀存儲(chǔ)器(CD-ROM)、磁光盤、ROM、RAM、可擦除可編程只讀存儲(chǔ)器(EPROM)、電子EPROM(EEPROM)、磁卡或光學(xué)卡、閃存或其它類型的適用于存儲(chǔ)電子指令的介質(zhì)/機(jī)器可讀介質(zhì)。
[0039]可以使用在一個(gè)或多個(gè)電子設(shè)備(例如，終端站和網(wǎng)絡(luò)元件)上存儲(chǔ)和執(zhí)行的代碼和數(shù)據(jù)來(lái)實(shí)現(xiàn)圖中示出的技術(shù)。這樣的電子設(shè)備使用計(jì)算機(jī)可讀介質(zhì)來(lái)存儲(chǔ)并通信(內(nèi)部地和/或通過(guò)網(wǎng)絡(luò)與其它電子設(shè)備)代碼和數(shù)據(jù)，該計(jì)算機(jī)可讀介質(zhì)例如是非暫態(tài)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)(例如，磁盤、光盤、隨機(jī)存取存儲(chǔ)器、只讀存儲(chǔ)器、閃存設(shè)備和相變存儲(chǔ)器)和暫態(tài)計(jì)算機(jī)可讀傳輸介質(zhì)(例如，電學(xué)、光學(xué)、聲學(xué)或其它形式的傳播信號(hào)，例如載波、紅外信號(hào)、數(shù)字信號(hào))。此外，這樣的電子設(shè)備典型地包括耦合到一個(gè)或多個(gè)其它部件的一個(gè)或多個(gè)處理器的集合，例如一個(gè)或多個(gè)存儲(chǔ)設(shè)備(非暫態(tài)機(jī)器可讀存儲(chǔ)介質(zhì))、用戶輸入/輸出設(shè)備(例如，鍵盤、觸摸屏和/或顯示器)和網(wǎng)絡(luò)連接。處理器的集合和其它部件的耦合典型地經(jīng)過(guò)一個(gè)或多個(gè)總線和橋(也被稱為總線控制器)。因而，給定電子設(shè)備的存儲(chǔ)設(shè)備典型地存儲(chǔ)用于在該電子設(shè)備的一個(gè)或多個(gè)處理器的集合上執(zhí)行的代碼和/或數(shù)據(jù)。當(dāng)然，本發(fā)明實(shí)施例的一個(gè)或多個(gè)部分可以使用軟件、固件和/或硬件的不同組合來(lái)實(shí)現(xiàn)。
[0040]在前面的說(shuō)明中，參照本發(fā)明的具體示例性實(shí)施例描述了本發(fā)明。然而，在不偏離如在所附權(quán)利要求中闡釋的本發(fā)明的更廣泛的精神和范圍的情況下對(duì)其做出的各種修改和改變將是顯而易見(jiàn)的。因此，說(shuō)明書和附圖將被視為說(shuō)明性意義而非限制性意義。
【權(quán)利要求】
1.一種計(jì)算機(jī)實(shí)現(xiàn)的方法，包括: 根據(jù)多個(gè)計(jì)算設(shè)備的每一個(gè)關(guān)于場(chǎng)景的位置執(zhí)行所述多個(gè)計(jì)算設(shè)備的初始校準(zhǔn)，以便提供所述場(chǎng)景的視點(diǎn)位置，其中，所述多個(gè)計(jì)算設(shè)備通過(guò)網(wǎng)絡(luò)彼此通信； 基于所述多個(gè)計(jì)算設(shè)備的視點(diǎn)位置生成所述場(chǎng)景的情景感知視圖，其中，每一個(gè)情景感知視圖與計(jì)算設(shè)備相對(duì)應(yīng)； 基于所述場(chǎng)景的所述情景感知視圖生成所述場(chǎng)景的圖像，其中，每一個(gè)圖像與計(jì)算設(shè)備相對(duì)應(yīng)；并且 在其相對(duì)應(yīng)的計(jì)算設(shè)備處顯示每一個(gè)圖像。
2.如權(quán)利要求1所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，進(jìn)一步包括: 檢測(cè)所述場(chǎng)景的一個(gè)或多個(gè)對(duì)象的操控；并且 基于所述操控執(zhí)行所述多個(gè)計(jì)算設(shè)備的再校準(zhǔn)，以便提供新的視點(diǎn)位置。
3.如權(quán)利要求2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，進(jìn)一步包括: 基于所述新的視點(diǎn)位置生成所述場(chǎng)景的 新的情景感知視圖； 基于所述場(chǎng)景的所述新的情景感知視圖生成所述場(chǎng)景的新的圖像；并且 在其相對(duì)應(yīng)的計(jì)算設(shè)備處顯示每一個(gè)新的圖像。
4.如權(quán)利要求1所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，進(jìn)一步包括: 檢測(cè)所述多個(gè)計(jì)算設(shè)備中的一個(gè)或多個(gè)計(jì)算設(shè)備的移動(dòng)；并且 基于所述移動(dòng)執(zhí)行所述多個(gè)計(jì)算設(shè)備的再校準(zhǔn)，以便提供新的視點(diǎn)位置。
5.如權(quán)利要求4所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，進(jìn)一步包括: 基于所述新的視點(diǎn)位置生成所述場(chǎng)景的新的情景感知視圖； 基于所述場(chǎng)景的所述新的情景感知視圖生成所述場(chǎng)景的新的圖像；并且 在其相對(duì)應(yīng)的計(jì)算設(shè)備處顯示每一個(gè)新的圖像。
6.如權(quán)利要求1所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，生成所述場(chǎng)景的圖像包括執(zhí)行一個(gè)或多個(gè)虛擬的顯示重定向，以便向其相對(duì)應(yīng)的計(jì)算設(shè)備傳輸所述圖像，其中，所述顯示重定向包括前向處理和逆處理，所述前向處理包括所述圖像的壓縮、編碼、傳輸，并且所述逆處理包括所述圖像的解壓縮、解碼和接收。
7.如權(quán)利要求1所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，所述多個(gè)計(jì)算設(shè)備包括一個(gè)或多個(gè)智能手機(jī)、個(gè)人數(shù)字助理(PDA)、手持式計(jì)算機(jī)、電子閱讀器、平板電腦、筆記本電腦、上網(wǎng)本和臺(tái)式電腦。
8.一種系統(tǒng),包括: 計(jì)算設(shè)備，所述計(jì)算設(shè)備具有用于存儲(chǔ)指令的存儲(chǔ)器以及用于執(zhí)行所述指令的處理設(shè)備，其中，所述指令使所述處理設(shè)備執(zhí)行下列操作: 根據(jù)所述計(jì)算設(shè)備關(guān)于場(chǎng)景的位置執(zhí)行所述計(jì)算設(shè)備的初始校準(zhǔn)，以便提供所述場(chǎng)景的視點(diǎn)位置，并且將與所述初始校準(zhǔn)相關(guān)的信息傳輸?shù)揭粋€(gè)或多個(gè)計(jì)算設(shè)備，以便根據(jù)所述一個(gè)或多個(gè)計(jì)算設(shè)備中的每一個(gè)關(guān)于所述場(chǎng)景的位置執(zhí)行各自的一個(gè)或多個(gè)初始校準(zhǔn)，從而提供所述場(chǎng)景的視點(diǎn)位置； 基于所述計(jì)算設(shè)備的所述視點(diǎn)位置生成所述場(chǎng)景的情景感知視圖； 基于所述場(chǎng)景的所述情景感知視圖生成所述場(chǎng)景的圖像，其中，所述圖像與所述計(jì)算設(shè)備相對(duì)應(yīng)；并且在所述計(jì)算設(shè)備處顯示所述圖像。
9.如權(quán)利要求8所述的系統(tǒng)，其中，所述處理設(shè)備進(jìn)一步用于: 檢測(cè)所述場(chǎng)景的一個(gè)或多個(gè)對(duì)象的操控；并且 基于所述操控執(zhí)行所述計(jì)算設(shè)備的再校準(zhǔn)，以便提供新的視點(diǎn)位置。
10.如權(quán)利要求9所述的系統(tǒng)，其中，所述處理設(shè)備進(jìn)一步用于: 基于所述新的視點(diǎn)位置生成所述場(chǎng)景的新的情景感知視圖； 基于所述場(chǎng)景的所述新的情景感知視圖生成所述場(chǎng)景的新的圖像；并且 在所述計(jì)算設(shè)備處顯示新的圖像。
11.如權(quán) 利要求8所述的系統(tǒng)，其中，所述處理設(shè)備進(jìn)一步用于: 檢測(cè)所述計(jì)算設(shè)備的移動(dòng)；并且 基于所述移動(dòng)執(zhí)行所述計(jì)算設(shè)備的再校準(zhǔn)，以便提供新的視點(diǎn)位置。
12.如權(quán)利要求11所述的系統(tǒng)，其中，所述處理設(shè)備進(jìn)一步用于: 基于所述新的視點(diǎn)位置生成所述場(chǎng)景的新的情景感知視圖； 基于所述場(chǎng)景的所述新的情景感知視圖生成所述場(chǎng)景的新的圖像；并且 在所述計(jì)算設(shè)備處顯示新的圖像。
13.如權(quán)利要求8所述的系統(tǒng)，其中，生成所述場(chǎng)景的所述圖像包括執(zhí)行一個(gè)或多個(gè)虛擬的顯示重定向，以便向所述計(jì)算設(shè)備傳輸所述圖像，其中，所述顯示重定向包括前向處理和逆處理，所述前向處理包括所述圖像的壓縮、編碼、傳輸，并且所述逆處理包括所述圖像的解壓縮、解碼和接收。
14.如權(quán)利要求8所述的系統(tǒng)，其中，所述計(jì)算設(shè)備包括智能手機(jī)、個(gè)人數(shù)字助理(PDA)、手持式計(jì)算機(jī)、電子閱讀器、平板電腦、筆記本電腦、上網(wǎng)本和臺(tái)式電腦。
15.一種包括指令的機(jī)器可讀介質(zhì)，當(dāng)由計(jì)算設(shè)備執(zhí)行時(shí)，所述指令使所述計(jì)算設(shè)備執(zhí)行下列操作: 根據(jù)所述計(jì)算設(shè)備關(guān)于場(chǎng)景的位置執(zhí)行所述計(jì)算設(shè)備的初始校準(zhǔn)，以便提供所述場(chǎng)景的視點(diǎn)位置，并且將與所述初始校準(zhǔn)相關(guān)的信息傳輸?shù)揭粋€(gè)或多個(gè)計(jì)算設(shè)備，以便根據(jù)所述一個(gè)或多個(gè)計(jì)算設(shè)備關(guān)于所述場(chǎng)景的位置執(zhí)行各自的一個(gè)或多個(gè)初始校準(zhǔn)，從而提供所述場(chǎng)景的視點(diǎn)位置； 基于所述計(jì)算設(shè)備的所述視點(diǎn)位置生成所述場(chǎng)景的情景感知視圖； 基于所述場(chǎng)景的所述情景感知視圖生成所述場(chǎng)景的圖像，其中，所述圖像與所述計(jì)算設(shè)備相對(duì)應(yīng)；并且 在所述計(jì)算設(shè)備處顯示所述圖像。
16.如權(quán)利要求15所述的機(jī)器可讀介質(zhì),進(jìn)一步包括一個(gè)或多個(gè)指令，當(dāng)由所述計(jì)算設(shè)備執(zhí)行時(shí)，所述一個(gè)或多個(gè)指令進(jìn)一步使所述計(jì)算設(shè)備執(zhí)行下列操作: 檢測(cè)所述場(chǎng)景的一個(gè)或多個(gè)對(duì)象的操控；并且 基于所述操控執(zhí)行所述計(jì)算設(shè)備的再校準(zhǔn)，以便提供新的視點(diǎn)位置。
17.如權(quán)利要求16所述的機(jī)器可讀介質(zhì),進(jìn)一步包括一個(gè)或多個(gè)指令，當(dāng)由所述計(jì)算設(shè)備執(zhí)行時(shí)，所述一個(gè)或多個(gè)指令進(jìn)一步使所述計(jì)算設(shè)備執(zhí)行下列操作: 基于所述新的視點(diǎn)位置生成所述場(chǎng)景的新的情景感知視圖； 基于所述場(chǎng)景的所述新的情景感知視圖生成所述場(chǎng)景的新的圖像；并且在所述計(jì)算設(shè)備處顯示新的圖像。
18.如權(quán)利要求15所述的機(jī)器可讀介質(zhì),進(jìn)一步包括一個(gè)或多個(gè)指令，當(dāng)由所述計(jì)算設(shè)備執(zhí)行時(shí)，所述一個(gè)或多個(gè)指令進(jìn)一步使所述計(jì)算設(shè)備執(zhí)行下列操作: 檢測(cè)所述計(jì)算設(shè)備的移動(dòng)；并且 基于所述移動(dòng)執(zhí)行所述計(jì)算設(shè)備的再校準(zhǔn)，以便提供新的視點(diǎn)位置。
19.如權(quán)利要求16所述的機(jī)器可讀介質(zhì),進(jìn)一步包括一個(gè)或多個(gè)指令，當(dāng)由所述計(jì)算設(shè)備執(zhí)行時(shí)，所述一個(gè)或多個(gè)指令進(jìn)一步使所述計(jì)算設(shè)備執(zhí)行下列操作: 基于所述新的視點(diǎn)位置生成所述場(chǎng)景的新的情景感知視圖； 基于所述場(chǎng)景的所述新的情景感知視圖生成所述場(chǎng)景的新的圖像；并且 在所述計(jì)算設(shè)備處顯示新的圖像。
20.如權(quán)利要求15所述的機(jī)器可讀介質(zhì)，其中，生成所述場(chǎng)景的所述圖像包括執(zhí)行一個(gè)或多個(gè)虛擬的顯示重定向，以便向所述計(jì)算設(shè)備傳輸所述圖像，其中，所述顯示重定向包括前向處理和逆處理，所述前向處理包括所述圖像的壓縮、編碼、傳輸，并且所述逆處理包括所述圖像的解壓縮、解碼和接收。
21.如權(quán)利要求15所述的機(jī)器可讀介質(zhì)，其中，所述計(jì)算設(shè)備包括智能手機(jī)、個(gè)人數(shù)字助理(PDA)、手持式計(jì)算機(jī)、電子閱讀器、平板電腦、筆記本電腦、上網(wǎng)本和臺(tái)式電腦。
【文檔編號(hào)】G06F15/16GK103959241SQ201180075176
【公開(kāi)日】2014年7月30日 申請(qǐng)日期:2011年9月30日 優(yōu)先權(quán)日:2011年9月30日
【發(fā)明者】A·庫(kù)馬爾, M·D·亞維斯, C·J·洛德 申請(qǐng)人:英特爾公司