結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及視頻通信技術(shù)和VR虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)技術(shù)，特別是一種結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)。
【背景技術(shù)】
[0002]視頻通信作為目前最先進(jìn)的通訊技術(shù)，已經(jīng)可以借助互聯(lián)網(wǎng)或無(wú)線寬帶網(wǎng)絡(luò)，實(shí)現(xiàn)高效高清的遠(yuǎn)程會(huì)議、協(xié)同辦公，在持續(xù)提升用戶(hù)溝通效率、縮減企業(yè)差旅費(fèi)用成本、提高管理成效等方面具有得天獨(dú)厚的優(yōu)勢(shì)，已部分取代商務(wù)出行，成為遠(yuǎn)程辦公的新模式。近年來(lái)，我國(guó)視頻通信系統(tǒng)市場(chǎng)規(guī)模逐年擴(kuò)大，視頻通信的應(yīng)用范圍在迅速擴(kuò)大的同時(shí)，進(jìn)一步向各行各業(yè)滲透，從政府、公安、軍隊(duì)、法院到科技、能源、醫(yī)療、教育等領(lǐng)域隨處可見(jiàn)，涵蓋了社會(huì)生活的方方面面。研宄中的大量數(shù)據(jù)表明，視頻通信系統(tǒng)正在向靈活易用性、大眾化平民化，家用小型化發(fā)展，同時(shí)最終用戶(hù)對(duì)視頻通信系統(tǒng)能夠營(yíng)造的會(huì)議氛圍、會(huì)議體驗(yàn)更為關(guān)注。對(duì)于因各種原因不能親自參加會(huì)議或進(jìn)行面對(duì)面的交流，而只能通過(guò)視頻通信系統(tǒng)遠(yuǎn)程出席的遠(yuǎn)程參會(huì)者，現(xiàn)有的視頻通信系統(tǒng)在交流的體驗(yàn)上、易用性上、便攜性等方面對(duì)于這種特定用戶(hù)而言還存在很多缺陷，尤其是在營(yíng)造一種具有感知性、臨場(chǎng)感和沉浸感的交流體驗(yàn)上。為此，本發(fā)明人結(jié)合視頻通信技術(shù)，VR虛擬現(xiàn)實(shí)技術(shù)(包括人機(jī)交互技術(shù)、傳感技術(shù)、人工智能領(lǐng)域等)、網(wǎng)絡(luò)通信技術(shù)等，通過(guò)虛擬現(xiàn)實(shí)眼鏡(VR眼鏡)實(shí)現(xiàn)了一種具有感知性、臨場(chǎng)感和沉浸感的視頻通信系統(tǒng)，即本發(fā)明。本發(fā)明通過(guò)將虛擬現(xiàn)實(shí)眼鏡應(yīng)用到目前已有的視頻通信系統(tǒng)中，實(shí)現(xiàn)一種具有感知性、臨場(chǎng)感和沉浸感的視頻通信系統(tǒng)，使得因?yàn)楦鞣N原因在外不能正常參加會(huì)議或會(huì)面的人員能夠身臨其境地參加會(huì)議或會(huì)面。

【發(fā)明內(nèi)容】

[0003]本發(fā)明針對(duì)現(xiàn)有技術(shù)中存在的缺陷或不足，提供一種結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)，能夠有利于遠(yuǎn)程參會(huì)人員獲得感知性、臨場(chǎng)感、沉浸感的參會(huì)體驗(yàn)。
[0004]本發(fā)明提出了一個(gè)全新的概念:把虛擬現(xiàn)實(shí)眼鏡應(yīng)用到視頻通信系統(tǒng)中，通過(guò)將虛擬現(xiàn)實(shí)的基本技術(shù)如體感追蹤、聲音定位、視覺(jué)跟蹤等與現(xiàn)有的視頻通信系統(tǒng)相結(jié)合，為不能親身參加會(huì)議或會(huì)面的人員提供一種具有感知性、臨場(chǎng)感和沉浸感的視頻通信應(yīng)用新體驗(yàn)。
[0005]本發(fā)明的技術(shù)構(gòu)思是，為了使得因?yàn)榉N種原因不能親自參加會(huì)議或會(huì)面的人能夠隨時(shí)參加會(huì)議或會(huì)面，并且在會(huì)議或會(huì)面交流的過(guò)程中能夠獲得感知性、臨場(chǎng)感和沉浸感的體驗(yàn)，在主會(huì)場(chǎng)會(huì)議缺席者的位置增設(shè)一個(gè)擬人通信終端。該擬人通信終端完全代替應(yīng)該親身出席會(huì)議或會(huì)面的人的角色，同時(shí)應(yīng)該出席會(huì)議或會(huì)面的人隨身攜帶一個(gè)便攜式通信終端，通過(guò)該終端遠(yuǎn)程出席本次會(huì)議或會(huì)面，該終端與應(yīng)用虛擬現(xiàn)實(shí)技術(shù)的虛擬現(xiàn)實(shí)眼鏡進(jìn)行集成整合，使得應(yīng)該出席會(huì)議的人獲得感知性、臨場(chǎng)感和沉浸感的會(huì)議或會(huì)面體驗(yàn)。這套系統(tǒng)能夠提供真人大小視頻、方位感音頻、距離感視頻以及體感角度追蹤等功能。
[0006]本發(fā)明的技術(shù)方案如下:
[0007]結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)，其特征在于，包括互連于IP網(wǎng)絡(luò)的視頻通信服務(wù)器、現(xiàn)場(chǎng)參會(huì)擬人通信終端和遠(yuǎn)程參會(huì)便攜式通信終端，所述遠(yuǎn)程參會(huì)便攜式通信終端上連接或集成有虛擬現(xiàn)實(shí)眼鏡，通過(guò)所述虛擬現(xiàn)實(shí)眼鏡，遠(yuǎn)程參會(huì)者能夠獲得感知性、臨場(chǎng)感和沉浸感的參會(huì)體驗(yàn)。
[0008]所述現(xiàn)場(chǎng)參會(huì)虛擬通信終端包括現(xiàn)場(chǎng)音視頻信號(hào)采集裝置，并將采集到的現(xiàn)場(chǎng)音視頻信號(hào)通過(guò)編碼后直接傳送給所述遠(yuǎn)程參會(huì)便攜式通信終端或者經(jīng)由所述視頻通信服務(wù)器調(diào)度給所述遠(yuǎn)程參會(huì)便攜式通信終端。
[0009]所述遠(yuǎn)程參會(huì)便攜式通信終端包括遠(yuǎn)程參會(huì)者音頻信號(hào)采集裝置，并將采集到的遠(yuǎn)程參會(huì)者音頻信號(hào)通過(guò)編碼后直接傳送給所述現(xiàn)場(chǎng)參會(huì)擬人通信終端或者經(jīng)由所述視頻通信服務(wù)器調(diào)度給所述現(xiàn)場(chǎng)參會(huì)擬人通信終端。
[0010]所述遠(yuǎn)程參會(huì)便攜式通信終端包括遠(yuǎn)程參會(huì)者體感信號(hào)采集裝置，并將采集到的遠(yuǎn)程參會(huì)者體感信號(hào)或手動(dòng)控制信號(hào)通過(guò)編碼后直接傳送給所述現(xiàn)場(chǎng)參會(huì)擬人通信終端或者經(jīng)由所述視頻通信服務(wù)器調(diào)度給所述現(xiàn)場(chǎng)參會(huì)擬人通信終端。
[0011 ] 所述現(xiàn)場(chǎng)參會(huì)擬人通信終端包括攝像機(jī)云臺(tái)，所述攝像機(jī)云臺(tái)的上面設(shè)置有雙攝像機(jī)或雙路攝像機(jī)，所述攝像機(jī)云臺(tái)的下方設(shè)置有音箱，所述攝像機(jī)云臺(tái)的左側(cè)設(shè)置有左麥克風(fēng)，所述攝像機(jī)云臺(tái)的右側(cè)設(shè)置有右麥克風(fēng)，所述雙攝像機(jī)或雙路攝像機(jī)獲得現(xiàn)場(chǎng)雙路視頻信號(hào)以便為所述遠(yuǎn)程參會(huì)便攜式通信終端提供距離感視頻，所述左麥克風(fēng)和右麥克風(fēng)獲得現(xiàn)場(chǎng)雙路音頻信號(hào)以便為所述遠(yuǎn)程參會(huì)便攜式通信終端提供方位感音頻。
[0012]所述現(xiàn)場(chǎng)參會(huì)擬人通信終端包括體感信號(hào)或手動(dòng)控制信號(hào)接收裝置和單路或多路音頻接收裝置，所述單路或多路音頻接收裝置接收遠(yuǎn)程參會(huì)者音頻信號(hào)并通過(guò)音箱播放，所述體感信號(hào)或手動(dòng)控制信號(hào)接收裝置接收遠(yuǎn)程參會(huì)者體感信號(hào)或手動(dòng)控制信號(hào)并依據(jù)所述遠(yuǎn)程參會(huì)者體感信號(hào)或手動(dòng)控制信號(hào)調(diào)節(jié)攝像機(jī)云臺(tái)的位置，以便與遠(yuǎn)程參會(huì)者的關(guān)注點(diǎn)相匹配。
[0013]所述虛擬現(xiàn)實(shí)眼鏡為鏡片焦距通過(guò)測(cè)算為某一固定值的眼鏡，通過(guò)這個(gè)眼鏡，能夠看到位于焦點(diǎn)位置的現(xiàn)場(chǎng)參會(huì)人員為真人大小，以獲得身臨其境的交流體驗(yàn)。
[0014]所述遠(yuǎn)程參會(huì)便攜式通信終端采用頭戴式或攜帶式一體化結(jié)構(gòu)，所述遠(yuǎn)程參會(huì)便攜式通信終端包括智能手機(jī)或平板電腦等智能終端設(shè)備。
[0015]所述現(xiàn)場(chǎng)參會(huì)擬人通信終端采用一體化結(jié)構(gòu)，所述現(xiàn)場(chǎng)參會(huì)擬人通信終端包括智能手機(jī)或平板電腦等智能終端設(shè)備。
[0016]結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)，其特征在于，包括互連于IP網(wǎng)絡(luò)的視頻通信服務(wù)器、遠(yuǎn)程觀摩便攜式通信終端和遠(yuǎn)程呈現(xiàn)便攜式通信終端，所述遠(yuǎn)程呈現(xiàn)便攜式通信終端上集成有雙攝像機(jī)或雙路攝像機(jī)、雙路視頻發(fā)送裝置和音頻收發(fā)裝置，所述遠(yuǎn)程呈現(xiàn)便攜式通信終端采用頭戴式或攜帶式一體化結(jié)構(gòu)，所述遠(yuǎn)程觀摩便攜式通信終端上連接或集成有虛擬現(xiàn)實(shí)眼鏡，所述遠(yuǎn)程觀摩便攜式通信終端采用頭戴式或攜帶式一體化結(jié)構(gòu)，通過(guò)虛擬現(xiàn)實(shí)眼鏡，遠(yuǎn)程觀摩人員能夠獲得猶如身臨其境的遠(yuǎn)程呈現(xiàn)現(xiàn)場(chǎng)體驗(yàn)。
[0017]本發(fā)明的技術(shù)效果如下:1.通過(guò)本系統(tǒng)，能夠使遠(yuǎn)程參會(huì)者獲得具有感知性、臨場(chǎng)感和沉浸感的會(huì)議(面)體驗(yàn)。2.易于使用、便攜性高、在有網(wǎng)絡(luò)保障的前提下可以隨時(shí)隨地遠(yuǎn)程參加會(huì)議(面)。
【附圖說(shuō)明】
[0018]圖1是實(shí)施本發(fā)明結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)的工作原理之一示意圖。
[0019]圖2是實(shí)施本發(fā)明結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)的工作原理之二示意圖。
[0020]圖3是實(shí)施本發(fā)明結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)涉及的現(xiàn)場(chǎng)參會(huì)擬人通信終端結(jié)構(gòu)示意圖。
[0021]圖4是實(shí)施本發(fā)明結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)的結(jié)構(gòu)示意圖。
[0022]圖5是實(shí)施本發(fā)明另一個(gè)結(jié)合虛擬現(xiàn)實(shí)眼鏡的視頻通信系統(tǒng)的結(jié)構(gòu)示意圖。
【具體實(shí)施方式】
[0023]下面結(jié)合附圖(圖1-圖5)對(duì)本發(fā)明進(jìn)行說(shuō)明。
[0024]如圖1和圖2所示，本發(fā)明提出了通過(guò)虛擬現(xiàn)實(shí)眼鏡(VR眼鏡)實(shí)現(xiàn)一種具有感知性、臨場(chǎng)感和沉浸感的視頻通信系統(tǒng)，彌補(bǔ)現(xiàn)有視頻通信系統(tǒng)中臨場(chǎng)體驗(yàn)感較差的不足，使得遠(yuǎn)程參會(huì)者能夠獲得具有感知性、臨場(chǎng)感和沉浸感的交流體驗(yàn)，其工作原理如下:1.擬人通信終端負(fù)責(zé)采集會(huì)場(chǎng)的雙路音頻和雙路視頻信號(hào)，并進(jìn)行編碼，經(jīng)由系統(tǒng)服務(wù)器調(diào)度給遠(yuǎn)程參會(huì)人員的便攜式通信終端，或者直接傳送給遠(yuǎn)程參會(huì)者的便攜式通信終端。2.擬人通信終端同時(shí)接收遠(yuǎn)程參會(huì)人員的音頻信號(hào)、體感信號(hào)(主要指遠(yuǎn)程參會(huì)人員根據(jù)會(huì)場(chǎng)的情況關(guān)注不同的參會(huì)人員的動(dòng)作)，并依據(jù)遠(yuǎn)程參會(huì)者的體感信號(hào)或手動(dòng)控制信號(hào)控制攝像機(jī)的云臺(tái)位置，達(dá)到與遠(yuǎn)程參會(huì)者的關(guān)注點(diǎn)相一致。3.便攜式通信終端采集遠(yuǎn)程參會(huì)者的音頻信號(hào)、體感信號(hào)或手動(dòng)控制信號(hào)并進(jìn)行編碼，經(jīng)由服務(wù)器調(diào)度或者直接傳送給會(huì)議(面)的主會(huì)場(chǎng)的擬人通信終端。4.便攜式通信終端同時(shí)接收主會(huì)場(chǎng)擬人通信終端的音視頻信號(hào)，進(jìn)行解碼顯示及收聽(tīng)。5.便攜式通信終端與虛擬現(xiàn)實(shí)眼鏡(VR眼鏡)做為一個(gè)整體，通過(guò)虛擬現(xiàn)實(shí)眼鏡(VR眼鏡)獲得具有感知性、臨場(chǎng)感和沉浸感的交流體驗(yàn)。
[0025]如圖3所示，擬人通信終端的組成包括:視頻通信終端、雙路攝像機(jī)、雙路麥克風(fēng)、單路或多路音箱、攝像機(jī)75Γ臺(tái)；具備的能力為:雙路視頻發(fā)送、雙路音頻發(fā)送、單路或多路音頻接收、體感信號(hào)或手動(dòng)控制信號(hào)接收。相關(guān)情況具體說(shuō)明如下:1.雙路視頻發(fā)送:通過(guò)雙路攝像機(jī)獲得具有距離感的視頻。2.雙路音頻發(fā)送:通過(guò)雙路麥克風(fēng)獲得具有方位感的音頻。3.單路或多路音頻接收:接收遠(yuǎn)程參會(huì)者的音頻信號(hào)，通過(guò)單路或多路音箱進(jìn)行播放。4.體感信號(hào)或手動(dòng)控制信號(hào)接收:接收遠(yuǎn)程參會(huì)者的體感