本申請實施例涉及擴展現(xiàn)實領(lǐng)域,具體的,涉及擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法、裝置、電子設(shè)備及存儲介質(zhì),其中,該存儲介質(zhì)包括計算機可讀存儲介質(zhì)。
背景技術(shù):
1、隨著智能手機、智能手表等智能設(shè)備的普及,人們已經(jīng)習(xí)慣了通過這些設(shè)備獲取各種信息。擴展現(xiàn)實設(shè)備可以幫助人們對看到的人或場景進(jìn)行識別、理解、反應(yīng),增強人們的能力。隨著計算機圖形技術(shù)的發(fā)展,虛擬現(xiàn)實(virtual?reality,vr)、增強現(xiàn)實(augmented?reality,ar)、混合現(xiàn)實(mixed?reality,mr)等擴展現(xiàn)實設(shè)備逐漸應(yīng)用到人們的生活中。
2、在現(xiàn)代社會中,人們經(jīng)常需要在各種場景下與各種各樣的人進(jìn)行交流,交流種類包括但不限于娛樂社交、日常工作、商業(yè)談判、約會等。在這些交流中,理解對方的真實意圖、情感狀態(tài)以及判斷其言辭是否屬實等顯得尤為重要。然而,傳統(tǒng)的溝通分析方式往往僅僅停留在表面信息的獲取,難以深入挖掘?qū)υ挶澈蟮纳顚雍x。
3、為了解決這個問題,并提供更便捷的信息展示方式,擴展現(xiàn)實技術(shù)應(yīng)運而生。擴展現(xiàn)實技術(shù)通過將虛擬信息與現(xiàn)實世界進(jìn)行融合,使用戶能夠在對應(yīng)的實際場景中獲取想要的信息。
4、然而,目前的擴展現(xiàn)實技術(shù)在信息展示方面仍存在一些局限性。
技術(shù)實現(xiàn)思路
1、本申請實施例提供了一種擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法、裝置、電子設(shè)備以及存儲介質(zhì),可以向用戶展示多模態(tài)信息,提高用戶決策的準(zhǔn)確性和即時性。
2、本申請實施例提供一種擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法,應(yīng)用于擴展現(xiàn)實設(shè)備,該方法包括:
3、獲取目標(biāo)對象的多模態(tài)數(shù)據(jù);
4、分析所述目標(biāo)對象的多模態(tài)數(shù)據(jù),確定所述目標(biāo)對象的多模態(tài)數(shù)據(jù)對應(yīng)的推斷結(jié)果;
5、根據(jù)所述推斷結(jié)果向用戶展示所述推斷結(jié)果對應(yīng)的所述多模態(tài)信息。
6、一種可能的實現(xiàn)方式中,所述確定所述目標(biāo)對象的多模態(tài)數(shù)據(jù)對應(yīng)的推斷結(jié)果,包括:
7、根據(jù)所述目標(biāo)對象的多模態(tài)數(shù)據(jù)確定所述目標(biāo)對象的多維度信息;
8、根據(jù)所述目標(biāo)對象的多維度信息確定所述推斷結(jié)果。
9、一種可能的實現(xiàn)方式中,所述多模態(tài)信息包括以下一項或多項:視覺信息,聽覺信息,觸覺信息,或者,嗅覺信息。
10、可選地,在獲取目標(biāo)對象的多模態(tài)數(shù)據(jù)之前,本申請實施例提供的擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法還包括:
11、生成所述目標(biāo)對象的第一標(biāo)簽;
12、根據(jù)所述第一標(biāo)簽多次收集和分析所述目標(biāo)對象的多模態(tài)數(shù)據(jù),生成所述第一標(biāo)簽對應(yīng)的多個多維度信息;
13、根據(jù)所述多個多維度信息的推斷結(jié)果向所述用戶展示所述多個推斷結(jié)果對應(yīng)的綜合多模態(tài)信息。
14、一種可能的實現(xiàn)方式中,所述視覺信息包括可視化成有質(zhì)量的3d環(huán)繞表現(xiàn)形式的信息。
15、一種可能的實現(xiàn)方式中,所述聽覺信息包括所述目標(biāo)對象對應(yīng)的提示音效。
16、一種可能的實現(xiàn)方式中,所述觸覺信息包括馬達(dá)的震動。
17、一種可能的實現(xiàn)方式中,所述嗅覺信息包括所述目標(biāo)對象對應(yīng)的氣味。
18、相應(yīng)的,本申請實施例還提供了一種擴展現(xiàn)實裝置,該裝置包括:
19、獲取模塊,用于獲取目標(biāo)對象的多模態(tài)數(shù)據(jù);
20、分析模塊,用于分析所述目標(biāo)對象的多模態(tài)數(shù)據(jù),確定所述目標(biāo)對象的多模態(tài)數(shù)據(jù)對應(yīng)的推斷結(jié)果;
21、展示模塊,用于根據(jù)所述推斷結(jié)果向用戶展示所述推斷結(jié)果對應(yīng)的所述多模態(tài)信息。
22、一種可能的實現(xiàn)方式中,所述分析模塊用于確定所述目標(biāo)對象的多模態(tài)數(shù)據(jù)對應(yīng)的推斷結(jié)果,包括:
23、所述分析模塊用于根據(jù)所述目標(biāo)對象的多模態(tài)數(shù)據(jù)確定所述目標(biāo)對象的多維度信息;
24、所述分析模塊用于根據(jù)所述目標(biāo)對象的多維度信息確定所述推斷結(jié)果。
25、一種可能的實現(xiàn)方式中,所述多模態(tài)信息包括以下一項或多項:視覺信息,聽覺信息,觸覺信息,或者,嗅覺信息。
26、可選地,在所述獲取模塊獲取目標(biāo)對象的多模態(tài)數(shù)據(jù)之前,本申請實施例提供的擴展現(xiàn)實裝置還包括:
27、生成模塊,用于生成所述目標(biāo)對象的第一標(biāo)簽;
28、所述分析模塊,還用于根據(jù)所述第一標(biāo)簽多次收集和分析所述目標(biāo)對象的多模態(tài)數(shù)據(jù),生成所述第一標(biāo)簽對應(yīng)的多個多維度信息;
29、所述展示模塊,還用于根據(jù)所述多個多維度信息的推斷結(jié)果向所述用戶展示所述多個推斷結(jié)果對應(yīng)的綜合多模態(tài)信息。
30、一種可能的實現(xiàn)方式中,所述視覺信息包括可視化成有質(zhì)量的3d環(huán)繞表現(xiàn)形式的信息。
31、一種可能的實現(xiàn)方式中,所述聽覺信息包括所述目標(biāo)對象對應(yīng)的提示音效。
32、一種可能的實現(xiàn)方式中,所述觸覺信息包括馬達(dá)的震動。
33、一種可能的實現(xiàn)方式中,所述嗅覺信息包括所述目標(biāo)對象對應(yīng)的氣味。
34、第三方面,本申請實施例還提供了一種電子設(shè)備,電子設(shè)備包括存儲器、處理器及存儲在存儲器中并可在處理器上運行的計算機程序,計算機程序被處理器執(zhí)行時實現(xiàn)上述的擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法中的步驟。
35、第四方面,本申請實施例還提供了一種計算機可讀存儲介質(zhì),計算機可讀存儲介質(zhì)上存儲有計算機程序,計算機程序被處理器執(zhí)行時實現(xiàn)上述的擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法中的步驟。
36、第五方面,本申請實施例還提供了一種計算機程序產(chǎn)品或計算機程序,該計算機程序產(chǎn)品或計算機程序包括計算機指令,該計算機指令存儲在計算機可讀存儲介質(zhì)中。計算機設(shè)備的處理器從計算機可讀存儲介質(zhì)讀取該計算機指令,處理器執(zhí)行該計算機指令,使得該計算機設(shè)備執(zhí)行本申請實施例所述的各種可選實現(xiàn)方式中提供的方法。
37、本申請實施例中,擴展現(xiàn)實設(shè)備獲取目標(biāo)對象的多模態(tài)數(shù)據(jù),對目標(biāo)對象的多模態(tài)數(shù)據(jù)進(jìn)行分析,獲取目標(biāo)對象的多模態(tài)數(shù)據(jù)對應(yīng)的目標(biāo)對象的多維度信息,進(jìn)而,擴展現(xiàn)實設(shè)備根據(jù)目標(biāo)對象的多維度信息的推斷結(jié)果向用戶展示推斷結(jié)果對應(yīng)的多模態(tài)信息。本申請實施例提供的擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法,可以向用戶展示多模態(tài)信息,進(jìn)而,可以提高用戶決策的準(zhǔn)確性和及時性。
1.一種擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法,其特征在于,應(yīng)用于擴展現(xiàn)實設(shè)備,所述方法包括:
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述確定所述目標(biāo)對象的多模態(tài)數(shù)據(jù)對應(yīng)的推斷結(jié)果,包括:
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述多模態(tài)信息包括以下一項或多項:視覺信息,聽覺信息,觸覺信息,或者,嗅覺信息。
4.根據(jù)權(quán)利要求2所述的方法,其特征在于,在獲取所述目標(biāo)對象的多模態(tài)數(shù)據(jù)之前,所述方法還包括:
5.根據(jù)權(quán)利要求3所述的方法,其特征在于,所述視覺信息包括可視化成有質(zhì)量的3d環(huán)繞表現(xiàn)形式的信息。
6.根據(jù)權(quán)利要求3所述的方法,其特征在于,所述聽覺信息包括所述目標(biāo)對象對應(yīng)的提示音效。
7.根據(jù)權(quán)利要求3所述的方法,其特征在于,所述觸覺信息包括馬達(dá)的震動。
8.根據(jù)權(quán)利要求3所述的方法,其特征在于,所述嗅覺信息包括所述目標(biāo)對象對應(yīng)的氣味。
9.一種擴展現(xiàn)實裝置,其特征在于,所述裝置包括:
10.一種電子設(shè)備,其特征在于,包括存儲器、處理器及存儲在所述存儲器上并可在所述處理器上運行的計算機程序,所述處理器執(zhí)行所述計算機程序時實現(xiàn)如權(quán)利要求1至8任一項所述的擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法。
11.一種存儲介質(zhì),其特征在于,所述存儲介質(zhì)上存儲有計算機程序,所述計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至8任一項所述的擴展現(xiàn)實設(shè)備的多模態(tài)信息展示方法。