,在圖3中,關(guān)于從存儲裝置21讀出某些信息并從非接觸IC卡部26發(fā)送的情況并未圖示,但也可以存在這樣的信息。即,非接觸IC卡部26可以不是寫入專用。
[0129]如前所述,在優(yōu)選實(shí)施方式中,非接觸IC卡部26與基準(zhǔn)位置提供裝置10的非接觸IC卡讀取部100之間開始了近場無線通信時,判定為便攜式終端裝置2 (傳感器群24)存在于基準(zhǔn)位置。即,卡控制部200判定為非接觸IC卡部26接收到基準(zhǔn)信息103的時刻是被判定為便攜式終端裝置2 (傳感器群24)存在于基準(zhǔn)位置的時刻。如此,優(yōu)選實(shí)施方式中的卡控制部200具有相當(dāng)于本發(fā)明所涉及的判定單元的功能。
[0130]位置姿勢確定部201基于由傳感器群24測量出的測量信息212,來運(yùn)算作為相對定位的結(jié)果的移動路徑。此外,在由傳感器群24觀測的“與移動有關(guān)的信息”中還含有與旋轉(zhuǎn)移動有關(guān)的信息。因此,在由位置姿勢確定部201運(yùn)算的移動路徑中,不僅包含位置的變化履歷(移動軌跡),還包含與姿勢的變化有關(guān)的信息。
[0131]另外,位置姿勢確定部201基于通過運(yùn)算而求出的移動路徑的起點(diǎn)的絕對位置來將該移動路徑的終點(diǎn)的位置變換為絕對位置,從而不僅確定便攜式終端裝置2 (傳感器群24)的當(dāng)前位置,還確定便攜式終端裝置2 (傳感器群24)的當(dāng)前的姿勢。此外,移動路徑的起點(diǎn)的絕對位置是指包含在基準(zhǔn)信息103中的基準(zhǔn)位置。
[0132]S卩,位置姿勢確定部201具有如下功能:在基準(zhǔn)信息103的接收后,基于存儲裝置21中所存儲的基準(zhǔn)信息103、以及測量信息212,來確定便攜式終端裝置2的當(dāng)前位置,而且確定便攜式終端裝置2的當(dāng)前的姿勢。在優(yōu)選實(shí)施方式中,基準(zhǔn)信息103的接收后是指,由卡控制部200判定為傳感器群24存在于基準(zhǔn)位置后。另外,測量信息212是由傳感器群24測量出的與運(yùn)動有關(guān)的信息。S卩,優(yōu)選實(shí)施方式中的位置姿勢確定部201具有相當(dāng)于本發(fā)明所涉及的位置確定單元以及姿勢確定單元的功能。
[0133]由位置姿勢確定部201確定出的便攜式終端裝置2的當(dāng)前位置以及當(dāng)前的姿勢作為位置信息214而被存儲至存儲裝置21。
[0134]增強(qiáng)現(xiàn)實(shí)構(gòu)成部202具有如下功能:參照由位置姿勢確定部201求出的位置信息214、以及擁有者信息211,來從作為用于表現(xiàn)增強(qiáng)現(xiàn)實(shí)的素材的候選信息112中提取輸出信息215。
[0135]此外,擁有者信息211是指,通過對操作部22進(jìn)行操作而由用戶輸入的與該用戶有關(guān)的信息,更具體而言是與對象物的特性有關(guān)的信息。具體而言,是擁有便攜式終端裝置2的用戶的年齡、性別、職業(yè)、住所、興趣、愛好、行動(購買)履歷、病歷(過敏的有無等)、婚姻狀況、家族構(gòu)成、擁有物(車、家等)這樣的個人信息。這些信息不限于是從操作部22直接輸入的信息,也可以由其他應(yīng)用自動收集。
[0136]另外,輸出信息215在優(yōu)選實(shí)施方式中是在顯示部23中顯示于液晶顯示器的畫面的信息,相當(dāng)于用于在所提供的增強(qiáng)現(xiàn)實(shí)中增強(qiáng)現(xiàn)實(shí)的信息。顯示部23通過將輸出信息215重疊(合成)或者追加于攝像圖像信息213進(jìn)行顯示,從而在該畫面中表現(xiàn)增強(qiáng)現(xiàn)實(shí)。此外,輸出信息215可以在從候選信息112中進(jìn)行提取時由增強(qiáng)現(xiàn)實(shí)構(gòu)成部202進(jìn)行加工。SP,這樣的加工過程有關(guān)的信息也可以包含在候選信息112中。
[0137]以上是優(yōu)選實(shí)施方式中的增強(qiáng)現(xiàn)實(shí)提供系統(tǒng)I的構(gòu)成以及功能的說明。接下來,針對使用增強(qiáng)現(xiàn)實(shí)提供系統(tǒng)I來對用戶提供增強(qiáng)現(xiàn)實(shí)的方法,具體地進(jìn)行說明。
[0138]圖4是表示優(yōu)選實(shí)施方式中的增強(qiáng)現(xiàn)實(shí)提供方法的流程圖。在優(yōu)選實(shí)施方式中,關(guān)于使用增強(qiáng)現(xiàn)實(shí)來實(shí)現(xiàn)百貨店或購物中心等集合店鋪中的店鋪引導(dǎo)的例子進(jìn)行說明。即,以如下應(yīng)用為例來進(jìn)行說明:以集合店鋪內(nèi)作為增強(qiáng)現(xiàn)實(shí)空間9,來將用戶引導(dǎo)至目的店鋪。因此,在優(yōu)選實(shí)施方式中的候選信息112中含有:集合店鋪的示意圖、以及配置在示意圖內(nèi)的各店鋪的位置信息、廣告信息、優(yōu)惠券信息等。
[0139]此外,在開始圖4所示的各步驟前,啟動便攜式終端裝置2,完成給定的初始設(shè)定,并設(shè)在存儲裝置21中存儲有擁有者信息211。另外,在基準(zhǔn)位置提供裝置10的存儲裝置101中已經(jīng)存儲有基準(zhǔn)信息103以及候選信息112。另外,盡管在圖4中為了方便說明,示出了針對I人的用戶的各步驟,但增強(qiáng)現(xiàn)實(shí)提供系統(tǒng)I能同時對多個用戶(多個便攜式終端裝置2)提供增強(qiáng)現(xiàn)實(shí)。
[0140]用戶若到達(dá)集合店鋪(增強(qiáng)現(xiàn)實(shí)空間9)(步驟SI),則使用所持有的便攜式終端裝置2,對設(shè)置于入口的基準(zhǔn)位置提供裝置10進(jìn)行可通信化動作(步驟S2)。
[0141]在優(yōu)選實(shí)施方式中,若用戶不進(jìn)行可通信化動作,則增強(qiáng)現(xiàn)實(shí)提供系統(tǒng)I難以對該用戶提供增強(qiáng)現(xiàn)實(shí)。因此,優(yōu)選設(shè)置在來店時等讓用戶可靠地執(zhí)行可通信化動作的機(jī)制。
[0142]作為這樣的機(jī)制,例如考慮構(gòu)成為:通過可通信化動作來對便攜式終端裝置2附加來店積分。若如此構(gòu)成,則能進(jìn)一步促進(jìn)想要積攢來店積分的用戶的可通信化動作。當(dāng)然,也可以在入口附近張貼對顧客(用戶)促進(jìn)可通信化動作的海報(bào)等。
[0143]通過使用戶執(zhí)行可通信化動作(步驟S2),從而在便攜式終端裝置2的非接觸IC卡部26與基準(zhǔn)位置提供裝置10的非接觸IC卡讀取部100之間開始近場無線通信。由此,便攜式終端裝置2的CPU20 (卡控制部200)在步驟S3中判定為“是”。S卩,卡控制部200在步驟S3中判定為“是”的時間點(diǎn),判定為便攜式終端裝置2(傳感器群24)存在于基準(zhǔn)位置。
[0144]若無線通信開始,則便攜式終端裝置2從基準(zhǔn)位置提供裝置10獲取基準(zhǔn)信息103以及候選信息112(步驟S4)。由此,在存儲裝置21中保存基準(zhǔn)信息103以及候選信息112。
[0145]與步驟S4的處理并行地,攝像部25開始周圍(增強(qiáng)現(xiàn)實(shí)空間9內(nèi))的攝像(步驟S5)。由此,以后,成為對應(yīng)于攝像周期來獲取攝像圖像信息213的狀態(tài)。此外,盡管在優(yōu)選實(shí)施方式中,步驟S5的處理基于可通信化動作而自動開始,但當(dāng)然也可以構(gòu)成為基于用戶的指示(針對操作部22的用戶操作)而開始。
[0146]與步驟S5的處理并行地,傳感器群24開始與移動有關(guān)的信息的測量(步驟S6)。由此,以后,成為對應(yīng)于傳感器群24的測量周期來更新測量信息212的狀態(tài)。S卩,成為增強(qiáng)現(xiàn)實(shí)空間9內(nèi)的用戶(便攜式終端裝置2)的移動有關(guān)的信息被傳感器群24作為測量信息212持續(xù)收集的狀態(tài)。
[0147]若步驟S4至S6被執(zhí)行,則位置姿勢確定部201基于基準(zhǔn)信息103 (移動路徑的起點(diǎn)有關(guān)的信息)以及測量信息212 (用于求取移動路徑的信息),確定便攜式終端裝置2的當(dāng)前位置以及當(dāng)前的姿勢(步驟S7),來創(chuàng)建位置信息214。
[0148]接下來,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202根據(jù)位置信息214來決定增強(qiáng)現(xiàn)實(shí)空間9中的絕對位置和姿勢,并決定該增強(qiáng)現(xiàn)實(shí)中的視點(diǎn)以及視線方向。進(jìn)而,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202根據(jù)決定的視點(diǎn)以及視線方向,來從候選信息112中提取輸出信息215(步驟S8)。
[0149]若視點(diǎn)以及視線方向確定,則能決定增強(qiáng)現(xiàn)實(shí)空間9中的視野。而且,若增強(qiáng)現(xiàn)實(shí)空間9中的視野確定,則對應(yīng)于該視野而待虛擬顯示的事物(虛擬物體)以及該事物的形狀等確定。如此,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202能從候選信息112中選擇適當(dāng)?shù)妮敵鲂畔?15。此夕卜,在創(chuàng)建了位置信息214后基于該位置信息214來選擇輸出信息215的原理還能酌情應(yīng)用現(xiàn)有的技術(shù)。
[0150]在優(yōu)選實(shí)施方式中,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202所決定的“視點(diǎn)以及視線方向”與攝像部25的“攝像點(diǎn)(攝像范圍的中心點(diǎn))以及攝像方向”越一致,就越能抑制對輸出信息215與攝像圖像信息213進(jìn)行合成顯示時的用戶的不協(xié)調(diào)感。因此,優(yōu)選使位置姿勢確定部201考慮該點(diǎn)(便攜式終端裝置2中的攝像部25的位置、朝向)來創(chuàng)建位置信息214。
[0151]在集合店鋪中的店鋪引導(dǎo)中,即使用戶的當(dāng)前位置(位置信息214)相同,若用戶的目的地不同,則也需要變更進(jìn)行顯示的虛擬物體(引導(dǎo)路徑等)。即,必須根據(jù)目的地等與位置信息214不同的信息來選擇輸出信息215。因此,優(yōu)選實(shí)施方式中的增強(qiáng)現(xiàn)實(shí)構(gòu)成部202不僅參照位置信息214還參照擁有者信息211來提取輸出信息215。
[0152]首先,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202根據(jù)擁有者信息211,從集合店鋪內(nèi)的多個店鋪之中決定用戶的目的店鋪。作為用于進(jìn)行這樣的決定的信息,例如能利用擁有者信息211中所含的用戶的興趣、購買履歷、來店履歷、店鋪搜索履歷、作為目的地而被輸入的店鋪名等。一般而言,作為擁有者信息211而被記錄的信息是不定的。因此,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202對擁有者信息211中存在的蓋然性高的信息預(yù)先進(jìn)行加權(quán)(賦予優(yōu)先順位),在參照時執(zhí)行對實(shí)際所保存的各信息的權(quán)重進(jìn)行了相加的評價,從而決定用戶的目的店鋪。
[0153]若是由系統(tǒng)運(yùn)營者提供的裝置,則伴有難以網(wǎng)羅性地收集作為用戶的個人信息的擁有者信息211的困難。這是由于,害怕個人信息外泄的用戶在將自己的個人信息提供給他人的裝置的方面是消極的。但是,優(yōu)選實(shí)施方式中的便攜式終端裝置2是用戶所擁有的,因此可以預(yù)測:對于輸入個人信息,用戶的抗拒感小。因此,能預(yù)先準(zhǔn)確且詳細(xì)地收集擁有者信息211。另外,根據(jù)狀況,還能從應(yīng)用中促進(jìn)需要的信息的輸入。由此,優(yōu)選實(shí)施方式中的增強(qiáng)現(xiàn)實(shí)構(gòu)成部202能準(zhǔn)確地預(yù)測用戶期望的店鋪。
[0154]若能預(yù)測用戶期望的店鋪,則增強(qiáng)現(xiàn)實(shí)構(gòu)成部202能根據(jù)基于位置信息214所決定的增強(qiáng)現(xiàn)實(shí)空間9中的視野、以及預(yù)測出的店鋪名,來從候選信息112確定適當(dāng)?shù)妮敵鲂畔?15。此外,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202可以使用時間等公共的信息來決定用戶的目的店鋪。例如,若是白天,則還可以考慮優(yōu)先選擇餐廳這樣的手法。
[0155]若步驟S8被執(zhí)行而創(chuàng)建輸出信息215,則顯示部23將輸出信息215以及攝像圖像信息213合成顯示于液晶顯示器的畫面(步驟S9)。由此,顯示部23在液晶顯示器的畫面中表現(xiàn)增強(qiáng)現(xiàn)實(shí),對用戶提供增強(qiáng)現(xiàn)實(shí)。
[0156]以后,一邊判定是否結(jié)束增強(qiáng)現(xiàn)實(shí)的提供(步驟S10),一邊反復(fù)步驟S7至SlO的處理,直至有結(jié)束的指示為止。
[0157]圖5以及圖6是表示在優(yōu)選實(shí)施方式中對用戶所提供的增強(qiáng)現(xiàn)實(shí)空間9的景觀的顯示例的圖。即,圖5以及圖6是顯示部23中所顯示的增強(qiáng)現(xiàn)實(shí)顯示畫面的例子。
[0158]圖5示出了在液晶顯示器的畫面中顯示有店鋪內(nèi)圖像213a、作為虛擬物體的路徑215a、廣告 215b、215c、215d 的樣子。
[0159]店鋪內(nèi)圖像213a是由攝像部25攝像的攝像圖像信息213,是表現(xiàn)了增強(qiáng)現(xiàn)實(shí)空間9中的現(xiàn)實(shí)部分的圖像。
[0160]另外,路徑215a、廣告215b、215c、215d是從候選信息112中選擇出的輸出信息215,是表現(xiàn)了增強(qiáng)現(xiàn)實(shí)空間9中的增強(qiáng)部分(虛擬部分)的圖像。
[0161]便攜式終端裝置2如圖5所示,能在現(xiàn)實(shí)環(huán)境的景觀(店鋪內(nèi)圖像213a)中重疊由虛擬物體構(gòu)成的增強(qiáng)環(huán)境的景觀(路徑215a、廣告215b、215c、215d)來創(chuàng)建并提供增強(qiáng)現(xiàn)實(shí)顯示畫面。
[0162]用戶通過視覺辨認(rèn)路徑215a,能得知正朝著店鋪D地被引導(dǎo),而且較之于以地圖等進(jìn)行表示的情況,能更加容易且直觀地得知至店鋪D為止的路徑以及距離等。另外,用戶正在注視地圖等的情況下,存在撞到路人等的危險(xiǎn)。但是,在增強(qiáng)現(xiàn)實(shí)提供系統(tǒng)I所提供的增強(qiáng)現(xiàn)實(shí)中,路人也作為店鋪內(nèi)圖像213a被顯示,因此即使用戶注視畫面,也能容易察覺碰撞的危險(xiǎn)而加以避免。
[0163]另外,用戶在確認(rèn)路徑時將順便視覺辨認(rèn)廣告215b、215c、215d,從而還能得到路徑周邊的店鋪的新鮮的信息。廣告215b、215c、215d較之于設(shè)置在現(xiàn)實(shí)的店鋪前的流行廣告等,能更容易地調(diào)整為對正對畫面的用戶而言易看到的位置、角度、大小,且?guī)в袆赢嬓Ч纫哺菀祝虼藢V告主的店鋪而言,能成為高效的信息發(fā)信。即,作為對店鋪而言的廣告媒介,也發(fā)揮卓越的效果。
[0164]另一方面,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202還能根據(jù)擁有者信息211來判斷與用戶不感興趣的店鋪有關(guān)的信息,并禁止店鋪D以外的店鋪的廣告215b、215c、215d的顯示?;蛘?,在此基礎(chǔ)上,還能采用使目的店鋪D以外的店鋪部分不能視覺辨認(rèn)(例如,在其他店鋪的現(xiàn)實(shí)的位置處顯示白壁圖像。)這樣的表現(xiàn)方法。由此,能抑制因顯示不需要的信息而造成的用戶的混亂,能提供適合用戶的易使用的應(yīng)用。
[0165]圖6示出了在液晶顯示器的畫面中顯示有店鋪內(nèi)圖像215e、作為虛擬物體的路徑215f、星標(biāo)215g、優(yōu)惠券215h、215i的樣子。
[0166]店鋪內(nèi)圖像215e不是由攝像部25攝像的攝像圖像信息213,而是對現(xiàn)實(shí)的店鋪內(nèi)進(jìn)行變形后的地圖圖像,是表現(xiàn)了增強(qiáng)現(xiàn)實(shí)空間9中的現(xiàn)實(shí)部分的圖像。S卩,增強(qiáng)現(xiàn)實(shí)構(gòu)成部202還能根據(jù)候選信息112中所含的增強(qiáng)現(xiàn)實(shí)空間9的布局或地圖來創(chuàng)建店鋪內(nèi)圖像21