專利名稱：聲音控制設(shè)備、程序和控制方法
技術(shù)領(lǐng)域：
本公開(kāi)涉及控制來(lái)自頭戴式耳機(jī)和耳塞式耳機(jī)的聲音的聲音控制設(shè)備等等的技術(shù)。
背景技術(shù)：
過(guò)去，已知有控制頭戴式耳機(jī)和耳塞式耳機(jī)的聲音信號(hào)以使得從某個(gè)方向聽(tīng)到聲音的技術(shù)。日本專利申請(qǐng)公開(kāi)第2008-92193號(hào)公開(kāi)了在虛擬聲源空間排列與音樂(lè)有關(guān)的多個(gè)虛擬聲源并且控制來(lái)自頭戴式耳機(jī)的聲音信號(hào)以使得從多個(gè)虛擬聲源聽(tīng)到音樂(lè)的技術(shù)。 例如，假定戴著頭戴式耳機(jī)的用戶從他/她正面向前方的狀態(tài)面向右，則當(dāng)用戶面向前方時(shí)從前方聽(tīng)到的音樂(lè)被從左手方聽(tīng)到，而當(dāng)用戶面向前方時(shí)從右手方聽(tīng)到的音樂(lè)被從前方聽(tīng)到。

發(fā)明內(nèi)容
需要一種技術(shù)來(lái)從例如商店的真實(shí)對(duì)象(或虛擬對(duì)象)所存在的方向向用戶呈現(xiàn)關(guān)于該真實(shí)對(duì)象(或虛擬對(duì)象)的簡(jiǎn)單信息，以及隨著用戶關(guān)于所呈現(xiàn)的信息執(zhí)行某種動(dòng)作而獲得更加具體的信息。相應(yīng)地，公開(kāi)了一種設(shè)備，其可以包含硬件處理器和存儲(chǔ)介質(zhì)。存儲(chǔ)介質(zhì)可以耦合到該處理器，并且可以存儲(chǔ)指令。當(dāng)被處理器執(zhí)行時(shí)，指令可以使該設(shè)備接收方向信號(hào)，該方向信號(hào)指示用戶頭部相對(duì)于固定方向所面向的第一方向。指令也可以使設(shè)備把頭部相對(duì)于固定方向所面向的第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向。另外，指令可以使設(shè)備生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。也公開(kāi)了一種方法。該方法可以包含接收方向信號(hào)，所述方向信號(hào)指示用戶的頭部相對(duì)于固定方向所面向的第一方向。該方法也可以包含把頭部相對(duì)于固定方向所面向的第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向。另外，該方法可以包含生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。另外，公開(kāi)了一種存儲(chǔ)指令的非暫時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。當(dāng)被處理器執(zhí)行時(shí)，指令可以使設(shè)備接收方向信號(hào)，該方向信號(hào)指示用戶頭部相對(duì)于固定方向所面向的第一方向。指令也可以使設(shè)備把頭部相對(duì)于固定方向所面向的第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向。另外，指令可以使設(shè)備生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。根據(jù)一個(gè)實(shí)施例，提供了一種包含傳感器單兀和控制器的聲音控制設(shè)備。控制器被配置成基于來(lái)自傳感器單元的信號(hào)判斷用戶面部相對(duì)于空間中出現(xiàn)的真實(shí)對(duì)象和空間中虛擬布置的虛擬對(duì)象之一的方向，控制聲音信號(hào)的輸出，使得從與相對(duì)于所述真實(shí)對(duì)象和所述虛擬對(duì)象之一的所述面部方向相對(duì)應(yīng)的方向，從聲音輸出單元聽(tīng)到關(guān)于所述真實(shí)對(duì)象和所述虛擬對(duì)象之一的初級(jí)信息，基于來(lái)自所述傳感器單元的信號(hào)判斷用戶關(guān)于所述初級(jí)信息的動(dòng)作，以及根據(jù)所述動(dòng)作控制所述聲音信號(hào)的輸出，使得從所述聲音輸出單元聽(tīng)到作為比初級(jí)信息更加具體的內(nèi)容的次級(jí)信息。在該聲音控制設(shè)備中，控制聲音輸出單兀(例如,頭戴式耳機(jī)或耳塞式耳機(jī))的聲音信號(hào)，使得從諸如商店和建筑的真實(shí)對(duì)象存在的方向聽(tīng)到關(guān)于真實(shí)對(duì)象的初級(jí)信息(例如，"有一個(gè)商店”)?？蛇x地，假定諸如郵件程序的虛擬對(duì)象例如虛擬布置在空間中，則控制聲音輸出單元的聲音信號(hào)，使得從布置虛擬對(duì)象的方向聽(tīng)到關(guān)于虛擬對(duì)象的初級(jí)信息(例如，〃接收到郵件”)。當(dāng)用戶關(guān)于初級(jí)信息執(zhí)行動(dòng)作時(shí)，傳感器單元檢測(cè)到動(dòng)作，并且控制聲音輸出單元的聲音信號(hào)，使得聽(tīng)到作為比初級(jí)信息更加具體的內(nèi)容的次級(jí)信息(例如，關(guān)于商店和主要內(nèi)容的具體信息)。隨著用戶關(guān)于初級(jí)信息執(zhí)行動(dòng)作，能夠聽(tīng)到作為比初級(jí)信息更加具體 的內(nèi)容的次級(jí)信息。聲音控制設(shè)備還可以包含通信單元。在這樣的情況下，控制器可以測(cè)量聲音控制設(shè)備的位置，經(jīng)由所述通信單元獲得空間中出現(xiàn)的真實(shí)對(duì)象的位置信息，基于位置信息判斷聲音控制設(shè)備和真實(shí)對(duì)象之間的距離，以及控制聲音信號(hào)的輸出，使得當(dāng)距離變得等于或小于預(yù)定閾值(即，距離)時(shí)，從聲音輸出單元聽(tīng)到關(guān)于真實(shí)對(duì)象的初級(jí)信息。通過(guò)這種結(jié)構(gòu)，在用戶正攜帶聲音控制設(shè)備的情況下，當(dāng)聲音控制設(shè)備和真實(shí)對(duì)象之間的距離變得等于或小于預(yù)定閾值時(shí)，控制聲音輸出單元的聲音信號(hào)，使得從真實(shí)對(duì)象存在的方向聽(tīng)到關(guān)于真實(shí)對(duì)象的初級(jí)信息。如果用戶需要關(guān)于真實(shí)對(duì)象的次級(jí)信息(具體信息)，用戶只需關(guān)于初級(jí)信息執(zhí)行動(dòng)作。在聲音控制設(shè)備中，控制器可以把使面部朝向聽(tīng)到初級(jí)信息的方向的運(yùn)動(dòng)判斷為用戶關(guān)于初級(jí)信息的動(dòng)作，并且控制聲音信號(hào)的輸出，使得隨著面部的方向接近聽(tīng)到初級(jí)信息的方向，次級(jí)信息的音量變大。在聲音控制設(shè)備中，隨著當(dāng)希望得到次級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向，次級(jí)信息的音量隨著面部方向接近聽(tīng)到初級(jí)信息的方向而變大。在聲音控制設(shè)備中，控制器可以執(zhí)行主任務(wù)，并且控制聲音信號(hào)的輸出，使得隨著面部方向接近聽(tīng)到初級(jí)信息的方向，次級(jí)信息的音量變大，而主任務(wù)的音量變小。在聲音控制設(shè)備中，隨著當(dāng)希望得到次級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向，次級(jí)信息的音量變大，并且例如，由主任務(wù)實(shí)行的音樂(lè)音量變小。在聲音控制設(shè)備中，控制器可以把頭部的運(yùn)動(dòng)判斷為用戶關(guān)于初級(jí)信息的動(dòng)作，并且控制聲音信號(hào)的輸出，使得當(dāng)頭部上下運(yùn)動(dòng)時(shí)，從聲音輸出單元聽(tīng)到次級(jí)信息。結(jié)果，通過(guò)上下活動(dòng)頭部(點(diǎn)頭)，用戶能夠聽(tīng)到次級(jí)信息。在聲音控制設(shè)備中，控制器可以把在用戶正將面部朝向聽(tīng)到初級(jí)信息的方向的狀態(tài)下頭部的運(yùn)動(dòng)判斷為用戶關(guān)于初級(jí)信息的動(dòng)作，并且基于在面部朝向聽(tīng)到初級(jí)信息的方向的狀態(tài)下頭部的運(yùn)動(dòng)來(lái)判斷是否把次級(jí)信息作為聲音信號(hào)輸出。 通過(guò)這種結(jié)構(gòu)，用戶能夠通過(guò)在面向聽(tīng)到初級(jí)信息的方向的同時(shí)僅僅活動(dòng)頭部來(lái)選擇是否聽(tīng)次級(jí)信息。
在聲音控制設(shè)備中，控制器可以判斷在用戶正將面部朝向聽(tīng)到初級(jí)信息的方向的狀態(tài)下頭部的運(yùn)動(dòng)，并且基于在面部朝向聽(tīng)到初級(jí)信息的方向的狀態(tài)下頭部的運(yùn)動(dòng)來(lái)控制聲音信號(hào)的輸出，使得從聲音輸出單元聽(tīng)到次級(jí)信息。通過(guò)這種結(jié)構(gòu)，用戶能夠通過(guò)在面向聽(tīng)到初級(jí)信息的方向的同時(shí)僅僅上下活動(dòng)頭部(點(diǎn)頭)來(lái)選擇是否聽(tīng)次級(jí)信息。在聲音控制設(shè)備中，控制器可以控制聲音信號(hào)的輸出，使得從與面部相對(duì)于真實(shí)對(duì)象和虛擬對(duì)象之一的方向相對(duì)應(yīng)的方向聽(tīng)到次級(jí)信息。在聲音控制設(shè)備中，聲音輸出單元可以是頭戴式耳機(jī)和耳塞式耳機(jī)之一。



圖I是示出根據(jù)本公開(kāi)一個(gè)實(shí)施例的聲音控制設(shè)備的圖；圖2是示出根據(jù)本公開(kāi)的該實(shí)施例的聲音控制設(shè)備的電氣結(jié)構(gòu)的框圖；圖3是示出根據(jù)本公開(kāi)的該實(shí)施例的蜂窩(即移動(dòng))電話的控制器的處理的流程圖；圖4是用于說(shuō)明圖3所示的處理的補(bǔ)充圖，該圖示出了用戶正戴著頭戴式耳機(jī)并且在地上行走的狀態(tài)；圖5是示出設(shè)置屏幕的示例的圖，該設(shè)置屏幕被顯示給用戶以便設(shè)置關(guān)于屬于什么類別的真實(shí)對(duì)象的什么信息將被呈現(xiàn)；圖6是示出控制器的處理的示例的流程圖，其中當(dāng)根據(jù)用戶關(guān)于初級(jí)信息的動(dòng)作從頭戴式耳機(jī)聽(tīng)次級(jí)信息時(shí)執(zhí)行該處理；圖7是示出控制器的處理的另一示例的流程圖，其中當(dāng)根據(jù)用戶關(guān)于初級(jí)信息的動(dòng)作從頭戴式耳機(jī)聽(tīng)次級(jí)信息時(shí)執(zhí)行該處理；圖8是示出控制器的處理的另一示例的流程圖，其中當(dāng)根據(jù)用戶關(guān)于初級(jí)信息的動(dòng)作從頭戴式耳機(jī)聽(tīng)次級(jí)信息時(shí)執(zhí)行該處理；圖9是示出根據(jù)本公開(kāi)另一實(shí)施例的聲音控制設(shè)備的圖；圖10是示出根據(jù)該另一實(shí)施例的聲音控制設(shè)備的電氣結(jié)構(gòu)的框圖；圖11是示出根據(jù)該另一實(shí)施例的集成有顯示單元的PC的控制器的處理的流程圖；圖12是用于說(shuō)明圖11所示的處理的補(bǔ)充圖，該圖示出空間中虛擬布置的虛擬對(duì)象；圖13是示出在聽(tīng)到關(guān)于郵件程序的初級(jí)信息之后用戶面向聽(tīng)到初級(jí)信息的方向的狀態(tài)的圖；圖14是示出根據(jù)本公開(kāi)另一實(shí)施例的聲音控制設(shè)備的處理的流程圖；而圖15是用于說(shuō)明圖14所示的處理的補(bǔ)充圖，該圖示出在面向虛擬對(duì)象(郵件程序)存在的方向的同時(shí)用戶發(fā)出語(yǔ)音的狀態(tài)。
具體實(shí)施例方式下文參考附圖詳細(xì)描述本公開(kāi)的實(shí)施例。[聲音控制設(shè)備100的總體結(jié)構(gòu)和部件的結(jié)構(gòu)]
圖I是不出根據(jù)本公開(kāi)一個(gè)實(shí)施例的聲音控制設(shè)備100的圖。圖2是不出聲音控制設(shè)備100的電氣結(jié)構(gòu)的框圖。如圖所示，聲音控制設(shè)備100包含聲音控制設(shè)備主體10(蜂窩電話10)、連接到聲音控制設(shè)備主體10的頭戴式耳機(jī)20 (聲音輸出單元)和附連到頭戴式耳機(jī)20的傳感器單兀30。在第一實(shí)施例中，蜂窩電話10作為聲音控制設(shè)備主體10的示例。蜂窩電話10包含控制器11、顯示單元12、輸入單元13、天線14、通信單元15和存儲(chǔ)設(shè)備16。蜂窩電話10也包含通信揚(yáng)聲器和通信麥克風(fēng)(未不出)。顯示單元12由例如液晶顯示器或EL (電致發(fā)光)顯示器構(gòu)成。輸入單元13包含觸摸傳感器，其檢測(cè)通過(guò)手指、輸入筆等等關(guān)于顯示單元12和蜂窩電話10上提供的輸入按鈕進(jìn)行的用戶操作。
存儲(chǔ)設(shè)備16包含易失存儲(chǔ)器(例如，RAM (隨機(jī)訪問(wèn)存儲(chǔ)器))和非易失存儲(chǔ)器(例如，ROM (只讀存儲(chǔ)器))。易失存儲(chǔ)器被用作控制器11的工作區(qū)，并且臨時(shí)存儲(chǔ)用于控制器11的處理的程序和諸如音樂(lè)數(shù)據(jù)和視頻數(shù)據(jù)的數(shù)據(jù)。非易失存儲(chǔ)器固定存儲(chǔ)控制器11的處理所需的各種程序和諸如音樂(lè)數(shù)據(jù)和視頻數(shù)據(jù)的數(shù)據(jù)。可以從諸如光盤和半導(dǎo)體存儲(chǔ)器的可拆卸記錄介質(zhì)中讀出非易失存儲(chǔ)器中存儲(chǔ)的程序?？刂破?1由CPU (中央處理單元(即，硬件處理器))等等構(gòu)成?？刂破?1基于存儲(chǔ)設(shè)備(B卩，存儲(chǔ)介質(zhì))16中存儲(chǔ)的程序(即，指令)執(zhí)行各種操作。通信單元15執(zhí)行把天線14發(fā)送和接收的無(wú)線電波的頻率進(jìn)行轉(zhuǎn)換的處理、調(diào)制處理、解調(diào)處理等等。天線14發(fā)送和接收通信無(wú)線電波，以及用于電子郵件、萬(wàn)維網(wǎng)數(shù)據(jù)等等的分組通信的無(wú)線電波。通信單元15能夠與信息管理服務(wù)器(未示出)通信。信息管理服務(wù)器存儲(chǔ)空間中出現(xiàn)的真實(shí)對(duì)象I (例如，商店和建筑)的位置信息(參見(jiàn)圖4)，以及關(guān)于真實(shí)對(duì)象I的初級(jí)和次級(jí)信息。信息管理服務(wù)器也響應(yīng)于來(lái)自蜂窩電話10的請(qǐng)求而發(fā)送真實(shí)對(duì)象I的位置信息，和關(guān)于真實(shí)對(duì)象I的初級(jí)和次級(jí)信息。關(guān)于真實(shí)對(duì)象I (例如，商店和建筑)的初級(jí)信息是關(guān)于真實(shí)對(duì)象I的簡(jiǎn)單信息。另一方面，關(guān)于真實(shí)對(duì)象I的次級(jí)信息是關(guān)于真實(shí)對(duì)象I的具體信息。例如，在真實(shí)對(duì)象I是商店的情況下，初級(jí)信息是商店名稱、商店類型等等，在真實(shí)對(duì)象I是建筑的情況下，初級(jí)信息是建筑名稱、建筑類型等等。例如，在真實(shí)對(duì)象I是商店的情況下，次級(jí)信息是推薦的產(chǎn)品、營(yíng)業(yè)時(shí)間等等，在真實(shí)對(duì)象I是建筑的情況下，次級(jí)信息是建筑的具體歷史等等。例如，在頭戴式耳機(jī)20的頂部提供傳感器單元30。傳感器單元30包含方向傳感器(例如，地磁傳感器)和運(yùn)動(dòng)(即，移動(dòng))傳感器，方向傳感器檢測(cè)地面上(即，相對(duì)于固定方向)用戶的面部的方向(即，用戶頭部面向的方向)，運(yùn)動(dòng)傳感器檢測(cè)用戶頭部的移動(dòng)。運(yùn)動(dòng)傳感器的示例包含角速度傳感器(例如，振動(dòng)陀螺儀傳感器和旋轉(zhuǎn)陀螺陀螺儀傳感器)和加速度傳感器(例如，壓縮電阻傳感器、壓電傳感器和電容傳感器)。角速度傳感器和加速度傳感器的組合可以被用作運(yùn)動(dòng)傳感器。傳感器單兀30包含Α/D轉(zhuǎn)換單兀。從方向傳感器和運(yùn)動(dòng)傳感器輸出的信號(hào)(例如，分別輸出的方向和運(yùn)動(dòng)信號(hào))被進(jìn)行Α/D轉(zhuǎn)換，并且輸入到蜂窩電話10的控制器11。雖然在圖I和2中蜂窩電話10和頭戴式耳機(jī)20是有線連接的，然而蜂窩電話10和頭戴式耳機(jī)20可以無(wú)線通信。
[操作說(shuō)明]下面描述這個(gè)實(shí)施例的蜂窩電話10的控制器11的處理。圖3是示出這個(gè)實(shí)施例的蜂窩電話10 (控制器11)的處理的流程圖。圖4是用于說(shuō)明圖3所示的處理的補(bǔ)充圖，該圖示出了用戶正戴著頭戴式耳機(jī)20并且在地上行走的狀態(tài)。首先，用戶在戴著頭戴式耳機(jī)20的同時(shí)在地上行走。在這樣的情況下，用戶可以在聽(tīng)蜂窩電話10中存儲(chǔ)的音樂(lè)數(shù)據(jù)或視頻數(shù)據(jù)的聲音的同時(shí)行走。如圖3所示，控制器11首先經(jīng)由天線14和通信單元15從GPS衛(wèi)星接收無(wú)線電波(即，頭部位置信號(hào))，并且基于來(lái)自GPS衛(wèi)星的無(wú)線電波測(cè)量用戶的位置(蜂窩電話10的位置)(步驟101)。以預(yù)定周期執(zhí)行用戶位置(蜂窩電話10的位置)的測(cè)量。接著，控制器11向信息管理服務(wù)器發(fā)送針對(duì)有關(guān)在用戶位置的預(yù)定距離d內(nèi)出現(xiàn)的真實(shí)對(duì)象1(例如，商店和建筑)的位置信息、初級(jí)信息和次級(jí)信息的請(qǐng)求信號(hào)(步驟102)。 距離d例如是大約IOm到2km (參見(jiàn)圖4)。響應(yīng)于請(qǐng)求信號(hào)，信息管理服務(wù)器發(fā)送關(guān)于在用戶位置的預(yù)定距離d內(nèi)出現(xiàn)的真實(shí)對(duì)象I的位置信息(即，對(duì)象位置信號(hào))、初級(jí)信息和次級(jí)信息。在接收到關(guān)于真實(shí)對(duì)象I的信息(在步驟103為〃是")時(shí)，控制器11判斷在蜂窩電話10的位置(用戶位置)的預(yù)定距離d內(nèi)是否存在具有信息的真實(shí)對(duì)象I (參見(jiàn)圖5)(步驟 104)。當(dāng)蜂窩電話10的位置的預(yù)定距離d內(nèi)存在真實(shí)對(duì)象I (在步驟104為〃是〃)時(shí)，控制器11判斷真實(shí)對(duì)象I是否匹配用戶的偏好(步驟105)。這里，預(yù)先設(shè)置用戶希望得到什么樣的關(guān)于真實(shí)對(duì)象I的信息。例如，控制器11在顯示單元12上顯示設(shè)置屏幕，設(shè)置屏幕用于設(shè)置在分類為多個(gè)類別的真實(shí)對(duì)象I中，屬于什么類別的真實(shí)對(duì)象I的什么信息將被呈現(xiàn)。圖5是示出設(shè)置屏幕的示例的圖，該設(shè)置屏幕被顯示給用戶以便設(shè)置關(guān)于屬于什么類別的真實(shí)對(duì)象的什么信息將被呈現(xiàn)。在圖5中，真實(shí)對(duì)象I被分類為〃商店〃類別和〃建筑〃類別。另外，在圖5中，"商店〃類別被分類為〃餐館〃類別、"CD商店〃類別和〃書店〃類別，〃建筑〃類別被分類為〃現(xiàn)代建筑風(fēng)格〃類別和〃歷史建筑風(fēng)格〃類別。圖5示出CD商店和現(xiàn)代建筑風(fēng)格被選擇為用戶偏好的情形的示例。基于用戶偏好選擇的真實(shí)對(duì)象I被存儲(chǔ)在存儲(chǔ)設(shè)備中。當(dāng)用戶希望改變?cè)O(shè)置時(shí)，通過(guò)在顯示〃〇〃和〃X〃的部分進(jìn)行觸摸操作來(lái)使〃〇〃和〃X〃反置。回來(lái)參照?qǐng)D3，當(dāng)用戶位置(蜂窩電話10的位置)的預(yù)定距離d內(nèi)出現(xiàn)的真實(shí)對(duì)象I是匹配用戶偏好的真實(shí)對(duì)象I時(shí)(在步驟105中為〃是〃)，控制器11前進(jìn)到步驟106。在步驟106，控制器11計(jì)算用戶(蜂窩電話10)和真實(shí)對(duì)象I之間的距離，以及用戶面部相對(duì)于真實(shí)對(duì)象I的方向(即，頭部相對(duì)于連接頭部和真實(shí)對(duì)象I的另一方向所面向的方向)的角度?；谟脩舻奈恢眯畔⒑驼鎸?shí)對(duì)象I的位置信息計(jì)算用戶和真實(shí)對(duì)象I之間的距離。另一方面，基于蜂窩電話10的位置信息、真實(shí)對(duì)象I的位置信息和關(guān)于方向傳感器獲得的方向的信息，計(jì)算用戶面部的方向的角度。應(yīng)當(dāng)注意，當(dāng)蜂窩電話10的預(yù)定距離d內(nèi)出現(xiàn)匹配用戶偏好的多個(gè)真實(shí)對(duì)象I時(shí)，針對(duì)多個(gè)真實(shí)對(duì)象I中的每個(gè)計(jì)算距離和面部方向。
接著，控制器11計(jì)算提供真實(shí)對(duì)象I的聲源的距離和提供真實(shí)對(duì)象I的聲源的方向(步驟107)?；谟脩艉驼鎸?shí)對(duì)象I之間的距離確定提供真實(shí)對(duì)象I的聲源的距離。換句話說(shuō)，在接近用戶的位置提供接近用戶的真實(shí)對(duì)象I的聲源，而在遠(yuǎn)離用戶的位置提供遠(yuǎn)離用戶的真實(shí)對(duì)象I的聲源?；谟脩裘娌肯鄬?duì)于真實(shí)對(duì)象I的方向的角度，確定提供真實(shí)對(duì)象I的聲源的方向。應(yīng)當(dāng)注意，當(dāng)蜂窩電話10的預(yù)定距離d內(nèi)出現(xiàn)匹配用戶偏好的多個(gè)真實(shí)對(duì)象I時(shí)，針對(duì)多個(gè)真實(shí)對(duì)象I中的每個(gè)計(jì)算距離和聲源方向。在計(jì)算提供聲源的距離和方向之后，控制器11控制聲音(S卩，音頻)信號(hào)的輸出，使得從與面部相對(duì)于真實(shí)對(duì)象I的方向相對(duì)應(yīng)的方向(即，使得根據(jù)信號(hào)生成的聲音被用戶感知為從真實(shí)對(duì)象I的方向到達(dá))，以與真實(shí)對(duì)象I和用戶之間的距離相對(duì)應(yīng)的音量聽(tīng)到初級(jí)信息(步驟108)。結(jié)果，從頭戴式耳機(jī)20聽(tīng)用戶的預(yù)定距離d內(nèi)出現(xiàn)并且匹配用戶偏好的真實(shí)對(duì)象I的初級(jí)信息。此時(shí)，從與面部相對(duì)于真實(shí)對(duì)象I的方向相對(duì)應(yīng)的方向，以對(duì)應(yīng)于用戶和真·實(shí)對(duì)象I之間的距離的音量聽(tīng)到初級(jí)信息(參見(jiàn)圖4)。例如，從與用戶面部相對(duì)于CD商店A (A :商店名稱)的方向相對(duì)應(yīng)的方向，以對(duì)應(yīng)于CD商店A和用戶之間的距離的音量，聽(tīng)到諸如”有CD商店A”的簡(jiǎn)單信息(初級(jí)信息)。此外，從與用戶面部相對(duì)于東京塔的方向相對(duì)應(yīng)的方向，以對(duì)應(yīng)于東京塔和用戶之間的距離的音量，聽(tīng)到諸如”有東京塔”的簡(jiǎn)單信息(初級(jí)信息)。結(jié)果，用戶能夠識(shí)別出在用戶處于的區(qū)域中出現(xiàn)匹配用戶偏好的哪些真實(shí)對(duì)象1，諸如商店和建筑。用戶也可以直觀地識(shí)別真實(shí)對(duì)象I的方向和真實(shí)對(duì)象I相對(duì)于其自身的距離。應(yīng)當(dāng)注意，當(dāng)在真實(shí)對(duì)象I的初級(jí)信息正被再現(xiàn)的同時(shí)用戶轉(zhuǎn)動(dòng)他/她的頭部并且改變面部方向時(shí)，調(diào)整真實(shí)對(duì)象I的聲源的位置，使得從真實(shí)對(duì)象I出現(xiàn)的方向聽(tīng)到真實(shí)對(duì)象I的初級(jí)信息。例如，當(dāng)在從左手方聽(tīng)到真實(shí)對(duì)象I的初級(jí)信息的情況下用戶面向左手方時(shí)，于是從前方聽(tīng)到真實(shí)對(duì)象I的初級(jí)信息。當(dāng)在蜂窩電話10正執(zhí)行諸如音樂(lè)再現(xiàn)和視頻再現(xiàn)的主任務(wù)的同時(shí)再現(xiàn)初級(jí)信息時(shí)，控制器11可以把初級(jí)信息的音頻與音樂(lè)或視頻的音頻合成并輸出。在這樣的情況下，控制器11可以控制聲音信號(hào)，使得音樂(lè)或視頻的音量變小。在針對(duì)頭戴式耳機(jī)20控制聲音信號(hào)的輸出之后，控制器11接著控制聲音信號(hào)的輸出，使得基于關(guān)于初級(jí)信息的用戶動(dòng)作，從頭戴式耳機(jī)20聽(tīng)真實(shí)對(duì)象I的次級(jí)信息(具體信息)(步驟109)。<當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)控制器11的處
理〉接著使用3個(gè)示例具體描述當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器11的處理。圖6是示出當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器11的處理的一個(gè)示例的流程圖。如圖6所示，當(dāng)控制聲音信號(hào)使得從頭戴式耳機(jī)20聽(tīng)真實(shí)對(duì)象I的初級(jí)信息(步驟201)(參見(jiàn)步驟108)時(shí)，控制器11接著判斷用戶是否正面向聽(tīng)到初級(jí)信息的方向(步驟202)。能夠基于來(lái)自方向傳感器的方向信息來(lái)判斷用戶是否正面向聽(tīng)到初級(jí)信息的方向。
當(dāng)用戶正面向聽(tīng)到初級(jí)信息的方向(在步驟202為〃是〃)時(shí)，控制器11判斷用戶是否橫向搖動(dòng)了他/她的頭部(步驟204)。在這樣的情況下，控制器11基于來(lái)自頭戴式耳機(jī)20中提供的傳感器單元30的運(yùn)動(dòng)傳感器的信號(hào)，判斷用戶是否橫向搖動(dòng)了他/她的頭部。當(dāng)用戶沒(méi)有橫向搖動(dòng)他/她的頭部(在步驟204為〃否")時(shí)，控制器11判斷用戶是否已點(diǎn)頭(步驟205)。在這樣的情況下，控制器11基于來(lái)自頭戴式耳機(jī)20中提供的傳感器單元30的運(yùn)動(dòng)傳感器的信號(hào)，判斷用戶是否已點(diǎn)頭。當(dāng)在步驟202用戶未面向聽(tīng)到初級(jí)信息的方向(在步驟202為〃否")時(shí)，控制器11前進(jìn)到步驟203。類似地，當(dāng)用戶正面向聽(tīng)到初級(jí)信息的方向但是既未橫向搖動(dòng)他/她的頭部也未點(diǎn)頭(在步驟205為〃否〃)時(shí)，控制器11前進(jìn)到步驟203。在步驟203，控制器11判斷從初級(jí)信息的再現(xiàn)結(jié)束是否經(jīng)過(guò)了預(yù)定時(shí)間(步驟203)。該時(shí)間例如為大約5到10秒。 當(dāng)自從初級(jí)信息的再現(xiàn)結(jié)束未經(jīng)過(guò)預(yù)定時(shí)間(在步驟203為〃否〃)時(shí)，控制器11返回到步驟202并且判斷用戶是否正面向聽(tīng)到初級(jí)信息的方向。當(dāng)用戶在經(jīng)過(guò)預(yù)定時(shí)間之前面向聽(tīng)到初級(jí)信息的方向并且橫向搖動(dòng)他/她的頭部(在步驟204為"是")時(shí)，控制器11在沒(méi)有再現(xiàn)真實(shí)對(duì)象I的次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)面向聽(tīng)到真實(shí)對(duì)象I的初級(jí)信息的方向并且橫向搖動(dòng)他/她的頭部來(lái)取消次級(jí)信息的再現(xiàn)。例如，當(dāng)在聽(tīng)到”有CD商店A”的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)CD商店的方向)并且橫向搖動(dòng)他/她的頭部時(shí)，CD商店的次級(jí)信息(具體信息)的再現(xiàn)被取消。類似地，當(dāng)在聽(tīng)到”有東京塔"的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)東京塔的方向)并且橫向搖動(dòng)他/她的頭部時(shí)，東京塔的次級(jí)信息(具體信息)的再現(xiàn)被取消。當(dāng)用戶在經(jīng)過(guò)預(yù)定時(shí)間之前面向聽(tīng)到初級(jí)信息的方向并且點(diǎn)頭(在步驟205為〃是")時(shí)，控制器11控制聲音信號(hào)，使得從頭戴式耳機(jī)20聽(tīng)到真實(shí)對(duì)象I的次級(jí)信息(步驟206)。在這樣的情況下,控制器11控制聲音信號(hào)的輸出，使得從與面部相對(duì)于真實(shí)對(duì)象I的方向相對(duì)應(yīng)的方向，以對(duì)應(yīng)于真實(shí)對(duì)象I和用戶之間的距離的音量聽(tīng)到真實(shí)對(duì)象I的次級(jí)信息。例如，當(dāng)在聽(tīng)到”有CD商店A”的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)CD商店的方向)并且點(diǎn)頭時(shí)，開(kāi)始CD商店的次級(jí)信息(具體信息)的再現(xiàn)。在這樣的情況下，諸如關(guān)于推薦CD和CD商店A的營(yíng)業(yè)時(shí)間的信息的具體信息被作為次級(jí)信息來(lái)再現(xiàn)。類似地，當(dāng)在聽(tīng)到”有東京塔"的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)東京塔的方向)并且點(diǎn)頭時(shí)，再現(xiàn)東京塔的次級(jí)信息(具體信息)。在這樣的情況下，作為次級(jí)信息，再現(xiàn)諸如東京塔的高度、東京塔的歷史和東京塔點(diǎn)燈的時(shí)間的具體信息。如上所述，用戶能夠通過(guò)面向聽(tīng)到真實(shí)對(duì)象I的初級(jí)信息的方向并且點(diǎn)頭來(lái)獲取關(guān)于真實(shí)對(duì)象I的具體信息。應(yīng)當(dāng)注意，當(dāng)在真實(shí)對(duì)象I的次級(jí)信息正被再現(xiàn)的同時(shí)用戶轉(zhuǎn)動(dòng)他/她的頭部并且改變面部方向時(shí)，調(diào)整聲源的位置，使得從真實(shí)對(duì)象I出現(xiàn)的方向聽(tīng)到真實(shí)對(duì)象I的次級(jí)信息。例如，當(dāng)用戶面向真實(shí)對(duì)象I的方向并且點(diǎn)頭，以及之后向左轉(zhuǎn)動(dòng)頭部以改變面部方向90°時(shí)，從右手方聽(tīng)到真實(shí)對(duì)象I的次級(jí)信息。
當(dāng)在蜂窩電話10正執(zhí)行諸如音樂(lè)再現(xiàn)和視頻再現(xiàn)的主任務(wù)的同時(shí)再現(xiàn)次級(jí)信息時(shí)，控制器11可以把次級(jí)信息的音頻與音樂(lè)或視頻的音頻合成并輸出。在這樣的情況下，控制器11可以控制聲音信號(hào)，使得音樂(lè)或視頻的音量變小。此外，隨著當(dāng)再現(xiàn)次級(jí)信息的同時(shí)用戶橫向搖動(dòng)他/她的頭部，可以停止次級(jí)信息的再現(xiàn)。當(dāng)用戶面向聽(tīng)到初級(jí)信息的方向并且在沒(méi)有橫向搖動(dòng)他/她的頭部或點(diǎn)頭的情況下經(jīng)過(guò)預(yù)定時(shí)間(在步驟203為〃是〃)時(shí)，控制器11在沒(méi)有再現(xiàn)次級(jí)信息的情況下結(jié)束處理。換句話說(shuō)，當(dāng)用戶未關(guān)于初級(jí)信息執(zhí)行任何動(dòng)作時(shí)，控制器11在不再現(xiàn)次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)不關(guān)于初級(jí)信息執(zhí)行任何動(dòng)作來(lái)取消次級(jí)信息的再現(xiàn)。接著，使用另一個(gè)示例描述當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器11的處理。 圖7是示出當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器11的處理的另一示例的流程圖。在上述圖6的示例中，用戶通過(guò)在面向聽(tīng)到真實(shí)對(duì)象I的初級(jí)信息的方向的同時(shí)橫向搖動(dòng)他/她的頭部或點(diǎn)頭來(lái)選擇是否再現(xiàn)真實(shí)對(duì)象I的次級(jí)信息。另一方面，圖7的示例不同于圖6的示例的地方在于，當(dāng)通過(guò)橫向搖動(dòng)他/她的頭部或點(diǎn)頭來(lái)選擇是否再現(xiàn)真實(shí)對(duì)象I的次級(jí)信息時(shí)，用戶能夠面向任何方向。如圖7所示，當(dāng)控制聲音信號(hào)使得從頭戴式耳機(jī)20聽(tīng)真實(shí)對(duì)象I的初級(jí)信息(步驟301)(參見(jiàn)步驟108)時(shí)，控制器11接著判斷用戶是否橫向搖動(dòng)他/她的頭部(步驟302)。當(dāng)用戶沒(méi)有橫向搖動(dòng)他/她的頭部(在步驟302為〃否")時(shí)，控制器11判斷用戶是否已點(diǎn)頭(步驟303)。當(dāng)用戶沒(méi)有點(diǎn)頭(在步驟303為〃否〃)時(shí)，控制器11判斷自從真實(shí)對(duì)象I的初級(jí)信息的再現(xiàn)結(jié)束是否經(jīng)過(guò)了預(yù)定時(shí)間(步驟304)。像在圖6所示的示例的情形中那樣，預(yù)定時(shí)間例如為大約5到10秒。當(dāng)自從真實(shí)對(duì)象I的初級(jí)信息的再現(xiàn)結(jié)束沒(méi)有經(jīng)過(guò)預(yù)定時(shí)間(在步驟304為〃否〃)時(shí)，控制器11返回到步驟302，并且再次判斷用戶是否橫向搖動(dòng)他/她的頭部。當(dāng)用戶在從初級(jí)信息的再現(xiàn)結(jié)束經(jīng)過(guò)預(yù)定時(shí)間之前橫向搖動(dòng)他/她的頭部(在步驟302為〃是〃)時(shí)，控制器11在不再現(xiàn)真實(shí)對(duì)象I的次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)在再現(xiàn)初級(jí)信息之后橫向搖動(dòng)他/她的頭部來(lái)取消次級(jí)信息的再現(xiàn)。當(dāng)用戶在從初級(jí)信息的再現(xiàn)結(jié)束經(jīng)過(guò)預(yù)定時(shí)間之前點(diǎn)頭(在步驟303為〃是〃)時(shí)，控制器11控制聲音信號(hào)，使得從頭戴式耳機(jī)20聽(tīng)真實(shí)對(duì)象I的次級(jí)信息。在這樣的情況下，控制器11控制聲音信號(hào)的輸出，使得從與面部相對(duì)于真實(shí)對(duì)象I的方向相對(duì)應(yīng)的方向，以對(duì)應(yīng)于真實(shí)對(duì)象I和用戶之間的距離的音量聽(tīng)到真實(shí)對(duì)象I的次級(jí)信息。結(jié)果，用戶能夠通過(guò)在再現(xiàn)初級(jí)信息之后點(diǎn)頭來(lái)開(kāi)始次級(jí)信息的再現(xiàn)。當(dāng)用戶在再現(xiàn)次級(jí)信息的同時(shí)橫向搖動(dòng)他/她的頭部時(shí)，控制器11可以停止次級(jí)信息的再現(xiàn)。當(dāng)在用戶沒(méi)有橫向搖動(dòng)他/她的頭部或點(diǎn)頭的情況下經(jīng)過(guò)預(yù)定時(shí)間(在步驟304為〃是〃)時(shí)，控制器11在沒(méi)有再現(xiàn)次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)不關(guān)于初級(jí)信息執(zhí)行任何動(dòng)作來(lái)取消次級(jí)信息的再現(xiàn)。接著使用另一個(gè)示例來(lái)描述當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器11的處理。圖8是示出當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器11的處理的另一示例的流程圖。如圖8所示，當(dāng)控制聲音信號(hào)使得從頭戴式耳機(jī)20聽(tīng)真實(shí)對(duì)象I的初級(jí)信息(步驟401)(參見(jiàn)步驟108)時(shí)，控制器11接著開(kāi)始真實(shí)對(duì)象I的次級(jí)信息的再現(xiàn)(步驟402)。在這樣的情況下，控制器11控制聲音信號(hào)的輸出，使得從與面部相對(duì)于真實(shí)對(duì)象I的方向相對(duì)應(yīng)的方向，以對(duì)應(yīng)于真實(shí)對(duì)象I和用戶之間的距離的音量聽(tīng)到真實(shí)對(duì)象I的次級(jí)信息。接著，控制器11判斷用戶面部相對(duì)于真實(shí)對(duì)象I的方向是否已經(jīng)改變(步驟403 )。在這樣的情況下，控制器11基于來(lái)自方向傳感器的方向信息判斷用戶面部的方向是否已經(jīng)改變。當(dāng)用戶轉(zhuǎn)動(dòng)他/她的頭部以改變面部方向(在步驟403為〃是")時(shí)，控制器11根據(jù)用戶面部相對(duì)于真實(shí)對(duì)象I的方向調(diào)整真實(shí)對(duì)象I的聲源的位置和次級(jí)信息的音量(步 驟404)。此時(shí)，控制器11控制聲音信號(hào)的輸出，使得隨著用戶面部的方向接近聽(tīng)到初級(jí)信息的方向(聽(tīng)到次級(jí)信息的方向)，次級(jí)信息的音量變大。當(dāng)用戶面部的方向未改變(在步驟403為〃否〃)并且已經(jīng)調(diào)整真實(shí)對(duì)象I的聲源的位置和次級(jí)信息的音量(步驟404)時(shí)，控制器11前進(jìn)到步驟405。在步驟405，控制器11判斷是否已經(jīng)再現(xiàn)所有次級(jí)信息。當(dāng)仍然有要再現(xiàn)的次級(jí)信息(在步驟405為〃否")時(shí)，控制器11返回到步驟403，并且再次判斷面部的方向是否已經(jīng)改變。另一方面，當(dāng)已經(jīng)再現(xiàn)所有次級(jí)信息(在步驟405為〃是〃)時(shí)，控制器11結(jié)束處理。通過(guò)圖8所示的處理，用戶能夠通過(guò)面向聽(tīng)到次級(jí)信息的方向(真實(shí)對(duì)象I出現(xiàn)的方向)來(lái)調(diào)整次級(jí)信息的音量以變大。在對(duì)第一實(shí)施例的說(shuō)明中，雖然蜂窩電話10被作為聲音控制設(shè)備主體10的示例，然而聲音控制設(shè)備主體10不限于此。聲音控制設(shè)備主體10可以是便攜音樂(lè)播放器、PDA(個(gè)人數(shù)字助理)、平板PC (個(gè)人計(jì)算機(jī))、膝上型PC等等?！吹诙?shí)施例〉下面描述本公開(kāi)的第二實(shí)施例。在上述第一實(shí)施例中，描述了這樣的情形從與用戶面部相對(duì)于空間中出現(xiàn)的諸如商店和建筑的真實(shí)對(duì)象I的方向相對(duì)應(yīng)的方向聽(tīng)有關(guān)真實(shí)對(duì)象I的初級(jí)和次級(jí)信息。另一方面，第二實(shí)施例不同于上述第一實(shí)施例的地方在于，諸如應(yīng)用程序的虛擬對(duì)象2被虛擬布置在空間中，并且從提供虛擬對(duì)象2的方向聽(tīng)有關(guān)虛擬對(duì)象2的初級(jí)和次級(jí)信息。因此，將主要描述此方面。[聲音控制設(shè)備200的總體結(jié)構(gòu)和部件的結(jié)構(gòu)]圖9是示出根據(jù)本公開(kāi)第二實(shí)施例的聲音控制設(shè)備200的圖。圖10是示出根據(jù)第二實(shí)施例的聲音控制設(shè)備200的電氣結(jié)構(gòu)的框圖。如圖所不，第二實(shí)施例的聲音控制設(shè)備200包含聲音控制設(shè)備主體50 (集成顯不單元的PC 50)、連接到聲音控制設(shè)備主體50的頭戴式耳機(jī)20和傳感器單元60。傳感器單元60包含聲音控制設(shè)備主體50上提供的第一傳感器單元61和頭戴式耳機(jī)20上提供的第二傳感器單元62。在第二實(shí)施例中，集成顯示單元的PC 50被作為聲音控制設(shè)備主體50的示例。
集成顯示單元的PC 50包含控制器51、顯示單元52、輸入單元53、通信單元54和存儲(chǔ)設(shè)備55。顯示單元52由例如液晶顯示器或EL (電致發(fā)光)顯示器構(gòu)成。輸入單元53由鍵盤、鼠標(biāo)、觸摸傳感器等等構(gòu)成，從用戶輸入指令并且把指令輸出到控制器51。存儲(chǔ)設(shè)備55包含易失存儲(chǔ)器(例如，RAM (隨機(jī)訪問(wèn)存儲(chǔ)器))和非易失存儲(chǔ)器(例如，ROM (只讀存儲(chǔ)器))。存儲(chǔ)設(shè)備55包含輔助存儲(chǔ)裝置，諸如HDD (硬盤驅(qū)動(dòng)器)和SDD(固態(tài)驅(qū)動(dòng)器)。R0M、HDD和SDD固定存儲(chǔ)控制器51的處理所需的各種程序和各種數(shù)據(jù)。可以從諸如光盤和半導(dǎo)體存儲(chǔ)器的可拆卸記錄介質(zhì)(即，非暫時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì))讀出程序?？刂破?1基于存儲(chǔ)設(shè)備55中存儲(chǔ)的程序執(zhí)行各種操作。通信單元54在控制器51的控制下發(fā)送和接收諸如電子郵件和萬(wàn)維網(wǎng)數(shù)據(jù)的各種數(shù)據(jù)。
構(gòu)成傳感器單兀60的一部分的第一傳感器單兀61由諸如CCD (電荷稱合器件)傳感器和CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)傳感器的攝像器件構(gòu)成。從第一傳感器單兀61輸出的信號(hào)經(jīng)過(guò)Α/D轉(zhuǎn)換并且輸入到控制器51?？刂破?1基于第一傳感器單元61得到的圖像判斷用戶面部的方向。構(gòu)成傳感器單元60的一部分的第二傳感器單元62由諸如加速度傳感器和角速度傳感器的運(yùn)動(dòng)傳感器構(gòu)成。從第二傳感器單元62輸出的信號(hào)經(jīng)過(guò)Α/D轉(zhuǎn)換并且輸入到控制器51?？刂破?1基于從第二傳感器單元62輸出的信號(hào)判斷用戶頭部的移動(dòng)。雖然在圖9和10中集成顯示單元的PC 50和頭戴式耳機(jī)20是有線連接的，然而集成顯示單元的PC 50和頭戴式耳機(jī)20可以無(wú)線通信。[操作說(shuō)明]下面描述這個(gè)實(shí)施例的集成顯示單元的PC 50的控制器51的處理。圖11是示出這個(gè)實(shí)施例的集成顯示單元的PC 50的控制器51的處理的流程圖。圖12是用于說(shuō)明圖11所示的處理的補(bǔ)充圖，該圖示出虛擬布置于(即，位于)空間中的虛擬對(duì)象2。如圖11所示，控制器51首先在空間中虛擬布置虛擬對(duì)象2 (步驟501)。圖12示出了一個(gè)情形的示例作為虛擬對(duì)象2的郵件程序2a被布置在用戶的右手側(cè)(頭戴式耳機(jī)20的右側(cè))，作為虛擬對(duì)象2的微博客2b被布置在用戶的左手側(cè)(頭戴式耳機(jī)20的左側(cè))。如圖12所示，當(dāng)在空間中布置虛擬對(duì)象2時(shí)，控制器51正執(zhí)行諸如音樂(lè)再現(xiàn)和視頻再現(xiàn)的主任務(wù)。此時(shí)，控制器51控制頭戴式耳機(jī)20的聲音信號(hào)，使得從對(duì)應(yīng)于用戶面部的方向的方向聽(tīng)到音樂(lè)和視頻的音頻。當(dāng)在空間中布置虛擬對(duì)象2之后，控制器51判斷是否經(jīng)由通信單元54接收了郵件程序2a的郵件、微博客2b的推特信息和評(píng)論、等等(步驟502)。當(dāng)經(jīng)由通信單元54接收到那些信息(在步驟502中為〃是〃)時(shí)，控制器51接著計(jì)算用戶面部相對(duì)于虛擬對(duì)象2的方向的角度(步驟503)。在這樣的情況下，控制器51判斷用戶面部相對(duì)于來(lái)自由第一傳感器單元61 (攝像器件)得到的圖像的屏幕的方向。接著，控制器51基于用戶面部相對(duì)于屏幕的方向來(lái)判斷用戶面部相對(duì)于虛擬對(duì)象2的方向。接著，控制器51計(jì)算用于布置虛擬對(duì)象2的聲源的距離和方向(步驟504)?；谟脩裘娌肯鄬?duì)于虛擬對(duì)象2的方向,確定用于布置虛擬對(duì)象2的聲源的方向。接著，控制器51控制聲音信號(hào)，使得從虛擬對(duì)象2的聲源的位置，從頭戴式耳機(jī)20聽(tīng)到關(guān)于虛擬對(duì)象2的初級(jí)信息(步驟505)。應(yīng)當(dāng)注意，在這樣的情況下，控制器51把初級(jí)信息的音頻與音樂(lè)、視頻等等(主任務(wù)的音頻)的音頻相合成并輸出?？刂破?1可以在初級(jí)信息的再現(xiàn)期間執(zhí)行調(diào)低主任務(wù)的音量的處理。例如，下面描述虛擬對(duì)象2是郵件程序2a的情形。在這樣的情況下，控制聲音信號(hào)，使得作為虛擬對(duì)象2的初級(jí)信息，從布置郵件程序2a的方向聽(tīng)到諸如"從...接收到郵件。"的簡(jiǎn)單信息?？蛇x地，可以控制聲音信號(hào)，使得作為初級(jí)信息，從布置郵件程序2a的方向聽(tīng)到諸如〃嗶嗶〃的簡(jiǎn)單提醒聲。接著，描述虛擬對(duì)象2是微博客2b的情形。在這樣的情況下，控制聲音信號(hào)，使得作為虛擬對(duì)象2的初級(jí)信息，從布置微博客2b的方向聽(tīng)到諸如〃來(lái)自...的推特信息?！ɑ?來(lái)自...的評(píng)論"的簡(jiǎn)單信息。可選地，可以控制聲音信號(hào)，使得作為初級(jí)信息，從布置微博客2b的方向聽(tīng)到諸如〃嗶嗶〃的簡(jiǎn)單提醒聲。應(yīng)當(dāng)注意，當(dāng)在虛擬對(duì)象2的初級(jí)信息正被再現(xiàn)的同時(shí)用戶轉(zhuǎn)動(dòng)他/她的頭部以 改變面部方向時(shí)，調(diào)整虛擬對(duì)象2的聲源的位置，使得從虛擬對(duì)象2出現(xiàn)的方向聽(tīng)到初級(jí)信息。例如，當(dāng)在從左手方聽(tīng)到虛擬對(duì)象2的初級(jí)信息的情況下用戶面向左手方時(shí)，于是從前方聽(tīng)到虛擬對(duì)象2的初級(jí)信息。接著，控制器51控制聲音信號(hào)，使得根據(jù)關(guān)于初級(jí)信息(簡(jiǎn)單信息)的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息(具體信息)(步驟506)。<當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)控制器51的處
理〉接著，描述當(dāng)根據(jù)關(guān)于初級(jí)信息的用戶動(dòng)作從頭戴式耳機(jī)20聽(tīng)次級(jí)信息時(shí)執(zhí)行的控制器51的處理。除了空間中布置的對(duì)象不是真實(shí)對(duì)象I而是虛擬對(duì)象2之外，在這樣的情況下的處理通常與參考圖6到8描述的第一實(shí)施例的3個(gè)示例相同。因此，下面參考圖6到8描述在這樣的情況下的處理。參考圖6，當(dāng)用戶在從初級(jí)信息的再現(xiàn)結(jié)束經(jīng)過(guò)預(yù)定時(shí)間之前(在步驟203為〃否〃)面向聽(tīng)到初級(jí)信息的方向(在步驟202為"是〃)并且橫向搖動(dòng)他/她的頭部(在步驟204為〃是〃)時(shí)，控制器51在未再現(xiàn)次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)面向聽(tīng)到初級(jí)信息的方向并且橫向搖動(dòng)他/她的頭部來(lái)取消次級(jí)信息的再現(xiàn)。根據(jù)已經(jīng)基于第一傳感器單元61 (攝像器件)得到的圖像判斷出的用戶面部的方向，判斷用戶是否正面向聽(tīng)到初級(jí)信息的方向。此外，基于第二傳感器單元62 (運(yùn)動(dòng)傳感器)檢測(cè)的信號(hào)，判斷用戶是否橫向搖動(dòng)他/她的頭部。例如，當(dāng)在聽(tīng)到〃從...接收到郵件?！ǖ某跫?jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)郵件程序2a的方向)并且橫向搖動(dòng)他/她的頭部時(shí)，取消次級(jí)信息(具體信息)的再現(xiàn)。類似地，當(dāng)在聽(tīng)到〃來(lái)自...的推特信息?！ɑ颉▉?lái)自...的評(píng)論〃的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)微博客2b的方向)并且橫向搖動(dòng)他/她的頭部時(shí)，取消次級(jí)信息(具體信息)的再現(xiàn)。當(dāng)用戶在從初級(jí)信息的再現(xiàn)結(jié)束經(jīng)過(guò)預(yù)定時(shí)間之前(在步驟203為〃否〃)面向聽(tīng)到初級(jí)信息的方向(在步驟202為〃是〃)并且點(diǎn)頭(在步驟205為〃是〃)時(shí)，控制器51控制聲音信號(hào)的輸出，使得從與用戶面部相對(duì)于虛擬對(duì)象2的方向相對(duì)應(yīng)的方向聽(tīng)到次級(jí)信息(步驟206)。此外，基于第二傳感器單元62 (運(yùn)動(dòng)傳感器)檢測(cè)的信號(hào)，判斷用戶是否點(diǎn)頭。應(yīng)當(dāng)注意，在這樣的情況下，控制器51把次級(jí)信息的音頻與音樂(lè)、視頻等等(主任務(wù)的音頻)的音頻相合成并輸出?？刂破?1可以在次級(jí)信息的再現(xiàn)期間執(zhí)行調(diào)低主任務(wù)的
音量的處理。例如，當(dāng)在聽(tīng)到〃從...接收到郵件。〃的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)郵件程序2a的方向)并且點(diǎn)頭時(shí)，開(kāi)始次級(jí)信息(具體信息)的再現(xiàn)。在這樣的情況下，控制器51將郵件內(nèi)容作為次級(jí)信息來(lái)再現(xiàn)。類似地，當(dāng)在聽(tīng)到〃來(lái)自...的推特信息?！ɑ颉▉?lái)自...的評(píng)論〃的初級(jí)信息時(shí)用戶面向聽(tīng)到初級(jí)信息的方向(出現(xiàn)微博客2b的方向)并且點(diǎn)頭時(shí)，開(kāi)始次級(jí)信息(具體信息)的再現(xiàn)。在這樣的情況下，控制器51將推特信息或評(píng)論的內(nèi)容作為次級(jí)信息來(lái)再現(xiàn)。TTH (文本到語(yǔ)音)技術(shù)被用作把郵件、推特信息、評(píng)論等等的文字內(nèi)容轉(zhuǎn)換為音頻的方法。
如上所述，通過(guò)面向聽(tīng)到初級(jí)信息的方向(虛擬對(duì)象2出現(xiàn)的方向)并且點(diǎn)頭，用戶能夠獲取作為比初級(jí)信息更加具體的內(nèi)容的次級(jí)信息。應(yīng)當(dāng)注意，當(dāng)在真實(shí)對(duì)象I的次級(jí)信息正被再現(xiàn)的同時(shí)用戶轉(zhuǎn)動(dòng)他/她的頭部并且改變面部方向時(shí)，調(diào)整聲源的位置，使得從虛擬對(duì)象2出現(xiàn)的方向聽(tīng)到次級(jí)信息。例如，當(dāng)用戶面向虛擬對(duì)象2的方向并且點(diǎn)頭，以及之后向左轉(zhuǎn)動(dòng)頭部以改變面部方向90°時(shí)，從右手方聽(tīng)到次級(jí)信息。此外，隨著當(dāng)再現(xiàn)次級(jí)信息的同時(shí)用戶橫向搖動(dòng)他/她的頭部，可以停止次級(jí)信息的再現(xiàn)。當(dāng)用戶面向聽(tīng)到初級(jí)信息的方向并且在用戶沒(méi)有橫向搖動(dòng)他/她的頭部或點(diǎn)頭的情況下經(jīng)過(guò)預(yù)定時(shí)間(在步驟203為"是〃)時(shí)，控制器51在沒(méi)有再現(xiàn)次級(jí)信息的情況下結(jié)束處理。換句話說(shuō)，當(dāng)用戶未關(guān)于初級(jí)信息執(zhí)行任何動(dòng)作時(shí)，控制器51在不再現(xiàn)次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)不關(guān)于初級(jí)信息執(zhí)行任何動(dòng)作來(lái)取消次級(jí)信息的再現(xiàn)。參考圖7，當(dāng)用戶在從初級(jí)信息的再現(xiàn)結(jié)束經(jīng)過(guò)預(yù)定時(shí)間之前(在步驟304為〃否")橫向搖動(dòng)他/她的頭部(在步驟302為"是")時(shí)，控制器51在未再現(xiàn)諸如郵件內(nèi)容、推特信息和評(píng)論的次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)在再現(xiàn)初級(jí)信息之后橫向搖動(dòng)他/她的頭部(不管面部方向如何)來(lái)取消次級(jí)信息的再現(xiàn)。當(dāng)用戶在經(jīng)過(guò)預(yù)定時(shí)間之前(在步驟304為〃否〃)點(diǎn)頭(在步驟303為〃是〃)時(shí)，控制器51控制聲音信號(hào)，使得從頭戴式耳機(jī)20聽(tīng)到諸如郵件內(nèi)容、推特信息和評(píng)論的次級(jí)信息(步驟305)。在這樣的情況下,控制器51控制聲音信號(hào)的輸出，使得從與面部相對(duì)于虛擬對(duì)象2的方向相對(duì)應(yīng)的方向聽(tīng)到次級(jí)信息。通過(guò)如上所述的處理，用戶能夠通過(guò)在再現(xiàn)初級(jí)信息之后點(diǎn)頭(不管面部方向如何)來(lái)開(kāi)始次級(jí)信息的再現(xiàn)。當(dāng)用戶在再現(xiàn)次級(jí)信息的同時(shí)橫向搖動(dòng)他/她的頭部時(shí)，控制器51可以停止次級(jí)信息的再現(xiàn)。當(dāng)在用戶沒(méi)有橫向搖動(dòng)他/她的頭部或點(diǎn)頭的情況下經(jīng)過(guò)預(yù)定時(shí)間時(shí)(在步驟304為〃是〃)，控制器51在沒(méi)有再現(xiàn)次級(jí)信息的情況下結(jié)束處理。結(jié)果，用戶能夠通過(guò)不關(guān)于初級(jí)信息執(zhí)行任何動(dòng)作來(lái)取消次級(jí)信息的再現(xiàn)。參考圖8，當(dāng)在開(kāi)始次級(jí)信息的再現(xiàn)之后用戶面向聽(tīng)到初級(jí)信息的方向(聽(tīng)到次級(jí)信息的方向)時(shí)(在步驟403為"是")，從與用戶面部相對(duì)于虛擬對(duì)象2的方向相對(duì)應(yīng)的方向聽(tīng)到次級(jí)信息，并且隨著面部方向接近虛擬對(duì)象2的方向，次級(jí)信息的音量變大(步驟404)。圖13是示出在聽(tīng)到關(guān)于郵件程序2a的初級(jí)信息之后用戶面向聽(tīng)到初級(jí)信息的方向的狀態(tài)的圖。如圖13的左側(cè)所示，當(dāng)從前方聽(tīng)到主任務(wù)的音頻(音樂(lè)的音頻等等)時(shí)，從布置在用戶右手側(cè)的郵件程序2a的聲源位置聽(tīng)到〃從...接收到郵件?！ǖ某跫?jí)信息。下面描述如圖13的右側(cè)所述用戶轉(zhuǎn)動(dòng)他/她的頭部以面向聽(tīng)到初級(jí)信息的方向的情形。在這樣的情況下,控制聲音信號(hào),使得從與用戶面部相對(duì)于郵件程序2a的方向相對(duì)應(yīng)的方向聽(tīng)到諸如郵件內(nèi)容的次級(jí)信息。類似地，控制聲音信號(hào)，使得從對(duì)應(yīng)于用戶面部的方向的方向聽(tīng)到主任務(wù)的音頻(音樂(lè)的音頻)。此外，在這樣的情況下，控制聲音信號(hào)，使得隨著面部方向接近聽(tīng)到初級(jí)信息的方向(聽(tīng)到次級(jí)信息的方向)，次級(jí)信息的音量變大，并且主任務(wù)的音量變小。通過(guò)圖8所示的處理，用戶能夠通過(guò)面向聽(tīng)到次級(jí)信息的方向(虛擬對(duì)象2 出現(xiàn)的方向)來(lái)調(diào)高次級(jí)信息的音量。[第二實(shí)施例的修改例子]下面描述第二實(shí)施例的修改例子。如上所述，在第二實(shí)施例中，諸如郵件程序2a和微博客2b的應(yīng)用程序作為虛擬對(duì)象2被布置在空間中。于是，控制器51控制聲音信號(hào)，使得從虛擬對(duì)象2的方向聽(tīng)到初級(jí)和次級(jí)信息。由于從某方向聽(tīng)到初級(jí)和次級(jí)信息，用戶已經(jīng)知道諸如郵件程序2a和微博客2b的應(yīng)用程序(虛擬對(duì)象2)被布置在的方向。在第二實(shí)施例的修改例子中使用這種關(guān)系。圖14是示出根據(jù)第二實(shí)施例的修改例子的處理的流程圖。圖15是用于說(shuō)明圖14所示的處理的補(bǔ)充圖，該圖示出在面向虛擬對(duì)象2 (郵件程序2a)出現(xiàn)的方向的同時(shí)用戶發(fā)出語(yǔ)音的狀態(tài)。如圖15所示，控制器51正執(zhí)行諸如音樂(lè)再現(xiàn)和視頻再現(xiàn)的主任務(wù)。參考圖14，控制器51基于第一傳感器單元61 (攝像器件)得到的圖像判斷用戶面部的方向是否已經(jīng)改變(步驟601)。當(dāng)用戶的面部方向已經(jīng)改變(在步驟601為〃是〃)時(shí)，控制器51判斷諸如郵件程序2a和微博客2b的應(yīng)用程序(虛擬對(duì)象2)是否被布置在用戶面向的方向(步驟602)。在這樣的情況下，控制器51當(dāng)在距離用戶面部的前方例如±45°的范圍內(nèi)存在應(yīng)用程序時(shí)，判斷在用戶面向的方向存在應(yīng)用程序(虛擬對(duì)象2)。應(yīng)當(dāng)注意，當(dāng)用戶的面部方向已經(jīng)改變時(shí)，控制器51控制聲源的位置，使得從與用戶的面部方向相對(duì)應(yīng)的方向聽(tīng)到首樂(lè)和視頻的首頻(主任務(wù)的首頻)(圖15的左側(cè)和右側(cè))。當(dāng)在步驟602判斷〃是〃(在步驟602為〃是〃)時(shí)，控制器51執(zhí)行音頻識(shí)別處理(步驟603)。由加入到例如頭戴式耳機(jī)20中的麥克風(fēng)來(lái)收集用戶說(shuō)出的語(yǔ)音。在圖15的右側(cè)，示出這樣的情形的示例在面向郵件程序2a (虛擬對(duì)象2)出現(xiàn)的方向的同時(shí)，用戶說(shuō)出〃親愛(ài)的...。"，并且說(shuō)出要發(fā)送到...的郵件的內(nèi)容。應(yīng)當(dāng)注意，由于從右手側(cè)聽(tīng)到初級(jí)(〃從...接收到郵件?！?和次級(jí)信息(郵件內(nèi)容)，用戶已經(jīng)知道郵件程序2a被布置在用戶的右手側(cè)。
在執(zhí)行音頻識(shí)別處理之后，控制器51向應(yīng)用程序發(fā)出音頻命令(步驟604)。結(jié)果，在郵件文本中寫下用戶說(shuō)出的〃親愛(ài)的...?！ǖ膬?nèi)容。此外，當(dāng)在面向微博客2b出現(xiàn)的方向的同時(shí)用戶說(shuō)出要在微博客2b中寫下的內(nèi)容(推特信息、評(píng)論等等)時(shí)，控制器51識(shí)別音頻。于是，用戶關(guān)于微博客2b說(shuō)出的內(nèi)容被寫在微博客2b中。通過(guò)如上所述的處理，用戶能夠在不禁止主任務(wù)的情況下通過(guò)發(fā)聲來(lái)寫下郵件和微博客的內(nèi)容。雖然在第二實(shí)施例和第二實(shí)施例的修改例子的說(shuō)明中集成顯示單元的PC 50被作為聲音控制設(shè)備主體50的示例，然而聲音控制設(shè)備主體50不限于此。聲音控制設(shè)備主 體50可以是臺(tái)式PC、膝上型PC、平板PC、蜂窩電話、便攜音樂(lè)播放器、PDA (個(gè)人數(shù)字助理)等等。
〈修改例子〉
上述說(shuō)明以頭戴式耳機(jī)20作為一個(gè)例子。然而，也可以使用耳塞式耳機(jī)(聲音輸出單元)而不是頭戴式耳機(jī)20。在上述說(shuō)明中，頭戴式耳機(jī)20中提供的方向傳感器、運(yùn)動(dòng)傳感器等等被作為檢測(cè)關(guān)于初級(jí)信息的用戶動(dòng)作的傳感器的示例。然而，用于檢測(cè)關(guān)于初級(jí)信息的用戶動(dòng)作的傳 感器不限于此。然而，麥克風(fēng)可以被用作用于檢測(cè)關(guān)于初級(jí)信息的用戶動(dòng)作的傳感器。在例如聲音控制設(shè)備主體10或50、或頭戴式耳機(jī)20中提供麥克風(fēng)。在這樣的情況下，例如，當(dāng)聽(tīng)到諸如〃有家商店"和〃接收到郵件〃的初級(jí)信息時(shí)，用戶對(duì)麥克風(fēng)說(shuō)出諸如"是"或"否"的語(yǔ)音以作為關(guān)于初級(jí)信息的動(dòng)作。當(dāng)判斷已經(jīng)說(shuō)出"是"的語(yǔ)音時(shí)，控制器11或51可以作為聲音信號(hào)輸出諸如關(guān)于商店和郵件內(nèi)容的具體信息的次級(jí)信息。用戶可以在面向諸如商店和郵件程序2a的對(duì)象出現(xiàn)的方向的同時(shí)說(shuō)出"是"或"否"，或者在不考慮諸如商店和郵件程序2a的對(duì)象出現(xiàn)的方向的情況下說(shuō)出〃是〃或〃否〃。本公開(kāi)也可以采取下面的結(jié)構(gòu)。(I) 一種設(shè)備，包括硬件處理器；和耦合到所述處理器并且存儲(chǔ)指令的存儲(chǔ)介質(zhì)，所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備接收方向信號(hào)，所述方向信號(hào)指示用戶的頭部相對(duì)于固定方向所面向的第一方向；把所述頭部相對(duì)于所述固定方向所面向的所述第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向；以及生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。 (2)如(I)所述的設(shè)備，包括方向傳感器，其被配置成生成所述方向信號(hào)。(3)如(I)或(2)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音指示關(guān)于所述對(duì)象的第一信息。(4)如(3)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備接收指示所述頭部的運(yùn)動(dòng)的運(yùn)動(dòng)信號(hào)；以及有選擇地基于所述運(yùn)動(dòng)信號(hào)生成所述音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音指示關(guān)于所述對(duì)象的第二信息。(5)如(4)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得當(dāng)所述運(yùn)動(dòng)信號(hào)指示所述頭部點(diǎn)頭時(shí)，由所述音頻信號(hào)生成的聲音指示所述第二信息。(6)如(4)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得當(dāng)(i)所述運(yùn)動(dòng)信號(hào)指示所述頭部點(diǎn)頭并·且(ii)所述方向信號(hào)指示所述頭部面向所述對(duì)象時(shí)，由所述音頻信號(hào)生成的聲音指示所述
第二信息。(7)如(4)至(6)中任何一個(gè)所述的設(shè)備，包括運(yùn)動(dòng)傳感器，其被配置成生成所述
運(yùn)動(dòng)信號(hào)。(8)如(4)至(7)中任何一個(gè)所述的設(shè)備，包括用于接收無(wú)線電波的天線，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)指令，所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備通過(guò)所述天線從另一設(shè)備接收所述第一信息和所述第二信息。(9)如(I)至(8)中任何一個(gè)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備接收指示所述頭部的位置的頭部位置信號(hào)；接收指示所述對(duì)象的位置的對(duì)象位置信號(hào)；以及當(dāng)所述頭部的位置和所述對(duì)象的位置之間的距離小于或等于預(yù)定閾值距離時(shí)，有選擇地生成所述音頻信號(hào)。(10)如(9)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音的音量對(duì)應(yīng)于所述頭部的位置和所述對(duì)象的位置之間的距離。(11)如(9)或(10)所述的設(shè)備，包括用于接收無(wú)線電波的天線，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備通過(guò)所述天線從另一設(shè)備接收所述對(duì)象位置信號(hào)。(12)如(I)至(11)中任何一個(gè)所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音當(dāng)所述頭部面向所述對(duì)象時(shí)的音量比所述頭部不面向所述對(duì)象時(shí)的音量更大。(13)如(I)至(12)中任何一個(gè)所述的設(shè)備，包括頭戴式耳機(jī)或耳塞式耳機(jī)之一，被配置成接收所述音頻信號(hào)并且由所述音頻信號(hào)生成所述聲音。(14)如(I)至(13)中任何一個(gè)所述的設(shè)備，其中所述對(duì)象是虛擬對(duì)象；并且所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備在空間中定位所述虛擬對(duì)象。
雖然參考附圖詳細(xì)描述了一些實(shí)施例，然而本公開(kāi)不限于這樣的實(shí)施例。本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)理解，根據(jù)設(shè)計(jì)需求和其它因素，可以進(jìn)行各種修改、組合、子組合和變化，只要它們?cè)谒綑?quán)利要求書或其等同表述的范圍內(nèi)。此外，應(yīng)當(dāng)理解，如這里所使用的，在 包含轉(zhuǎn)折詞〃包括〃、〃包含〃和/或〃具有〃的開(kāi)放式權(quán)利要求中，不定冠詞〃a〃和"an”(〃 一〃和〃 一個(gè)〃)表示〃 一個(gè)或更多個(gè)〃。
權(quán)利要求
1.一種設(shè)備，包括 硬件處理器；和 耦合到所述處理器并且存儲(chǔ)指令的存儲(chǔ)介質(zhì)，所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備 接收方向信號(hào)，所述方向信號(hào)指示用戶的頭部相對(duì)于固定方向所面向的第一方向； 把所述頭部相對(duì)于所述固定方向所面向的所述第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向；以及 生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。
2.如權(quán)利要求I所述的設(shè)備，包括方向傳感器，其被配置成生成所述方向信號(hào)。
3.如權(quán)利要求I所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音指示關(guān)于所述對(duì)象的第一信息。
4.如權(quán)利要求3所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備 接收指示所述頭部的運(yùn)動(dòng)的運(yùn)動(dòng)信號(hào)；以及 有選擇地基于所述運(yùn)動(dòng)信號(hào)生成所述音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音指示關(guān)于所述對(duì)象的第二信息。
5.如權(quán)利要求4所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得當(dāng)所述運(yùn)動(dòng)信號(hào)指示所述頭部點(diǎn)頭時(shí)，由所述音頻信號(hào)生成的聲音指示所述第二信息。
6.如權(quán)利要求4所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得當(dāng)(i )所述運(yùn)動(dòng)信號(hào)指示所述頭部點(diǎn)頭并且(ii)所述方向信號(hào)指示所述頭部面向所述對(duì)象時(shí)，由所述音頻信號(hào)生成的聲音指示所述第二信息。
7.如權(quán)利要求4所述的設(shè)備，包括運(yùn)動(dòng)傳感器，其被配置成生成所述運(yùn)動(dòng)信號(hào)。
8.如權(quán)利要求7所述的設(shè)備，包括頭戴式耳機(jī)或耳塞式耳機(jī)之一，配有所述運(yùn)動(dòng)傳感器，并且被配置成接收所述音頻信號(hào)并且由所述音頻信號(hào)生成所述聲音。
9.如權(quán)利要求4所述的設(shè)備，包括用于接收無(wú)線電波的天線，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)指令，所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備通過(guò)所述天線從另一設(shè)備接收所述第一信息和所述第二信息。
10.如權(quán)利要求I所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備 接收指示所述頭部的位置的頭部位置信號(hào)； 接收指示所述對(duì)象的位置的對(duì)象位置信號(hào)；以及 當(dāng)所述頭部的位置和所述對(duì)象的位置之間的距離小于或等于預(yù)定閾值距離時(shí)，有選擇地生成所述音頻信號(hào)。
11.如權(quán)利要求10所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成所述音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音的音量對(duì)應(yīng)于所述頭部的位置和所述對(duì)象的位置之間的距離。
12.如權(quán)利要求10所述的設(shè)備，包括用于接收無(wú)線電波的天線，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備通過(guò)所述天線從另ー設(shè)備接收所述對(duì)象位置信號(hào)。
13.如權(quán)利要求I所述的設(shè)備，其中所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備生成音頻信號(hào)，使得由所述音頻信號(hào)生成的聲音當(dāng)所述頭部面向所述對(duì)象時(shí)的音量比所述頭部不面向所述對(duì)象時(shí)的音量更大。
14.如權(quán)利要求I所述的設(shè)備，包括頭戴式耳機(jī)或耳塞式耳機(jī)之一，被配置成接收所述音頻信號(hào)并且由所述音頻信號(hào)生成所述聲音。
15.如權(quán)利要求I所述的設(shè)備，其中 所述對(duì)象是虛擬對(duì)象；并且 所述存儲(chǔ)介質(zhì)存儲(chǔ)這樣的指令所述指令當(dāng)被所述處理器執(zhí)行時(shí)使所述設(shè)備在空間中定位所述虛擬對(duì)象。
16.—種方法,包括 接收方向信號(hào)，所述方向信號(hào)指示用戶的頭部相對(duì)于固定方向所面向的第一方向； 把所述頭部相對(duì)于所述固定方向所面向的所述第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向；以及 生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。
17.一種存儲(chǔ)指令的非暫時(shí)性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述指令當(dāng)被處理器執(zhí)行時(shí)使設(shè)備 接收方向信號(hào)，所述方向信號(hào)指示用戶的頭部相對(duì)于固定方向所面向的第一方向； 把所述頭部相對(duì)于所述固定方向所面向的所述第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向；以及 生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。
全文摘要
公開(kāi)了一種聲音控制設(shè)備、程序和控制方法。設(shè)備可以包含硬件處理器和存儲(chǔ)介質(zhì)。存儲(chǔ)介質(zhì)可以耦合到該處理器，并且可以存儲(chǔ)指令。當(dāng)被處理器執(zhí)行時(shí)，指令可以使該設(shè)備接收方向信號(hào)，該方向信號(hào)指示用戶頭部相對(duì)于固定方向所面向的第一方向。指令也可以使設(shè)備把頭部相對(duì)于固定方向所面向的第一方向轉(zhuǎn)換為第二方向，其中所述頭部相對(duì)于連接所述頭部和對(duì)象的第三方向而面向所述第二方向。另外，指令可以使設(shè)備生成音頻信號(hào)，所述音頻信號(hào)具有使得由所述音頻信號(hào)生成的聲音被所述用戶感知為從所述第三方向到達(dá)的特征。
文檔編號(hào)G06F3/16GK102819314SQ201210180549
公開(kāi)日2012年12月12日 申請(qǐng)日期2012年6月1日 優(yōu)先權(quán)日2011年6月9日
發(fā)明者宮沢悠介, 奧村泰史 申請(qǐng)人:索尼公司