專利名稱：情緒探測方法,感受能力生成方法及其系統(tǒng)與執(zhí)行軟件的制作方法
技術(shù)領(lǐng)域：
本發(fā)明的背景1、本發(fā)明的領(lǐng)域本發(fā)明涉及一種情緒探測方法、一種感受能力生成方法、實(shí)現(xiàn)這些方法的系統(tǒng)以及軟件。本發(fā)明的情緒探測方法可以被用于醫(yī)療領(lǐng)域的情緒探測，而且可以用于各種系統(tǒng)作為人工智能與人工感受能力的一部分。而且，本發(fā)明的一種感受能力生成方法可以被用于以多種方法來控制虛擬人與機(jī)器人的感受能力的各種系統(tǒng)。
2、相關(guān)技術(shù)說明舉例來說，與本發(fā)明的情緒探測方法相關(guān)的傳統(tǒng)技術(shù)公布于《日本專利申請公開公報(bào)》(Japanese Unexamined Patent Application Publication)的Nos.Hei5-12023、Hei9-22296與Heill-119791。
《日本專利申請公開公報(bào)》No.Hei5-12023公布，聲音的延續(xù)時(shí)間、聲音的共振頻率以及每個(gè)頻率的聲音強(qiáng)度都分別作為該聲音的特征量而加以探測。而且，這一公報(bào)也公布了探測參考信號(hào)與各個(gè)特征量之間的一個(gè)差值，并根據(jù)該探測到的差值采用模糊推理來探測情緒。
《日本專利申請公開公報(bào)》No.Hei9-22296公布，聲音的生成速率(單位時(shí)間的短音節(jié)數(shù))、聲音的縱向平面振動(dòng)頻率、音量以及聲音頻譜都作為該聲音的特征量而加以探測。而且，這一公報(bào)也公布了根據(jù)該探測到的特征量以及由統(tǒng)計(jì)處理HMM(隱式馬爾可夫模型)獲得的結(jié)果來探測情緒。
《日本專利申請公開公報(bào)》No.Heill-119791公布了利用HMM根據(jù)聲音轉(zhuǎn)變狀態(tài)中的音素頻譜的概率來探測情緒。
另一方面，作為與本發(fā)明的感受能力(sensibility)生成方法相關(guān)的傳統(tǒng)技術(shù)，可以舉《日本專利申請公開公報(bào)》No.Heill-265239中公布的“情緒生成系統(tǒng)與情緒生成方法”(“Emotion Generating System and EmotionGeneration Method”)為例。
表達(dá)人們內(nèi)在狀態(tài)等等的情緒根據(jù)當(dāng)時(shí)的情景會(huì)有各種變化。《日本專利申請公開公報(bào)》No.Heill-265239公布了生成不可預(yù)測情景中的情緒的技術(shù)。
具體來講，應(yīng)考慮到可以預(yù)測的情景來評(píng)價(jià)各種情景，并生成系統(tǒng)自身的情緒。另外，要分析過去實(shí)際生成的情緒以及當(dāng)時(shí)的情景，并學(xué)習(xí)對(duì)各種情景特殊的不可預(yù)測的間接條件以及與此相應(yīng)的情緒。當(dāng)一個(gè)新輸入的情景滿足這些間接條件時(shí)，就輸出與這些間接條件對(duì)應(yīng)的情緒。
舉例來說，由這樣一個(gè)系統(tǒng)生成的情緒狀態(tài)會(huì)影響到輸出的聲音與圖像。
本發(fā)明的概要然而，該傳統(tǒng)情緒探測方法探測情緒的精度很低，即使它能夠?qū)μ貏e限定的語言探測情緒，也不能準(zhǔn)確探測一個(gè)人的實(shí)際情緒。所以該情緒探測方法只對(duì)有限的應(yīng)用場合才能得到實(shí)際使用，譬如說，比較簡單的博弈機(jī)器。
本發(fā)明的一個(gè)目的是提供一種能夠準(zhǔn)確探測作為一個(gè)對(duì)象(subject)的一個(gè)人的情緒的情緒探測方法。
而且，該傳統(tǒng)情緒探測方法只是直接根據(jù)與輸入情景有關(guān)的信息來生成情緒。對(duì)實(shí)際的人，包括本能、理智、個(gè)性等等在內(nèi)的各種參數(shù)彼此之間會(huì)產(chǎn)生復(fù)雜的影響，結(jié)果使行動(dòng)、言語、表情等發(fā)生變化。該傳統(tǒng)情緒生成方法不能使這種本能、理智、個(gè)性等等影響這些結(jié)果。
本能與情緒可以被看作情感作用。此外，本能成了它的情緒生成的基本生物情感作用與動(dòng)機(jī)。而且，一般認(rèn)為人們并不直接輸出情緒，但是他們輸出由該理智與個(gè)性控制的感受能力。
本發(fā)明的另一個(gè)目的是提供一種能夠輸出類似于一個(gè)人的感受能力的感受能力生成方法。
根據(jù)本發(fā)明的一個(gè)第一方面，探測對(duì)象的情緒的一種情緒探測方法包括如下步驟輸入一個(gè)聲音信號(hào)；根據(jù)該輸入聲音來分別探測該聲音的強(qiáng)度、表示該聲音出現(xiàn)速率的速度以及表示該聲音構(gòu)成的每個(gè)單詞的強(qiáng)度變化模式的語調(diào)；分別獲得該探測到的聲音的強(qiáng)度中、該聲音的速度中以及該聲音的語調(diào)中的變化量；以及根據(jù)這些獲得的變化量來分別生成表示至少包括憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)。
在本發(fā)明的該第一方面，通過使從該對(duì)象輸入的聲音的強(qiáng)度、速度及語調(diào)中的各個(gè)變化量分別與包括憤怒、悲傷與愉快的情緒狀態(tài)相符來探測情緒。采用這樣一種方法，能夠比該傳統(tǒng)技術(shù)更準(zhǔn)確地探測情緒。
根據(jù)本發(fā)明的一個(gè)第二方面，探測對(duì)象的情緒的情緒探測系統(tǒng)包括一個(gè)聲音輸入單元，用于輸入聲音信號(hào)；一個(gè)強(qiáng)度探測單元，用于根據(jù)該聲音輸入單元輸入的聲音信號(hào)來探測該聲音的強(qiáng)度；速度探測單元，用于根據(jù)該聲音輸入單元輸入的聲音信號(hào)來探測該聲音出現(xiàn)的速率并以此作為速度；一個(gè)語調(diào)探測單元，用于根據(jù)該聲音輸入單元輸入的聲音信號(hào)來探測表示該聲音的一個(gè)單詞內(nèi)強(qiáng)度變化模式的語調(diào)；一個(gè)變化量探測單元，用于分別獲得該強(qiáng)度探測單元探測到的聲音強(qiáng)度中、該速度探測單元探測到的聲音速度中以及該語調(diào)探測單元探測到的聲音語調(diào)中的變化量；以及一個(gè)情緒探測單元，用于根據(jù)該變化量探測單元探測到的變化量來分別輸出表示至少包括憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)。
在本發(fā)明的該第二方面的情緒探測系統(tǒng)中，提供了該聲音輸入單元、該強(qiáng)度探測單元、該速度探測單元、該語調(diào)探測單元、該變化量探測單元以及該情緒探測單元，因此能夠執(zhí)行前述的情緒探測方法。
根據(jù)本方面的一個(gè)第三方面，本發(fā)明該第二方面的情緒探測系統(tǒng)中的語調(diào)探測單元包括一個(gè)帶通濾波器，用于從對(duì)每個(gè)單詞分離輸入的聲音信號(hào)中提取特定的頻率分量；一個(gè)區(qū)域分離單元，用于將由該帶通濾波器提取的信號(hào)的功率頻譜根據(jù)該功率頻譜的強(qiáng)度分離為許多區(qū)域；以及一個(gè)語調(diào)計(jì)算單元，用于根據(jù)由該區(qū)域分離單元分離出的該許多區(qū)域的各自中心之間的時(shí)間間隔來計(jì)算一個(gè)語調(diào)值。
該帶通濾波器單元從對(duì)每個(gè)單詞分離輸入的聲音信號(hào)中提取這些特定的頻率分量。該區(qū)域分離單元將該探測到的功率頻譜根據(jù)它們的強(qiáng)度分離為許多區(qū)域。該語調(diào)計(jì)算單元根據(jù)由該區(qū)域分離單元分離出的許多區(qū)域的各自中心之間的時(shí)間間隔來計(jì)算該語調(diào)的數(shù)值。
在本發(fā)明的該第三方面，單詞中與該聲音的這些特定頻率分量有關(guān)的一個(gè)能量分布模式被探測出來作為表示這許多區(qū)域的間隔的一個(gè)時(shí)間值，而且該時(shí)間的長度被用來作為該語調(diào)。
根據(jù)本發(fā)明的一個(gè)第四方面，本發(fā)明該第二方面的情緒探測系統(tǒng)還包括一個(gè)成像單元，用于接受與至少該對(duì)象的一個(gè)面部有關(guān)的圖像信息；一個(gè)圖像識(shí)別單元，用于根據(jù)由該成像單元接受到的圖像信息來探測與該面部每個(gè)部分有關(guān)的位置信息；一個(gè)圖像參考信息保存單元，用于保存與該面部每個(gè)部分的特征量有關(guān)的參考信息；以及一個(gè)圖像特征量探測單元，用于根據(jù)由該圖像識(shí)別單元探測到的位置信息以及由該圖像參考信息保存單元保存的參考信息來探測一個(gè)圖像特征量。該情緒探測單元按照由該圖像特征量探測單元探測到的圖像特征量中的變化來估計(jì)一個(gè)情緒狀態(tài)。
在本發(fā)明的該第四方面，除了該聲音以外，還根據(jù)該對(duì)象面部的表情來估計(jì)該情緒狀態(tài)。通常，由于人們的情緒狀態(tài)影響他們面部的表情，所以能夠通過探測他們的面部表情來捕捉這些情緒狀態(tài)。因此，在本發(fā)明的該第四方面中，該情緒探測單元根據(jù)由該圖像特征量探測單元探測到的圖像特征量的變化來估計(jì)該情緒狀態(tài)。
根據(jù)本發(fā)明的一個(gè)第五方面，本發(fā)明該第二方面的情緒探測系統(tǒng)還包括一個(gè)情緒信息存儲(chǔ)單元，用于接連不斷地接受與由該情緒探測單元探測到的這些情緒狀態(tài)有關(guān)的各種信息，并用于在其中儲(chǔ)存這各種信息；以及一個(gè)遺忘處理單元，用于從與過去儲(chǔ)存在該情緒信息存儲(chǔ)單元中的情緒狀態(tài)有關(guān)的各種信息中刪除自該信息當(dāng)初被儲(chǔ)存以來已經(jīng)儲(chǔ)存了預(yù)定時(shí)期的信息，并用于從要被刪除的信息中至少排除說明情緒變化量大于預(yù)定量的信息以及符合預(yù)定變化模式的信息。
在本發(fā)明的該第五方面，能夠?qū)⑴c這些探測到的過去情緒狀態(tài)有關(guān)的信息儲(chǔ)存到該情緒信息存儲(chǔ)單元。而且，由于自被探測以來已經(jīng)儲(chǔ)存了很長時(shí)期的舊信息會(huì)被自動(dòng)從該情緒信息存儲(chǔ)單元中刪除，所以能夠減少該情緒信息存儲(chǔ)單元所需要的存儲(chǔ)容量。
然而，典型信息，譬如說明情緒變化量大于該預(yù)定量的信息以及符合該預(yù)定變化模式的信息，會(huì)被自動(dòng)從需要?jiǎng)h除的信息中排除。所以，即使該典型信息已經(jīng)變得陳舊，它們也會(huì)按原樣保存在該情緒信息存儲(chǔ)單元之中。因此，與一個(gè)人的記憶相似，將來也許有用的典型信息即使已經(jīng)變得陳舊，也可以從該情緒信息存儲(chǔ)單元中讀出以便重現(xiàn)。
根據(jù)本發(fā)明的一個(gè)第六方面，本發(fā)明該第五方面的情緒探測系統(tǒng)還包括一個(gè)語句識(shí)別單元，用于通過處理與該對(duì)象說出的聲音或與該對(duì)象輸入的字符有關(guān)的信息來進(jìn)行語法分析，并用來生成表達(dá)一個(gè)語句的含義的言語信息；以及一個(gè)存儲(chǔ)器控制單元，用于按照與涉及這些情緒狀態(tài)的信息同步的方式來儲(chǔ)存由該情緒信息存儲(chǔ)單元中的語句識(shí)別單元生成的言語信息。
該語句識(shí)別單元處理與該對(duì)象發(fā)出的聲音或與該對(duì)象用一個(gè)鍵盤或類似設(shè)備輸入的字符有關(guān)的信息，并進(jìn)行語法分析來生成表達(dá)該語句含義的言語信息。
舉例來說，該語法分析能夠獲得表達(dá)“5W3H”的言語信息，即“Who(何人)”、“What(何事)”、“When(何時(shí))”、“Where(何地)”、“Why(何因)”、“How(多么)”、“How long，How far，How tall and soon(多長、多遠(yuǎn)、多高等等)”以及“How much(多少)”。
該存儲(chǔ)器控制單元在該言語信息與涉及這些情緒狀態(tài)的信息同步的狀態(tài)下，儲(chǔ)存由該情緒信息存儲(chǔ)單元中的語句識(shí)別單元生成的言語信息。
在本發(fā)明的該第六方面，通過查閱該情緒信息存儲(chǔ)單元，不僅可以取出與過去任何時(shí)刻的情緒有關(guān)的信息，而且可以取出表示該時(shí)刻情景的言語信息。
該情緒信息存儲(chǔ)單元中保存的信息可以被應(yīng)用于各種使用場合。舉例來說，如果該情緒探測系統(tǒng)本身的情緒估計(jì)功能不準(zhǔn)確，就可以根據(jù)該情緒信息存儲(chǔ)單元中保存的過去探測結(jié)果來校正一個(gè)用來估計(jì)該情緒的數(shù)據(jù)庫。
根據(jù)本發(fā)明的一個(gè)第七方面，本發(fā)明該第二方面的情緒探測系統(tǒng)還包括一個(gè)無聲時(shí)間測定單元，用于根據(jù)探測到的情緒狀態(tài)中的情緒狀態(tài)來測定一個(gè)參考無聲時(shí)間；以及一個(gè)語句分段探測單元，用于通過利用由該無聲時(shí)間測定單元測定的參考無聲時(shí)間來探測該聲音語句的一個(gè)分段。
在執(zhí)行該聲音識(shí)別與情緒探測時(shí)，必須對(duì)每個(gè)語句探測該分段，而且必須提取每個(gè)語句。一般來說，由于在這些語句之間的分段中存在一個(gè)無聲部分，所以許多語句可以在這些無聲部分出現(xiàn)時(shí)刻加以分離。
然而，這些無聲部分的長度并不是不變的。特別是，該無聲部分的長度隨一個(gè)說話人的情緒狀態(tài)而變化。所以，在為了測定該無聲部分而分配閾限時(shí)，探測該語句分段的失敗可能性也變大。
在本發(fā)明的該第七方面，舉例來說，該參考無聲時(shí)間根據(jù)在該測定前剛剛探測到的情緒狀態(tài)來測定，而且該聲音語句的分段按照該參考無聲時(shí)間來探測。所以，即使在該說話人情緒變化時(shí)也能夠正確探測該語句的分段。
根據(jù)本發(fā)明的一個(gè)第八方面，軟件包括了由一臺(tái)計(jì)算機(jī)執(zhí)行的、用于探測一位對(duì)象的情緒的一個(gè)情緒探測程序，其中該情緒探測程序包括如下步驟一個(gè)將聲音信號(hào)輸入到該情緒探測程序的步驟；一個(gè)根據(jù)該輸入聲音信號(hào)探測該聲音的強(qiáng)度、表示該聲音出現(xiàn)速率的速度以及表示該聲音構(gòu)成的每個(gè)單詞中強(qiáng)度變化模式的語調(diào)的步驟；一個(gè)獲得已被探測到的聲音強(qiáng)度、聲音速度與聲音語調(diào)中每一項(xiàng)的變化量的步驟；以及一個(gè)根據(jù)所獲得的變化量來生成至少表示憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)的步驟。
用一臺(tái)計(jì)算機(jī)執(zhí)行本發(fā)明該第八方面的軟件中所包括的情緒探測程序就能夠?qū)崿F(xiàn)本發(fā)明該第一方面的情緒探測方法。
根據(jù)本發(fā)明的一個(gè)第九方面，一個(gè)感受能力生成方法包括如下步驟預(yù)先保存至少?zèng)Q定產(chǎn)生感受能力的一個(gè)對(duì)象的理智、預(yù)定特征以及意向的各種個(gè)性信息；根據(jù)一個(gè)表明伙伴的情緒的狀態(tài)或者該伙伴所處的環(huán)境的輸入情景信息來生成本能動(dòng)機(jī)信息，該本能動(dòng)機(jī)信息至少包括表示愉快程度的一個(gè)第一本能參數(shù)、表示憤怒程度的一個(gè)第二本能參數(shù)與表示完成(achievement)及變化程度的一個(gè)第三本能參數(shù)；根據(jù)該生成的本能動(dòng)機(jī)信息來生成情緒信息，該情緒信息包括至少愉快、憤怒與悲傷的一個(gè)基本情緒參數(shù)；以及根據(jù)該個(gè)性信息來控制該生成的情緒信息。
在本發(fā)明的該第九方面，激發(fā)情緒產(chǎn)生的本能動(dòng)機(jī)信息根據(jù)該輸入情景信息(該伙伴的情緒、意向與狀況)生成。具體地講，該本能動(dòng)機(jī)信息從該情景信息生成，而該情緒信息根據(jù)該本能動(dòng)機(jī)信息生成。而且，將要生成的情緒信息根據(jù)該個(gè)性信息加以控制。所以，能夠輸出由該個(gè)人的理智與意向控制的情緒，即感受能力信息。
此外，由于該情緒信息通過該本能動(dòng)機(jī)信息生成，所以能夠更準(zhǔn)確、更容易地控制將要生成的情緒。
譬如說，當(dāng)一個(gè)人在已經(jīng)認(rèn)識(shí)到危險(xiǎn)情景的狀態(tài)中遇到該危險(xiǎn)情景時(shí)產(chǎn)生的情緒與該人在未認(rèn)識(shí)到危險(xiǎn)情景的狀態(tài)中突然遇到該危險(xiǎn)情景時(shí)產(chǎn)生的情緒是完全不同的。復(fù)現(xiàn)這些情緒中的這樣一種差別是可能的。
最好使該本能參數(shù)除了前述各項(xiàng)外還包括一個(gè)注意程度(拒絕程度)、一個(gè)確定性程度(迷惑程度)、一個(gè)追蹤程度(自信程度)等等。而且，最好使構(gòu)成情緒信息的基本情緒參數(shù)除了前述各項(xiàng)外還包括驚訝、恐懼、痛苦、厭惡、輕視、趨近、逃避、忌妒、羨慕、依賴、激怒、焦慮等等。
根據(jù)本發(fā)明的一個(gè)第十方面，一個(gè)感受能力發(fā)生器包括一個(gè)本能測定單元，用于輸入表明伙伴的情緒狀態(tài)、該伙伴所處的環(huán)境與該伙伴的意向的情節(jié)情景信息，并用于根據(jù)該情節(jié)情景信息來生成本能動(dòng)機(jī)信息，該本能動(dòng)機(jī)信息至少包括表示愉快程度的一個(gè)第一本能參數(shù)、表示危險(xiǎn)程度的一個(gè)第二本能參數(shù)與表示完成及變化程度的一個(gè)第三本能參數(shù)；一個(gè)情緒生成單元，用于根據(jù)由該本能測定單元輸出的本能動(dòng)機(jī)信息來生成情緒信息，該情緒信息包括至少愉快、憤怒與悲傷的基本情緒參數(shù)；一個(gè)個(gè)性信息提供單元，用于提供至少?zèng)Q定產(chǎn)生感受能力的一位對(duì)象的理智與意向的個(gè)性信息；以及一個(gè)情緒控制單元，用于根據(jù)該個(gè)性信息提供單元提供的個(gè)性信息來控制由該情緒生成單元輸出的情緒信息。
在本發(fā)明的感受能力發(fā)生器的該第十方面，能夠通過提供本能測定單元、情緒生成單元、個(gè)性信息提供單元以及情緒控制單元來執(zhí)行如權(quán)利要求9的感受能力生成方法。
所以，能夠輸出由個(gè)人的理智與意向控制的情緒，就是說，關(guān)于感受能力的信息。而且，由于情緒信息通過本能動(dòng)機(jī)信息生成，所以能夠更準(zhǔn)確、更容易地控制將要產(chǎn)生的情緒。
根據(jù)本發(fā)明的一個(gè)第十一方面，本發(fā)明該第十方面的情緒生成單元包括一個(gè)生命節(jié)奏生成單元，用于生成表示周期變化的環(huán)境或者一個(gè)生命的生命節(jié)奏的信息；以及一個(gè)隨意情緒控制單元，用于按照該生命節(jié)奏生成單元輸出的生命節(jié)奏信息來控制該情緒生成單元中的隨意情緒。
舉例來說，自然環(huán)境狀況(譬如溫度與濕度)周期性變化，盡管不太規(guī)則，但隨天氣、季節(jié)、時(shí)間等的變化同時(shí)發(fā)生。而且人們認(rèn)為，每個(gè)人都獨(dú)特地具有一個(gè)身體節(jié)奏、一個(gè)情緒節(jié)奏、一個(gè)智力節(jié)奏等等。這種周期性變化的節(jié)奏被認(rèn)為對(duì)人們的實(shí)際情緒有各種各樣的影響。
在本方面的該第十一方面，該隨意情緒控制單元按照該生命節(jié)奏生成單元輸出的生命節(jié)奏信息來控制該情緒生成單元中的隨意情緒。所以，要被輸出的情緒可以按照該環(huán)境或者按照該生命的生命節(jié)奏來變化。
根據(jù)本發(fā)明的一個(gè)第十二方面，本發(fā)明該第十方面的感受能力發(fā)生器中的情緒生成單元包括一個(gè)本能-情緒信息保存單元，用于保存使該基本情緒參數(shù)與該本能動(dòng)機(jī)信息互相對(duì)應(yīng)的模式信息；以及一個(gè)匹配概率學(xué)習(xí)單元，用于輸出表示該本能動(dòng)機(jī)信息與該本能-情緒信息保存單元中的模式信息間的匹配/失配概率的信息，該本能動(dòng)機(jī)信息從該本能測定單元輸出。
在本發(fā)明的該第十二方面，可以獲得該本能動(dòng)機(jī)信息與來自該匹配概率學(xué)習(xí)單元的模式信息間的匹配概率以便利用它作為該情緒的一個(gè)測定因素。
舉例來說，一個(gè)人的精神狀況從第一狀態(tài)變化到第二狀態(tài)時(shí)，該精神狀況經(jīng)由過程中的一個(gè)第三狀態(tài)從該第一狀態(tài)過渡到該第二狀態(tài)。所以，存在在該精神狀況暫時(shí)符合該第三狀態(tài)中的模式信息的可能性。然而，該第三狀態(tài)中符合該精神狀況的模式信息并不具有一個(gè)高的利用率。通過利用該匹配概率學(xué)習(xí)單元獲得的匹配概率，就可抑制具有低概率的模式信息的情緒的生成。
根據(jù)本發(fā)明的一個(gè)第十三方面，本發(fā)明該第十方面的感受能力發(fā)生器中的情緒生成單元包括一個(gè)情緒反饋控制單元，用于向該情緒生成單元至少輸入最終生成的它自身情緒信息，并用于使該最終生成的信息影響隨后將要生成的它的自身情緒信息。
人們認(rèn)為，輸入不同的動(dòng)機(jī)會(huì)導(dǎo)致一個(gè)人的情緒發(fā)生連鎖變化。舉例來說，給一個(gè)處于正常狀態(tài)的人一個(gè)動(dòng)機(jī)使他憤怒時(shí)產(chǎn)生的憤怒程度與給一個(gè)已經(jīng)憤怒的人一個(gè)動(dòng)機(jī)使他更憤怒時(shí)產(chǎn)生的憤怒程度彼此會(huì)有很大的不同。
在本發(fā)明的該第十三方面，該情緒反饋控制單元的提供使該反饋前生成的情緒狀態(tài)被送回到輸入，并使該情緒狀態(tài)影響隨后將要產(chǎn)生的情緒。所以，能夠產(chǎn)生與一個(gè)人的情緒更接近的情緒。
根據(jù)本發(fā)明的一個(gè)第十四方面，本發(fā)明該第十方面的感受能力發(fā)生器具有這樣一個(gè)特點(diǎn)，即該情緒控制單元使一個(gè)生命節(jié)奏信息影響要被輸入的情緒信息，而該生命節(jié)奏正是產(chǎn)生感受能力的一位對(duì)象的個(gè)性。
在本發(fā)明的該第十四方面，該生命節(jié)奏的信息可以影響該感受能力。譬如說，根據(jù)一個(gè)人是否愿意作某件事，在由理智等作出的決定結(jié)果中會(huì)出現(xiàn)差別。該感受能力中的這種差別可以由該生命節(jié)奏的影響來復(fù)現(xiàn)。
根據(jù)本發(fā)明的一個(gè)第十五方面，本發(fā)明該第十方面的感受能力發(fā)生器還包括一個(gè)知識(shí)數(shù)據(jù)庫，用于儲(chǔ)存表示過去情景、過去情節(jié)以及該過去情景與情節(jié)的結(jié)果的情景信息；一個(gè)知識(shí)核對(duì)單元，用于從該知識(shí)數(shù)據(jù)庫中檢索并提取與新輸入的情景信息類似的過去情景信息，并用于向該情緒控制單元提供該過去情景信息；以及一個(gè)數(shù)據(jù)更新控制單元，用于根據(jù)表示一個(gè)新輸入的情景與該新情景的結(jié)果的情景信息來修改該知識(shí)數(shù)據(jù)庫的內(nèi)容，并用于從該知識(shí)數(shù)據(jù)庫中按照這些內(nèi)容的權(quán)重以時(shí)間順序自動(dòng)刪除低優(yōu)先級(jí)的情景信息。
在本發(fā)明的該第十五方面，表示該過去情景及其結(jié)果的情景信息被儲(chǔ)存到該知識(shí)數(shù)據(jù)庫。譬如說，儲(chǔ)存表示情節(jié)的一個(gè)情景以及儲(chǔ)存該情節(jié)的一個(gè)最終結(jié)果是否成功的信息。所以，可以從該知識(shí)數(shù)據(jù)庫中獲得與該當(dāng)前情景類似的過去情景信息以便用來控制該情緒。
附帶地說，新生成的信息必須隨著時(shí)間的流逝被接連不斷地添加到該知識(shí)數(shù)據(jù)庫。然而，構(gòu)成該知識(shí)數(shù)據(jù)庫的一個(gè)系統(tǒng)的存儲(chǔ)器容量是有限的。而且，當(dāng)儲(chǔ)存的信息量增加時(shí)，處理速度下降。
但是在本發(fā)明的該第十五方面，低優(yōu)先級(jí)的情景信息會(huì)在該數(shù)據(jù)更新控制單元的控制下被自動(dòng)從該知識(shí)數(shù)據(jù)庫中按照時(shí)間順序刪除。所以，可以實(shí)現(xiàn)與一個(gè)人的遺忘相類似的結(jié)果，而且可以防止該存儲(chǔ)器容量的不足與該處理速度的下降。
根據(jù)本發(fā)明的一個(gè)第十六方面，本發(fā)明該第十方面的感受能力發(fā)生器還包括一個(gè)聲音輸入單元，用于輸入一個(gè)聲音信號(hào)；一個(gè)強(qiáng)度探測單元，用于根據(jù)該聲音輸入單元輸入的聲音信號(hào)來探測該聲音的強(qiáng)度；速度探測單元，用于根據(jù)該聲音輸入單元輸入的聲音信號(hào)來探測該聲音出現(xiàn)的速率并以此作為速度；一個(gè)語調(diào)探測單元，用于根據(jù)該聲音輸入單元輸入的聲音信號(hào)來探測表示該聲音的一個(gè)單詞中強(qiáng)度變化模式的語調(diào)；一個(gè)變化量探測單元，用于分別獲得該強(qiáng)度探測單元探測到的聲音強(qiáng)度中、該速度探測單元探測到的聲音速度中與該語調(diào)探測單元探測到的聲音語調(diào)中的變化量；以及一個(gè)情緒探測單元，用于根據(jù)該變化量探測單元探測到的變化量來分別輸出至少表示憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)。
在本發(fā)明的該第十六方面，該伙伴的情緒狀態(tài)可以根據(jù)從該聲音提取的特征量來探測。所以，可以按照該伙伴的情緒來生成自身情緒。
根據(jù)本發(fā)明的一個(gè)第十七方面，本發(fā)明該第十六方面的感受能力發(fā)生器包括一個(gè)聲音識(shí)別單元，用于識(shí)別從該聲音輸入單元輸入的聲音，并用于輸出字符信息；以及一個(gè)自然言語處理單元，用于使由該聲音識(shí)別單元識(shí)別的有聲信息接受自然言語處理，并用來生成表達(dá)該輸入的聲音的含義的含義信息。
在本發(fā)明的該第十七方面，獲得了與該伙伴所說單詞有關(guān)的含義信息，所以通過理解該含義信息所得的一個(gè)結(jié)果就能影響該自身感受能力。
根據(jù)本發(fā)明的一個(gè)第十八方面，軟件包括了能夠由一臺(tái)計(jì)算機(jī)執(zhí)行的、用于感受能力生成控制的一個(gè)程序與數(shù)據(jù)，其中該程序包括一個(gè)根據(jù)表明伙伴的情緒的狀態(tài)或者該伙伴所處的環(huán)境的一個(gè)輸入情景信息來生成本能動(dòng)機(jī)信息的步驟，該本能動(dòng)機(jī)信息至少包括表示愉快程度的一個(gè)第一本能參數(shù)、表示危險(xiǎn)程度的一個(gè)第二本能參數(shù)以及表示完成或變化程度的一個(gè)第三本能參數(shù)；一個(gè)根據(jù)該生成的本能動(dòng)機(jī)信息來生成情緒信息的步驟，該情緒信息包括至少愉快、憤怒與悲傷的一個(gè)基本情緒參數(shù)；一個(gè)提供個(gè)性信息的步驟，該個(gè)性信息至少?zèng)Q定產(chǎn)生感受能力的一位對(duì)象的理智與意向；以及一個(gè)根據(jù)該個(gè)性信息來控制該生成的情緒信息的步驟。
本發(fā)明的該第十八方面的軟件被輸入到執(zhí)行該程序的一臺(tái)預(yù)定計(jì)算機(jī)，從而實(shí)現(xiàn)本發(fā)明該第九方面的感受能力生成方法。
例圖的簡單說明結(jié)合所附例圖一道閱讀下面的詳細(xì)說明，那么本發(fā)明的性質(zhì)、原理與效用就會(huì)變得顯而易見。在這些例圖中，相同的部件用完全一樣的參考數(shù)碼表示，其中

圖1是說明實(shí)施例的一個(gè)情緒探測系統(tǒng)的結(jié)構(gòu)的一幅方框圖；圖2是說明語調(diào)探測單元的結(jié)構(gòu)的一幅示意圖；圖3是一幅坐標(biāo)圖，它說明一個(gè)情緒狀態(tài)變化與聲音的強(qiáng)度、速度與語調(diào)之間的關(guān)系；圖4是說明該語調(diào)探測單元中聲音信號(hào)處理過程的時(shí)間曲線圖。
圖5是說明一個(gè)遺忘處理單元的運(yùn)行過程的一幅流程圖；圖6是一幅示意圖，它說明一個(gè)情緒及感受能力存儲(chǔ)器DB中儲(chǔ)存的信息的配置示例；圖7是一幅方框圖，它表示采用一個(gè)感受能力發(fā)生器的系統(tǒng)的配置示例；
圖8是說明一個(gè)本能信息生成單元的配置的一幅方框圖；圖9是說明一個(gè)情緒信息生成單元的一幅方框圖；圖10是一幅示意圖，表示一個(gè)情緒反應(yīng)模式DB中反應(yīng)模式模型的一個(gè)示例；以及圖11是說明一個(gè)感受能力及思想識(shí)別單元的配置的一幅方框圖。
優(yōu)選實(shí)施例(第一實(shí)施例)下面將參考圖1至圖6來室內(nèi)與本發(fā)明的一種情緒探測方法有關(guān)的一個(gè)圖1是一幅方框圖，它表示這個(gè)實(shí)施例的一個(gè)情緒探測系統(tǒng)的配置。圖2是說明一個(gè)語調(diào)探測單元的一幅方框圖。圖3是一幅坐標(biāo)圖，它說明一個(gè)情緒狀態(tài)的變化與聲音的強(qiáng)度、速度與語調(diào)之間的關(guān)系。圖4是一幅時(shí)間關(guān)系曲線圖，它說明在該語調(diào)探測單元內(nèi)聲音信號(hào)處理的各個(gè)過程。圖5是說明遺忘處理單元的一個(gè)運(yùn)行過程的一幅流程圖。圖6是一幅示意圖，它表示情緒及感受能力存儲(chǔ)器DB中儲(chǔ)存的信息的一個(gè)配置示例。
參看圖1，該情緒探測系統(tǒng)包括一個(gè)微音器11；一個(gè)A/D轉(zhuǎn)換器12；一個(gè)信號(hào)處理單元13；一個(gè)聲音識(shí)別單元20；一個(gè)強(qiáng)度探測單元17；速度探測單元18；一個(gè)語調(diào)探測單元19；一個(gè)臨時(shí)數(shù)據(jù)存儲(chǔ)器單元21；一個(gè)情緒變化探測單元22；一個(gè)聲音情緒探測單元23；一個(gè)情緒模式數(shù)據(jù)庫(下文稱為DB)24；一個(gè)鍵盤25；一個(gè)語句識(shí)別單元26；一臺(tái)電視攝像機(jī)31；一個(gè)圖像識(shí)別單元32；一個(gè)面部模式DB 33；一個(gè)面部情緒探測單元34；一個(gè)字符識(shí)別單元39；一個(gè)情緒及感受能力存儲(chǔ)器DB 41；一個(gè)遺忘處理單元42；一個(gè)同步處理單元43；一個(gè)人性信息DB 44；一個(gè)個(gè)性信息DB 45；一個(gè)職業(yè)信息DB 46；以及一個(gè)情緒識(shí)別單元60。
而且，在聲音識(shí)別單元20中提供了一個(gè)信號(hào)處理單元13；一個(gè)音素探測單元14；一個(gè)單詞探測單元15；以及一個(gè)語句探測單元16。聲音識(shí)別單元20還包括商店出售的聲音識(shí)別(自然言語處理)設(shè)備的功能。
在圖1中，聲音識(shí)別單元20、強(qiáng)度探測單元17、速度探測單元18、語調(diào)探測單元19、臨時(shí)數(shù)據(jù)存儲(chǔ)器單元21、情緒變化探測單元22以及聲音情緒探測單元23都是從聲音來探測情緒的電路。
該情緒探測系統(tǒng)包括微音器11、鍵盤25與電視攝像機(jī)31來作為讀取一個(gè)人的信息的輸入單元，這個(gè)人是為其探測情緒的一位伙伴。具體地講，這個(gè)人(即該伙伴)的情緒利用從微音器11輸入的一個(gè)聲音、從鍵盤25輸入的字符信息以及從電視攝像機(jī)31輸入的包括面部表情的信息等加以探測。
注意，該情緒也可以只根據(jù)從微音器11輸入的聲音、從鍵盤25輸入的字符信息或者從電視攝像機(jī)31輸入的面部表情中的一種來探測。但是，從改進(jìn)該情緒的探測精度的觀點(diǎn)來看，綜合地判斷從這多個(gè)信息源獲得的信息更加有效。
首先描述與該聲音有關(guān)的處理。從微音器11輸入的一個(gè)聲音信號(hào)經(jīng)A/D轉(zhuǎn)換器12采樣，然后被轉(zhuǎn)換為一個(gè)數(shù)字信號(hào)。在A/D轉(zhuǎn)換器12的輸出端獲得的該聲音的數(shù)字信號(hào)被輸入到聲音識(shí)別單元20。
信號(hào)處理單元13提取該聲音的強(qiáng)度探測所必須的頻率分量。強(qiáng)度探測單元17從信號(hào)處理單元13提取的信號(hào)來探測強(qiáng)度。譬如說，對(duì)該聲音信號(hào)的振幅的幅值取平均值所得的結(jié)果可以被用作該強(qiáng)度。
舉例來說，探測該聲音強(qiáng)度的一個(gè)平均周期被設(shè)置為大約10秒。注意，如果在平均周期小于10秒的情況下探測各個(gè)語句的分段，那么就對(duì)從該語句開始至探測到該分段的時(shí)間段取平均值。準(zhǔn)確地講，要對(duì)每個(gè)語句探測該聲音的強(qiáng)度。
聲音識(shí)別單元20中提供的音素探測單元14探測對(duì)輸入到其中的聲音的每個(gè)因素的分段。舉例來說，當(dāng)由“kyou wa ii tenki desun”(日語)表示的語句被以聲音的形式輸入時(shí)，就會(huì)探測出對(duì)每個(gè)音素的分段，如“kyo/u/wa/i/i/te/n/ki/de/su/ne”(日語)。
聲音識(shí)別單元20中提供的單詞探測單元15探測對(duì)輸入到其中的聲音的每個(gè)單詞的分段。舉例來說，當(dāng)由“kyou wa ii tenki desun”(日語)表示的語句被以聲音的形式輸入時(shí)，就會(huì)探測出對(duì)每個(gè)單詞的分段，如“kyou/wa/ii/tenki/desune”(日語)。
聲音識(shí)別單元20中提供的語句探測單元16探測對(duì)輸入到其中的聲音的每個(gè)語句的分段。在探測到具有特定長度或更長的無聲狀態(tài)時(shí)，就認(rèn)為出現(xiàn)了對(duì)每個(gè)語句的分段。對(duì)該無聲狀態(tài)長度的一個(gè)閾限值分配了一個(gè)大約0.1至0.2秒的值。而且，這個(gè)閾限值不是不變的，這個(gè)閾限值被自動(dòng)改變以使它反映剛剛探測到的一個(gè)情緒狀態(tài)。
速度探測單元18接受由音素探測單元14輸出的對(duì)每個(gè)音素分段的信號(hào)，并探測在單位時(shí)間內(nèi)出現(xiàn)的音素?cái)?shù)量。對(duì)于該速度的一個(gè)探測周期，舉例來說，大約分配一個(gè)10秒的時(shí)間。但是，在探測該語句的分段時(shí)，即使在10秒之內(nèi)探測該語句分段，也要停止音素?cái)?shù)量的計(jì)數(shù)，直至探測到該語句分段的時(shí)刻為止，而且要計(jì)算該速度的一個(gè)值。準(zhǔn)確地講，應(yīng)對(duì)每個(gè)語句探測速度。
來自A/D轉(zhuǎn)換器12的數(shù)字信號(hào)對(duì)由單詞探測單元15探測分段的每個(gè)單詞進(jìn)行劃分，而且該聲音信號(hào)被輸入到語調(diào)探測單元19。從輸入到語調(diào)探測單元19的聲音信號(hào)中，語調(diào)探測單元19探測表示每個(gè)單詞中以及語句探測單元16內(nèi)每個(gè)語句分段中的聲音強(qiáng)度變化模式的語調(diào)。從而，語調(diào)探測單元19探測該分段中的特征強(qiáng)度模式。
如圖2所示，在語調(diào)探測單元19中提供一個(gè)帶通濾波器51、一個(gè)絕對(duì)值轉(zhuǎn)換單元52、一個(gè)比較單元53、一個(gè)區(qū)域中心探測單元54以及一個(gè)區(qū)域間隔探測單元55。語調(diào)探測單元19的各個(gè)輸入與輸出端的信號(hào)SG1、SG2、SG3與SG4的波形示例見圖4。注意，圖4中每個(gè)信號(hào)的縱坐標(biāo)表示振幅或強(qiáng)度。而且，在圖4的示例中，從該聲音中取出的一個(gè)單詞的長度大約為1.2秒。
帶通濾波器51只從向其輸入的信號(hào)SG1中提取語調(diào)探測所必須的頻率分量。在這個(gè)實(shí)施例中，只有頻率在800至1200Hz范圍內(nèi)的頻率分量作為信號(hào)SG2出現(xiàn)在帶通濾波器的輸出端。參看圖4可以發(fā)現(xiàn)，由該單詞的語調(diào)所引起的強(qiáng)度變化模式出現(xiàn)在信號(hào)SG2中。
為了簡化該信號(hào)的計(jì)算處理，在語調(diào)探測單元19中提供了絕對(duì)值轉(zhuǎn)換單元52。絕對(duì)值轉(zhuǎn)換單元52將該輸入信號(hào)的振幅轉(zhuǎn)換為它的絕對(duì)值。所以，圖4所示的信號(hào)SG3出現(xiàn)在絕對(duì)值轉(zhuǎn)換單元52的一個(gè)輸出端。
比較單元53將信號(hào)SG3的幅值與該閾限值加以比較，而且只輸出大于該閾限值的分量作為信號(hào)SG4。準(zhǔn)確地講，比較單元53只輸出信號(hào)SG3的功率頻譜中數(shù)值大的分量。加到比較單元53的閾限值由被稱為決策分析方法的方法來近似確定。
參看圖4，與該聲音的該單詞中的語調(diào)模式對(duì)應(yīng)的兩個(gè)區(qū)域A1與A2出現(xiàn)在信號(hào)SG4中。區(qū)域中心探測單元54探測時(shí)間t1與t2，與兩個(gè)區(qū)域A1與A2的各自中心對(duì)應(yīng)的位置就出現(xiàn)在這兩個(gè)時(shí)間。
區(qū)域間隔探測單元55探測與由區(qū)域中心探測單元54探測到的兩個(gè)時(shí)間t1與t2有關(guān)的一個(gè)時(shí)間差，以此作為一個(gè)區(qū)域間隔Ty。這個(gè)區(qū)域間隔Ty的值對(duì)應(yīng)于該聲音的該單詞中的語調(diào)模式。實(shí)際上，對(duì)各個(gè)區(qū)域間隔Ty的值取平均值所得的一個(gè)結(jié)果被用作該語調(diào)的一個(gè)值。
簡而言之，在SG4中也許出現(xiàn)3個(gè)或更多區(qū)域。如果出現(xiàn)3個(gè)或更多區(qū)域，就要對(duì)每兩個(gè)彼此相鄰的區(qū)域分別計(jì)算區(qū)域間隔Ty，對(duì)這多個(gè)所得區(qū)域間隔Ty取平均值而獲得的一個(gè)結(jié)果就被用作該語調(diào)的值。
舉例來說，一個(gè)人的情緒狀態(tài)如圖3所示變化。而且，為了正確掌握包括憤怒、悲傷與愉快等在內(nèi)的情緒，就不可避免地要探測特征量的變化，譬如強(qiáng)度、速度與語調(diào)。
在圖1所示的情緒探測系統(tǒng)中，為了能夠查詢過去的特征量，由強(qiáng)度探測單元17輸出的強(qiáng)度值、由速度探測單元18輸出的速度值以及由語調(diào)探測單元19輸出的語調(diào)值均被臨時(shí)儲(chǔ)存在臨時(shí)數(shù)據(jù)存儲(chǔ)器單元21中。
而且，情緒變化探測單元22接受由強(qiáng)度探測單元17輸出的當(dāng)前強(qiáng)度值、由速度探測單元18輸出的當(dāng)前速度值以及由語調(diào)探測單元19輸出的當(dāng)前語調(diào)值。情緒變化探測單元22也接受臨時(shí)數(shù)據(jù)存儲(chǔ)器單元21中儲(chǔ)存的過去(該當(dāng)前時(shí)間不久之前)的強(qiáng)度、速度與語調(diào)值。所以，情緒變化探測單元22探測該情緒狀態(tài)的變化。具體地講，情緒變化探測單元22分別探測該聲音的強(qiáng)度、速度與語調(diào)中的變化。
聲音情緒探測單元23接受由情緒變化探測單元22輸出的強(qiáng)度、速度與語調(diào)中的變化，而且估計(jì)該當(dāng)前的情緒狀態(tài)。在這個(gè)實(shí)施例中，聲音情緒探測單元23估計(jì)包括憤怒、悲傷與愉快在內(nèi)的3種狀態(tài)來作為該情緒狀態(tài)。
以前儲(chǔ)存在情緒模式DB 24中的是使憤怒狀態(tài)與該聲音中的強(qiáng)度、速度與語調(diào)變化的模式相關(guān)的信息，使悲傷狀態(tài)與該聲音中的強(qiáng)度、速度與語調(diào)變化的模式相關(guān)的信息以及使愉快狀態(tài)與該聲音中的強(qiáng)度、速度與語調(diào)變化的模式相關(guān)的信息。
聲音情緒探測單元23根據(jù)由情緒變化探測單元22輸出的強(qiáng)度變化、速度變化與語調(diào)變化的模式，并參考情緒模式DB 24中保存的信息作為估計(jì)規(guī)則來估計(jì)該情緒的當(dāng)前值。
已經(jīng)由聲音情緒探測單元23估計(jì)的表示包括憤怒、悲傷與愉快在內(nèi)的3類狀態(tài)的信息被輸入到情緒識(shí)別單元60以及情緒及感受能力存儲(chǔ)器DB 41。情緒及感受能力存儲(chǔ)器DB 41接連不斷地接受并儲(chǔ)存從聲音情緒探測單元23輸入的情緒的當(dāng)前狀態(tài)。
所以，讀出情緒及感受能力存儲(chǔ)器DB 41中儲(chǔ)存的信息就可以復(fù)現(xiàn)該情緒的過去狀態(tài)。
同時(shí)，作為一個(gè)聲音從微音器11輸入的語句內(nèi)容(該伙伴的講話內(nèi)容)由語句識(shí)別單元26加以識(shí)別。與聲音識(shí)別單元20識(shí)別出的各個(gè)音素對(duì)應(yīng)的字符信息以及表示該單詞分段與語句分段的信息被輸入到語句識(shí)別單元26。而且，從鍵盤25輸入的字符信息也被輸入到語句識(shí)別單元26。
語句識(shí)別單元26對(duì)每個(gè)單詞識(shí)別一個(gè)輸入字符串并作為一種自然言語來分析它的語法以便掌握該語句的內(nèi)容。實(shí)際上，語句識(shí)別單元26識(shí)別表示“5W3H”的言語信息，即“何人”、“何事”、“何時(shí)”、“何地”、“何因”、“多么”、“多長、多遠(yuǎn)、多高等等”以及“多少”。由語句識(shí)別單元26識(shí)別的言語信息被輸入到情緒識(shí)別單元60。
下面將描述根據(jù)該伙伴面部的表情來探測情緒的處理過程。電視攝像機(jī)31至少攝制作為圖1的情緒探測系統(tǒng)的對(duì)象的那個(gè)人的一個(gè)面部。由電視攝像機(jī)31攝制的圖像(即包括該人面部表情的一個(gè)圖像)被輸入到圖像識(shí)別單元32。
注意，電視攝像機(jī)31所攝圖像的信息被輸入到字符識(shí)別單元39。具體地講，當(dāng)一個(gè)語句的圖像被電視攝像機(jī)31攝制時(shí)，字符識(shí)別單元39從一個(gè)攝制圖像識(shí)別該語句的各個(gè)字符。由字符識(shí)別單元39識(shí)別的字符信息被輸入到語句識(shí)別單元26。
圖像識(shí)別單元32從該輸入圖像識(shí)別特征要素。具體地講，圖像識(shí)別單元32識(shí)別該對(duì)象面部的眼睛、嘴巴、眉毛、頰骨各個(gè)部分，并探測該面部的眼睛、嘴巴、眉毛、頰骨的各個(gè)相對(duì)位置。而且，圖像識(shí)別單元32始終跟蹤眼睛、嘴巴、眉毛、頰骨的各個(gè)位置，以便隨著面部表情的變化來探測它們的各自位置變化，并探測表情，譬如搖頭。
與該面孔上的眼睛、嘴巴、眉毛、頰骨的各自位置的參考位置有關(guān)的信息(相當(dāng)于該對(duì)象在正常狀態(tài)時(shí)的面部表情)被預(yù)先儲(chǔ)存在面部模式DB33中。注意，面部模式DB 33中的內(nèi)容也可以任意改變。而且，表示該面部表情變化與6類情緒(愉快、憤怒、悲傷、恐懼、快樂與驚訝)的對(duì)應(yīng)關(guān)系的規(guī)則信息被預(yù)先儲(chǔ)存在面部模式DB 33中。
面部情緒探測單元34探測根據(jù)與由圖像識(shí)別單元32識(shí)別的眼睛、嘴巴、眉毛與頰骨的各個(gè)位置有關(guān)的信息以及儲(chǔ)存在面部模式DB 33中的參考位置來探測該表情的特征量，即它們與正常狀態(tài)的特征量之差。
而且，面部情緒探測單元34根據(jù)探測到的特征量的變化量與速率，并根據(jù)面部模式DB 33中保存的規(guī)則信息來估計(jì)6類情緒(愉快、憤怒、悲傷、恐懼、快樂與驚訝)的各自狀態(tài)。表示該6類情緒的估計(jì)狀態(tài)的信息由面部情緒探測單元34輸出，并被輸入到情緒識(shí)別單元60以及情緒及感受能力存儲(chǔ)器DB 41。
情緒識(shí)別單元60綜合測定從聲音情緒探測單元23輸入的表示情緒狀態(tài)(憤怒、悲傷或愉快)的信息、從語句識(shí)別單元26輸入的言語信息以及從面部情緒探測單元34輸入的表示情緒狀態(tài)(愉快、憤怒、悲傷、恐懼、快樂或驚訝)的信息。然后，情緒識(shí)別單元60估計(jì)該情緒的最終狀態(tài)。至于該言語信息，其中包括的情緒狀態(tài)(愉快、憤怒、悲傷、恐懼、快樂或驚訝)可以通過按照預(yù)定規(guī)則測定該講話中的語句的內(nèi)容(5W3H)來加以估計(jì)。
表示由聲音情緒探測單元23根據(jù)該聲音所估計(jì)的情緒狀態(tài)的信息、與語句識(shí)別單元26根據(jù)該聲音或鍵盤25輸入的字符所識(shí)別的言語內(nèi)容有關(guān)的信息、以及表示面部情緒識(shí)別單元34從面部表情所估計(jì)的情緒狀態(tài)的信息被分別輸入到情緒及感受能力存儲(chǔ)器DB 41，并被接連不斷地儲(chǔ)存在其中。情緒及感受能力存儲(chǔ)器DB 41中儲(chǔ)存的各部分信息的探測時(shí)間及日期被添加到該信息之中。
在輸入到情緒及感受能力存儲(chǔ)器DB 41的信息中，與從聲音情緒探測單元23輸入的情緒有關(guān)的信息、與從語句識(shí)別單元26輸入的言語內(nèi)容有關(guān)的信息以及與從面部情緒探測單元34輸入的情緒有關(guān)的信息必須彼此關(guān)聯(lián)地加以掌握。
所以，同步處理單元43將儲(chǔ)存在情緒及感受能力存儲(chǔ)器DB 41中的多種類型信息按照這些信息被探測的時(shí)間(輸入時(shí)間)及日期彼此關(guān)聯(lián)。譬如說，表示已經(jīng)由聲音情緒探測單元23加以估計(jì)的包括憤怒、悲傷與愉快的情緒狀態(tài)的信息以及與言語內(nèi)容(5W3H)有關(guān)的信息均按它們的時(shí)刻來彼此關(guān)聯(lián)，如圖6所示。
附帶地講，情緒及感受能力存儲(chǔ)器DB 41包括能夠儲(chǔ)存較大量信息的一個(gè)足夠的存儲(chǔ)容量。但是，由于存在對(duì)該存儲(chǔ)容量的限制，因此，為了長期不間斷地使用這個(gè)系統(tǒng)就必須限制要在其中儲(chǔ)存的信息量。
所以，提供了遺忘處理單元42。遺忘處理單元42從情緒及感受能力存儲(chǔ)器DB 41中自動(dòng)刪除舊信息。然而，適合于特定條件的信息不被刪除，即使變得陳舊也要儲(chǔ)存。
遺忘處理單元42的一個(gè)運(yùn)行過程將參考圖5加以描述。
在圖5的步驟S11中，對(duì)于儲(chǔ)存在情緒及感受能力存儲(chǔ)器DB 41中的大量數(shù)據(jù)中的每一個(gè)，要查詢與每個(gè)數(shù)據(jù)被儲(chǔ)存(或探測)的時(shí)間與日期有關(guān)的信息。
在步驟S12，根據(jù)當(dāng)前時(shí)間與步驟S11中提到的時(shí)間來辨別自從該相關(guān)數(shù)據(jù)被儲(chǔ)存以來，是否已經(jīng)過去了一段預(yù)定的時(shí)間。如果處理自儲(chǔ)存時(shí)刻以來已經(jīng)儲(chǔ)存了一段時(shí)間的舊數(shù)據(jù)，那么該處理進(jìn)入步驟S13及以后的流程。還沒有被儲(chǔ)存某段時(shí)間的較新的數(shù)據(jù)則繼續(xù)按原樣儲(chǔ)存。
在步驟S13，如果該數(shù)據(jù)是表示該情緒狀態(tài)的信息，那么就檢查該信息的變化量(一個(gè)事件前、后的情緒差別)。由于在該情緒變化量超過預(yù)定閾限值時(shí)該處理從步驟S13跳至S17，所以即使該數(shù)據(jù)是舊數(shù)據(jù)也按會(huì)原樣儲(chǔ)存。如果該情緒的變化量等于/小于該閾限值，那么該處理從步驟S13進(jìn)入S14。
在步驟S14，探測與該數(shù)據(jù)有關(guān)的情緒模式，并辨別該相關(guān)模式是否與預(yù)定的特別模式相符。具體地講，是檢查這些情緒狀態(tài)與言語內(nèi)容的多種組合是否與特殊的、表示“給人強(qiáng)烈印象”的狀態(tài)相符。由于在該探測到的模式與該特定模式相符時(shí)該處理從步驟S14跳至S17，所以即使該數(shù)據(jù)陳舊也會(huì)按原樣儲(chǔ)存。如果這些模式并不彼此相符，該處理就從步驟S14進(jìn)入S15。
在步驟S15，如果該數(shù)據(jù)是言語內(nèi)容，那么就辨別這些內(nèi)容是否與預(yù)定的言語內(nèi)容(給人重要印象的言語)相符。即使兩個(gè)內(nèi)容彼此不完全相符，但如果兩者之間的相似性很高，它們也就被當(dāng)作相符看待。由于在該相關(guān)數(shù)據(jù)的言語內(nèi)容與該預(yù)定言語內(nèi)容相符時(shí)該處理從步驟S15跳至S17，所以即使該數(shù)據(jù)陳舊也會(huì)按原樣儲(chǔ)存。
如果在步驟S15中這兩個(gè)內(nèi)容彼此不相符，該相關(guān)數(shù)據(jù)就會(huì)在步驟S16中被刪除。
該上述處理對(duì)情緒及感受能力存儲(chǔ)器DB 41中的所有數(shù)據(jù)進(jìn)行。而且圖5所示的遺忘處理被周期地重復(fù)進(jìn)行。該遺忘處理的一個(gè)執(zhí)行周期可以隨個(gè)人的個(gè)性而任意改變。注意，該處理在步驟S14與S15中通過查詢以前準(zhǔn)備的模式DB(未畫)來執(zhí)行。對(duì)于這個(gè)模式DB，其中的內(nèi)容會(huì)通過學(xué)習(xí)輸入到其中的信息而被自動(dòng)修改。
圖5表示簡化的處理過程。實(shí)際上，情緒變化量、情緒模式與言語內(nèi)容全部都要加以綜合測定。準(zhǔn)確地講，如果存在情緒變化量很大的信息、情緒模式與該特定模式相符的信息以及言語內(nèi)容與該預(yù)定言語內(nèi)容相同或類似的信息，那么就要綜合確定它們的優(yōu)先級(jí)。具體地講，言語內(nèi)容與該預(yù)定言語內(nèi)容相同或類似的信息被賦予最高優(yōu)先級(jí)，情緒模式與該特定模式相符的信息被賦予第二高優(yōu)先級(jí)，而情緒變化量大的信息則被賦予最低優(yōu)先級(jí)。所以，在該遺忘處理中，言語內(nèi)容與該預(yù)定言語內(nèi)容相同或類似的信息不大可能被刪除，即使它變得陳舊也會(huì)作為記憶而保留。
對(duì)于情緒及感受能力存儲(chǔ)器DB 41中的舊數(shù)據(jù)，只有情緒變化量大的數(shù)據(jù)、其模式被認(rèn)為“給人強(qiáng)烈印象”的數(shù)據(jù)、被多次重復(fù)輸入的數(shù)據(jù)以及其言語內(nèi)容給人以重要印象的數(shù)據(jù)才會(huì)按照它們的強(qiáng)度與內(nèi)容被賦予優(yōu)先級(jí)，并按照遺忘處理單元42中的上述處理按原樣儲(chǔ)存。所以，情緒及感受能力存儲(chǔ)器DB 41中的舊數(shù)據(jù)就成為只有一部分被保留在其中的不完整數(shù)據(jù)。這種數(shù)據(jù)的內(nèi)容類似于人類記憶中的過去的含糊不清的記憶。
一直儲(chǔ)存在情緒及感受能力存儲(chǔ)器DB 41中的這些過去的情緒狀態(tài)與過去的言語內(nèi)容可以被讀出以便進(jìn)行數(shù)據(jù)分析，從而，舉例來說，能夠測定該情緒探測系統(tǒng)是否正常運(yùn)行，并能夠修改用于估計(jì)情緒的各個(gè)單元的數(shù)據(jù)庫以便改進(jìn)其中的內(nèi)容。
儲(chǔ)存在情緒及感受能力存儲(chǔ)器DB 41中的數(shù)據(jù)還進(jìn)一步按照它們的內(nèi)容進(jìn)行分配，并被儲(chǔ)存到人性信息DB 44、個(gè)性信息DB 45或職業(yè)信息DB46。
在人性信息DB 44中，儲(chǔ)存有定義該對(duì)象特征的信息(譬如性別、年齡、攻擊性、合作性與當(dāng)前情緒)以及與一個(gè)行動(dòng)的決策模式有關(guān)的信息。在個(gè)性信息DB 45中，儲(chǔ)存的信息為個(gè)人地址、當(dāng)前狀況、當(dāng)前環(huán)境以及言語內(nèi)容(5W3H)。在職業(yè)信息DB 46中，儲(chǔ)存的信息為職業(yè)、職業(yè)生涯、職業(yè)能力與職業(yè)行為決策模式。
從人性信息DB 44、個(gè)性信息DB 45與職業(yè)信息DB 46輸出的是個(gè)人的道德模式信息。該伙伴的感受能力可以根據(jù)該伙伴的道德模式信息以及過去情緒來理解。
如果圖1所示的情緒探測系統(tǒng)的功能用一臺(tái)計(jì)算機(jī)的軟件來實(shí)現(xiàn)，那么只要將由該計(jì)算機(jī)執(zhí)行的程序以及必要的數(shù)據(jù)預(yù)先錄制在一個(gè)記錄媒體(譬如一個(gè)CD-ROM)上就符合要求。
注意，圖1所示的微音器11可以用一個(gè)電話接收器來代替，也可以提供一個(gè)鼠標(biāo)來作為用于輸入信息(譬如字符)的單元。
而且，圖1所示的電視攝像機(jī)31也可以用各種成像單元中的任何一種來代替，譬如一部光學(xué)攝像機(jī)、一部數(shù)字?jǐn)z像機(jī)以及一部CCD攝像機(jī)。
采用上述情緒探測方法可以比傳統(tǒng)方法更準(zhǔn)確地探測該對(duì)象的情緒。
(第二實(shí)施例)下面參看圖7至圖11來描述與本發(fā)明的一種感受能力生成方法有關(guān)的圖7是一幅方框圖，它表示采用一個(gè)感受能力發(fā)生器的系統(tǒng)的一個(gè)配置示例。圖8是說明本能信息生成單元的配置的一幅方框圖。圖9是說明一個(gè)情緒信息生成單元的一幅方框圖。圖10是一幅示意圖，它表示一個(gè)情緒反應(yīng)模式DB中反應(yīng)模式模型的一個(gè)示例。圖11是說明一個(gè)感受能力及思想識(shí)別單元的配置的一幅方框圖。
圖7所示系統(tǒng)的設(shè)計(jì)是假定隨便一個(gè)人與一臺(tái)計(jì)算機(jī)(虛擬人)之間可以實(shí)現(xiàn)自然與敏感的對(duì)話。在這個(gè)示例中提供了一個(gè)情緒探測系統(tǒng)200以便探測將作為該計(jì)算機(jī)的伙伴的那個(gè)人的情緒，以及一個(gè)感受能力發(fā)生器100以便使該計(jì)算本身的個(gè)性及感受能力影響該對(duì)話。
而且，提供一個(gè)環(huán)境信息輸入設(shè)備300以便將各種環(huán)境信息輸入到感受能力發(fā)生器100。舉例來說，環(huán)境信息輸入設(shè)備300輸出與日期、時(shí)間、天氣、場所與圖像有關(guān)的信息。
感受能力發(fā)生器100也可以被用于一個(gè)獨(dú)立運(yùn)行的系統(tǒng)。譬如，如果將與從前產(chǎn)生的場景有關(guān)的信息輸入感受能力發(fā)生器100，那么從感受能力發(fā)生器100的輸出就可以獲得符合該場景的反應(yīng)。在這種情況下不需要情緒探測系統(tǒng)200。
盡管在圖7示例中感受能力發(fā)生器100的輸出連接了實(shí)現(xiàn)該對(duì)話所需的多種設(shè)備，但感受能力發(fā)生器100輸出的感受能力數(shù)據(jù)可用于各種目的。
譬如，在數(shù)據(jù)通信中利用感受能力發(fā)生器100的情況下，由于能夠滿意地輸出字符信息，所以不需要輸出一個(gè)聲音。而且，感受能力發(fā)生器100輸出的感受能力數(shù)據(jù)也可以影響圖像、音樂、信息檢索與機(jī)器控制。
下面將描述感受能力發(fā)生器100的結(jié)構(gòu)與運(yùn)行。由于在這個(gè)實(shí)施例中假設(shè)情緒探測系統(tǒng)200與已經(jīng)描述過的圖1所示的情緒探測系統(tǒng)200完全相同，所以這里省略它的說明。
實(shí)際上，圖7所示系統(tǒng)可以由一個(gè)計(jì)算機(jī)系統(tǒng)與一個(gè)在其中被執(zhí)行的軟件程序構(gòu)成，或者可以作為一個(gè)專用硬件來實(shí)現(xiàn)。而且，要被使用的軟件程序與數(shù)據(jù)可以預(yù)先儲(chǔ)存在任何一個(gè)記錄媒體之中，并可以從該記錄媒體讀入計(jì)算機(jī)以便執(zhí)行。注意，圖7所示系統(tǒng)本身在下文說明中被稱為一臺(tái)計(jì)算機(jī)。
粗略地劃分，輸入到感受能力發(fā)生器100輸入端的有兩類數(shù)據(jù)，即數(shù)據(jù)D1與數(shù)據(jù)D2。數(shù)據(jù)D1是表示該伙伴情緒的信息。數(shù)據(jù)D2是已經(jīng)接受自然語言處理的字符信息，它包括與該伙伴的意向、狀況及環(huán)境有關(guān)的信息。通過自然語言處理，數(shù)據(jù)D2被作為表示“5W3H”的信息輸入，即“何人”、“何事”、“何時(shí)”、“何地”、“何因”、“多么”、“多長、多遠(yuǎn)、多高等等”以及“多少”。
實(shí)際上，能夠利用下面所列的各種信息來作為感受能力發(fā)生器100的輸入。
(A)涉及時(shí)間屬性的發(fā)聲的變化模式，包括重音、節(jié)奏、速度、停頓、音階、音程、音調(diào)、和聲、頻率等等；以及基本情緒(憤怒、愉快、悲傷、厭惡、驚訝、恐懼等等)的程度。
(B)與涉及聲調(diào)屬性的發(fā)聲有關(guān)的信息，包括口音、低沉、密集、機(jī)敏、刺耳、音色(JIS-Z8109)、共振、語調(diào)、使一段口語的部分對(duì)闡明含義非常重要的顯著性等等。
(C)單詞、片段內(nèi)容、語句中的重音分布、超分段特征信息，由人工智能生成的特征信息，這些都涉及重音的性質(zhì)。
(D)經(jīng)過對(duì)話分析的文本信息、情節(jié)信息(包括含義信息與由人工智能識(shí)別的信息)等等。
在這些信息中，信息(A)與信息(B)受一位說話人的意圖與情緒影響。這種情緒可以由情緒探測系統(tǒng)200加以探測。
如圖7所示，感受能力發(fā)生器100包括一個(gè)本能信息生成單元110、一個(gè)度量模式DB 121、一個(gè)本能語言定義詞典122、一個(gè)情緒信息生成單元130、一個(gè)情緒反應(yīng)模式DB 141、一個(gè)臨時(shí)存儲(chǔ)器DB 142、一個(gè)感受能力及思想識(shí)別單元150、一個(gè)知識(shí)DB 161、一個(gè)感受能力DB 162、一個(gè)個(gè)人DB 163以及一個(gè)道德危險(xiǎn)DB 164。
感受能力發(fā)生器100的功能可以基本劃分為3個(gè)功能要素本能信息生成單元110、情緒信息生成單元130與感受能力及思想識(shí)別單元150。首先描述本能信息生成單元110。
如圖8所示，本能信息生成單元110包括一個(gè)度量模式匹配識(shí)別單元111、一個(gè)本能參數(shù)生成單元112與一個(gè)詞典檢索單元113。
輸入到該計(jì)算機(jī)(虛擬人)的一個(gè)度量模式詞典被預(yù)先儲(chǔ)存在受度量模式匹配識(shí)別單元111查詢的度量模式DB 121中。該尺度是一個(gè)講話的節(jié)奏要素，它代表對(duì)一個(gè)音節(jié)、一個(gè)單詞、一個(gè)短語、一個(gè)語句以及整個(gè)講話(比一個(gè)單詞長的連續(xù)聲音)出現(xiàn)的語音及音韻特征。具體地講，與輸入信息(A)與(B)相當(dāng)?shù)脑撚?jì)算機(jī)本身的模式信息被作為個(gè)人信息儲(chǔ)存在度量模式DB 121中。
度量模式匹配識(shí)別單元111將從情緒探測系統(tǒng)200輸入的伙伴情緒分析數(shù)據(jù)D1與儲(chǔ)存在度量模式DB 121中的度量模式加以比較，并識(shí)別兩者的同步與匹配程度。表示存在一個(gè)強(qiáng)烈音調(diào)與情緒變化的信息會(huì)出現(xiàn)在度量模式匹配識(shí)別單元111的輸出端。
同時(shí)，與本能刺激有關(guān)的信息被預(yù)先記錄在本能語言定義詞典122中。相反，表示一個(gè)單詞或一個(gè)語句中的重音分布模式與超分段特征的、涉及重音性質(zhì)的各種信息被儲(chǔ)存為一個(gè)與該本能刺激有關(guān)的詞典。
詞典檢索單元113將作為字符信息來輸入的數(shù)據(jù)D2(一位伙伴的意向與狀況)與本能語言定義詞典122的內(nèi)容加以比較，并從一段對(duì)話的內(nèi)容來產(chǎn)生本能反應(yīng)信息。
本能參數(shù)生成單元112根據(jù)由度量模式匹配識(shí)別單元111輸入的信息、由詞典檢索單元113輸入的信息以及數(shù)據(jù)D3來產(chǎn)生本能動(dòng)機(jī)信息D4。數(shù)據(jù)D3是從感受能力發(fā)生器100的輸出端反饋的信息，它擁有該計(jì)算機(jī)提議的情節(jié)與希望反應(yīng)模式。
在這個(gè)示例中，本能動(dòng)機(jī)信息D4包括6個(gè)本能參數(shù)一個(gè)確定性程度(或迷惑程度)、一個(gè)愉快程度(或不愉快程度)、一個(gè)危險(xiǎn)程度(或安全程度)、一個(gè)注意程度(或拒絕程度)、一個(gè)完成程度(或變化程度)以及一個(gè)追蹤程度(或自信程度)。本能參數(shù)生成單元112以下述方法決定各個(gè)本能參數(shù)的數(shù)值。
愉快程度(不愉快程度)當(dāng)該計(jì)算機(jī)接近建議的內(nèi)容或一個(gè)希望的情景情節(jié)時(shí)，愉快程度增加，否則程度降低。而且，當(dāng)該計(jì)算機(jī)接近一個(gè)預(yù)定為愉快的尺度時(shí)，愉快程度增加，否則降低。
危險(xiǎn)程度(安全程度)當(dāng)該計(jì)算機(jī)接近事先被認(rèn)為是危險(xiǎn)的內(nèi)容或一個(gè)被假設(shè)為危險(xiǎn)的情景情節(jié)時(shí)，危險(xiǎn)程度增加，否則降低。而且，當(dāng)該計(jì)算機(jī)接近一個(gè)預(yù)定為危險(xiǎn)的尺度時(shí)，危險(xiǎn)程度增加，否則降低。
完成程度(變化程度)當(dāng)該計(jì)算機(jī)接近被預(yù)定為成功/實(shí)現(xiàn)的內(nèi)容或一個(gè)被事先假設(shè)為成功/實(shí)現(xiàn)的情景情節(jié)時(shí)，完成程度增加，否則降低。而且，當(dāng)該計(jì)算機(jī)接近一個(gè)被認(rèn)為是徹底調(diào)整的特定尺度時(shí)，完成程度增加，否則降低。
注意程度(拒絕程度)當(dāng)該計(jì)算機(jī)接近被事先當(dāng)作拒絕/否定的內(nèi)容或一個(gè)被事先假設(shè)為拒絕/否定的情景情節(jié)時(shí)，拒絕程度增加(注意程度降低)，否則降低(增加)。而且，當(dāng)該計(jì)算機(jī)探測到一個(gè)強(qiáng)烈或反復(fù)的自信或接近一個(gè)強(qiáng)烈的尺度時(shí)，注意程度增加。如果該計(jì)算機(jī)接近一個(gè)被確定為不愉快的尺度，那么拒絕程度增加。
追蹤程度(自信程度)當(dāng)該計(jì)算機(jī)接近被預(yù)定為自卑/自我犧牲的內(nèi)容以及一個(gè)被事先假設(shè)為自卑/自我犧牲的情景情節(jié)時(shí)，追蹤程度增加(自信程度降低)，否則降低(增加)。如果出現(xiàn)被事先確定為良好的內(nèi)容，則自信程度增加(追蹤程度降低)。而且，如果出現(xiàn)一個(gè)被預(yù)定為不確定的尺度，自信程度增加。注意，如果該計(jì)算機(jī)接近一個(gè)強(qiáng)烈的尺度，那么排斥程度或自我犧牲的程度有時(shí)會(huì)增加。
確定性程度(迷惑程度)當(dāng)該計(jì)算機(jī)接近迷惑的內(nèi)容以及一個(gè)事先假設(shè)的情景情節(jié)時(shí)，在與本能有關(guān)的各種刺激(輸入)的識(shí)別率很低(譬如70％或更低)的情況下，迷惑程度與該識(shí)別率程反比。該識(shí)別率由一個(gè)對(duì)話的聲音音調(diào)與內(nèi)容來測定。
為了實(shí)現(xiàn)上述控制，該計(jì)算機(jī)所希望的內(nèi)容以及情景情節(jié)的尺度要事先作為個(gè)性加以測定。如上所述，該伙伴的情緒信息刺激該計(jì)算機(jī)的個(gè)人本能，從而改變各個(gè)本能參數(shù)的數(shù)值。
由本能信息生成單元110輸出的本能動(dòng)機(jī)信息D4被輸入到情緒信息生成單元130。下面將描述情緒信息生成單元130。
如圖9所示，情緒信息生成單元130包括一個(gè)反應(yīng)模式檢索單元134、一個(gè)學(xué)習(xí)處理單元135、一個(gè)多變量分析單元136、一個(gè)隨意情緒控制單元137以及一個(gè)基本情緒參數(shù)生成單元133。
反應(yīng)模式檢索單元134、學(xué)習(xí)處理單元135與情緒反應(yīng)模式DB 141構(gòu)成了一個(gè)應(yīng)答系統(tǒng)131。多變量分析單元136與隨意情緒控制單元137構(gòu)成一個(gè)操作系統(tǒng)132。
提供應(yīng)答系統(tǒng)131的目的是為了生成由刺激感應(yīng)引起的情緒。提供操作系統(tǒng)132的目的是為了輸出隨意情緒(力比多(libido))。
涉及代表該本能動(dòng)機(jī)信息D4與該基本情緒參數(shù)之間對(duì)應(yīng)關(guān)系的一個(gè)反應(yīng)模式模型的信息被事先儲(chǔ)存在情緒反應(yīng)模式DB 141中以供應(yīng)答系統(tǒng)131使用。舉例來說，這個(gè)反應(yīng)模式模型可以如圖10所示。
在由一臺(tái)計(jì)算機(jī)有選擇性地復(fù)現(xiàn)許多人的人格的情況下，各個(gè)反應(yīng)模式模型被預(yù)先記錄在情緒反應(yīng)模式DB 141中，其中每個(gè)反應(yīng)模式模型都對(duì)應(yīng)于這許多人中的一個(gè)或一類個(gè)性，一個(gè)反應(yīng)模式模型可以按照該被選人的個(gè)性選擇。
在這個(gè)示例中，采用了被作為本能動(dòng)機(jī)信息D4來輸入的上述6個(gè)本能參數(shù)，它們是確定性程度(迷惑程度)、愉快程度(不愉快程度)、危險(xiǎn)程度(安全程度)、注意程度(拒絕程度)、完成程度(變化程度)與追蹤程度(自信程度)。
如下15類參數(shù)被用來作為從情緒信息生成單元130輸出的基本情緒參數(shù)。括號(hào)內(nèi)的術(shù)語表示受該基本情緒參數(shù)影響的本能參數(shù)。
1.憤怒(不愉快)2.快樂/快活(愉快)3.悲傷(未完成/停滯/不愉快)4.驚訝(完成/沖擊)5.恐懼(危險(xiǎn)/緊張)6.痛苦(危險(xiǎn)/緊張/不愉快)7.厭惡(抵制/拒絕/不愉快)8.輕視(抵制/軟弱)9.趨近(愉快/安全)10.逃避/回避(危險(xiǎn)/緊張/不愉快)11.忌妒(不愉快/憤怒/羨慕/注意)12.肯定(安全/愉快/確定性)13.依賴(完成/追蹤)14.激怒/沖突(自信/停滯/不愉快/危險(xiǎn))15.焦慮(危險(xiǎn)/緊張/迷惑/不愉快)代表15類基本情緒參數(shù)中的每一種與一個(gè)或多個(gè)基本情緒參數(shù)的關(guān)系的反應(yīng)模式被儲(chǔ)存在情緒反應(yīng)模式DB 141中。
反應(yīng)模式檢索單元134檢索情緒反應(yīng)模式DB 141中的基本情緒參數(shù)的反應(yīng)模式，檢查它們與該輸入的本能動(dòng)機(jī)信息D4的匹配/失配情況，并輸出該相符的基本情緒參數(shù)的信息作為數(shù)據(jù)D6。
學(xué)習(xí)處理單元135根據(jù)感受能力及思想識(shí)別單元150輸出的信息D3以及反應(yīng)模式檢索單元134輸出的該伙伴的下一個(gè)反應(yīng)情緒來學(xué)習(xí)關(guān)于模式匹配方法的概率，并按照該學(xué)習(xí)的結(jié)果來改變情緒反應(yīng)模式DB 141中的內(nèi)容。
同時(shí)，環(huán)境信息(D2)(譬如說包括天氣信息、季節(jié)信息、時(shí)間信息等)則被輸入到操作系統(tǒng)132的輸入端。多變量分析單元136對(duì)各種輸入的環(huán)境信息(D2)進(jìn)行多變量分析，從而輸出生命節(jié)奏信息。
在該生命節(jié)奏信息中，存在具有常數(shù)周期的規(guī)則(正弦波形)節(jié)奏，譬如短周期節(jié)奏(如1小時(shí)周期)、一個(gè)生命節(jié)奏(如24小時(shí)周期)、一個(gè)情緒長周期節(jié)奏(如28天周期)、一個(gè)身體長周期節(jié)奏(如23天周期)與一個(gè)智力節(jié)奏(如33天周期)，還存在不規(guī)則的節(jié)奏，譬如溫度、濕度與天氣。
隨意情緒控制單元137按照一個(gè)預(yù)定范圍內(nèi)的概率輸出多變量分析單元136輸出的生命節(jié)奏信息中的隨意情緒(力比多)。
基本情緒參數(shù)生成單元133輸出通過綜合測定與應(yīng)答系統(tǒng)131輸出的基本情緒參數(shù)和匹配率以及操作系統(tǒng)132輸出的隨意情緒有關(guān)的信息所得到的一個(gè)結(jié)果，以此作為自身情緒D5。在這種情況下，該結(jié)果是由這15類基本情緒參數(shù)構(gòu)成的信息。
而且，該輸出的自身情緒信息D5被臨時(shí)儲(chǔ)存在臨時(shí)存儲(chǔ)器DB 142中，并被反饋到基本情緒參數(shù)生成單元133的輸入端?；厩榫w參數(shù)生成單元133接受從臨時(shí)存儲(chǔ)器DB 142反饋的信息作為上一時(shí)刻的自身情緒，并使它影響下一時(shí)刻的情緒測定結(jié)果。
當(dāng)基本情緒參數(shù)生成單元133進(jìn)行綜合測定時(shí)，它就按照作為個(gè)性信息143確定的個(gè)性來決定各個(gè)單元的影響優(yōu)先級(jí)與程度。
舉例來說，在復(fù)現(xiàn)一個(gè)脈沖型情緒時(shí)，應(yīng)答系統(tǒng)131的影響程度增加(80％或以上)，剛才的自身情緒的影響也增加。在復(fù)現(xiàn)一個(gè)思想型情緒時(shí)，應(yīng)答系統(tǒng)131的影響程度降低(30％或以下)，剛才的自身情緒的影響在操作系統(tǒng)132的輸出穩(wěn)定的環(huán)境中也降低。
從情緒信息生成單元130輸出的自身情緒D5被輸入到感受能力及思想識(shí)別單元150。如圖11所示，情緒信息生成單元130包括一個(gè)加權(quán)處理單元151、一個(gè)核對(duì)處理單元152、一個(gè)多變量分析單元153、一個(gè)綜合啟發(fā)決策單元154與一個(gè)修改處理單元156。
加權(quán)單元151按照個(gè)性信息155對(duì)輸入的自身情緒信息D5加權(quán)。加權(quán)后的自身情緒信息再從加權(quán)處理單元151輸出。
同時(shí)，包括代表伙伴所處環(huán)境與狀況的一個(gè)情節(jié)并包括該伙伴的意向及其結(jié)果的字符信息(5W3H)被作為數(shù)據(jù)D2輸入到核對(duì)處理單元152的輸入端。
該過去情節(jié)、它的結(jié)果與表示它們含義的含義信息以字符信息(5W3H)的形式被作為知識(shí)儲(chǔ)存到知識(shí)DB 161供核對(duì)處理單元152查詢。而且，知識(shí)DB 161中的各種知識(shí)包括獲得各數(shù)據(jù)的時(shí)間信息，并按照這些時(shí)間的順序加以排列。
在這個(gè)示例中，知識(shí)DB 161中的各種知識(shí)可以被分類為一個(gè)長期存儲(chǔ)器、一個(gè)陳述存儲(chǔ)器與一個(gè)程序存儲(chǔ)器。該陳述存儲(chǔ)器是一個(gè)按單詞儲(chǔ)存的存儲(chǔ)器，代表作為一個(gè)特定時(shí)間/空間語境中的事件的情節(jié)信息與作為普通知識(shí)的含義信息。該程序存儲(chǔ)器代表關(guān)于方法或技術(shù)的存儲(chǔ)器。
該情節(jié)信息包括時(shí)間、地點(diǎn)、內(nèi)容、意向(贊成、反對(duì)、支持等等)、人員、數(shù)量、權(quán)重、情景、狀態(tài)、伙伴的私人信息、情感作用、意圖(目標(biāo))、態(tài)度、個(gè)人關(guān)系等等。該含義信息相當(dāng)于語言詞典與感受能力詞典。設(shè)想作為私人信息的有脾氣、性格、社會(huì)適應(yīng)性(社交能力)、愿望、沖突、態(tài)度、優(yōu)越感、情結(jié)、興趣、正確性、道德、思想模式、情緒特征、堅(jiān)持內(nèi)容(及其程度)、忌語、品味、善/惡標(biāo)準(zhǔn)等等。
在這個(gè)示例中，知識(shí)信息按照下面將要說明的語法被儲(chǔ)存在知識(shí)DB161中，但是，該數(shù)據(jù)庫的構(gòu)成內(nèi)容因客體而異。
Story＝Scene+Plot+Solution(故事＝場景+劇情+解決方案)Scene＝Character+Place+Time(場景＝人物+地點(diǎn)+時(shí)間)Theme＝(Event)+Target(主題＝(事件)+目標(biāo))Plot＝Episode(劇情＝情節(jié))Episode＝Lower target+Attempt+Result(情節(jié)＝較低目標(biāo)+企圖+結(jié)果)Attempt＝Event+Episode(企圖＝事件+情節(jié))Result＝Event+State(結(jié)果＝事件+狀態(tài))Solution＝Event+State(解決方案＝事件+狀態(tài))
Lower target，Target＝Desirable state(較低目標(biāo)、目標(biāo)＝希望的狀態(tài))Character，Place，Time＝State(人物、地點(diǎn)、時(shí)間＝狀態(tài))而且，新信息通過修改處理單元156的運(yùn)行被繼續(xù)不斷地添加到知識(shí)DB161。再者，不需要的信息通過重復(fù)執(zhí)行遺忘處理被自動(dòng)從該知識(shí)中刪除。具體地講，除了具有較高優(yōu)先級(jí)的數(shù)據(jù)外，該數(shù)據(jù)被繼續(xù)不斷地按照時(shí)間基準(zhǔn)從變舊的知識(shí)中刪除。譬如說，反復(fù)使用的知識(shí)與被認(rèn)定具有強(qiáng)烈印象的數(shù)據(jù)被賦予優(yōu)先級(jí)，即使它們變舊，也不會(huì)被刪除。各個(gè)數(shù)據(jù)的遺忘程度與優(yōu)先級(jí)可以按照該個(gè)性來改變。
核對(duì)處理單元152根據(jù)輸入的數(shù)據(jù)D2從知識(shí)DB 161中檢索與提取與輸入數(shù)據(jù)D2接近的過去情節(jié)及其結(jié)果。然后，核對(duì)處理單元152用該提取的知識(shí)來核對(duì)該輸入數(shù)據(jù)。
一個(gè)學(xué)習(xí)處理系統(tǒng)157通過學(xué)習(xí)根據(jù)該輸入情節(jié)的結(jié)果來生成與一個(gè)人對(duì)該輸入情節(jié)的自身價(jià)值概念有關(guān)的信息。具體地講，學(xué)習(xí)處理單元157根據(jù)該輸入情節(jié)的結(jié)果定出滿意、愉快及不愉快的程度。
多變量分析單元153對(duì)如下信息進(jìn)行多變量分析從加權(quán)處理單元151輸入的加權(quán)情緒信息；從核對(duì)處理單元152輸入的情節(jié)信息與結(jié)果信息；從學(xué)習(xí)處理單元157輸入的、與一個(gè)人自身的價(jià)值概念有關(guān)的信息以及從個(gè)人DB 163輸入的、與一個(gè)人自身的意向與本能有關(guān)的信息。然后，多變量分析單元153向綜合啟發(fā)決策單元154輸出該分析結(jié)果。
綜合啟發(fā)決策單元154利用個(gè)人DB 163與道德危險(xiǎn)DB 164的內(nèi)容作為一個(gè)測定詞典來綜合測定從多變量分析單元153輸入的信息，并輸出要被隨意執(zhí)行的內(nèi)容及其一個(gè)結(jié)果作為數(shù)據(jù)D3。
下面將要描述的各種信息被作為詞典信息儲(chǔ)存在個(gè)人DB 163中。
1.個(gè)性信息(a)按照每類個(gè)性的程度的測定準(zhǔn)則設(shè)想的類型有刻板型、面向他人型、面向內(nèi)部型、面向傳統(tǒng)型、面向進(jìn)攻型、面向合作型、應(yīng)激打擊型、應(yīng)激釋放型等等。完成動(dòng)機(jī)程度與對(duì)抗程度也可以被用作測定準(zhǔn)則。
(b)認(rèn)知風(fēng)格的測定準(zhǔn)則按照“反射型”與“沖動(dòng)型”的差別以及“場依賴型”與“場獨(dú)立型”的差別來區(qū)分認(rèn)知風(fēng)格被定義為測定準(zhǔn)則。
(c)按照性格的測定準(zhǔn)則對(duì)日本人，由個(gè)性測試方法與TPI(Todai個(gè)性調(diào)查表)分類的如下項(xiàng)目被用作測定準(zhǔn)則。這些分類項(xiàng)目為脾氣、性格、情緒性、社會(huì)適應(yīng)性(社交能力)、愿望、沖突、態(tài)度、情結(jié)、興趣、正確性、道德、思想模式、情緒特性、堅(jiān)持內(nèi)容(及其程度)、忌語、品味、善惡標(biāo)準(zhǔn)、羞恥標(biāo)準(zhǔn)、罪過標(biāo)準(zhǔn)、愉快與不快的標(biāo)準(zhǔn)等等。
(d)否定/偏見的測定準(zhǔn)則對(duì)否定信息加一個(gè)偏見以便大量掌握相同的否定信息，然后它們就可以被用來形成一個(gè)性格。
(e)追隨/堅(jiān)持時(shí)間的測定準(zhǔn)則確定對(duì)伙伴的認(rèn)知信息、情節(jié)與情緒信息的堅(jiān)持程度以及對(duì)它的反應(yīng)響應(yīng)時(shí)間。
2.本我/無意識(shí)反應(yīng)參考信息(a)單詞詞典與子句詞典，每個(gè)詞典都具有刺激本能的內(nèi)容。
(b)對(duì)每個(gè)個(gè)人的堅(jiān)持程度、追隨程度與坦率程度的各種本能反應(yīng)時(shí)間的參考值。
(c)作為個(gè)性決定的、與一個(gè)伙伴的情緒對(duì)應(yīng)的自我本能模式。
3.自我平衡(壓抑)的參考信息試圖維持整個(gè)本能輸出協(xié)調(diào)穩(wěn)定的測定準(zhǔn)則。
4.自我意識(shí)反應(yīng)參考時(shí)間按照個(gè)性代表一個(gè)人自身意向的測定準(zhǔn)則信息。
而且，包括在該測定詞典中的有用于識(shí)別測定與鑒別測定的信息，譬如真實(shí)/虛假、正確/不正確、適當(dāng)/不適當(dāng)；用于本能測定的信息，譬如愉快/不愉快；用于對(duì)象個(gè)人認(rèn)知測定的信息，譬如復(fù)雜性、權(quán)系數(shù)等等；用于對(duì)象間相對(duì)認(rèn)知測定的信息，譬如等同、大小、差別與相似；用于元存儲(chǔ)器測定的信息，譬如記憶的可靠性程度與知識(shí)的準(zhǔn)確性；用于抽象測定的信息，譬如真理、美德、愛等等；用于歸納測定的信息；等等。
關(guān)于職業(yè)道德、個(gè)人道德、基本道德等的詞典信息被儲(chǔ)存在道德危險(xiǎn)DB 164中。
譬如說，作為職業(yè)道德，可以記錄“作為一個(gè)建筑師，我要求一個(gè)完整的計(jì)算”、“我最優(yōu)先考慮我的工作”、“我為我是一個(gè)專業(yè)人員而自豪”等等。而且，作為個(gè)人道德，可以記錄“我為我的故鄉(xiāng)而驕傲”、“我為我是日本人而驕傲”等等。而作為基本道德，可以記錄“殺人是壞事”、“我細(xì)心照顧我的父母”、“我是一個(gè)男人(女人)”等等。
綜合啟發(fā)決策單元154分析由情緒信息生成單元130、加權(quán)處理單元151、核對(duì)處理單元152以及多變量分析單元153生成的與自身情緒有關(guān)的信息。然后，綜合啟發(fā)決策單元154根據(jù)代表該計(jì)算機(jī)個(gè)性與意向的個(gè)人DB163中的測定詞典以及根據(jù)道德危險(xiǎn)DB 164中的測定詞典來抑制該經(jīng)過分析的、與自身情緒有關(guān)的信息。隨后，綜合啟發(fā)決策單元154決定要輸出什么、那一種以及多少自身情緒反應(yīng)(感受能力)。在這種決策情況下，就會(huì)反映一個(gè)伙伴所在的環(huán)境與情景以及該伙伴當(dāng)時(shí)的意向。
感受能力及思想識(shí)別單元150包括下述功能。
1、在探測一個(gè)強(qiáng)烈印象、詞匯或根本情緒變化時(shí)，一個(gè)測定周期按照該個(gè)性來改變。譬如說，在突然大聲表明一個(gè)強(qiáng)硬內(nèi)容時(shí)，該測定周期就縮短。
2、在對(duì)一個(gè)人自己的、取決于該個(gè)性的生物節(jié)奏作出響應(yīng)時(shí)，根據(jù)一個(gè)人是否愿意作某件事，感受能力測定的實(shí)現(xiàn)會(huì)有很大不同。
3、按照一個(gè)人自身的愉快/不愉快與情緒量來實(shí)現(xiàn)不同的感受能力測定。
4、按照知識(shí)DB 161中的知識(shí)對(duì)表示當(dāng)前情景的信息進(jìn)行合理的價(jià)值判斷，反映該情緒的判斷結(jié)果的影響，并從而決定最終意向。
5、在進(jìn)行價(jià)值判斷時(shí)，該判斷根據(jù)社會(huì)價(jià)值、職業(yè)價(jià)值、日常生活價(jià)值、個(gè)人價(jià)值等等各種觀點(diǎn)來進(jìn)行。而且，要對(duì)這些社會(huì)價(jià)值、職業(yè)價(jià)值、日常生活價(jià)值與個(gè)人價(jià)值中的每一種更詳細(xì)地加以區(qū)分并作出判斷。譬如說，對(duì)于社會(huì)價(jià)值，要從宗教、美學(xué)、社會(huì)、政治、經(jīng)濟(jì)與倫理的各種觀點(diǎn)來計(jì)算價(jià)值。
6、要對(duì)各種因素進(jìn)行價(jià)值判斷，譬如以滿意/不滿意、得失/利益、安全/危險(xiǎn)等等作為該意向決策的判斷資料。舉例來說，在進(jìn)行關(guān)于安全的價(jià)值判斷時(shí)，判斷應(yīng)以如下方法進(jìn)行。
(a)當(dāng)一個(gè)第三者對(duì)自身施加“不愉快”時(shí)，就會(huì)產(chǎn)生關(guān)于敵對(duì)情緒的價(jià)值與一個(gè)防衛(wèi)反應(yīng)。
(b)當(dāng)自身對(duì)該第三者施加“不愉快”時(shí)，就會(huì)產(chǎn)生關(guān)于敵對(duì)情緒的價(jià)值與一個(gè)進(jìn)攻反應(yīng)。
(c)當(dāng)他人要對(duì)該第三者施加“不愉快”，而自身要站在該第三者一邊時(shí)，就會(huì)產(chǎn)生關(guān)于支持情緒的價(jià)值與一個(gè)合作進(jìn)攻反應(yīng)。
7、該生成的價(jià)值信息被儲(chǔ)存到感受能力DB 162，并被用作此后的判斷資料。
注意，由于感受能力及思想識(shí)別單元150包括與人類似的各種學(xué)習(xí)功能，所以個(gè)人DB 163與感受能力DB 162中的內(nèi)容會(huì)通過建立經(jīng)驗(yàn)而繼續(xù)不斷地被修改。
由于感受能力及思想識(shí)別單元150輸出基于數(shù)字值(譬如各種價(jià)值)的綜合測定結(jié)果，所以它不像人工智能那樣進(jìn)行邏輯推理或測定。準(zhǔn)確地講，從感受能力及思想識(shí)別單元150輸出的數(shù)據(jù)D3是由該計(jì)算機(jī)本身的啟發(fā)測定功能所獲得的感受能力信息。
如前所述，在本發(fā)明的感受能力生成方法中，作為產(chǎn)生該情緒的動(dòng)機(jī)的本能動(dòng)機(jī)信息根據(jù)該輸入的情景信息(伙伴的情緒、周圍環(huán)境等等)產(chǎn)生，而情緒信息則根據(jù)該本能動(dòng)機(jī)信息產(chǎn)生。而且，該生成的情緒信息按照該個(gè)性信息加以控制。
所以，它可以輸出由該個(gè)性的理智與意向控制的情緒，即感受能力。而且，由于該情緒信息通過該本能動(dòng)機(jī)信息產(chǎn)生，所以能夠更準(zhǔn)確、更容易地控制該生成的情緒。
符合本發(fā)明的該情緒探測方法可以被用于醫(yī)療領(lǐng)域的情緒探測，也可以在各種系統(tǒng)中被用作人工智能或人工感受能力的一部分。而且，對(duì)一個(gè)虛擬人或機(jī)器人的感受能力控制，本發(fā)明的感受能力生成方法可以在各種系統(tǒng)中被用于各種目的。此外，可以通過組合本發(fā)明的情緒探測方法與感受能力生成方法來構(gòu)造包含一臺(tái)計(jì)算機(jī)與一個(gè)人之間的對(duì)話功能的各種系統(tǒng)。
本發(fā)明并不限于上述實(shí)施例，可以作出各種修改而不偏離本發(fā)明的精神與范圍。對(duì)部分或所有部件均可以作出任何改進(jìn)。
權(quán)利要求
1.一種用于探測對(duì)象的情緒的情緒探測方法，它包括如下步驟輸入一個(gè)聲音信號(hào)；根據(jù)輸入的聲音信號(hào)來探測該聲音的強(qiáng)度、表示該聲音出現(xiàn)速率的速度以及表示該聲音構(gòu)成的每個(gè)單詞中強(qiáng)度變化模式的語調(diào)；分別獲得該探測到的聲音的強(qiáng)度中、該聲音的速度中與該聲音的語調(diào)中的變化量，而且根據(jù)該獲得的變化量分別生成至少表示憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)。
2.一個(gè)用于探測對(duì)象的情緒的情緒探測系統(tǒng)，它包括一個(gè)聲音輸入單元，用于輸入聲音信號(hào)；一個(gè)強(qiáng)度探測單元，用于根據(jù)上述聲音輸入單元輸入的聲音信號(hào)來探測聲音的強(qiáng)度；速度探測單元，用于根據(jù)上述聲音輸入單元輸入的聲音信號(hào)來探測該聲音出現(xiàn)的速率并以此作為速度；一個(gè)語調(diào)探測單元，用于根據(jù)上述聲音輸入單元輸入的聲音信號(hào)來探測表示該聲音的一個(gè)單詞中強(qiáng)度變化模式的語調(diào)；一個(gè)變化量探測單元，用于分別獲得由上述強(qiáng)度探測單元探測到的聲音強(qiáng)度中、由上述速度探測單元探測到的聲音速度中以及由上述語調(diào)探測單元探測到的聲音語調(diào)中的變化量；以及一個(gè)情緒探測單元，用于根據(jù)由上述變化量探測單元探測到的變化量來分別輸出至少表示憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)。
3.如權(quán)利要求2的情緒探測系統(tǒng)，其中上述語調(diào)探測單元包括一個(gè)帶通濾波器單元，用于從為每個(gè)單詞分離輸入的聲音信號(hào)中提取特定的頻率分量；一個(gè)區(qū)域分離單元，用于根據(jù)由上述帶通濾波器單元提取的信號(hào)的一個(gè)功率頻譜的強(qiáng)度將該概率頻譜分離為許多區(qū)域；以及一個(gè)語調(diào)計(jì)算單元，用于根據(jù)由上述區(qū)域分離單元分離的這許多區(qū)域的各自中心之間的時(shí)間間隔來計(jì)算一個(gè)語調(diào)值。
4.如權(quán)利要求2的情緒探測系統(tǒng)，它還包括一個(gè)成像單元，用于接受至少與該對(duì)象的一個(gè)面部有關(guān)的圖像信息；一個(gè)圖像識(shí)別單元，用于從由上述成像單元接受到的圖像信息來探測與該面部每個(gè)部分有關(guān)的位置信息；一個(gè)圖像參考信息保存單元，用于保存與該面部每個(gè)部分的特征量有關(guān)的參考信息；以及一個(gè)圖像特征量探測單元，用于根據(jù)由上述圖像識(shí)別單元探測到的位置信息以及由上述圖像參考信息保存單元保存的參考信息來探測一個(gè)圖像特征量，而且其中上述情緒探測單元按照由上述圖像特征量探測單元探測到的圖像特征量中的變化來估計(jì)一個(gè)情緒狀態(tài)。
5.如權(quán)利要求2的情緒探測系統(tǒng)，它還包括一個(gè)情緒信息存儲(chǔ)單元，用于連續(xù)不斷地接受與由上述情緒探測單元探測到的情緒狀態(tài)有關(guān)的各種信息，并用于在其中儲(chǔ)存各種信息；以及一個(gè)遺忘處理單元，用于從過去儲(chǔ)存在上述情緒信息存儲(chǔ)單元內(nèi)的、與情緒狀態(tài)有關(guān)的各種信息中，刪除自該信息當(dāng)初被儲(chǔ)存以來已經(jīng)儲(chǔ)存了一個(gè)預(yù)定時(shí)期的信息，并用于從上述要被刪除的信息中至少排除說明情緒中的變化量大于一個(gè)預(yù)定量的信息以及與一個(gè)預(yù)定變化模式相符的信息。
6.如權(quán)利要求5的情緒探測系統(tǒng)，它還包括一個(gè)語句識(shí)別單元，用于通過處理與該對(duì)象發(fā)出的聲音以及該對(duì)象輸入的字符中任何一種有關(guān)的信息來進(jìn)行語法分析，并用于生成表示語句的含義的言語信息；以及一個(gè)存儲(chǔ)器控制單元，用于按照與涉及上述情緒狀態(tài)的信息同步的方式來儲(chǔ)存由該情緒信息存儲(chǔ)單元中的上述語句識(shí)別單元生成的言語信息。
7.如權(quán)利要求2的情緒探測系統(tǒng)，它還包括一個(gè)無聲時(shí)間測定單元，用于根據(jù)這些探測到的情緒狀態(tài)中的情緒狀態(tài)來測定一個(gè)參考無聲時(shí)間；以及一個(gè)語句分段探測單元，用于通過利用上述無聲時(shí)間測定單元測定的參考無聲時(shí)間來探測該聲音的一個(gè)語句分段。
8.包括一個(gè)由一臺(tái)計(jì)算機(jī)執(zhí)行的、用于探測對(duì)象的情緒的情緒探測程序的軟件，其中上述情緒探測程序包括一個(gè)輸入聲音信號(hào)的步驟；一個(gè)根據(jù)該輸入的聲音信號(hào)來探測聲音的強(qiáng)度、表示該聲音出現(xiàn)速率的速度以及表示該聲音構(gòu)成的每個(gè)單詞中強(qiáng)度變化模式的語調(diào)的步驟；一個(gè)分別獲得該探測到的聲音的強(qiáng)度中、該聲音的速度中與該聲音的語調(diào)中的變化量的步驟；以及一個(gè)根據(jù)該獲得的變化量來分別生成至少表示憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)的步驟。
9.一種感受能力生成方法，它包括如下步驟預(yù)先保存能至少測定產(chǎn)生感受能力的對(duì)象的理智、預(yù)定特征以及意向的各種個(gè)人信息；根據(jù)表明一位伙伴的任何一種情緒的狀態(tài)以及該伙伴所處的環(huán)境的一個(gè)輸入情景信息來生成本能動(dòng)機(jī)信息，該本能動(dòng)機(jī)信息至少包括表示愉快程度的一個(gè)第一本能參數(shù)、表示危險(xiǎn)程度的一個(gè)第二本能參數(shù)以及表示完成及變化程度的一個(gè)第三本能參數(shù)；根據(jù)上述生成的本能動(dòng)機(jī)信息來生成情緒信息，該情緒信息至少包括愉快、憤怒與悲傷的一個(gè)基本情緒參數(shù)；以及根據(jù)上述個(gè)性信息來控制上述生成的情緒信息。
10.一個(gè)感受能力發(fā)生器，它包括一個(gè)本能測定單元，用于輸入表示伙伴的情緒、該伙伴所處的環(huán)境以及該伙伴的意向的情節(jié)情景信息，并用于根據(jù)上述情節(jié)情景信息生成本能動(dòng)機(jī)信息，該本能動(dòng)機(jī)信息至少指明表示愉快程度的一個(gè)第一本能參數(shù)、表示危險(xiǎn)程度的一個(gè)第二本能參數(shù)以及表示完成及變化程度的一個(gè)第三本能參數(shù)；一個(gè)情緒生成單元，用于根據(jù)由上述本能測定單元輸出的本能動(dòng)機(jī)信息來生成情緒信息，該情緒信息至少包括愉快、憤怒與悲傷的基本情緒參數(shù)；一個(gè)個(gè)性信息提供單元，用于提供至少測定生成感受能力的對(duì)象的理智與意向的個(gè)性信息；以及一個(gè)情緒控制單元，用于根據(jù)上述個(gè)性信息提供單元提供的個(gè)性信息來控制從上述情緒生成單元輸出的情緒信息。
11.如權(quán)利要求10的感受能力發(fā)生器，其中上述情緒生成單元包括一個(gè)生命節(jié)奏生成單元，用于生成表示周期性變化的環(huán)境與一個(gè)生命的生命節(jié)奏這兩者中任何一種的信息；以及一個(gè)隨意情緒控制單元，用于按照由上述生命節(jié)奏生成單元輸出的關(guān)于生命節(jié)奏的信息來控制上述情緒生成單元中的隨意情緒。
12.如權(quán)利要求10的感受能力發(fā)生器，其中上述情緒生成單元包括一個(gè)本能-情緒信息保存單元，用于保存使上述基本情緒參數(shù)與上述本能動(dòng)機(jī)信息彼此對(duì)應(yīng)的模式信息；以及一個(gè)匹配概率學(xué)習(xí)單元，用于輸出表示該本能動(dòng)機(jī)信息與上述本能-情緒信息保存單元的模式信息之間的匹配/失配概率的信息，該本能動(dòng)機(jī)信息由上述本能測定單元輸出。
13.如權(quán)利要求10的感受能力發(fā)生器，其中上述情緒生成單元包括一個(gè)情緒反饋控制單元，用于向該情緒生成單元至少輸入最終生成的它自身的情緒信息，并用于使該最終生成的信息影響隨后要生成的它自身的情緒信息。
14.如權(quán)利要求10的感受能力發(fā)生器，其中上述情緒控制單元使一個(gè)生命節(jié)奏信息影響將要輸入的情緒信息，該生命節(jié)奏是產(chǎn)生感受能力的一位對(duì)象的個(gè)性。
15.如權(quán)利要求10的感受能力發(fā)生器，它還包括一個(gè)知識(shí)數(shù)據(jù)庫，用于儲(chǔ)存表示過去情景、過去情節(jié)以及該過去情景與情節(jié)的結(jié)果的情景信息；一個(gè)知識(shí)核對(duì)單元，用于從上述知識(shí)數(shù)據(jù)庫中檢索并提取與新輸入的情景信息類似的過去情景信息，并用于向上述情緒控制單元提供該過去情景信息；以及一個(gè)數(shù)據(jù)更新控制單元，用于根據(jù)表明新輸入的情景與該新情景的結(jié)果的情景信息來更新上述知識(shí)數(shù)據(jù)庫的內(nèi)容，并用于從上述知識(shí)數(shù)據(jù)庫中按照這些內(nèi)容的權(quán)重以時(shí)間順序自動(dòng)刪除低優(yōu)先級(jí)的情景信息。
16.如權(quán)利要求10的感受能力發(fā)生器，它還包括一個(gè)聲音輸入單元，用于輸入一個(gè)聲音信號(hào)；一個(gè)強(qiáng)度探測單元，用于根據(jù)上述聲音輸入單元輸入的聲音來探測聲音的強(qiáng)度；速度探測單元，用于根據(jù)上述聲音輸入單元輸入的聲音來探測聲音出現(xiàn)的速率并以此作為速度；一個(gè)語調(diào)探測單元，用于根據(jù)上述聲音輸入單元輸入的聲音來探測表示該聲音的一個(gè)單詞中強(qiáng)度變化模式的語調(diào)；一個(gè)變化量探測單元，用于分別獲得上述強(qiáng)度探測單元探測到的該聲音強(qiáng)度中、上述速度探測單元探測到的該聲音速度中與上述語調(diào)探測單元探測到的該聲音語調(diào)中的變化量；以及一個(gè)情緒探測單元，用于根據(jù)上述變化量探測單元探測到的變化量來分別輸出至少表示憤怒、悲傷與愉快的情緒狀態(tài)的信號(hào)。
17.如權(quán)利要求16的感受能力發(fā)生器，它還包括一個(gè)聲音識(shí)別單元，用于識(shí)別從上述聲音輸入單元輸入的聲音，并用于輸出字符信息；以及一個(gè)自然語言處理單元，用于使由上述聲音識(shí)別單元識(shí)別的有聲信息接受自然語言處理，并用于生成表示該輸入的聲音的含義的含義信息。
18.包括可由一臺(tái)計(jì)算機(jī)執(zhí)行的、用于感受能力生成控制的程序與數(shù)據(jù)的軟件，其中上述程序包括一個(gè)根據(jù)表示伙伴的任何情緒的狀態(tài)及該伙伴所處的環(huán)境的一個(gè)輸入情景信息來生成本能動(dòng)機(jī)信息的步驟，該本能動(dòng)機(jī)信息至少包括表示愉快程度的一個(gè)第一本能參數(shù)、表示危險(xiǎn)程度的一個(gè)第二本能參數(shù)以及表示完成及變化程度的一個(gè)第三本能參數(shù)；一個(gè)根據(jù)上述生成的本能動(dòng)機(jī)信息來生成情緒信息的步驟，該情緒信息至少包括愉快、憤怒與悲傷的一個(gè)基本情緒參數(shù)；一個(gè)提供個(gè)性信息的步驟，該個(gè)性信息至少測定產(chǎn)生感受能力的一位對(duì)象的理智與意向；以及一個(gè)根據(jù)上述個(gè)性信息來控制上述生成的情緒信息的步驟。
全文摘要
一種能夠準(zhǔn)確探測一個(gè)人的情緒的情緒探測方法，而且提供能夠輸出類似于一個(gè)人的感受能力的感受能力生成方法。根據(jù)輸入聲音信號(hào)來探測一個(gè)強(qiáng)度、速度與該聲音的每個(gè)單詞中的語調(diào)，分別獲得這些探測到的內(nèi)容的變化量，并根據(jù)這些變化量生成表示憤怒、悲傷與愉快的每個(gè)情緒狀態(tài)的信號(hào)。輸入一位伙伴的情緒或情景信息，從而生成本能動(dòng)機(jī)信息。而且，生成包含愉快、憤怒與悲傷的基本情緒參數(shù)的情緒信息，該情緒信息根據(jù)個(gè)性信息加以控制。
文檔編號(hào)G10L13/033GK1455916SQ01815455
公開日2003年11月12日 申請日期2001年9月4日 優(yōu)先權(quán)日2000年9月13日
發(fā)明者光吉俊二 申請人:株式會(huì)社A·G·I