專利名稱：手勢(shì)識(shí)別設(shè)備、手勢(shì)識(shí)別方法及程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及手勢(shì)識(shí)別設(shè)備、手勢(shì)識(shí)別方法及程序。
背景技術(shù)：
近年來(lái)，通常執(zhí)行作為用于控制例如系統(tǒng)的用戶的動(dòng)作或話語(yǔ)輸入的手勢(shì)的識(shí)別 (日本專利公開(kāi)公布第2006-209563號(hào))。在手勢(shì)識(shí)別中，利用基于輸入到攝像機(jī)或麥克風(fēng)的動(dòng)作或話語(yǔ)的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)。該組手勢(shì)信息例如是基于通過(guò)捕獲對(duì)象的動(dòng)作過(guò)程獲得的一組圖像或通過(guò)捕獲例如關(guān)鍵詞的講話過(guò)程獲得的一組語(yǔ)音的信息。在手勢(shì)識(shí)別中，手勢(shì)信息的輸入反饋(下文中，被稱作手勢(shì)反饋)在改進(jìn)應(yīng)用手勢(shì)識(shí)別的系統(tǒng)的便利方面是重要的。適當(dāng)?shù)氖謩?shì)反饋允許向用戶請(qǐng)求手勢(shì)信息的誤差輸入的校正，以及允許對(duì)用戶教導(dǎo)輸入手勢(shì)的方法。在現(xiàn)有技術(shù)中，已知例如在顯示裝置上的、指示用戶動(dòng)作過(guò)程的圖像的顯示，作為手勢(shì)反饋。在這種情況下，用戶能夠通過(guò)確認(rèn)圖像直觀地了解手勢(shì)信息的輸入狀態(tài)。另外， 還已知諸如指示用戶動(dòng)作過(guò)程的軌跡的信息的顯示，來(lái)替代指示用戶動(dòng)作過(guò)程的圖像。

發(fā)明內(nèi)容
然而，在這些方法中，沒(méi)有根據(jù)中途輸入手勢(shì)信息來(lái)預(yù)測(cè)手勢(shì)，并且沒(méi)有通知用戶與預(yù)測(cè)手勢(shì)的結(jié)果相關(guān)的預(yù)測(cè)信息。這里，手勢(shì)預(yù)測(cè)信息可以是手勢(shì)預(yù)測(cè)結(jié)果本身或者手勢(shì)預(yù)測(cè)結(jié)果的可靠性。手勢(shì)預(yù)測(cè)信息可以是指示通過(guò)繼續(xù)輸入手勢(shì)信息哪種手勢(shì)被識(shí)別或者在某些情況下該手勢(shì)被識(shí)別成哪種程度的可靠性的指示符。因此，在現(xiàn)有技術(shù)中，不向用戶請(qǐng)求手勢(shì)信息的錯(cuò)誤輸入的校正，也沒(méi)有向用戶教導(dǎo)的輸入手勢(shì)的方法，因此沒(méi)有充分地執(zhí)行適當(dāng)?shù)氖謩?shì)反饋。鑒于以上內(nèi)容，希望提供能夠使用手勢(shì)預(yù)測(cè)信息執(zhí)行適當(dāng)手勢(shì)反饋的手勢(shì)識(shí)別設(shè)備、手勢(shì)識(shí)別方法和程序。根據(jù)本發(fā)明的實(shí)施例，提供了一種手勢(shì)識(shí)別設(shè)備，該設(shè)備包括識(shí)別單元，其用于基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)；預(yù)測(cè)單元，其用于根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息預(yù)測(cè)手勢(shì)；通知單元，其用于向用戶通知關(guān)于預(yù)測(cè)手勢(shì)的結(jié)果的預(yù)測(cè)信息。手勢(shì)的預(yù)測(cè)信息可以包括手勢(shì)預(yù)測(cè)結(jié)果的可靠性。預(yù)測(cè)結(jié)果的可靠性可以被表示為中途輸入手勢(shì)信息與該組手勢(shì)信息的比率。當(dāng)比率增加時(shí)，預(yù)測(cè)結(jié)果的可靠性可以急劇增加。當(dāng)預(yù)測(cè)結(jié)果的可靠性等于或大于給定閾值時(shí)，通知單元可以開(kāi)始預(yù)測(cè)信息的通知。當(dāng)在輸入時(shí)段沒(méi)有輸入該組手勢(shì)信息時(shí)，通知單元可以終止預(yù)測(cè)信息的通知。當(dāng)在輸入時(shí)段沒(méi)有輸入該組手勢(shì)信息的頻率等于或大于給定閾值時(shí)，通知單元可以通知可識(shí)別手勢(shì)的列表。
該手勢(shì)識(shí)別設(shè)備還可以包括用于向用戶通知手勢(shì)信息的第二通知單元。該手勢(shì)識(shí)別設(shè)備還可以包括用于輸入圖像信息作為手勢(shì)信息的輸入單元。該手勢(shì)識(shí)別設(shè)備還可以包括用于輸入語(yǔ)音信息作為手勢(shì)信息的輸入單元。根據(jù)本發(fā)明的另一實(shí)施例，提供了一種手勢(shì)識(shí)別方法，該方法包括基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)的步驟。該識(shí)別步驟可以包括根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)手勢(shì)，以及向用戶通知關(guān)于預(yù)測(cè)手勢(shì)的結(jié)果的預(yù)測(cè)信肩、ο根據(jù)本發(fā)明的另一實(shí)施例，提供了一種使計(jì)算機(jī)執(zhí)行以下步驟的程序基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)。該識(shí)別步驟可以包括根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)手勢(shì)，以及向用戶通知關(guān)于預(yù)測(cè)手勢(shì)的結(jié)果的預(yù)測(cè)信息。根據(jù)以上描述的本發(fā)明的實(shí)施例，可提供能夠使用手勢(shì)預(yù)測(cè)信息執(zhí)行適當(dāng)手勢(shì)反饋的手勢(shì)識(shí)別設(shè)備、手勢(shì)識(shí)別方法和程序。


圖1是示出了根據(jù)本發(fā)明的實(shí)施例的手勢(shì)識(shí)別設(shè)備的概況的圖；圖2是示出了手勢(shì)識(shí)別設(shè)備的主要功能配置的框圖；圖3是示出了手勢(shì)識(shí)別設(shè)備的操作的流程圖；圖4A是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖(1/5)；圖4B是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖0/5)；圖4C是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖(3/5)；圖4D是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖0/5)；圖4E是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖(5/5)；圖5A是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的另一示例的圖(1/3)；圖5B是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的另一示例的圖(2/3)；圖5C是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的另一示例的圖(3/3)；圖6A是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的又一示例的圖(1/2)；圖6B是示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的又一示例的圖(2/2)；圖7是示出了手勢(shì)列表的通知的示例的圖
圖8A是示出了預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖(1/3)；圖8B是示出了預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖(2/3)；圖8C是示出了預(yù)測(cè)結(jié)果的可靠性的通知的示例的圖(3/3)；圖9A是示出了預(yù)測(cè)結(jié)果的可靠性的通知的另一示例的圖(1/2)；圖9B是示出了預(yù)測(cè)結(jié)果的可靠性的通知的另一示例的圖(2/2)；圖10是示出了根據(jù)修改的示例的手勢(shì)識(shí)別設(shè)備的主要功能配置的框圖。
具體實(shí)施例方式下文中，將參照附圖更詳細(xì)地描述本發(fā)明的優(yōu)選實(shí)施例。注意，在本說(shuō)明書(shū)和附圖中，用相同的附圖標(biāo)記來(lái)表示具有基本相同功能和結(jié)構(gòu)的結(jié)構(gòu)元件，并且省略這些結(jié)構(gòu)元件的重復(fù)說(shuō)明。
[1.手勢(shì)識(shí)別設(shè)備的概況]首先，將參照?qǐng)D1描述根據(jù)本發(fā)明的實(shí)施例的手勢(shì)識(shí)別設(shè)備1的概況。如圖1所示，手勢(shì)識(shí)別設(shè)備1利用關(guān)于預(yù)測(cè)手勢(shì)的結(jié)果的預(yù)測(cè)信息來(lái)執(zhí)行適當(dāng)?shù)氖謩?shì)反饋。手勢(shì)識(shí)別設(shè)備1是信息處理設(shè)備，諸如個(gè)人計(jì)算機(jī)、電視接收機(jī)、便攜式信息終端或者便攜式電話。來(lái)自諸如攝像機(jī)的運(yùn)動(dòng)圖像傳感器11的運(yùn)動(dòng)圖像信號(hào)輸入到手勢(shì)識(shí)別設(shè)備1，來(lái)自諸如麥克風(fēng)的語(yǔ)音傳感器(未示出)的語(yǔ)音信號(hào)輸入到手勢(shì)識(shí)別設(shè)備1。手勢(shì)識(shí)別設(shè)備1可以與運(yùn)動(dòng)圖像/語(yǔ)音傳感器整體地或分開(kāi)地形成。當(dāng)用戶U在運(yùn)動(dòng)圖像傳感器11的前面執(zhí)行給定動(dòng)作時(shí)，手勢(shì)識(shí)別設(shè)備1基于運(yùn)動(dòng)圖像信號(hào)來(lái)識(shí)別動(dòng)作手勢(shì)。當(dāng)用戶U在語(yǔ)音傳感器的周?chē)f(shuō)出給定的話語(yǔ)時(shí)，手勢(shì)識(shí)別設(shè)備1基于語(yǔ)音信號(hào)識(shí)別講話手勢(shì)。這里，基于包括通過(guò)捕獲對(duì)象0(例如手)的動(dòng)作過(guò)程獲得的一組圖像的手勢(shì)信息來(lái)識(shí)別動(dòng)作手勢(shì)，并且利用基于通過(guò)捕獲例如關(guān)鍵字的講話過(guò)程獲得的一組語(yǔ)音的手勢(shì)信息來(lái)識(shí)別講話手勢(shì)。動(dòng)作手勢(shì)可以包括例如在運(yùn)動(dòng)圖像傳感器11的前面向右移動(dòng)對(duì)象0的輕拂 (flick)手勢(shì)，以及利用對(duì)象0遮蔽運(yùn)動(dòng)圖像傳感器11的前面的遮蔽手勢(shì)。講話手勢(shì)可以包括例如在語(yǔ)音傳感器周?chē)v出給定字、短語(yǔ)、分句或句子的手勢(shì)。這里，例如，當(dāng)假定應(yīng)用音樂(lè)回放應(yīng)用時(shí)，左輕拂手勢(shì)和右輕拂手勢(shì)分別對(duì)應(yīng)于前進(jìn)和倒回，并且遮蔽手勢(shì)對(duì)應(yīng)于停止。例如，話語(yǔ)“MiseiTeisi”可以對(duì)應(yīng)于音樂(lè)停止，話語(yǔ)“Saisei Okuri”和“Saisei Modosi”可以分別對(duì)應(yīng)于前進(jìn)和倒回。同樣地，給定動(dòng)作和講話手勢(shì)的組合可以對(duì)應(yīng)于各種處理。手勢(shì)識(shí)別設(shè)備1如下利用關(guān)于預(yù)測(cè)手勢(shì)的結(jié)果的預(yù)測(cè)信息來(lái)執(zhí)行適當(dāng)?shù)氖謩?shì)反饋。如上所述，手勢(shì)識(shí)別設(shè)備1利用在給定輸入時(shí)段內(nèi)輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)。當(dāng)識(shí)別到手勢(shì)時(shí)，執(zhí)行對(duì)應(yīng)于識(shí)別的手勢(shì)的處理。在手勢(shì)識(shí)別處理中，根據(jù)在一組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)手勢(shì)， 并且向用戶U通知手勢(shì)預(yù)測(cè)信息。這里，手勢(shì)預(yù)測(cè)信息可以是手勢(shì)預(yù)測(cè)結(jié)果本身或預(yù)測(cè)結(jié)果的可靠性。在圖1中，示出了預(yù)測(cè)信息的通知的示例。在手勢(shì)識(shí)別設(shè)備1中，實(shí)時(shí)捕獲傳感器前面的圖像并將該圖像顯示在顯示器D上。當(dāng)用戶U開(kāi)始手勢(shì)的輸入時(shí)，在顯示器D上顯示手勢(shì)預(yù)測(cè)信息。在圖1所示的示例中，當(dāng)用戶U向右移動(dòng)手0時(shí)，預(yù)測(cè)右輕拂手勢(shì)的輸入， 并且顯示用于指定右輕拂手勢(shì)的圖標(biāo)I和指示預(yù)測(cè)結(jié)果的可靠性的水平儀L。在本示例中， 當(dāng)向右進(jìn)一步移動(dòng)手0時(shí)，預(yù)測(cè)結(jié)果的可靠性增加并更新水平儀L的顯示。當(dāng)手0向右移動(dòng)了給定距離時(shí)，識(shí)別到右輕拂手勢(shì)并執(zhí)行對(duì)應(yīng)于右輕拂手勢(shì)的處理。因此，用戶U通過(guò)借助預(yù)測(cè)信息的通知而繼續(xù)輸入手勢(shì)信息，能夠確認(rèn)哪種手勢(shì)被識(shí)別。因此，當(dāng)未獲得期望預(yù)測(cè)信息時(shí)，用戶U能夠注意到手勢(shì)信息的錯(cuò)誤輸入并校正輸入。另外，用戶U能夠通過(guò)反復(fù)試驗(yàn)輸入手勢(shì)信息和確認(rèn)預(yù)測(cè)信息而直觀地了解如何輸入手勢(shì)。[2.手勢(shì)識(shí)別設(shè)備的配置]接下來(lái)，將參照?qǐng)D2描述手勢(shì)識(shí)別設(shè)備1的主要功能配置。下文中，將描述識(shí)別用戶U的手0的動(dòng)作手勢(shì)的情況。如圖2所示，手勢(shì)識(shí)別設(shè)備1包括運(yùn)動(dòng)圖像傳感器11、運(yùn)動(dòng)圖像處理單元13、手勢(shì)信息通知單元(第二通知單元)15、識(shí)別處理單元(識(shí)別單元)17、手勢(shì)預(yù)測(cè)單元(預(yù)測(cè)單元)19、預(yù)測(cè)信息通知單元(通知單元)21、處理執(zhí)行單元23、手勢(shì)信息存儲(chǔ)單元25、以及對(duì)照信息存儲(chǔ)單元27。運(yùn)動(dòng)圖像傳感器11使傳感器前面的場(chǎng)景成像并生成指示成像結(jié)果的運(yùn)動(dòng)圖像信號(hào)。傳感器前面的場(chǎng)景包括作為識(shí)別對(duì)象的對(duì)象0的圖像、或者背景圖像。運(yùn)動(dòng)圖像處理單元13處理從運(yùn)動(dòng)圖像傳感器11提供的運(yùn)動(dòng)圖像信號(hào)，并生成手勢(shì)信息。手勢(shì)信息是指示對(duì)象0的動(dòng)作的信息。手勢(shì)信息被暫時(shí)存儲(chǔ)在手勢(shì)信息存儲(chǔ)單元 25中。手勢(shì)信息通知單元15向用戶U通知從運(yùn)動(dòng)圖像處理單元13提供的手勢(shì)信息。手勢(shì)信息可以作為指示手0的動(dòng)作過(guò)程的圖像信息或作為指示手0的動(dòng)作過(guò)程的語(yǔ)音信息被通知。手勢(shì)信息通知單元15通過(guò)顯示器D或未示出的揚(yáng)聲器向用戶U通知手勢(shì)信息。識(shí)別處理單元17讀取來(lái)自手勢(shì)信息存儲(chǔ)單元25的手勢(shì)信息和來(lái)自對(duì)照信息存儲(chǔ)單元27的對(duì)照信息，并且基于對(duì)照信息來(lái)處理手勢(shì)信息。識(shí)別處理單元17將一組手勢(shì)信息和作為識(shí)別對(duì)象的每個(gè)手勢(shì)的對(duì)照信息進(jìn)行對(duì)照，并生成對(duì)照結(jié)果。對(duì)照信息是要與一組手勢(shì)信息進(jìn)行對(duì)照以識(shí)別手勢(shì)的信息，并且針對(duì)作為識(shí)別對(duì)象的每個(gè)手勢(shì)預(yù)先設(shè)置對(duì)照信息。例如，動(dòng)作手勢(shì)的對(duì)照信息被設(shè)置成在給定方向上運(yùn)動(dòng)的對(duì)象0的運(yùn)動(dòng)模式(例如， 運(yùn)動(dòng)方向、距離和速度)。對(duì)照結(jié)果對(duì)應(yīng)于由該組手勢(shì)信息指示的運(yùn)動(dòng)模式與由每個(gè)手勢(shì)的對(duì)照信息指示的運(yùn)動(dòng)模式之間的相似度。手勢(shì)預(yù)測(cè)單元19基于從識(shí)別處理單元17提供的對(duì)照結(jié)果，來(lái)預(yù)測(cè)將要輸入的手勢(shì)。手勢(shì)預(yù)測(cè)單元19指定具有最高相似度的手勢(shì)作為手勢(shì)預(yù)測(cè)結(jié)果。另外，指定預(yù)測(cè)手勢(shì)的相似度作為預(yù)測(cè)結(jié)果的可靠性。手勢(shì)預(yù)測(cè)信息是與手勢(shì)預(yù)測(cè)結(jié)果有關(guān)的信息，并且包括手勢(shì)預(yù)測(cè)結(jié)果本身和/或預(yù)測(cè)結(jié)果的可靠性。這里，手勢(shì)預(yù)測(cè)結(jié)果是指示通過(guò)繼續(xù)輸入手勢(shì)信息識(shí)別到哪種手勢(shì)的指示信息，并且預(yù)測(cè)結(jié)果的可靠性是指示識(shí)別到手勢(shì)的哪種水平的可靠性的指示信息。預(yù)測(cè)信息通知單元21向用戶U通知從手勢(shì)預(yù)測(cè)單元19提供的手勢(shì)預(yù)測(cè)信息。預(yù)測(cè)信息可以作為圖像信息或作為語(yǔ)音信息被通知。預(yù)測(cè)信息通知單元21通過(guò)顯示器D或未示出的揚(yáng)聲器向用戶U通知預(yù)測(cè)信息。處理執(zhí)行單元23基于手勢(shì)識(shí)別結(jié)果來(lái)執(zhí)行對(duì)應(yīng)于識(shí)別到的手勢(shì)的處理。在處理執(zhí)行單元23中，例如，當(dāng)識(shí)別到左輕拂手勢(shì)和右輕拂手勢(shì)時(shí)，執(zhí)行前進(jìn)和倒回處理，并且當(dāng)識(shí)別到遮蔽手勢(shì)時(shí)，執(zhí)行停止處理。運(yùn)動(dòng)圖像傳感器11被形成為諸如攝像機(jī)的圖像輸入裝置。運(yùn)動(dòng)圖像處理單元13、 手勢(shì)信息通知單元15、識(shí)別處理單元17、手勢(shì)預(yù)測(cè)單元19、預(yù)測(cè)信息通知單元21和處理執(zhí)行單元23被形成為具有諸如CPU或DSP的處理器的信息處理設(shè)備。手勢(shì)信息通知單元15 和預(yù)測(cè)信息通知單元21連接到顯示器D或未示出的揚(yáng)聲器。手勢(shì)信息存儲(chǔ)單元25和對(duì)照信息存儲(chǔ)單元27被形成為諸如存儲(chǔ)器的內(nèi)部存儲(chǔ)裝置、或者外部存儲(chǔ)裝置。部件的至少一些功能可以被實(shí)現(xiàn)為諸如電路的硬件或諸如程序的軟件。另外，當(dāng)每個(gè)部件被實(shí)現(xiàn)為軟件時(shí)，通過(guò)在處理器上執(zhí)行的程序來(lái)實(shí)現(xiàn)部件的功能。[3.手勢(shì)識(shí)別設(shè)備的操作]接下來(lái)，將參照?qǐng)D3至圖7來(lái)描述手勢(shì)識(shí)別設(shè)備1的操作。如圖3所示，手勢(shì)識(shí)別設(shè)備1判斷是否已開(kāi)始手勢(shì)輸入(步驟Sll)。在運(yùn)動(dòng)圖像傳感器11中，使傳感器前面的場(chǎng)景成像，并且生成指示成像結(jié)果的運(yùn)動(dòng)圖像信號(hào)。在運(yùn)動(dòng)圖像處理單元13中，根據(jù)運(yùn)動(dòng)圖像信號(hào)生成幀圖像。這里，可以基于傳感器前面的識(shí)別對(duì)象的存在判斷出手勢(shì)輸入開(kāi)始。在這種情況下，在識(shí)別處理單元17中，利用諸如模式識(shí)別的技術(shù)，判斷正被識(shí)別的對(duì)象0是否包括在幀圖像中。當(dāng)判斷結(jié)果為正時(shí)，判斷出已開(kāi)始輸入。在識(shí)別處理單元17中，可以判斷出識(shí)別到的對(duì)象0是否包括在生成的具有比幀圖像更粗糙的分辨率的灰度圖像中。替選地，可以基于傳感器前面的識(shí)別對(duì)象的運(yùn)動(dòng)狀態(tài)判斷出手勢(shì)輸入開(kāi)始。在這種情況下，在運(yùn)動(dòng)圖像處理單元13中，生成具有比幀圖像更粗糙的分辨率的灰度圖像。基于灰度圖像之間的幀差異來(lái)檢測(cè)運(yùn)動(dòng)區(qū)域，即變化區(qū)域，并且生成運(yùn)動(dòng)區(qū)域的中心位置作為手勢(shì)信息。手勢(shì)信息被暫時(shí)存儲(chǔ)在手勢(shì)信息存儲(chǔ)單元25中?；诮o定時(shí)段中的手勢(shì)信息，判斷出正被識(shí)別的對(duì)象0是否以給定運(yùn)動(dòng)模式開(kāi)始運(yùn)動(dòng)。當(dāng)判斷結(jié)果為正時(shí)，確定已經(jīng)開(kāi)始輸入。這里，當(dāng)判斷出已經(jīng)開(kāi)始輸入時(shí)，處理定時(shí)器(未示出)啟動(dòng)(步驟S13)，并且開(kāi)始步驟S15和隨后步驟的處理。另一方面，當(dāng)判斷出沒(méi)有開(kāi)始輸入時(shí)，重復(fù)步驟Sll的判斷處理。當(dāng)判斷出已經(jīng)開(kāi)始輸入時(shí)，根據(jù)處理定時(shí)器判斷是否過(guò)去了給定輸入時(shí)段(步驟 S15)。輸入時(shí)段被設(shè)置為足以基于一組手勢(shì)信息來(lái)識(shí)別手勢(shì)的時(shí)段(例如，一秒到幾秒的部分)。接下來(lái)，輸入指示傳感器前面的場(chǎng)景的運(yùn)動(dòng)圖像信號(hào)(步驟S17)，如在判斷是否已經(jīng)開(kāi)始輸入的處理中。在運(yùn)動(dòng)圖像傳感器11中，使傳感器前面的場(chǎng)景成像并且生成指示成像結(jié)果的運(yùn)動(dòng)圖像信號(hào)。在運(yùn)動(dòng)圖像處理單元13中，例如，執(zhí)行以下運(yùn)動(dòng)圖像處理。在運(yùn)動(dòng)圖像處理單元13中，首先，根據(jù)運(yùn)動(dòng)圖像信號(hào)產(chǎn)生幀圖像，并生成具有比幀圖像更粗糙的分辨率的灰度圖像。基于灰度圖像之間的幀差異來(lái)檢測(cè)運(yùn)動(dòng)區(qū)域，即變化區(qū)域，并且生成運(yùn)動(dòng)區(qū)域的中心位置作為手勢(shì)信息?？梢酝ㄟ^(guò)使用灰度圖像有效地檢測(cè)運(yùn)動(dòng)區(qū)域。在手勢(shì)信息通知單元15中，向用戶U通知作為指示識(shí)別對(duì)象自身和/或識(shí)別對(duì)象的動(dòng)作的信息的手勢(shì)信息。手勢(shì)信息與生成手勢(shì)信息的次序相關(guān)聯(lián)地被暫時(shí)存儲(chǔ)在手勢(shì)信息存儲(chǔ)單元25中。至少在輸入時(shí)段期間，手勢(shì)信息被暫時(shí)存儲(chǔ)在手勢(shì)信息存儲(chǔ)單元25中。接下來(lái)，執(zhí)行識(shí)別處理(步驟S19)。在識(shí)別處理單元17中，從手勢(shì)信息存儲(chǔ)單元 25讀取從輸入時(shí)段的開(kāi)始時(shí)間起輸入的一組手勢(shì)信息。另外，當(dāng)基于識(shí)別對(duì)象的運(yùn)動(dòng)狀態(tài)判斷出輸入開(kāi)始時(shí)，判斷處理中使用的手勢(shì)信息可以包括在該組手勢(shì)信息之中。另外，從對(duì)照信息存儲(chǔ)單元27讀取作為識(shí)別對(duì)象的每個(gè)手勢(shì)的對(duì)照信息。接下來(lái)，將該組手勢(shì)信息與作為識(shí)別對(duì)象的每個(gè)手勢(shì)的對(duì)照信息進(jìn)行對(duì)照，并生成對(duì)照結(jié)果。接下來(lái)，判斷對(duì)照結(jié)果是否等于或大于第一給定閾值(步驟S21)。在識(shí)別處理單元17中，判斷任何手勢(shì)的對(duì)照結(jié)果是否表明第一閾值或更大的相似度。第一閾值是使得正被識(shí)別的手勢(shì)能夠被適當(dāng)?shù)刈R(shí)別的相似度并且根據(jù)識(shí)別處理所需的準(zhǔn)確度來(lái)設(shè)置第一閾值。因此，判斷出哪個(gè)手勢(shì)被識(shí)別為識(shí)別對(duì)象。例如，輕拂手勢(shì)的相似度被表示為直到手勢(shì)被識(shí)別的實(shí)際運(yùn)動(dòng)距離與要移動(dòng)的距離的比率。相似度可以被表示為包括實(shí)際運(yùn)動(dòng)距離與要移動(dòng)的距離的比率作為參數(shù)的函數(shù)。在這種情況下，當(dāng)距離比率相對(duì)小時(shí)，相似度可以根據(jù)距離比率緩慢增加，而當(dāng)距離比率相對(duì)大時(shí)，相似度可以根據(jù)距離比率快速增加。這里，當(dāng)已經(jīng)識(shí)別到任何手勢(shì)時(shí)，在處理執(zhí)行單元23中執(zhí)行對(duì)應(yīng)于識(shí)別到的手勢(shì)的處理(步驟S29)。判斷識(shí)別處理是否終止(步驟S31)。當(dāng)判斷結(jié)果為正時(shí)，處理終止， 而當(dāng)判斷結(jié)果為負(fù)時(shí)，處理返回到步驟S11。替選地，在步驟Sll與幻9之間的任何時(shí)間可以判斷出識(shí)別處理的終止。另一方面，當(dāng)沒(méi)有識(shí)別到手勢(shì)時(shí)，預(yù)測(cè)將要輸入的手勢(shì)(步驟S2!3)。在手勢(shì)預(yù)測(cè)單元19中，基于從識(shí)別處理單元17提供的對(duì)照結(jié)果，具有最高相似度的手勢(shì)被指定為手勢(shì)預(yù)測(cè)結(jié)果，并且預(yù)測(cè)手勢(shì)的相似度被指定為預(yù)測(cè)結(jié)果的可靠性。接下來(lái)，判斷預(yù)測(cè)結(jié)果的可靠性是否等于或大于第二給定閾值(步驟S25)。在預(yù)測(cè)信息通知單元21中，判斷從手勢(shì)預(yù)測(cè)單元19提供的預(yù)測(cè)結(jié)果的可靠性是否等于或大于第二閾值。第二閾值是使得作為識(shí)別對(duì)象的任何手勢(shì)的開(kāi)始被識(shí)別的相似度并根據(jù)識(shí)別處理所需的識(shí)別準(zhǔn)確度來(lái)設(shè)置第二閾值。這里，第二閾值被設(shè)置為比用于手勢(shì)識(shí)別的第一閾值小的相似度。因此，判斷作為識(shí)別對(duì)象的任何手勢(shì)的開(kāi)始是否被識(shí)別。這里，當(dāng)判斷結(jié)果為正時(shí)，預(yù)測(cè)信息通知單元21向用戶U通知手勢(shì)預(yù)測(cè)結(jié)果本身和/或預(yù)測(cè)結(jié)果的可靠性(步驟S27)，并且當(dāng)判斷結(jié)果為負(fù)時(shí)，預(yù)測(cè)信息通知單元21不通知用戶U。也就是，當(dāng)作為識(shí)別對(duì)象的任何手勢(shì)的開(kāi)始被識(shí)別時(shí)通知預(yù)測(cè)信息。處理返回到步驟S15，在步驟S15判斷輸入時(shí)段是否已經(jīng)過(guò)去。在圖4A至圖4E中，示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知。如圖4A所示， 當(dāng)識(shí)別到傳感器前面的正被識(shí)別的對(duì)象0(用戶U的手0)存在時(shí)，判斷出已經(jīng)開(kāi)始手勢(shì)輸入。在顯示器D上顯示通過(guò)捕獲手0獲得的圖像。當(dāng)判斷出已經(jīng)開(kāi)始輸入時(shí)，由于處理定時(shí)器的啟動(dòng)而開(kāi)始輸入時(shí)段，并且開(kāi)始手勢(shì)信息的輸入和識(shí)別處理的執(zhí)行。另外，在識(shí)別處理的執(zhí)行期間，在顯示器D上實(shí)時(shí)顯示通過(guò)捕獲傳感器前面的場(chǎng)景獲得的圖像。如圖4B所示，當(dāng)判斷出預(yù)測(cè)任何手勢(shì)的結(jié)果的可靠性等于或大于第二閾值時(shí)，開(kāi)始手勢(shì)預(yù)測(cè)信息的通知。在顯示器D上顯示通過(guò)捕獲手0獲得的圖像和指示預(yù)測(cè)信息的窗口 W。在窗口 W中顯示指示作為識(shí)別對(duì)象的手勢(shì)(例如，左輕拂手勢(shì)、右輕拂手勢(shì)和遮蔽手勢(shì))的圖標(biāo)II、12和13和指示預(yù)測(cè)結(jié)果的可靠性的水平儀Ll和L2。在圖4B示出的示例中，當(dāng)用戶U將手0從圖4A示出的狀態(tài)向右移動(dòng)特定距離時(shí)， 指定右輕拂手勢(shì)作為預(yù)測(cè)結(jié)果，并判斷出預(yù)測(cè)結(jié)果的可靠性等于或大于第二閾值。在窗口 W中，指示右輕拂手勢(shì)的圖標(biāo)12被高亮顯示并且用于右輕拂手勢(shì)的水平儀L2略微增加。如圖4C所示，當(dāng)用戶U進(jìn)一步將手0從圖4B示出的狀態(tài)向右移動(dòng)時(shí)，獲得指示更高相似度的對(duì)照結(jié)果，并且判斷出預(yù)測(cè)結(jié)果的可靠性進(jìn)一步增加。在窗口 W中，用于右輕拂手勢(shì)的水平儀L2進(jìn)一步增加。這里，當(dāng)用戶U進(jìn)一步將手0從圖4C所示的狀態(tài)向右移動(dòng)(如圖4D所示)并且在輸入時(shí)段過(guò)去之前判斷出右輕拂手勢(shì)的對(duì)照結(jié)果指示第一閾值或更大的相似度時(shí)，識(shí)別到右輕拂手勢(shì)。在窗口 W中，用于右輕拂手勢(shì)的水平儀L2達(dá)到最高水平。另一方面，當(dāng)用戶U沒(méi)有從圖4C所示的狀態(tài)向右移動(dòng)手0時(shí)(如圖4E所示)并且在輸入時(shí)段過(guò)去之前沒(méi)有判斷出右輕拂手勢(shì)的對(duì)照結(jié)果指示第一閾值或更大的相似度時(shí)，沒(méi)有識(shí)別到右輕拂手勢(shì)并且識(shí)別處理停止。在顯示器D上，沒(méi)有顯示窗口 W并且僅顯示了通過(guò)捕獲手0獲得的圖像。在圖5A至圖5C中，示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的其它示例。在圖5A所示的示例中，當(dāng)左輕拂手勢(shì)和右輕拂手勢(shì)是識(shí)別對(duì)象時(shí)，用戶U向上移動(dòng)手0。在這種情況下，由于沒(méi)有生成指示向左和向右移動(dòng)的手勢(shì)信息，所以沒(méi)有判斷預(yù)測(cè)任何手勢(shì)的結(jié)果的可靠性等于或大于第二閾值。因此，沒(méi)有開(kāi)始手勢(shì)預(yù)測(cè)信息的通知。由此，由于盡管手0有移動(dòng)也沒(méi)有通知預(yù)測(cè)信息，所以用戶U能夠通知手勢(shì)信息的錯(cuò)誤輸入。同時(shí)，在圖5B所示的示例中，用戶U在右方向和上方向上移動(dòng)手0。在這種情況下，由于生成指示向右略微移動(dòng)的手勢(shì)信息作為識(shí)別對(duì)象的運(yùn)動(dòng)向量的分量，所以判斷出， 用戶U某種程度上在右方向和上方向上移動(dòng)手0時(shí)預(yù)測(cè)到右輕拂手勢(shì)的結(jié)果的可靠性等于或大于第二閾值。因此，該顯示比用戶向右移動(dòng)手0的情況要遲，但是開(kāi)始手勢(shì)預(yù)測(cè)信息的通知。在窗口 W中，指示右輕拂手勢(shì)的圖標(biāo)12被高亮顯示，并且右輕拂手勢(shì)的水平儀L2 略微增加。由此，由于窗口 W的顯示是遲的，并且盡管手0有移動(dòng)，預(yù)測(cè)結(jié)果的可靠性也沒(méi)有按照期望增加，所以用戶U能夠通知手勢(shì)信息的錯(cuò)誤輸入。在圖5C所示的示例中，用戶U從圖5B所示的狀態(tài)向右移動(dòng)手0。在這種情況下， 由于輸入了指示向右移動(dòng)的手勢(shì)信息，所以獲得指示更高相似度的對(duì)照結(jié)果，并且判斷出預(yù)測(cè)結(jié)果的可靠性進(jìn)一步增加。在窗口 W中，右輕拂手勢(shì)的水平儀L2進(jìn)一步增加。由此， 用戶U能夠通知手勢(shì)信息的錯(cuò)誤輸入并校正該輸入，并且能夠確認(rèn)由于預(yù)測(cè)結(jié)果的可靠性按照期望增加從而手勢(shì)信息的輸入是適當(dāng)?shù)摹Ｔ趫D6A和圖6B中，示出了預(yù)測(cè)結(jié)果和預(yù)測(cè)結(jié)果的可靠性的通知的其它示例。在圖6A所示的示例中，盡管用戶U期望輸入左輕拂手勢(shì)，但是用戶U錯(cuò)誤地向右略微移動(dòng)手 0。在這種情況下，由于生成指示向右略微移動(dòng)的手勢(shì)信息，所以判斷出預(yù)測(cè)右輕拂手勢(shì)的結(jié)果的可靠性等于或大于第二閾值。因此，開(kāi)始手勢(shì)預(yù)測(cè)信息的通知。在窗口 W中，指示右輕拂手勢(shì)的圖標(biāo)12被高亮顯示，并且右輕拂手勢(shì)的水平儀L2 略微增加。由此，通過(guò)確認(rèn)盡管用戶U期望輸入左輕拂手勢(shì)，但指示右輕拂手勢(shì)的圖標(biāo)12 被高亮顯示，用戶U能夠通知手勢(shì)信息的錯(cuò)誤輸入。在圖6B所示的示例中，用戶U從圖6A所示的狀態(tài)向左移動(dòng)手0。在這種情況下， 由于生成了指示向左移動(dòng)的手勢(shì)信息，所以預(yù)測(cè)左輕拂手勢(shì)的結(jié)果指示第二閾值或更大的相似度。因此，在窗口 W中，指示左輕拂手勢(shì)的而不是右輕拂手勢(shì)的圖標(biāo)Il被高亮顯示，并且左輕拂手勢(shì)的水平儀Ll增加。因此，用戶U能夠通知手勢(shì)信息的錯(cuò)誤輸入并且然后校正該輸入。在圖7中，示出了手勢(shì)列表的通知的示例。在手勢(shì)識(shí)別設(shè)備1中，當(dāng)在輸入時(shí)段內(nèi)沒(méi)有識(shí)別到手勢(shì)時(shí)，記錄識(shí)別失敗日志。當(dāng)在給定時(shí)段內(nèi)以給定閾值或更大的頻率來(lái)記錄識(shí)別失敗日志時(shí)，向用戶U通知要識(shí)別的手勢(shì)列表G。如圖7所示，在手勢(shì)列表G中，示出了要識(shí)別的手勢(shì)類型和輸入手勢(shì)的方法。在手勢(shì)列表中，例如，示出了如下指示能夠通過(guò)向右和向左移動(dòng)手0來(lái)執(zhí)行音樂(lè)播放的快進(jìn)和倒回，并且通過(guò)遮蔽運(yùn)動(dòng)圖像傳感器11的前面來(lái)執(zhí)行停止。這允許不熟悉系統(tǒng)操縱的用戶 U通過(guò)參考手勢(shì)列表G來(lái)學(xué)習(xí)要識(shí)別的手勢(shì)。
[4.預(yù)測(cè)信息的通知的變體]在圖8A至圖8C中，示出了預(yù)測(cè)結(jié)果的可靠性的通知的示例。在圖8A所示的示例中，當(dāng)利用對(duì)象O繪制圓的圓圈手勢(shì)是識(shí)別對(duì)象時(shí)，利用指示對(duì)象0的移動(dòng)的軌跡線TL(統(tǒng)稱軌跡線)通知預(yù)測(cè)手勢(shì)的結(jié)果的可靠性。如圖8A所示，當(dāng)用戶U用手0繪制象限時(shí)，在顯示器D上顯示通過(guò)捕獲手0獲得的實(shí)時(shí)圖像和指示手0的運(yùn)動(dòng)過(guò)程的象限軌跡線TL1。 軌跡線TLl被顯示為相對(duì)細(xì)線或者淺色或黑色線。如圖8B所示，當(dāng)用戶U用手0從圖8A所示的狀態(tài)繪制半圓時(shí)，在顯示器D上顯示指示手0的運(yùn)動(dòng)過(guò)程的半圓軌跡線TL2。這里，與圖8A所示的軌跡線TLl相比，軌跡線TL2 被顯示為粗線或者黑色或亮色線。也就是，由于指定圖8B所示的狀態(tài)下的圓圈手勢(shì)的預(yù)測(cè)結(jié)果的可靠性與圖8A所示的狀態(tài)相比增加，所以通過(guò)軌跡線TL的類型、顏色或色度通知用戶U可靠性增加。另外，如圖8C所示，當(dāng)用戶U用手0從圖8B所示的狀態(tài)幾乎繪出圓時(shí)，在顯示器 D上顯示指示手0的運(yùn)動(dòng)過(guò)程的基本圓形軌跡線TL3。這里，與圖8B所示的軌跡線TL2比較，軌跡線TL3被顯示為粗線或者黑色或亮色線。當(dāng)判斷出對(duì)照?qǐng)A圈手勢(shì)的結(jié)果指示第一閾值或更大的相似度時(shí)，識(shí)別到圓圈手勢(shì)。在圖9A和圖9B中，示出了預(yù)測(cè)結(jié)果的可靠性的通知的另一示例。在圖9A所示的示例中，當(dāng)右輕拂手勢(shì)是識(shí)別對(duì)象時(shí)，使用指示對(duì)象0的運(yùn)動(dòng)的軌跡點(diǎn)TP來(lái)通知手勢(shì)預(yù)測(cè)結(jié)果的可靠性。如圖9A所示，當(dāng)用戶U將手0向右移動(dòng)了特定距離時(shí)，在顯示器D上顯示通過(guò)捕獲手0獲得的實(shí)時(shí)圖像和指示手0的運(yùn)動(dòng)過(guò)程的多個(gè)軌跡點(diǎn)TP。通過(guò)將白點(diǎn)符號(hào)和位于白點(diǎn)符號(hào)中心處的黑點(diǎn)符號(hào)組合來(lái)顯示軌跡點(diǎn)TP。如圖9B所示，當(dāng)用戶U從圖9A所示的狀態(tài)進(jìn)一步向右移動(dòng)手0時(shí)，在顯示器D上進(jìn)一步顯示指示手0的運(yùn)動(dòng)過(guò)程的多個(gè)軌跡點(diǎn)TP。這里，隨著手0的運(yùn)動(dòng)距離增加，以更大尺寸顯示位于白點(diǎn)符號(hào)中心處的黑點(diǎn)符號(hào)。也就是，隨著手0的運(yùn)動(dòng)距離增加，指定右輕拂手勢(shì)的預(yù)測(cè)結(jié)果的可靠性增加，由此通過(guò)黑點(diǎn)符號(hào)的改變的尺寸向用戶U通知可靠性增加。當(dāng)判斷出右輕拂手勢(shì)的對(duì)照結(jié)果指示第一閾值或更大的相似度時(shí)，識(shí)別到右輕拂手勢(shì)。[5.手勢(shì)識(shí)別設(shè)備的修改示例]接下來(lái)，將描述根據(jù)修改示例的手勢(shì)識(shí)別設(shè)備2。在根據(jù)修改示例的手勢(shì)識(shí)別設(shè)備 2中，利用語(yǔ)音傳感器四和/或運(yùn)動(dòng)圖像傳感器11識(shí)別到動(dòng)作手勢(shì)和/或講話手勢(shì)。如圖10所示，手勢(shì)識(shí)別設(shè)備2包括運(yùn)動(dòng)圖像傳感器11、運(yùn)動(dòng)圖像處理單元13、手勢(shì)信息通知單元15、識(shí)別處理單元17、手勢(shì)預(yù)測(cè)單元19、預(yù)測(cè)信息通知單元21、處理執(zhí)行單元23、手勢(shì)信息存儲(chǔ)單元25、對(duì)照信息存儲(chǔ)單元27、語(yǔ)音傳感器四和語(yǔ)音處理單元31。下文中，將省略關(guān)于上述手勢(shì)識(shí)別設(shè)備1的重疊說(shuō)明。語(yǔ)音傳感器四在傳感器周?chē)邮沼脩鬠的話語(yǔ)，并生成指示接收話語(yǔ)的結(jié)果的語(yǔ)音信號(hào)。語(yǔ)音處理單元31處理從語(yǔ)音傳感器四提供的語(yǔ)音信號(hào)并生成講話手勢(shì)信息。講話手勢(shì)信息是指示用戶U的講話的信息，諸如字、短語(yǔ)、從句和句子。講話手勢(shì)信息被暫時(shí)存儲(chǔ)在手勢(shì)信息存儲(chǔ)單元25中。識(shí)別處理單元17讀取來(lái)自手勢(shì)信息存儲(chǔ)單元25的動(dòng)作手勢(shì)和/或講話手勢(shì)的手勢(shì)信息和來(lái)自對(duì)照信息存儲(chǔ)單元27的對(duì)照信息，并基于對(duì)照信息來(lái)處理手勢(shì)信息。這里， 講話手勢(shì)的對(duì)照信息被設(shè)定為給定語(yǔ)音模式(例如，音素的高度、長(zhǎng)度和音量)。對(duì)照結(jié)果對(duì)應(yīng)于由一組手勢(shì)信息表示的語(yǔ)音模式與由每個(gè)手勢(shì)的對(duì)照信息表示的語(yǔ)音模式之間的相似度。這里，針對(duì)作為動(dòng)作手勢(shì)和講話手勢(shì)的組合的復(fù)合手勢(shì)，通過(guò)將對(duì)照動(dòng)作手勢(shì)的結(jié)果和對(duì)照講話手勢(shì)的結(jié)果組合來(lái)獲得對(duì)照結(jié)果，作為復(fù)合手勢(shì)。手勢(shì)信息通知單元15向用戶U通知從運(yùn)動(dòng)圖像處理單元13和語(yǔ)音處理單元31 提供的動(dòng)作手勢(shì)和/或講話手勢(shì)的手勢(shì)信息。講話手勢(shì)的手勢(shì)信息可以是指示識(shí)別到的語(yǔ)音模式的字符信息或敘述識(shí)別到的語(yǔ)音模式的語(yǔ)音信息。在手勢(shì)信息通知單元15中，通過(guò)顯示器D或未示出的揚(yáng)聲器向用戶U通知手勢(shì)信息。手勢(shì)預(yù)測(cè)單元19基于從識(shí)別處理單元17提供的對(duì)照結(jié)果來(lái)預(yù)測(cè)要輸入的手勢(shì)。 在手勢(shì)預(yù)測(cè)單元19中，具有最高相似度的手勢(shì)被指定為手勢(shì)預(yù)測(cè)結(jié)果。這里，對(duì)于復(fù)合手勢(shì)，通過(guò)將對(duì)照動(dòng)作手勢(shì)的結(jié)果和對(duì)照講話手勢(shì)的結(jié)果的相似度組合來(lái)指定手勢(shì)預(yù)測(cè)結(jié)^ ο例如，當(dāng)識(shí)別到講話手勢(shì)“Saisei Okuri ”或“Saisei Modosi ”時(shí)，處理執(zhí)行單元 23可以執(zhí)行前進(jìn)或倒回處理。當(dāng)與輕拂手勢(shì)一起識(shí)別到講話手勢(shì)“Okuri”或“Modosi”時(shí)， 處理執(zhí)行單元23可以執(zhí)行前進(jìn)或倒回處理。[6.綜述]如上所述，根據(jù)本發(fā)明的實(shí)施例的手勢(shì)識(shí)別設(shè)備1或2和手勢(shì)識(shí)別方法，在手勢(shì)識(shí)別處理中，根據(jù)一組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)手勢(shì)，并且向用戶U通知關(guān)于手勢(shì)預(yù)測(cè)結(jié)果的預(yù)測(cè)信息。因此，用戶U通過(guò)借助預(yù)測(cè)信息的通知而繼續(xù)輸入手勢(shì)信息， 能夠確認(rèn)哪種手勢(shì)被識(shí)別。因此，當(dāng)沒(méi)有獲得期望預(yù)測(cè)信息時(shí)，能夠向用戶U通知手勢(shì)信息的錯(cuò)誤輸入并校正該輸入。另外，用戶U能夠通過(guò)反復(fù)試驗(yàn)輸入手勢(shì)信息和確認(rèn)預(yù)測(cè)信息而直覺(jué)地了解如何輸入手勢(shì)。因此，根據(jù)本發(fā)明的實(shí)施例的手勢(shì)識(shí)別設(shè)備1或2和手勢(shì)識(shí)別方法，可利用手勢(shì)預(yù)測(cè)信息執(zhí)行適當(dāng)?shù)氖謩?shì)反饋。本領(lǐng)域的技術(shù)人員應(yīng)理解，可以根據(jù)設(shè)計(jì)要求和其它因素進(jìn)行各種修改、組合、子組合和變更，只要它們落在所附權(quán)利要求或其等同物的范圍內(nèi)。例如，主要描述了通知手勢(shì)預(yù)測(cè)信息和手勢(shì)信息作為圖像信息的情況。然而，可以通知手勢(shì)預(yù)測(cè)信息和手勢(shì)信息作為諸如替代圖像信息(或與圖像信息一起)的語(yǔ)音信息的 fn息ο本發(fā)明公開(kāi)了以下實(shí)施例一種手勢(shì)識(shí)別設(shè)備，包括識(shí)別單元，其用于基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)；預(yù)測(cè)單元，其用于根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)所述手勢(shì)；通知單元，其用于向用戶通知關(guān)于預(yù)測(cè)所述手勢(shì)的結(jié)果的預(yù)測(cè)信息。本發(fā)明公開(kāi)了以下實(shí)施例一種手勢(shì)識(shí)別方法，其包括基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)的步驟，其中，所述識(shí)別步驟包括根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)所述手勢(shì)，以及向用戶通知關(guān)于預(yù)測(cè)所述手勢(shì)的結(jié)果的預(yù)測(cè)信肩、ο本申請(qǐng)包含與在2010年6月M日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP 2010-143651中公開(kāi)的主題相關(guān)的主題，其全部?jī)?nèi)容通過(guò)引用并入本申請(qǐng)。
權(quán)利要求
1.一種手勢(shì)識(shí)別設(shè)備，包括識(shí)別單元，其用于基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)；預(yù)測(cè)單元，其用于根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)所述手勢(shì)；通知單元，其用于向用戶通知關(guān)于預(yù)測(cè)所述手勢(shì)的結(jié)果的預(yù)測(cè)信息。
2.根據(jù)權(quán)利要求1所述的手勢(shì)識(shí)別設(shè)備，其中所述手勢(shì)的所述預(yù)測(cè)信息包括所述手勢(shì)預(yù)測(cè)結(jié)果的可靠性。
3.根據(jù)權(quán)利要求2所述的手勢(shì)識(shí)別設(shè)備，其中所述預(yù)測(cè)結(jié)果的可靠性被表示為所述中途輸入手勢(shì)信息與該組手勢(shì)信息的比率。
4.根據(jù)權(quán)利要求3所述的手勢(shì)識(shí)別設(shè)備，其中當(dāng)所述比率增加時(shí)，所述預(yù)測(cè)結(jié)果的可靠性急劇增加。
5.根據(jù)權(quán)利要求1所述的手勢(shì)識(shí)別設(shè)備，其中當(dāng)所述預(yù)測(cè)結(jié)果的可靠性等于或大于給定閾值時(shí)，所述通知單元開(kāi)始所述預(yù)測(cè)信息的通知。
6.根據(jù)權(quán)利要求5所述的手勢(shì)識(shí)別設(shè)備，其中當(dāng)在所述輸入時(shí)段沒(méi)有輸入該組手勢(shì)信息時(shí)，所述通知單元終止所述預(yù)測(cè)信息的通知。
7.根據(jù)權(quán)利要求1所述的手勢(shì)識(shí)別設(shè)備，其中當(dāng)在所述輸入時(shí)段沒(méi)有輸入該組手勢(shì)信息的頻率等于或大于給定閾值時(shí)，所述通知單元通知可識(shí)別手勢(shì)的列表。
8.根據(jù)權(quán)利要求1所述的手勢(shì)識(shí)別設(shè)備，還包括用于向用戶通知所述手勢(shì)信息的第二通知單元。
9.根據(jù)權(quán)利要求1所述的手勢(shì)識(shí)別設(shè)備，還包括用于輸入圖像信息作為所述手勢(shì)信息的輸入單元。
10.根據(jù)權(quán)利要求1所述的手勢(shì)識(shí)別設(shè)備，還包括用于輸入語(yǔ)音信息作為所述手勢(shì)信息的輸入單元。
11.一種手勢(shì)識(shí)別方法，其包括基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)的步驟，其中，所述識(shí)別步驟包括根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)所述手勢(shì)，以及向用戶通知關(guān)于預(yù)測(cè)所述手勢(shì)的結(jié)果的預(yù)測(cè)信息。
12.—種使計(jì)算機(jī)執(zhí)行以下步驟的程序基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)，其中，所述識(shí)別步驟包括根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)所述手勢(shì)，以及向用戶通知關(guān)于預(yù)測(cè)所述手勢(shì)的結(jié)果的預(yù)測(cè)信息。
全文摘要
本發(fā)明公開(kāi)了一種手勢(shì)識(shí)別設(shè)備、手勢(shì)識(shí)別方法和程序。手勢(shì)識(shí)別設(shè)備包括識(shí)別單元，其用于基于在給定輸入時(shí)段輸入的一組手勢(shì)信息來(lái)識(shí)別手勢(shì)；預(yù)測(cè)單元，其用于根據(jù)在該組手勢(shì)信息之中的中途輸入手勢(shì)信息來(lái)預(yù)測(cè)手勢(shì)；通知單元，其用于向用戶通知關(guān)于預(yù)測(cè)手勢(shì)的結(jié)果的預(yù)測(cè)信息。用戶通過(guò)借助預(yù)測(cè)信息的通知而繼續(xù)輸入手勢(shì)信息，能夠確認(rèn)哪種手勢(shì)被識(shí)別。
文檔編號(hào)G06F3/01GK102298442SQ20111016914
公開(kāi)日2011年12月28日 申請(qǐng)日期2011年6月17日 優(yōu)先權(quán)日2010年6月24日
發(fā)明者大木嘉人, 繁田修 申請(qǐng)人:索尼公司