一種人機(jī)交互方法及相關(guān)設(shè)備、系統(tǒng)的制作方法
【專利摘要】本發(fā)明涉及人機(jī)交互【技術(shù)領(lǐng)域】，公開(kāi)了一種人機(jī)交互方法及相關(guān)設(shè)備、系統(tǒng)。其中，該方法包括：終端設(shè)備利用攝像頭模塊捕獲手勢(shì)觸及輔助光幕后形成的輔助光源；所述終端設(shè)備確定所述輔助光源在所述攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡；所述終端設(shè)備根據(jù)所述位置和/或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。實(shí)施本發(fā)明可以提高手勢(shì)輸入的抗干擾能力，從而提升操控準(zhǔn)確率。
【專利說(shuō)明】一種人機(jī)交互方法及相關(guān)設(shè)備、系統(tǒng)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及人機(jī)交互【技術(shù)領(lǐng)域】，具體涉及一種人機(jī)交互方法及相關(guān)設(shè)備、系統(tǒng)。
【背景技術(shù)】
[0002]人機(jī)交互技術(shù)(Human-ComputerInteraction Techniques)通常是指通過(guò)終端設(shè)備(如計(jì)算機(jī)、智能手機(jī)等)的輸入、輸出設(shè)備，以有效的方式實(shí)現(xiàn)人與終端設(shè)備對(duì)話的技術(shù)。它包括終端設(shè)備通過(guò)輸出或顯示設(shè)備給人提供大量有關(guān)信息及提示請(qǐng)示等，人通過(guò)輸入設(shè)備給終端設(shè)備輸入有關(guān)操作指令，可以控制終端設(shè)備執(zhí)行相應(yīng)的操作。人機(jī)交互技術(shù)是計(jì)算機(jī)用戶界面設(shè)計(jì)中的重要內(nèi)容之一，它與認(rèn)知學(xué)、人機(jī)工程學(xué)、心理學(xué)等學(xué)科領(lǐng)域有密切的聯(lián)系。
[0003]人機(jī)交互技術(shù)已經(jīng)由最初的鍵盤(pán)輸入、鼠標(biāo)輸入逐漸演進(jìn)為觸摸屏輸入、手勢(shì)輸入。其中，手勢(shì)輸入由于具有操控直觀、用戶體驗(yàn)高等優(yōu)點(diǎn)，正越來(lái)越受到人們的青睞。而在實(shí)際應(yīng)用中，手勢(shì)輸入一般都是通過(guò)普通攝像頭直接捕捉和理解手勢(shì)來(lái)實(shí)現(xiàn)的。實(shí)踐發(fā)現(xiàn)，采用普通攝像頭直接捕捉和理解手勢(shì)的抗干擾能力差，從而導(dǎo)致操控準(zhǔn)確率低。

【發(fā)明內(nèi)容】

[0004]本發(fā)明實(shí)施例所要解決的技術(shù)問(wèn)題是提供一種人機(jī)交互方法及相關(guān)設(shè)備、系統(tǒng)，能夠提高手勢(shì)輸入的抗干擾能力，從而提升操控的準(zhǔn)確率。
[0005]本發(fā)明實(shí)施例第一方面提供一種人機(jī)交互方法，包括:
[0006]終端設(shè)備利用攝像頭模塊捕獲手勢(shì)觸及輔助光幕后形成的輔助光源；
[0007]所述終端設(shè)備確定所述輔助光源在所述攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡；
[0008]所述終端設(shè)備根據(jù)所述位置或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。
[0009]本發(fā)明實(shí)施例第二方面提供的一種終端設(shè)備，包括:
[0010]攝像頭模塊，用于捕獲手勢(shì)觸及輔助光幕后形成的輔助光源；
[0011]確定模塊，用于確定所述輔助光源在所述攝像頭模塊拍攝圖像中的位置或運(yùn)動(dòng)軌跡；
[0012]執(zhí)行模塊，用于根據(jù)所述位置和/或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。
[0013]本發(fā)明實(shí)施例第三方面提供一種人機(jī)交互系統(tǒng)，包括輔助光幕、攝像頭以及終端設(shè)備，所述攝像頭內(nèi)置在所述終端設(shè)備中，或以有線或無(wú)線方式與所述終端設(shè)備連接，所述攝像頭的拍攝區(qū)域覆蓋所述輔助光幕的工作覆蓋區(qū)域，其中:
[0014]所述輔助光幕，用于供手勢(shì)觸及以形成輔助光源；
[0015]所述攝像頭，用于捕獲手勢(shì)觸及所述輔助光幕后形成的輔助光源；
[0016]所述終端設(shè)備包括:
[0017]確定模塊，用于確定所述輔助光源在所述攝像頭拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡；[0018]執(zhí)行模塊，用于根據(jù)所述位置或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。
[0019]本發(fā)明實(shí)施例中，終端設(shè)備可以利用攝像頭模塊來(lái)捕獲手勢(shì)觸及輔助光幕后形成的輔助光源，并且確定輔助光源在攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡，進(jìn)而可以查詢?cè)撐恢煤?或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼并執(zhí)行該編碼對(duì)應(yīng)的操作指令。可見(jiàn)，本發(fā)明實(shí)施例是通過(guò)輔助光源來(lái)作為人機(jī)交互的依據(jù)的，這不僅具有非常良好的抗干擾能力以及更高的操控準(zhǔn)確率，還具有很好的商業(yè)使用價(jià)值。
【專利附圖】

【附圖說(shuō)明】
[0020]為了更清楚地說(shuō)明本發(fā)明實(shí)施例中的技術(shù)方案，下面將對(duì)實(shí)施例中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見(jiàn)地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)性的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
[0021]圖1是本發(fā)明實(shí)施例提供的一種人機(jī)交互方法的流程圖；
[0022]圖2是本發(fā)明實(shí)施例提供的另一種人機(jī)交互方法的流程圖；
[0023]圖3是本發(fā)明實(shí)施例提供的一種輔助光幕的實(shí)現(xiàn)示意圖；
[0024]圖4是本發(fā)明實(shí)施例提供的一種攝像頭圖像處理的示意圖；
[0025]圖5是本發(fā)明實(shí)施例提供的一種攝像頭圖像方格化的示意圖；
[0026]圖6是本發(fā)明實(shí)施例提供的另一種人機(jī)交互方法的流程圖；
[0027]圖7是本發(fā)明實(shí)施例提供的一種攝像頭圖像方格區(qū)域中的運(yùn)動(dòng)軌跡的示意圖；
[0028]圖8是本發(fā)明實(shí)施例提供的一種終端設(shè)備的結(jié)構(gòu)圖；
[0029]圖9是本發(fā)明實(shí)施例提供的一種人機(jī)交互系統(tǒng)的結(jié)構(gòu)圖。
【具體實(shí)施方式】
[0030]下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒(méi)有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。
[0031 ] 本發(fā)明實(shí)施例提供了 一種人機(jī)交互方法及相關(guān)設(shè)備、系統(tǒng)，在該人機(jī)交互方法中，終端設(shè)備利用攝像頭模塊捕獲手勢(shì)觸及輔助光幕后形成的輔助光源，并確定該輔助光源在攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡，進(jìn)而終端設(shè)備根據(jù)該位置或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。能夠提高手勢(shì)輸入的抗干擾能力，從而提升操控的準(zhǔn)確率。以下分別進(jìn)行詳細(xì)說(shuō)明。
[0032]請(qǐng)參閱圖1，圖1是本發(fā)明實(shí)施例提供的一種人機(jī)交互方法的流程圖。如圖1所示，該人機(jī)交互方法可以包括以下步驟。
[0033]101、終端設(shè)備利用攝像頭模塊捕獲手勢(shì)觸及輔助光幕后形成的輔助光源。
[0034]本實(shí)施例中，終端設(shè)備可以是裝載有控制軟件的，并且具有計(jì)算能力的電腦、智能手機(jī)、電視機(jī)以及各種家庭智能設(shè)備、商用智能設(shè)備、辦公智能設(shè)備、移動(dòng)互聯(lián)網(wǎng)設(shè)備(Mobile Internet Devices, MID)等,本發(fā)明實(shí)施例不作具體限定。
[0035]本實(shí)施例中，攝像頭t旲塊可以內(nèi)直在終纟而設(shè)備中，例如帶攝像頭的電腦、智能手機(jī)等，也可以獨(dú)立于終端設(shè)備部署，例如，攝像頭模塊可以通過(guò)通用串行總線(UniversalSerial BUS，USB)與終端設(shè)備連接，或者攝像頭模塊也可以通過(guò)遠(yuǎn)程網(wǎng)(Wide AreaNetwork, WAN)與終端設(shè)備連接，或者攝像頭模塊也可以通過(guò)藍(lán)牙、紅外線等無(wú)線方式與終端設(shè)備連接，本發(fā)明實(shí)施例對(duì)終端設(shè)備和攝像頭模塊之間的部署方式以及連接方式不作具體限定，只要連接關(guān)系本質(zhì)存在即可。
[0036]本實(shí)施例中，終端設(shè)備可以利用攝像頭模塊來(lái)捕獲攜帶有手勢(shì)觸及輔助光幕后形成的輔助光源的圖像，并對(duì)該圖像進(jìn)行處理，以獲得僅顯示手勢(shì)觸及輔助光幕后形成的輔助光源的圖像，從而實(shí)現(xiàn)上述步驟101。
[0037]其中，對(duì)攝像頭圖像進(jìn)行處理以獲得僅顯示手勢(shì)觸及輔助光幕后形成的輔助光源的圖像的具體實(shí)現(xiàn)過(guò)程，本發(fā)明實(shí)施例后續(xù)將舉例進(jìn)行詳細(xì)說(shuō)明，此處先不作細(xì)述。
[0038]一個(gè)實(shí)施例中，攝像頭模塊可以是紅外光攝像頭，相應(yīng)地，輔助光幕可以為紅外光輔助光幕，此時(shí)手勢(shì)觸及輔助光幕后形成的輔助光源高亮的輔助光源。
[0039]另一個(gè)實(shí)施例中，攝像頭模塊可以是可見(jiàn)光攝像頭，相應(yīng)地，輔助光幕可以為可見(jiàn)光輔助光幕，此時(shí)手勢(shì)觸及輔助光幕后形成的輔助光源為深暗的輔助光源。
[0040]其中，關(guān)于輔助光幕的具體實(shí)現(xiàn)方式，本發(fā)明實(shí)施例后續(xù)將舉例進(jìn)行詳細(xì)說(shuō)明，此處先不作細(xì)述。
[0041]102、終端設(shè)備確定輔助光源在攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡。
[0042]本實(shí)施例中，如果手勢(shì)是以點(diǎn)擊的方式來(lái)觸及輔助光幕以形成輔助光源，那么終端設(shè)備可以確定輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域，并以輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域作為輔助光源在攝像頭模塊拍攝圖像中的位置；而如果手勢(shì)是以滑動(dòng)的方式來(lái)觸及輔助光幕以形成輔助光源，那么終端設(shè)備可以確定輔助光源所經(jīng)過(guò)的攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向，并以輔助光源所經(jīng)過(guò)的攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向作為輔助光源在攝像頭模塊拍攝圖像中的運(yùn)動(dòng)軌跡。
[0043]本實(shí)施例中，攝像頭模塊拍攝圖像可以以某一個(gè)角(如左上角)為原點(diǎn)被終端設(shè)備均勻地劃分成多個(gè)方格區(qū)域。
[0044]103、終端設(shè)備查詢上述位置和/或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼。
[0045]本實(shí)施例中，終端設(shè)備的控制軟件可以根據(jù)輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域，從存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系中查詢輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域?qū)?yīng)的編碼；
[0046]或者，終端設(shè)備的控制軟件可以根據(jù)輔助光源所經(jīng)過(guò)的攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向，從存儲(chǔ)的方格區(qū)域數(shù)量、方向以及編碼三者的映射關(guān)系中查詢輔助光源所經(jīng)過(guò)的攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向?qū)?yīng)的編碼。
[0047]其中，關(guān)于方格區(qū)域與編碼的映射關(guān)系，以及方格區(qū)域數(shù)量、方向以及編碼三者的映射關(guān)系，本發(fā)明實(shí)施例后續(xù)將舉例進(jìn)行詳細(xì)說(shuō)明，此處先不作細(xì)述。
[0048]104、終端設(shè)備根據(jù)查詢到的編碼，從存儲(chǔ)的編碼與操作指令的映射關(guān)系中獲取該編碼對(duì)應(yīng)的操作指令，并執(zhí)行編碼對(duì)應(yīng)的操作指令。
[0049]其中，關(guān)于編碼與操作指令的映射關(guān)系，本發(fā)明實(shí)施例后續(xù)將舉例進(jìn)行詳細(xì)說(shuō)明，此處先不作細(xì)述。
[0050]本實(shí)施例中，操作指令可以是電腦操作指令(如打開(kāi)、關(guān)閉、放大、縮小等鼠標(biāo)操作指令)或電視機(jī)遙控指令(如開(kāi)機(jī)、關(guān)機(jī)、放大音量、減小音量、換下一頻道、換上一頻道、靜音等遙控器操作指令)。
[0051]本實(shí)施例中，所述輔助光幕與顯示屏幕重疊或平行。所述輔助光幕與顯示屏幕平行時(shí)，所述輔助光幕為紅外光輔助光幕并疊加一個(gè)可見(jiàn)光光幕，用以指示所述輔助光幕的位置。
[0052]在圖1所描述的人機(jī)交互方法中，終端設(shè)備可以利用攝像頭模塊來(lái)捕獲手勢(shì)觸及輔助光幕后形成的輔助光源，并且確定輔助光源在攝像頭模塊拍攝圖像中的位置或運(yùn)動(dòng)軌跡，進(jìn)而可以查詢?cè)撐恢煤?或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼，以及根據(jù)該編碼，從存儲(chǔ)的編碼與操作指令的映射關(guān)系中獲取該編碼對(duì)應(yīng)的操作指令并執(zhí)行該編碼對(duì)應(yīng)的操作指令?？梢?jiàn)，圖1所描述的人機(jī)交互方法是通過(guò)輔助光源來(lái)作為人機(jī)交互的依據(jù)的，這不僅具有非常良好的抗干擾能力以及更高的操控準(zhǔn)確率，還具有很好的商業(yè)使用價(jià)值。
[0053]請(qǐng)參閱圖2，圖2是本發(fā)明實(shí)施例提供的另一種人機(jī)交互方法的流程圖。在圖2所描述的人機(jī)交互方法中，假設(shè)手勢(shì)是以點(diǎn)擊的方式來(lái)觸及輔助光幕以形成輔助光源的。如圖2所示，該人機(jī)交互方法可以包括以下步驟。
[0054]201、終端設(shè)備利用攝像頭模塊捕獲手勢(shì)點(diǎn)擊輔助光幕后形成的輔助光源。
[0055]本實(shí)施例中，輔助光幕的具體實(shí)現(xiàn)方式可以參照?qǐng)D3，其中，可以采用激光器加一字光柵來(lái)作為光源，該光源通過(guò)一字光柵的光柵效應(yīng)可以將單束激光擴(kuò)射到屏幕上，從而實(shí)現(xiàn)輔助光幕。進(jìn)一步地，為了獲得更可靠穩(wěn)定的效果，圖3中的激光器可以是紅外激光器，而攝像頭模塊可以是紅外光攝像頭模塊，而當(dāng)圖3中的激光器是紅外激光器時(shí)，輔助光幕即是紅外光輔助光幕，此時(shí)紅外光攝像頭模塊捕獲到的手勢(shì)點(diǎn)擊輔助光幕后形成的輔助光源即是高亮的輔助光源。當(dāng)然，圖3中的激光器也可以是可見(jiàn)光激光器，而攝像頭模塊也可以是可見(jiàn)光攝像頭模塊，而當(dāng)圖3中的激光器是可見(jiàn)光激光器時(shí)，輔助光幕就應(yīng)該是可見(jiàn)光輔助光幕，此時(shí)可見(jiàn)光攝像頭模塊捕獲到的手勢(shì)點(diǎn)擊輔助光幕后形成的輔助光源即是深暗的輔助光源。
[0056]本實(shí)施例中，也可以采用手機(jī)來(lái)照亮屏幕以實(shí)現(xiàn)輔助光幕，這種方式既簡(jiǎn)單又有效,并且成本也低。
[0057]本實(shí)施例中，假設(shè)圖3中的激光器是紅外激光器，攝像頭模塊是紅外光攝像頭模塊，相應(yīng)地輔助光幕是紅外光輔助光幕，此時(shí)攝像頭模塊捕獲到的手勢(shì)點(diǎn)擊輔助光幕后形成的輔助光源就是高亮的輔助光源。那么，相應(yīng)地上述步驟201的具體實(shí)現(xiàn)可以包括:
[0058]終端設(shè)備利用攝像頭模塊來(lái)捕獲攜帶有手勢(shì)點(diǎn)擊輔助光幕后形成高亮的輔助光源的圖像，并對(duì)該圖像進(jìn)行處理，以獲得僅顯示手勢(shì)點(diǎn)擊輔助光幕后形成高亮的輔助光源的圖像。
[0059]其中，對(duì)攝像頭圖像進(jìn)行處理以獲得僅顯示手勢(shì)點(diǎn)擊輔助光幕后形成高亮的輔助光源的圖像具體實(shí)現(xiàn)過(guò)程可以參考圖4。在圖4中，A表示攝像頭模塊正常情況下捕獲到的攜帶有手勢(shì)點(diǎn)擊輔助光幕后形成高亮的輔助光源(用圓圈表示)的圖像，而B(niǎo)表示攝像頭模塊在低曝光條件下捕獲到的攜帶有手勢(shì)點(diǎn)擊輔助光幕后形成高亮的輔助光源(用圓圈表示)的圖像，從B中可以看出，攝像頭模塊在低曝光條件下捕獲到的圖像除了攜帶有手勢(shì)點(diǎn)擊輔助光幕后形成的高亮的輔助光源(用圓圈表示)之外，仍會(huì)攜帶有手型、其他照明燈光等背景雜質(zhì)，這些背景雜質(zhì)的存在會(huì)降低操控準(zhǔn)確率。C表示是對(duì)B進(jìn)行去背景雜質(zhì)處理的圖像，D表示背景雜質(zhì)徹底處理完畢后，僅顯示手勢(shì)點(diǎn)擊輔助光幕后形成高亮的輔助光源(用圓圈表示)的圖像。其中，對(duì)攜帶的背景雜質(zhì)的圖像進(jìn)行去背景雜質(zhì)處理的方式、過(guò)程均是本領(lǐng)域普通技術(shù)人員所公知的嘗試，本實(shí)施例不作詳細(xì)介紹。
[0060]202、終端設(shè)備確定輔助光源在攝像頭模塊拍攝圖像中的位置。
[0061]本實(shí)施例中，由于手勢(shì)是以點(diǎn)擊的方式來(lái)觸及輔助光幕形成輔助光源的，因此終端設(shè)備可以確定輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域，并以輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域作為輔助光源在攝像頭模塊拍攝圖像中的位置。
[0062]本實(shí)施例中，如圖5所不，終端設(shè)備可以通過(guò)攝像頭接口與攝像頭t旲塊連接，終端設(shè)備可以以攝像頭模塊拍攝圖像的某一個(gè)角(如左上角)為原點(diǎn)，均勻地將攝像頭模塊拍攝圖像劃分成多個(gè)方格區(qū)域。如圖5所示，假設(shè)輔助光源(用于圓圈表示)落入攝像頭模塊拍攝圖像中的第16個(gè)方格區(qū)域，那么終端設(shè)備可以將輔助光源落入的攝像頭模塊拍攝圖像中的第16個(gè)方格區(qū)域作為輔助光源(用于圓圈表示)在攝像頭模塊拍攝圖像中的位置。
[0063]203、終端設(shè)備查詢上述位置對(duì)應(yīng)的編碼。
[0064]本實(shí)施例中，終端設(shè)備的控制軟件可以根據(jù)輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域，從編碼庫(kù)存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系中查詢輔助光源落入的攝像頭模塊拍攝圖像中的方格區(qū)域?qū)?yīng)的編碼。
[0065]本實(shí)施例中，編碼庫(kù)存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系可以如表1所示。
[0066]表1編碼庫(kù)存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系
[0067]
【權(quán)利要求】
1.一種人機(jī)交互方法，其特征在于，包括: 終端設(shè)備利用攝像頭模塊捕獲手勢(shì)觸及輔助光幕后形成的輔助光源； 所述終端設(shè)備確定所述輔助光源在所述攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡； 所述終端設(shè)備根據(jù)所述位置和/或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。
2.根據(jù)權(quán)利要求1所述的人機(jī)交互方法，其特征在于，所述終端設(shè)備利用攝像頭模塊捕獲手勢(shì)觸及輔助光幕后形成的輔助光源，包括: 所述終端設(shè)備利用攝像頭模塊捕獲攜帶有手勢(shì)觸及輔助光幕后形成的輔助光源的圖像，并對(duì)所述圖像進(jìn)行處理，以獲得僅顯示所述手勢(shì)觸及輔助光幕后形成的輔助光源的圖像。
3.根據(jù)權(quán)利要求1或2所述的人機(jī)交互方法，其特征在于，所述終端設(shè)備確定所述輔助光源在所述攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡，包括: 所述終端設(shè)備確定所述輔助光源落入的所述攝像頭模塊拍攝圖像中的方格區(qū)域； 和/或，所述終端設(shè)備 確定所述輔助光源所經(jīng)過(guò)的所述攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向； 其中，所述攝像頭模塊拍攝圖像被均勻劃分成多個(gè)所述方格區(qū)域。
4.根據(jù)權(quán)利要求3所述的人機(jī)交互方法，其特征在于，所述終端設(shè)備根據(jù)所述位置和/或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令，包括: 所述終端設(shè)備查詢所述位置和/或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼； 所述終端設(shè)備根據(jù)所述編碼，從存儲(chǔ)的編碼與操作指令的映射關(guān)系中獲取所述編碼對(duì)應(yīng)的操作指令，并執(zhí)行所述編碼對(duì)應(yīng)的操作指令。
5.根據(jù)權(quán)利要求4所述的方法，其特征子在于，所述終端設(shè)備查詢所述位置和/或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼，包括: 所述終端設(shè)備根據(jù)所述輔助光源落入的所述攝像頭模塊拍攝圖像中的方格區(qū)域，從存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系中查詢所述輔助光源落入的所述攝像頭模塊拍攝圖像中的方格區(qū)域?qū)?yīng)的編碼； 和/或，所述終端設(shè)備根據(jù)所述輔助光源所經(jīng)過(guò)的所述攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向，從存儲(chǔ)的方格區(qū)域數(shù)量、方向以及編碼三者的映射關(guān)系中查詢所述輔助光源所經(jīng)過(guò)的所述攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向?qū)?yīng)的編碼。
6.根據(jù)權(quán)利要求1所述的方法，其特征子在于，所述輔助光幕與顯示屏幕重疊或平行。
7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述輔助光幕與顯示屏幕平行，所述輔助光幕為紅外光輔助光幕并疊加一個(gè)可見(jiàn)光光幕，用以指示所述輔助光幕的位置。
8.—種終端設(shè)備，其特征在于，包括: 攝像頭模塊，用于捕獲手勢(shì)觸及輔助光幕后形成的輔助光源； 確定模塊，用于確定所述輔助光源在所述攝像頭模塊拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡； 執(zhí)行模塊，用于根據(jù)所述位置和/或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。
9.根據(jù)權(quán)利要求8所述的終端設(shè)備，其特征在于，所述攝像頭模塊用于捕獲攜帶有手勢(shì)觸及輔助光幕后形成的輔助光源的圖像，以及對(duì)所述圖像進(jìn)行處理，以獲得僅顯示所述手勢(shì)觸及輔助光幕后形成的輔助光源的圖像。
10.根據(jù)權(quán)利要求8或9所述的終端設(shè)備，其特征在于，所述確定模塊用于確定所述輔助光源落入的所述攝像頭模塊拍攝圖像中的方格區(qū)域；和/或，用于確定所述輔助光源所經(jīng)過(guò)的所述攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向；其中，所述攝像頭模塊拍攝圖像被均勻劃分成多個(gè)所述方格區(qū)域。
11.根據(jù)權(quán)利要求10所述的終端設(shè)備，其特征子在于，所述執(zhí)行模塊包括: 查詢子模塊，用于查詢所述位置和/或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼； 獲取子模塊，用于根據(jù)所述編碼，從存儲(chǔ)的編碼與操作指令的映射關(guān)系中獲取所述編碼對(duì)應(yīng)的操作指令，并執(zhí)行所述編碼對(duì)應(yīng)的操作指令。
12.根據(jù)權(quán)利要求11所述的終端設(shè)備，其特征子在于，所述查詢子模塊用于根據(jù)所述輔助光源落入的所述攝像頭模塊拍攝圖像中的方格區(qū)域，從存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系中查詢所述輔助光源落入的所述攝像頭模塊拍攝圖像中的方格區(qū)域?qū)?yīng)的編碼； 和/或，用于根據(jù)所述輔助光源所經(jīng)過(guò)的所述攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向，從存儲(chǔ)的方格區(qū)域數(shù)量、方向以及編碼三者的映射關(guān)系中查詢所述輔助光源所經(jīng)過(guò)的所述攝像頭模塊拍攝圖像中的方格區(qū)域數(shù)量和方向?qū)?yīng)的編碼。
13.一種人機(jī)交互系統(tǒng)，其特征在于，包括輔助光幕、攝像頭以及終端設(shè)備，所述攝像頭內(nèi)置在所述終端設(shè)備中，或以有線或無(wú)線方式與所述終端設(shè)備連接，所述攝像頭的拍攝區(qū)域覆蓋所述輔助光幕的工作覆蓋區(qū)域，其中: 所述輔助光幕，用于供手勢(shì)觸及以形成輔助光源； 所述攝像頭，用于捕獲手勢(shì)觸及所述`輔助光幕后形成的輔助光源； 所述終端設(shè)備包括: 確定模塊，用于確定所述輔助光源在所述攝像頭拍攝圖像中的位置和/或運(yùn)動(dòng)軌跡； 執(zhí)行模塊，用于根據(jù)所述位置和/或運(yùn)動(dòng)軌跡執(zhí)行相對(duì)應(yīng)的操作指令。
14.根據(jù)權(quán)利要求13所述的人機(jī)交互系統(tǒng)，其特征在于，所述攝像頭用于捕獲攜帶有手勢(shì)觸及輔助光幕后形成的輔助光源的圖像，以及對(duì)所述圖像進(jìn)行處理，以獲得僅顯示所述手勢(shì)觸及輔助光幕后形成的輔助光源的圖像。
15.根據(jù)權(quán)利要求13或14所述的人機(jī)交互系統(tǒng)，其特征在于，所述確定模塊用于確定所述輔助光源落入的所述攝像頭拍攝圖像中的方格區(qū)域；和/或，用于確定所述輔助光源所經(jīng)過(guò)的所述攝像頭拍攝圖像中的方格區(qū)域數(shù)量和方向；其中，所述攝像頭拍攝圖像被均勻劃分成多個(gè)所述方格區(qū)域。
16.根據(jù)權(quán)利要求15所述的人機(jī)交互系統(tǒng)，其特征子在于，所述執(zhí)行模塊包括: 查詢子模塊，用于查詢所述位置和/或運(yùn)動(dòng)軌跡對(duì)應(yīng)的編碼； 獲取子模塊，用于根據(jù)所述編碼，從存儲(chǔ)的編碼與操作指令的映射關(guān)系中獲取所述編碼對(duì)應(yīng)的操作指令，并執(zhí)行所述編碼對(duì)應(yīng)的操作指令。
17.根據(jù)權(quán)利要求16所述的人機(jī)交互系統(tǒng)，其特征子在于，所述查詢子模塊用于根據(jù)所述輔助光源落入的所述攝像頭拍攝圖像中的方格區(qū)域，從存儲(chǔ)的方格區(qū)域與編碼的映射關(guān)系中查詢所述輔助光源落入的所述攝像頭拍攝圖像中的方格區(qū)域?qū)?yīng)的編碼； 和/或，用于根據(jù)所述輔助光源所經(jīng)過(guò)的所述攝像頭拍攝圖像中的方格區(qū)域數(shù)量和方向，從存儲(chǔ)的方格區(qū)域數(shù)量、方向以及編碼三者的映射關(guān)系中查詢所述輔助光源所經(jīng)過(guò)的所述攝像頭拍攝圖像中的方格區(qū)域數(shù)量和方向?qū)?yīng)的編碼。
18.根據(jù)權(quán)利要求13所述的人機(jī)交互系統(tǒng)，其特征在于，所述攝像頭為紅外光攝像頭，并且所述輔助光幕為紅外光輔助光幕；或者，所述攝像頭為可見(jiàn)光攝像頭，并且所述輔助光幕為可見(jiàn)光輔助光幕。
【文檔編號(hào)】G06F3/0488GK103729131SQ201210388925
【公開(kāi)日】2014年4月16日 申請(qǐng)日期:2012年10月15日 優(yōu)先權(quán)日:2012年10月15日
【發(fā)明者】方琎, 杜健, 陳妍, 唐沐, 金勁松, 程俊 申請(qǐng)人:騰訊科技（深圳）有限公司, 深圳市中科睿成智能科技有限公司, 中國(guó)科學(xué)院深圳先進(jìn)技術(shù)研究院