多媒體交互系統(tǒng)及其方法
【專利摘要】本發(fā)明涉及一種多媒體交互系統(tǒng)及其方法，其中該系統(tǒng)包括存儲器，用于存儲與用戶交互所需的交互腳本，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)；多媒體播放子系統(tǒng)；信息采集子系統(tǒng)，用于采集用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息；以及處理器，與所述存儲器、所述多媒體播放子系統(tǒng)和所述信息采集子系統(tǒng)分別連接，用于根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息調(diào)取所述交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)。本發(fā)明的多媒體交互系統(tǒng)及其方法能夠減少輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，提高服務(wù)效果的穩(wěn)定性和有效性。
【專利說明】多媒體交互系統(tǒng)及其方法

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及多媒體應(yīng)用領(lǐng)域，尤其涉及一種多媒體交互系統(tǒng)及其方法。

【背景技術(shù)】
[0002]隨著社會分工的精細(xì)化，專業(yè)性的培訓(xùn)、咨詢、指導(dǎo)越來越多。但培訓(xùn)師、咨詢師、指導(dǎo)員目前主要是由人來擔(dān)當(dāng)，培訓(xùn)、咨詢、指導(dǎo)的效果與人的專業(yè)素養(yǎng)和身體狀態(tài)密切相關(guān)。
[0003]例如，通常心理導(dǎo)師與被指導(dǎo)者需要面對面的交流，心理導(dǎo)師根據(jù)被指導(dǎo)者的狀態(tài)確定與被指導(dǎo)者如何交流，以達(dá)到改善被指導(dǎo)者的心理健康的目的。在心理導(dǎo)師處于疲憊狀態(tài)下，有可能出現(xiàn)偶爾的注意力不集中，從而容易疏忽被指導(dǎo)者通過肢體或語言表達(dá)的一些對指導(dǎo)非常有用的關(guān)鍵信息，從而導(dǎo)致指導(dǎo)效果欠佳。有些心理導(dǎo)師的指導(dǎo)經(jīng)驗不足，有可能無法很快捕捉到被指導(dǎo)者的真實焦慮點并無法有效地對癥下藥，從而導(dǎo)致被指導(dǎo)者體驗較差。明顯可見，完全依賴心理導(dǎo)師與被指導(dǎo)者的人人對話進(jìn)行的心理指導(dǎo)，指導(dǎo)效果具有很大的不確定性。


【發(fā)明內(nèi)容】

[0004]摶術(shù)問是頁
[0005]有鑒于此，本發(fā)明要解決的技術(shù)問題是，提供一種多媒體應(yīng)用系統(tǒng)，以替代目前的人人對話來提供培訓(xùn)、咨詢、指導(dǎo)等服務(wù)，從而提高服務(wù)效果的穩(wěn)定性。
[0006]解決方案
[0007]為了解決上述技術(shù)問題，根據(jù)本發(fā)明的一實施例，提供了一種多媒體交互系統(tǒng)，包括:
[0008]存儲器，用于存儲與用戶交互所需的交互腳本，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)；
[0009]多媒體播放子系統(tǒng)；
[0010]信息采集子系統(tǒng)，用于采集用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息；以及
[0011]處理器，與所述存儲器、所述多媒體播放子系統(tǒng)和所述信息采集子系統(tǒng)分別連接，用于根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息調(diào)取所述交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)。
[0012]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述狀態(tài)信息包括用戶的姿態(tài)信息、語音和生理信息中的任意一種或者多種，所述信息米集子系統(tǒng)包括以下設(shè)備的任意一種或者多種:
[0013]姿態(tài)信息采集設(shè)備，用于采集用戶的姿態(tài)信息；
[0014]語音采集設(shè)備，用于采集用戶發(fā)出的語音；
[0015]生理信息采集設(shè)備，用于采集用戶的生理信息；
[0016]環(huán)境信息采集設(shè)備，用于采集所述環(huán)境信息。
[0017]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述姿態(tài)信息采集設(shè)備包括體感檢測設(shè)備、面部識別設(shè)備中的任意一種或者多種。
[0018]對于上述系統(tǒng),在一種可能的實現(xiàn)方式中，所述語音米集設(shè)備包括麥克風(fēng)、拾音器，或其他語音采集設(shè)備中的至少一種。
[0019]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述生理信息采集設(shè)備包括心電檢測設(shè)備、腦波檢測設(shè)備、脈搏檢測設(shè)備、眼動識別設(shè)備、聲紋識別設(shè)備、指紋識別設(shè)備、掌紋識別設(shè)備、視網(wǎng)膜識別設(shè)備中的任意一種或者多種。
[0020]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述多媒體播放子系統(tǒng)包括音頻播放設(shè)備、視頻播放設(shè)備、全息影像投影設(shè)備、虛擬現(xiàn)實設(shè)備、增強現(xiàn)實設(shè)備、裸眼30視覺設(shè)備中的任意一種或者多種。
[0021]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述處理器包括:
[0022]輸入模塊，與所述信息采集子系統(tǒng)連接，用于接收所述狀態(tài)信息；
[0023]調(diào)取模塊，與所述輸入模塊和所述存儲器分別連接，用于在所述狀態(tài)信息與所述交互腳本中預(yù)定義的多媒體數(shù)據(jù)的播放條件匹配的情況下，從所述存儲器中調(diào)取所述匹配的多媒體數(shù)據(jù)及其播放方式；
[0024]輸出模塊，與所述調(diào)取模塊和所述多媒體播放子系統(tǒng)分別連接，用于根據(jù)所述播放方式將所述匹配的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)。
[0025]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述處理器還包括語音處理模塊，
[0026]所述語音處理模塊與所述輸入模塊以及所述調(diào)取模塊連接，用于從所述輸入模塊獲取所述狀態(tài)信息中的語音，對所述語音進(jìn)行語音識別、語義分析中的至少一種處理后，將所述語音表達(dá)的語義信息發(fā)送至所述調(diào)取模塊；和/或
[0027]所述語音處理模塊與所述調(diào)取模塊以及所述輸出模塊連接，用于將所述調(diào)取模塊調(diào)取的多媒體數(shù)據(jù)中的文字進(jìn)行語音合成的處理，并將所合成的語音輸出至所述輸出模塊。
[0028]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，還包括:
[0029]環(huán)境調(diào)節(jié)子系統(tǒng)，與所述處理器連接，用于根據(jù)所述處理器基于所述環(huán)境信息和/或所述交互腳本發(fā)出的調(diào)節(jié)指令對所述用戶所處的環(huán)境進(jìn)行調(diào)節(jié)。
[0030]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述輸入模塊還被配置為，從所述信息采集子系統(tǒng)接收所述環(huán)境信息；所述調(diào)取模塊還被配置為，參考所述環(huán)境信息從所述存儲器中調(diào)取所述匹配的多媒體數(shù)據(jù)及其播放方式。
[0031]對于上述系統(tǒng)，在一種可能的實現(xiàn)方式中，所述處理器還包括:
[0032]提醒模塊，與所述輸入模塊和所述輸出模塊分別連接，用于在特定信號處于預(yù)設(shè)的參考范圍內(nèi)的情況下，生成相應(yīng)的提醒信號并輸出至所述輸出模塊，以使得所述輸出模塊將所述提醒信號發(fā)送至相應(yīng)的提醒設(shè)備進(jìn)行播放，所述特定信號包括所述狀態(tài)信息和/或所述環(huán)境信息。
[0033]為了解決上述技術(shù)問題，根據(jù)本發(fā)明的另一實施例，提供了一種多媒體交互方法，采用本發(fā)明實施例中任意一種結(jié)構(gòu)的多媒體交互系統(tǒng)與用戶交互，所述方法包括:
[0034]信息采集子系統(tǒng)采集所述用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息；
[0035]處理器根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息，從存儲器中調(diào)取與所述用戶交互所需的交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至多媒體播放子系統(tǒng)，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)；
[0036]所述多媒體播放子系統(tǒng)播放從所述處理器接收到的多媒體數(shù)據(jù)。
[0037]有益.效果
[0038]通過處理器可以根據(jù)信息采集子系統(tǒng)采集的用戶的各種狀態(tài)信息和/或用戶所處環(huán)境的環(huán)境信息，從存儲器調(diào)取交互腳本中的多媒體數(shù)據(jù)，通過多媒體播放子系統(tǒng)播放語音、視頻等多媒體數(shù)據(jù)，完成與用戶的交互，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的穩(wěn)定性和有效性。
[0039]根據(jù)下面參考附圖對示例性實施例的詳細(xì)說明，本發(fā)明的其它特征及方面將變得清楚。

【專利附圖】

【附圖說明】
[0040]包含在說明書中并且構(gòu)成說明書的一部分的附圖與說明書一起示出了本發(fā)明的示例性實施例、特征和方面，并且用于解釋本發(fā)明的原理。
[0041]圖1為本發(fā)明一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0042]圖2為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0043]圖3為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0044]圖4為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0045]圖5為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖；
[0046]圖6為本發(fā)明一實施例的多媒體交互方法的流程圖。

【具體實施方式】
[0047]以下將參考附圖詳細(xì)說明本發(fā)明的各種示例性實施例、特征和方面。附圖中相同的附圖標(biāo)記表示功能相同或相似的元件。盡管在附圖中示出了實施例的各種方面，但是除非特別指出，不必按比例繪制附圖。
[0048]在這里專用的詞“示例性”意為“用作例子、實施例或說明性”。這里作為“示例性”所說明的任何實施例不必解釋為優(yōu)于或好于其它實施例。
[0049]另外，為了更好的說明本發(fā)明，在下文的【具體實施方式】中給出了眾多的具體細(xì)節(jié)。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，沒有某些具體細(xì)節(jié)，本發(fā)明同樣可以實施。在一些實例中，對于本領(lǐng)域技術(shù)人員熟知的方法、手段、元件和電路未作詳細(xì)描述，以便于凸顯本發(fā)明的主旨。
[0050]實施例1
[0051]圖1為本發(fā)明一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖。如圖1所示，該多媒體交互系統(tǒng)主要可以包括:存儲器11，用于存儲與用戶交互所需的交互腳本，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)；多媒體播放子系統(tǒng)13 ；信息采集子系統(tǒng)15，用于采集用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息；以及處理器17，與所述存儲器11、所述多媒體播放子系統(tǒng)13和所述信息采集子系統(tǒng)15分別連接，用于根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息調(diào)取所述交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)13。
[0052]其中，存儲器11可以設(shè)置在本地，也可以設(shè)置在云端的服務(wù)器中，在交互過程中，可以通過互聯(lián)網(wǎng)等訪問云端或本地的服務(wù)器，以獲取所需的交互腳本。交互腳本中多媒體數(shù)據(jù)的具體內(nèi)容、播放方式和播放條件，可以由依據(jù)意識科學(xué)、深層心理學(xué)等所支持的心理指導(dǎo)的方案來確定。其中，多媒體數(shù)據(jù)的具體內(nèi)容可以包含但不限于一段或多段特定的文字、音頻文件、視頻文件、全息影像、虛擬現(xiàn)實、增強現(xiàn)實等內(nèi)容。多媒體數(shù)據(jù)的播放方式可以是循環(huán)播放、順序播放、跳轉(zhuǎn)播放、疊加播放、播放完畢后結(jié)束、播放完畢等待一段時間后結(jié)束等多種方式。多媒體數(shù)據(jù)的播放條件可以包含但不僅限于用戶的肯定答復(fù)、否定答復(fù)、不答復(fù)、用戶姿勢等。舉例而言，順序播放的視頻八、視頻8，在視頻8播放過程中，如果檢測到用戶坐下，則播放音頻匕如果檢測到用戶站立，則播放音頻0。其中，視頻八、視頻8、音頻0和音頻0是該交互腳本中多媒體數(shù)據(jù)的具體內(nèi)容；循環(huán)播放是該交互腳本中多媒體數(shù)據(jù)的播放方式；判斷用戶是否坐下是該交互腳本中多媒體數(shù)據(jù)的播放條件。
[0053]本實施例的多媒體交互系統(tǒng)中，在與用戶交互時，處理器17可以根據(jù)信息采集子系統(tǒng)15采集的用戶的各種狀態(tài)信息和丨或用戶所處環(huán)境的環(huán)境信息，從存儲器11調(diào)取交互腳本中的多媒體數(shù)據(jù)，通過多媒體播放子系統(tǒng)13播放語音、視頻等多媒體數(shù)據(jù)，完成與用戶的交互，因此，本實施例的多媒體交互系統(tǒng)可以應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，科學(xué)解決用戶的多種需求如減壓增能、臨場狀態(tài)調(diào)整、人際關(guān)系改良、職業(yè)生涯規(guī)劃、洞察內(nèi)心訴求、開啟藝術(shù)靈感、激發(fā)潛能、潛意識解讀、意象解讀、心理創(chuàng)傷處理、健康養(yǎng)生、康復(fù)心靈養(yǎng)護(hù)、找到理想伴侶、高效達(dá)成目標(biāo)、情商提升、兒童智慧開發(fā)、女性幸福關(guān)懷、老人臨終關(guān)懷、夫妻關(guān)系提升、學(xué)習(xí)動力提升、英語興趣激發(fā)、學(xué)科興趣激發(fā)、團(tuán)隊建設(shè)、團(tuán)體凝聚力提升、團(tuán)體潛能激發(fā)等，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的穩(wěn)定性和有效性。
[0054]實施例2
[0055]圖2為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖。圖2中標(biāo)號與圖1相同的組件具有相同的功能，為簡明起見，省略對這些組件的詳細(xì)說明。
[0056]如圖2所示，與圖1所示多媒體交互系統(tǒng)的主要區(qū)別在于，狀態(tài)信息可以包括用戶的姿態(tài)信息、語音和生理信息中的任意一種或者多種，相應(yīng)地，所述信息采集子系統(tǒng)15可以包括姿態(tài)信息采集設(shè)備21、語音采集設(shè)備23、生理信息采集設(shè)備25、環(huán)境信息采集設(shè)備27中的任意一種或者多種。
[0057]其中，姿態(tài)信息采集設(shè)備21用于采集用戶的姿態(tài)信息，具體可以包括體感檢測設(shè)備211、面部識別設(shè)備213中的任意一種或者多種。舉例而言，可以采用室內(nèi)⑶3、激光掃描定位設(shè)備、紅外傳感器或重力傳感器等體感檢測設(shè)備211，檢測用戶所在的位置，以及用戶處于站立、坐下、跳躍、彎腰等姿態(tài)信息。也可以通過面部識別設(shè)備213拍攝用戶的面部圖像對用戶的面部情緒進(jìn)行面部識別，確定用戶所處的情緒狀態(tài)如哭泣、大笑、皺眉等。其中，檢測姿態(tài)信息的各種設(shè)備的位置可以根據(jù)具體場景進(jìn)行調(diào)整，例如:在房間的椅子上設(shè)置紅外傳感器，在地毯上設(shè)置重力傳感器和室內(nèi)⑶3，在房間的中部設(shè)置激光掃描定位設(shè)備坐寸。
[0058]語音采集設(shè)備23用于采集用戶發(fā)出的語音，具體可以包括麥克風(fēng)231、拾聲器233，或其他語音采集設(shè)備的至少一種，通過麥克風(fēng)231可以錄制用戶的語音。在一種可能的實現(xiàn)方式中，處理器17可以對從麥克風(fēng)231輸入的語音進(jìn)行語音識別、語義分析等處理，以便進(jìn)行后續(xù)的交互控制。在一種可能的具體實現(xiàn)方式中，處理器17還可以對基于交互腳本調(diào)取的多媒體數(shù)據(jù)中的文字進(jìn)行語音合成等處理，并將所合成的語音輸出至多媒體播放子系統(tǒng)13。
[0059]生理信息采集設(shè)備25用于采集用戶的生理信息，具體可以包括心電檢測設(shè)備251、腦波檢測設(shè)備253、脈搏檢測設(shè)備255、眼動識別設(shè)備、聲紋識別設(shè)備、指紋識別設(shè)備、掌紋識別設(shè)備、視網(wǎng)膜識別設(shè)備、面部識別設(shè)備中的任意一種或者多種，部分設(shè)備圖中未示出。舉例而言，采用心電檢測設(shè)備251檢測用戶的心跳，心跳加速表示用戶非常緊張、心跳緩慢表示用戶較為放松；也可以采用腦波儀檢測用戶的腦電波，以體現(xiàn)用戶的大腦處于清醒、睡眠、緊張、放松、思考等狀態(tài)；還可以采用脈搏檢測設(shè)備255檢測用戶的脈搏跳動，以確定用戶目前的緊張程度；還可以通過眼動識別設(shè)備對用戶的眼球運動進(jìn)行跟蹤，以確定用戶目前所處的狀態(tài)如低頭、抬頭、思考等。
[0060]環(huán)境信息采集設(shè)備27可以為各種傳感器，設(shè)置在用戶所處環(huán)境的某些位置，用以采集所在位置的溫度、濕度、環(huán)境聲音、光亮等環(huán)境信息。在一種可能的實現(xiàn)方式中，環(huán)境信息采集設(shè)備27采集的環(huán)境信息還可以包括振動信號、用戶觸摸某些按鈕而產(chǎn)生的壓力或溫度觸發(fā)信號等。
[0061]需要說明的是，以上僅是能夠采集的用戶的狀態(tài)信息和用戶所處的環(huán)境信息的幾個示例，但本領(lǐng)域技術(shù)人員能夠理解，本發(fā)明應(yīng)不限于此。事實上，完全可根據(jù)實際應(yīng)用場景靈活設(shè)定所需采集的狀態(tài)信息、環(huán)境信息的具體內(nèi)容，只要能夠體現(xiàn)用戶的生理狀態(tài)即可。
[0062]在一種可能的實現(xiàn)方式中，多媒體播放子系統(tǒng)13可以包括音頻播放設(shè)備131、視頻播放設(shè)備133、全息影像投影設(shè)備135、虛擬現(xiàn)實設(shè)備137、增強現(xiàn)實設(shè)備138、裸眼30視覺設(shè)備139中的任意一種或者多種。為了流利的播放音視頻文件，多媒體播放子系統(tǒng)13的各種設(shè)備可以采用流媒體技術(shù)播放多媒體數(shù)據(jù)。
[0063]本實施例的多媒體交互系統(tǒng)中，在與用戶交互時，處理器17可以根據(jù)信息采集子系統(tǒng)15采集的用戶的采集用戶的姿態(tài)信息、語音和生理信息等多種狀態(tài)信息，從存儲器11調(diào)取交互腳本中的多媒體數(shù)據(jù)，通過多媒體播放子系統(tǒng)將多媒體數(shù)據(jù)采用語音、視頻、全息影像投影、虛擬現(xiàn)實、增強現(xiàn)實、裸眼30視覺等多種方式進(jìn)行播放，完成與用戶的交互，因此，本實施例的多媒體交互系統(tǒng)可以應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，解決用戶的多種心理需求，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的穩(wěn)定性和有效性。
[0064]實施例3
[0065]圖3為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖。圖3中標(biāo)號與圖1、圖2相同的組件具有相同的功能，為簡明起見，省略對這些組件的詳細(xì)說明。
[0066]如圖3所示，與上述實施例的主要區(qū)別在于，處理器17可以包括:輸入模塊31，與所述信息采集子系統(tǒng)15連接，用于接收所述狀態(tài)信息；調(diào)取模塊33，與所述輸入模塊31和所述存儲器11分別連接，用于在所述狀態(tài)信息與所述交互腳本中預(yù)定義的多媒體數(shù)據(jù)的播放條件匹配的情況下，從所述存儲器11中調(diào)取所述匹配的多媒體數(shù)據(jù)及其播放方式；輸出模塊35，與所述調(diào)取模塊33和所述多媒體播放子系統(tǒng)13分別連接，用于根據(jù)所述播放方式將所述匹配的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)13。
[0067]舉例而言，播放條件可以為在某段語音2后用戶的回答為否定答復(fù)，則在音頻播放設(shè)備播放了交互腳本中的語音2之后，如果語音采集設(shè)備23采集到的用戶的回答為“是、可以”等肯定答復(fù)，則音頻播放設(shè)備繼續(xù)播放當(dāng)前語音2之后的視頻？；如果語音采集設(shè)備23采集到的用戶的回答為“否、不是”等否定答復(fù)，則可以調(diào)取模塊33跳轉(zhuǎn)調(diào)取另一段視頻6發(fā)送給視頻播放設(shè)備，視頻播放設(shè)備播放完該視頻之后，可以繼續(xù)返回播放視頻？，或者根據(jù)具體的設(shè)置播放其他多媒體數(shù)據(jù)。具體跳轉(zhuǎn)播放的層次和數(shù)據(jù)內(nèi)容可以根據(jù)實際應(yīng)用的需求進(jìn)行設(shè)置。
[0068]在一種可能的實現(xiàn)方式中，多媒體交互系統(tǒng)可以采用多種啟動方式，包括人工啟動、自動啟動、語音喚醒、調(diào)查問卷、腦波喚醒、體感檢測、游戲啟動、燈光啟動、風(fēng)力啟動、溫度啟動、機械啟動等。例如，人工啟動或調(diào)查問卷的方式，可以由專門的工作人員向用戶提問或請用戶填寫問卷等，根據(jù)用戶的答案確定該用戶所需的交互腳本并啟動系統(tǒng)。再如，語音喚醒的方式，可以預(yù)設(shè)喚醒語音，在采集到用戶發(fā)出喚醒語音時啟動系統(tǒng)；或者，由控制音頻播放設(shè)備向用戶播放提問的錄音后，采集用戶的回答問題的語音后，對用戶回答的語音進(jìn)行語音識別和語義分析等處理后，確定最符合該用戶的交互腳本并啟動系統(tǒng)。再如，機械啟動可以通過設(shè)定按鍵、檢測設(shè)備振動或搖晃狀態(tài)等方式實現(xiàn)，檢測到按鍵信號、振動信號或搖晃信號時啟動系統(tǒng)。再如，游戲啟動可以通過設(shè)定過關(guān)游戲，在檢測到游戲過關(guān)成功之后啟動系統(tǒng)。
[0069]在一種可能的實現(xiàn)方式中，處理器在進(jìn)行腳本調(diào)取時，可以采用云端人工智能運算的方式，具體而言，可以根據(jù)存儲的用戶行為模式，通過人工智能算法預(yù)測或推薦對用戶最合適的解決方案，從而確定對應(yīng)的交互腳本。例如，如果用戶已經(jīng)使用過本系統(tǒng)，并被記錄在某些場景下有某種情緒，當(dāng)用戶下次解決相似場景下的問題時，通過人工智能算法可以根據(jù)之前的記錄，優(yōu)先為用戶選取同樣的情緒的解決方案所對應(yīng)的交互腳本。同時，還可以采用人工智能算法對大量用戶使用本系統(tǒng)的歷史記錄進(jìn)行統(tǒng)計分析，得出對大多數(shù)人有效的解決方案，并將對應(yīng)的交互腳本推薦給用戶。
[0070]在一種可能的實現(xiàn)方式中，所述處理器還包括:語音處理模塊36，與所述輸入模塊31和所述調(diào)取模塊33分別連接，用于從所述輸入模塊31獲取所述狀態(tài)信息中的語音，對所述語音進(jìn)行語音識別、語義分析中的至少一種處理后，將所述語音表達(dá)的語義信息發(fā)送至所述調(diào)取模塊33。
[0071]在一種可能的實現(xiàn)方式中，語音處理模塊36還可以與所述調(diào)取模塊33以及所述輸出模塊35連接，用于將所述調(diào)取模塊33調(diào)取的多媒體數(shù)據(jù)中的文字進(jìn)行語音合成的處理，并將所合成的語音輸出至所述輸出模塊35。
[0072]本實施例的多媒體交互系統(tǒng)中，在與用戶交互時，處理器17可以根據(jù)信息采集子系統(tǒng)15采集的用戶的姿態(tài)信息、語音和生理信息等多種狀態(tài)信息，從存儲器11調(diào)取與用戶行為模式匹配的交互腳本中的多媒體數(shù)據(jù)，通過多媒體播放子系統(tǒng)將多媒體數(shù)據(jù)采用語音、視頻、全息影像投影、虛擬現(xiàn)實、裸眼30視覺等多種方式進(jìn)行播放，完成與用戶的交互，可以應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，解決用戶的多種心理需求，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的穩(wěn)定性和有效性。
[0073]實施例4
[0074]圖4為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)示意圖。圖4中標(biāo)號與圖1?圖3相同的組件具有相同的功能，為簡明起見，省略對這些組件的詳細(xì)說明。
[0075]如圖4所示，與上述實施例的主要區(qū)別在于，所述處理器17還可以包括提醒模塊37，與所述輸入模塊31和所述輸出模塊35分別連接，用于在特定信號處于預(yù)設(shè)的參考范圍內(nèi)的情況下，生成相應(yīng)的提醒信號并輸出至所述輸出模塊35，以使得所述輸出模塊35將所述提醒信號發(fā)送至相應(yīng)的提醒設(shè)備進(jìn)行播放。其中，特定信號可以包括所述狀態(tài)信息和/或所述環(huán)境信息，例如，用戶的腦波信息、心電信息、脈搏信息、外界環(huán)境的溫度和亮度等環(huán)境信息，此外，特定信號也可以為他人或動物的狀態(tài)信息等。相應(yīng)的，參考范圍可以腦波范圍、心電范圍、脈搏范圍、溫度范圍等。提醒模塊37生成的提醒信號可以多種，例如聲音或視頻等多媒體數(shù)據(jù)、振動指令、燈光控制指令等，各種提醒信號可以在交互腳本預(yù)先設(shè)定。
[0076]以腦波為例，信息采集子系統(tǒng)15中的腦波儀可以檢測用戶的腦波，假設(shè)按照腦波的范圍劃分了壓力級別，并設(shè)置了壓力級別的閾值，將腦波儀檢測的腦電波中得到的3波等的參數(shù)范圍是21?30取，可以確定用戶目前處于壓力狀態(tài)，而預(yù)先設(shè)置的閾值是25取，測量結(jié)果表明用戶目前的壓力過大。這種情況下，提醒模塊37可以生成提醒信號，并通過輸出模塊35將提醒信號發(fā)給相應(yīng)的提醒設(shè)備進(jìn)行播放。其中，提醒設(shè)備可以為多媒體播放子系統(tǒng)13的音頻或視頻設(shè)備，也可以是另外設(shè)置的振動器、燈光等。例如，將一段音樂發(fā)送至音頻播放設(shè)備131，向振動器發(fā)出振動指令，或者向燈光控制設(shè)備發(fā)出閃爍指令等，這樣可以通過聲音、振動、燈光提醒他的壓力過大。此外，注意力、放松程度等也可以進(jìn)行與壓力類似的處理。
[0077]在一種可能的實現(xiàn)方式中，所述輸出模塊35還可以包括報告模塊38，與所述輸入模塊31和所述輸出模塊35分別連接，用于比較所述交互腳本中的多媒體數(shù)據(jù)播放前后所述輸入模塊31接收到的所述狀態(tài)信息是否發(fā)生變化，生成狀態(tài)變化報告并輸出至所述輸出模塊35。
[0078]具體而言，在多媒體播放子系統(tǒng)13為用戶播放與用戶行為模式匹配的交互腳本中的多媒體數(shù)據(jù)后，用戶的用戶行為模式和狀態(tài)信息可能發(fā)生變化，在比較多媒體數(shù)據(jù)播放前后該用戶的狀態(tài)信息后，報告模塊38可以生成并輸出狀態(tài)變化報告。例如，將用戶使用前后的腦波等的變化生成使用報告，腦波中的0波數(shù)量變多，13波數(shù)量變少，表明用戶更多時間處于放松狀態(tài)，壓力感緩解并減小。
[0079]本實施例的多媒體交互系統(tǒng)除了實現(xiàn)上述實施例中的功能外，還可以為用戶發(fā)出各種提醒，生成狀態(tài)變化報告，能夠應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，解決用戶的多種心理需求，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的穩(wěn)定性和有效性。
[0080]實施例5
[0081]圖5為本發(fā)明另一實施例的多媒體交互系統(tǒng)的結(jié)構(gòu)不意圖。圖5中標(biāo)號與圖1?圖4相同的組件具有相同的功能，為簡明起見，省略對這些組件的詳細(xì)說明。
[0082]如圖5所示，與上述實施例的主要區(qū)別在于，多媒體交互系統(tǒng)還可以包括:環(huán)境調(diào)節(jié)子系統(tǒng)51，與所述處理器17連接，用于根據(jù)所述處理器17基于所述環(huán)境信息和/或所述交互腳本發(fā)出的調(diào)節(jié)指令對所述用戶所處的環(huán)境進(jìn)行調(diào)節(jié)。舉例而言，所述環(huán)境調(diào)節(jié)子系統(tǒng)51可以包括溫度控制設(shè)備511、濕度控制設(shè)備513、燈光設(shè)備515、風(fēng)力控制設(shè)備517、氣體發(fā)出設(shè)備519中的任意一種或者多種。各個用于環(huán)境調(diào)節(jié)的設(shè)備可以以任意的組合方式集成在一起，也可以分別為獨立的設(shè)備，本發(fā)明不限定這些設(shè)備的具體形態(tài)。交互腳本中可能預(yù)先設(shè)置與多媒體數(shù)據(jù)相關(guān)的調(diào)節(jié)環(huán)境的需求信息，處理器運行交互腳本時，可以根據(jù)調(diào)節(jié)環(huán)境的需求信息生成相應(yīng)的調(diào)節(jié)指令，發(fā)送給環(huán)境調(diào)節(jié)子系統(tǒng)51中相應(yīng)的設(shè)備。
[0083]在一種可能的實現(xiàn)方式中，所述處理器17的輸入模塊31還被配置為，從所述信息采集子系統(tǒng)15接收所述環(huán)境信息；調(diào)取模塊33還被配置為，參考所述環(huán)境信息從所述存儲器11中調(diào)取所述匹配的多媒體數(shù)據(jù)及其播放方式。具體而言，處理器的調(diào)取模塊33可以在主要根據(jù)參考狀態(tài)信息調(diào)取交互腳本中與播放條件匹配的多媒體數(shù)據(jù)的情況下，也可以參考環(huán)境信息調(diào)取匹配的多媒體數(shù)據(jù)及其播放方式。
[0084]此外，調(diào)取模塊33也可以不參考狀態(tài)信息，只根據(jù)環(huán)境信息選擇交互腳本并調(diào)取交互腳本中與播放條件匹配的多媒體數(shù)據(jù)。例如，在房間如密室逃脫等場景中預(yù)先設(shè)定一些檢測環(huán)境信息的傳感器，在傳感器檢測到環(huán)境溫度、濕度、亮度等達(dá)到某個閾值或用戶觸摸到某個按鈕時，處理器17可以調(diào)取這些環(huán)境信息對應(yīng)的交互腳本的多媒體數(shù)據(jù)，并可以根據(jù)環(huán)境信息調(diào)節(jié)向用戶播放的音頻和視頻畫面，這樣，在不同的環(huán)境中，用戶聽到的聲音或看到圖像也可以發(fā)生相應(yīng)的變化。
[0085]該多媒體交互系統(tǒng)的具體實現(xiàn)方式可以有多種，例如，可以將處理器17的功能嵌入智能設(shè)備的操作系統(tǒng)中，實現(xiàn)智能設(shè)備本身功能的同時，播放交互腳本的多媒體數(shù)據(jù)。再如，還可以將處理器17做成獨立的控制設(shè)備或控制芯片等，控制其外部的腦波儀、紅外傳感器、燈光、多媒體播放器等設(shè)備的運行。具體示例如下:
[0086]示例一、將多媒體交互系統(tǒng)的功能嵌入智能設(shè)備的操作系統(tǒng)。
[0087]舉例而言，可以將多媒體交互系統(tǒng)的處理器17的功能在智能手機中以應(yīng)用(八--)的方式植入操作系統(tǒng)。其中，信息采集子系統(tǒng)可以采用手機中的麥克風(fēng)、紅外探測器、心電測量裝置等，以采集用戶的語音、體感、心電等狀態(tài)信息；并且，多媒體播放子系統(tǒng)可以采用手機中的揚聲器、視頻播放器等，以播放交互腳本的多媒體數(shù)據(jù)。
[0088]與智能手機類似的，具有獨立運算處理能力的智能手環(huán)、智能手表、智能頭盔、智能眼鏡、智能飛行器等設(shè)備，都可以在設(shè)備的操作系統(tǒng)中嵌入多媒體交互系統(tǒng)的處理器的控制功能，運行交互腳本，并結(jié)合設(shè)備本身具有的信息采集和多媒體播放功能的模塊，實現(xiàn)多媒體交互系統(tǒng)的一種或多種功能。
[0089]示例二、將處理器、信息采集和多媒體播放等的部分或全部功能集成為控制設(shè)備，置于特定場景的特定位置。
[0090]舉例而言，多媒體交互系統(tǒng)的處理器的功能可以嵌入互動電影院的多媒體播放器的控制端，或者將多媒體交互系統(tǒng)的處理器、信息采集和多媒體播放等的部分或全部功能集成為獨立的控制設(shè)備。在運行交互腳本時，控制設(shè)備可以調(diào)取交互腳本的多媒體數(shù)據(jù)，發(fā)送至能夠播放電影的音響、播放和投影設(shè)備等多種多媒體播放設(shè)備，使得多媒體數(shù)據(jù)的視頻顯示在電影屏幕上。并且，可以在電影院的特定位置如座椅、屋頂、地面等設(shè)置信息采集子系統(tǒng)的各種設(shè)備，以采集用戶的姿態(tài)信息和語音等，其中，電影院播放的引導(dǎo)語音可以為多人語音，在某些關(guān)鍵點，根據(jù)采集的用戶的語音等內(nèi)容調(diào)取相應(yīng)的視頻畫面、語音以完成不同場景的轉(zhuǎn)換，具體可以通過屏幕呈現(xiàn)電影畫面，也可以根據(jù)具體場景采用特殊的播放方式，如采用全息影像投影在空氣或水幕生成30影像。此外，電影院中還可以設(shè)置環(huán)境信息采集設(shè)備和環(huán)境控制子系統(tǒng)，處理器可以基于環(huán)境信息采集設(shè)備采集的環(huán)境信息和/或交互腳本向環(huán)境調(diào)節(jié)子系統(tǒng)發(fā)出調(diào)節(jié)指令，從而通過環(huán)境調(diào)節(jié)子系統(tǒng)調(diào)節(jié)電影院內(nèi)的溫度、亮度等環(huán)境狀態(tài)，例如:視頻畫面為冰窖時，調(diào)低室內(nèi)溫度，視頻畫面為朝陽時，調(diào)高室內(nèi)溫度。
[0091]與互動電影院類似的，集成的控制設(shè)備還可以設(shè)置于電游廳、主題公園、角色扮演屋、密室逃脫、健身房、手術(shù)室等場景的特定位置，與場景中的其他信息采集和多媒體播放設(shè)備共同實現(xiàn)多媒體交互系統(tǒng)的一種或多種功能。
[0092]示例三、將處理器、信息采集和多媒體播放等的部分或全部功能集成為控制芯片，設(shè)置于各種產(chǎn)品中。
[0093]與示例二相比，控制芯片的體積可以比控制設(shè)備小，控制芯片集成的功能也可以相對少一些，可以將處理器的部分功能設(shè)置于云端的服務(wù)器，僅將語音采集、姿態(tài)采集和數(shù)據(jù)傳輸?shù)裙δ芗傻娇刂菩酒?，然后在控制芯片外部連接視頻、音頻等播放設(shè)備。
[0094]例如，在瑜伽墊、地毯等產(chǎn)品中設(shè)置集成了姿態(tài)采集和信息傳輸功能的控制芯片，采集用戶的姿態(tài)信息發(fā)送給服務(wù)器，服務(wù)器運行交互腳本以控制外接的音箱播放語音。再如，在水杯壁上粘貼或嵌入集成了溫度采集、語音采集和播放等功能的控制芯片，采集用戶語音、體溫以及水溫等信息發(fā)送給服務(wù)器，服務(wù)器運行交互腳本并控制水杯壁上的揚聲器播放語音，也可以調(diào)節(jié)水溫或凈化水質(zhì)。
[0095]類似的，集成的控制芯片還可以設(shè)置于手電筒、手機配件、智能耳機、智能音箱、智能首飾、智能喚醒香薰、燈、筆、桌椅、背包、帳篷、智能血壓儀、智能秤、箱子等產(chǎn)品中，芯片中具體集成的功能可以根據(jù)不同產(chǎn)品的實際功能相應(yīng)的改變。
[0096]根據(jù)上述示例可知，多媒體交互系統(tǒng)可以設(shè)置于各種日常用品、家居用品、辦公用品、旅行健身用品、娛樂、健康醫(yī)療等多種場景或產(chǎn)品中，與一些產(chǎn)品自身的功能適當(dāng)?shù)慕Y(jié)合，在實現(xiàn)產(chǎn)品自身功能的同時，能夠與用戶進(jìn)行交互，實現(xiàn)多媒體交互系統(tǒng)的一種或多種功能。
[0097]本實施例的多媒體交互系統(tǒng)除了實現(xiàn)上述實施例中的功能外，還能夠?qū)τ脩羲幍沫h(huán)境進(jìn)行調(diào)節(jié)，并且可以設(shè)置于日常用品、家居辦公用品、旅行健身、房間、娛樂、健康醫(yī)療等多種場景和產(chǎn)品，能夠應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，解決用戶的多種心理需求，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的確定性和有效性。
[0098]實施例6
[0099]圖6為本發(fā)明一實施例的多媒體交互方法的流程圖，如圖6所示，該方法可以本發(fā)明上述實施例中任意一種結(jié)構(gòu)的多媒體交互系統(tǒng)與用戶交互，所述方法具體可以包括以下步驟:
[0100]步驟601、信息采集子系統(tǒng)采集用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息；
[0101]步驟602、處理器根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息，從存儲器中調(diào)取與所述用戶交互所需的交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)；
[0102]步驟603、多媒體播放子系統(tǒng)播放從所述處理器接收到的多媒體數(shù)據(jù)。
[0103]本實施例的多媒體交互方法在與用戶交互時，信息采集子系統(tǒng)可以采集用戶的各種狀態(tài)信息，處理器可以根據(jù)狀態(tài)信息從存儲器中調(diào)取交互腳本中的多媒體數(shù)據(jù)，發(fā)送至多媒體子系統(tǒng)進(jìn)行播放以完成與用戶的交互，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的穩(wěn)定性和有效性。
[0104]進(jìn)一步地，能夠向用戶發(fā)出各種提醒，生成狀態(tài)變化報告，能夠應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，解決用戶的多種心理需求。
[0105]此外，處理器還能夠通過環(huán)境調(diào)節(jié)子系統(tǒng)對用戶所處的環(huán)境進(jìn)行調(diào)節(jié)，并且可以設(shè)置于日常用品、家居辦公用品、旅行健身、房間、娛樂、健康醫(yī)療等多種場景和產(chǎn)品，能夠應(yīng)用于心理咨詢、教練指導(dǎo)、互動娛樂等多種領(lǐng)域，解決用戶的多種心理需求，減少了輔導(dǎo)師的個人因素對培訓(xùn)、咨詢、指導(dǎo)等服務(wù)效果的影響，能夠提高服務(wù)效果的確定性和有效性。
[0106]以上所述，僅為本發(fā)明的【具體實施方式】，但本發(fā)明的保護(hù)范圍并不局限于此，任何熟悉本【技術(shù)領(lǐng)域】的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi)，可輕易想到變化或替換，都應(yīng)涵蓋在本發(fā)明的保護(hù)范圍之內(nèi)。因此，本發(fā)明的保護(hù)范圍應(yīng)以所述權(quán)利要求的保護(hù)范圍為準(zhǔn)。
【權(quán)利要求】
1.一種多媒體交互系統(tǒng)，其特征在于，包括: 存儲器，用于存儲與用戶交互所需的交互腳本，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)； 多媒體播放子系統(tǒng)； 信息采集子系統(tǒng)，用于采集用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息；以及 處理器，與所述存儲器、所述多媒體播放子系統(tǒng)和所述信息采集子系統(tǒng)分別連接，用于根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息調(diào)取所述交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)。
2.根據(jù)權(quán)利要求1所述的多媒體交互系統(tǒng)，其特征在于，所述狀態(tài)信息包括用戶的姿態(tài)信息、語音和生理信息中的任意一種或者多種，所述信息采集子系統(tǒng)包括以下設(shè)備的任意一種或者多種: 姿態(tài)信息采集設(shè)備，用于采集用戶的姿態(tài)信息； 語音采集設(shè)備，用于采集用戶發(fā)出的語音； 生理信息采集設(shè)備，用于采集用戶的生理信息； 環(huán)境信息采集設(shè)備，用于采集所述環(huán)境信息。
3.根據(jù)權(quán)利要求2所述的多媒體交互系統(tǒng)，其特征在于，所述姿態(tài)信息采集設(shè)備包括體感檢測設(shè)備、面部識別設(shè)備中的任意一種或者多種。
4.根據(jù)權(quán)利要求2所述的多媒體交互系統(tǒng)，其特征在于，所述語音采集設(shè)備包括麥克風(fēng)、拾音器中的至少一種。
5.根據(jù)權(quán)利要求2所述的多媒體交互系統(tǒng)，其特征在于，所述生理信息采集設(shè)備包括心電檢測設(shè)備、腦波檢測設(shè)備、脈搏檢測設(shè)備、眼動識別設(shè)備、聲紋識別設(shè)備、指紋識別設(shè)備、掌紋識別設(shè)備、視網(wǎng)膜識別設(shè)備中的任意一種或者多種。
6.根據(jù)權(quán)利要求1所述的多媒體交互系統(tǒng)，其特征在于，所述多媒體播放子系統(tǒng)包括音頻播放設(shè)備、視頻播放設(shè)備、全息影像投影設(shè)備、虛擬現(xiàn)實設(shè)備、增強現(xiàn)實設(shè)備、裸眼3D視覺設(shè)備中的任意一種或者多種。
7.根據(jù)權(quán)利要求1至6中任一項所述的多媒體交互系統(tǒng)，其特征在于，所述處理器包括: 輸入模塊，與所述信息采集子系統(tǒng)連接，用于接收所述狀態(tài)信息； 調(diào)取模塊，與所述輸入模塊和所述存儲器分別連接，用于在所述狀態(tài)信息與所述交互腳本中預(yù)定義的多媒體數(shù)據(jù)的播放條件匹配的情況下，從所述存儲器中調(diào)取所述匹配的多媒體數(shù)據(jù)及其播放方式； 輸出模塊，與所述調(diào)取模塊和所述多媒體播放子系統(tǒng)分別連接，用于根據(jù)所述播放方式將所述匹配的多媒體數(shù)據(jù)輸出至所述多媒體播放子系統(tǒng)。
8.根據(jù)權(quán)利要求7所述的多媒體交互系統(tǒng)，其特征在于，所述處理器還包括語音處理模塊， 所述語音處理模塊與所述輸入模塊以及所述調(diào)取模塊連接，用于從所述輸入模塊獲取所述狀態(tài)信息中的語音，對所述語音進(jìn)行語音識別、語義分析中的至少一種處理后，將所述語音表達(dá)的語義信息發(fā)送至所述調(diào)取模塊；和/或 所述語音處理模塊與所述調(diào)取模塊以及所述輸出模塊連接，用于將所述調(diào)取模塊調(diào)取的多媒體數(shù)據(jù)中的文字進(jìn)行語音合成的處理，并將所合成的語音輸出至所述輸出模塊。
9.根據(jù)權(quán)利要求7所述的多媒體交互系統(tǒng)，其特征在于，還包括: 環(huán)境調(diào)節(jié)子系統(tǒng)，與所述處理器連接，用于根據(jù)所述處理器基于所述環(huán)境信息和/或所述交互腳本發(fā)出的調(diào)節(jié)指令對所述用戶所處的環(huán)境進(jìn)行調(diào)節(jié)。
10.根據(jù)權(quán)利要求9所述的多媒體交互系統(tǒng)，其特征在于， 所述輸入模塊還被配置為，從所述信息采集子系統(tǒng)接收所述環(huán)境信息； 所述調(diào)取模塊還被配置為，參考所述環(huán)境信息從所述存儲器中調(diào)取所述匹配的多媒體數(shù)據(jù)及其播放方式。
11.根據(jù)權(quán)利要求9所述的多媒體交互系統(tǒng)，其特征在于，所述處理器還包括: 提醒模塊，與所述輸入模塊和所述輸出模塊分別連接，用于在特定信號處于預(yù)設(shè)的參考范圍內(nèi)的情況下，生成相應(yīng)的提醒信號并輸出至所述輸出模塊，以使得所述輸出模塊將所述提醒信號發(fā)送至相應(yīng)的提醒設(shè)備進(jìn)行播放，所述特定信號包括所述狀態(tài)信息和/或所述環(huán)境信息。
12.—種多媒體交互方法，其特征在于，采用權(quán)利要求1至11中任一項所述的多媒體交互系統(tǒng)與用戶交互，所述方法包括: 信息采集子系統(tǒng)采集所述用戶的狀態(tài)信息和/或所述用戶所處環(huán)境的環(huán)境信息； 處理器根據(jù)所述狀態(tài)信息和/或所述環(huán)境信息，從存儲器中調(diào)取與所述用戶交互所需的交互腳本中的多媒體數(shù)據(jù)，并將所調(diào)取的多媒體數(shù)據(jù)輸出至多媒體播放子系統(tǒng)，所述交互腳本包括預(yù)定了播放方式和播放條件的多媒體數(shù)據(jù)； 所述多媒體播放子系統(tǒng)播放從所述處理器接收到的多媒體數(shù)據(jù)。
【文檔編號】G06F17/30GK104298722SQ201410496014
【公開日】2015年1月21日 申請日期:2014年9月24日 優(yōu)先權(quán)日:2014年9月24日
【發(fā)明者】張鴻勛 申請人:張鴻勛