檢測方法和檢測設(shè)備的制造方法
【技術(shù)領(lǐng)域】
[0001 ] 本文中所討論的實施方式涉及檢測程序、檢測方法以及檢測設(shè)備。
【背景技術(shù)】
[0002]已知用于對人的舞蹈進(jìn)行評分并且通知人評分結(jié)果的技術(shù)。
[0003]在與對人的舞蹈進(jìn)行評分或評估有關(guān)的技術(shù)當(dāng)中，已知以下技術(shù):通過該技術(shù)例如計算所檢測的玩家的姿勢與樣本姿勢之間的相似度等級，并且如果相似度等級高于預(yù)定值，則生成輔助圖像來促使玩家關(guān)注不相似的樣本姿勢的細(xì)節(jié)。
[0004]專利文獻(xiàn)1:日本特許公開公報N0.2013-116311
[0005]為了對人的舞蹈進(jìn)行評分或評估，可能期望提取人打節(jié)拍的時間，S卩，人的打拍子運(yùn)動或打拍子的時間。然而，根據(jù)上述技術(shù)，由于該分析涉及大量處理，所以在一些情形下仍然存在以下問題:不能容易地提取人的打拍子運(yùn)動或人打拍子的時間。
[0006]例如，為了對人的舞蹈進(jìn)行評分，在一種可能的模式下，可以通過使用攝像頭拍攝人的運(yùn)動的圖像并且通過使用計算機(jī)對所拍攝的運(yùn)動圖像進(jìn)行分析來提取人的節(jié)拍。至于具體的方法，例如，通過使用預(yù)定的識別技術(shù)(如模板匹配)從運(yùn)動圖像中識別臉或身體的一部分或者人所使用的工具(例如，沙槌)，以便生成被識別的臉、身體的一部分或工具的運(yùn)動量的時間序列數(shù)據(jù)。之后，對時間序列數(shù)據(jù)進(jìn)行傅里葉分析等，以便從具體頻帶中的分量提取人的節(jié)拍。隨后，在一個可能的示例中，將所提取的人的節(jié)拍與參考節(jié)拍進(jìn)行比較，以便根據(jù)比較結(jié)果對人的舞蹈進(jìn)行評分。然而，根據(jù)上述模式，例如，當(dāng)進(jìn)行模板匹配處理來從運(yùn)動圖像中識別人的臉或身體的一部分或人所使用的工具(如沙槌)時，重復(fù)進(jìn)行將模板與運(yùn)動圖像的一部分進(jìn)行比較的處理。由于這個原因，分析涉及大量處理，并且給計算機(jī)施加了大的處理負(fù)荷。
[0007]因此，本發(fā)明的實施方式的一個方面的目的是提供基于所拍攝的圖像來提取人的打拍子運(yùn)動或打拍子的時間的檢測程序、檢測方法和檢測設(shè)備。

【發(fā)明內(nèi)容】

[0008]根據(jù)實施方式的一個方面，檢測方法包括:檢測順序拍攝的多個圖像中類時變化量暫時減小的時間，以及基于所檢測到的時間提取包括在拍攝圖像中的人的打拍子運(yùn)動或包括在拍攝圖像中的人打拍子的時間。
【附圖說明】
[0009]圖1是根據(jù)實施方式的檢測設(shè)備的功能配置的示例性圖；
[0010]圖2是幀的示例的圖；
[0011]圖3是定時數(shù)據(jù)的示例的表格；
[0012]圖4是二值化圖像的示例的圖；
[0013]圖5是背景差分量與幀編號之間的對應(yīng)關(guān)系的示例的表格；
[0014]圖6是用于說明由根據(jù)本實施方式的檢測設(shè)備執(zhí)行的示例性處理的圖；
[0015]圖7是通過繪制人打拍子的時間且由定時數(shù)據(jù)表示所獲得的圖的示例的圖；
[0016]圖8是根據(jù)本實施方式的檢測處理的過程的流程圖；
[0017]圖9是用于說明提取人打拍子的時間的示例的圖；
[0018]圖10是檢測設(shè)備與卡拉OK設(shè)備相互協(xié)作的示例性系統(tǒng)的圖；
[0019]圖11是包括服務(wù)器的系統(tǒng)的示例的圖；以及
[0020]圖12是執(zhí)行檢測程序的計算機(jī)的圖。
【具體實施方式】
[0021]將參照【附圖說明】本發(fā)明的優(yōu)選實施方式。本公開內(nèi)容不限于示例性實施方式。
[0022][根據(jù)實施方式的檢測設(shè)備的示例性功能配置]
[0023]圖1中示出的檢測設(shè)備10被配置成:從作為通過使用攝像頭拍攝正在跳舞的人的圖像的結(jié)果所獲得的運(yùn)動圖像的幀提取人的運(yùn)動量暫時減小的時間，作為人打節(jié)拍的時間，即，作為人打拍子的時間。提取人的運(yùn)動量暫時減小的時間作為人打拍子的時間原因在于:當(dāng)人打拍子時，由于人暫時停止他的/她的運(yùn)動，所以運(yùn)動量暫時減小。因此，檢測設(shè)備10能夠提取人打拍子的時間而不執(zhí)行用于識別人的臉或身體的一部分或工具的任何識別處理，即，不執(zhí)行涉及大量處理(具有大的處理負(fù)荷)的任何識別處理。因此，通過使用檢測設(shè)備10，能夠容易地提取人打拍子的時間。在這種情形下，“節(jié)拍”表示例如節(jié)奏的時間間隔的規(guī)律性。“節(jié)奏”例如表示時間間隔的長度，諸如打的拍子或拍子。
[0024]圖1是根據(jù)實施方式的檢測設(shè)備的功能配置的示例性圖。如圖1中的示例所示，檢測設(shè)備10包括輸入單元11、存儲單元12和控制單元13。
[0025]輸入單元11向控制單元13輸入各種類型的信息。例如，當(dāng)使用檢測設(shè)備10從用戶接收到表示執(zhí)行下面將描述的提取處理的指令時，輸入單元11將所接收的指令輸入至控制單元13。可以用于配置輸入單元11的裝置的示例包括:鼠標(biāo)、鍵盤以及被配置成接收從另外的設(shè)備(未示出)發(fā)送的各種類型的信息并且將所接收的信息輸入至控制單元13的網(wǎng)卡。
[0026]在存儲單元12中存儲有各種類型的信息。例如，在存儲單元12中存儲有運(yùn)動圖像數(shù)據(jù)12a和定時數(shù)據(jù)12b。
[0027]運(yùn)動圖像數(shù)據(jù)12a是包括作為通過使用攝像頭拍攝正在跳舞的人的圖像的結(jié)果所獲得的多個幀的運(yùn)動圖像的數(shù)據(jù)。人可以是例如各個卡拉OK房間中伴隨卡拉OK設(shè)備回放的音樂唱歌并且伴隨回放的音樂跳舞的人。運(yùn)動圖像數(shù)據(jù)12a中包括的多個幀是由攝像頭順序拍攝的，并且用作拍攝圖像的示例。圖2是幀的示例的圖。圖2中的示例示出了幀14包括各個的卡拉OK房間90中正在伴隨音樂唱歌和跳舞的人的情形。運(yùn)動圖像數(shù)據(jù)12a的幀速率可以是任何任意值。在下面的章節(jié)中，將對幀速率為每秒30幀(fps)的示例進(jìn)行描述。
[0028]定時數(shù)據(jù)12b是表示在跳舞的人打拍子的時間(定時)的數(shù)據(jù)。當(dāng)運(yùn)動圖像數(shù)據(jù)12a中包括的人是例如各個的卡拉OK房間中正在伴隨回放的音樂唱歌和跳舞的人時，每個時間可以被表達(dá)為例如自音樂和舞蹈的開始的時間段，因為舞蹈與音樂一起開始。圖3是定時數(shù)據(jù)的示例的表格。圖3的示例中示出的定時數(shù)據(jù)12b包括諸如“時間”和“是否打拍子”項。在“時間”項下，通過提取單元13c(下文將說明)登記自音樂和舞蹈的開始起的時間段。在“是否打拍子”項下，如果“時間”項下登記的時間對應(yīng)于人打拍子的時間，則提取單元13c(下文將說明)登記“是”。相反，如果該時間不是人打拍子的時間，則提取單元13c登記“否”。例如，在圖3的示例中示出的定時數(shù)據(jù)12b中的第一記錄中，由于在“是否打拍子”項下登記了 “是”，音樂和舞蹈開始之后“0.033”秒的時間被表示為人打拍子的時間。相反，在圖3的示例中示出的定時數(shù)據(jù)12b中的第二記錄中，由于在“是否打拍子”項下登記了“否”，音樂和舞蹈開始之后“0.066”秒的時間被表示為人不打拍子的時間。
[0029]存儲單元12是配置有例如半導(dǎo)體存儲器元件(如閃速存儲器)或硬盤、光盤等的存儲裝置。
[0030]控制單元13具有用于在其中存儲控制數(shù)據(jù)和用于限定各種類型的處理過程的計算機(jī)程序的內(nèi)部存儲器，并且被配置成由此執(zhí)行各種類型的處理。如圖1中所示，控制單元13包括獲取單元13a、檢測單元13b和提取單元13c。
[0031]獲取單元13a被配置成針對由運(yùn)動圖像數(shù)據(jù)12a表示的運(yùn)動圖像中所包括的多個幀中的每個幀，獲取該幀與在該幀之前所拍攝的至少一個幀之間的差分。此外，獲取單元13a被配置成針對由運(yùn)動圖像數(shù)據(jù)12a表示的運(yùn)動圖像中所包括的多個幀中的每個幀，獲取該幀與通過累積在該幀之前所拍攝的幀所獲取的幀之間的差分。
[0032]將說明獲取單元13a的模式。例如，當(dāng)輸入單元11輸入了表示執(zhí)行提取處理(下文將說明)的指令時，獲取單元13a獲取存儲在存儲單元12中的運(yùn)動圖像數(shù)據(jù)12a。
[0033]之后，通過實施背景差分法，獲取單元13a針對由運(yùn)動圖像數(shù)據(jù)12a表示的運(yùn)動圖像中所包括的多個幀中的每個幀，獲取該幀與在該幀之前所拍攝的至少一個幀之間的差分。例如，通過使用與背景統(tǒng)