欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

信息處理裝置以及信息處理方法與流程

文檔序號:11155965閱讀:452來源:國知局
信息處理裝置以及信息處理方法與制造工藝

本發(fā)明涉及信息處理裝置以及信息處理方法。



背景技術:

近年來,使用數(shù)字地記錄人、物體的活動的運動捕捉技術來進行護理、康復訓練中的效果測定。

作為運動捕捉技術的方式之一,有以下方式:通過對被實驗者附加標記并從多個方位利用照相機進行攝影,檢測標記并將被實驗者的活動變換為數(shù)字數(shù)據(jù)而記錄。另外,還有以下方式:不使用標記而利用紅外線傳感器來測定從傳感器至被實驗者的距離,根據(jù)測定出的值,記錄被實驗者的活動。

在專利文獻1中,公開了在康復訓練的現(xiàn)場中使用運動捕捉技術的機制。

專利文獻1:日本特開2015-61577號公報



技術實現(xiàn)要素:

在專利文獻1中,記載了以下機制:根據(jù)利用運動捕捉技術取得的被實驗者的各關節(jié)的坐標信息生成骨骼信息并將骨骼信息顯示于畫面,從而顯示被實驗者的動作。

在專利文獻1記載的機制中,在希望對過去的自己的動作、他人的動作與本次的動作進行比較的情況下,需要逐個確認各個圖像、動畫。但是,在該處理方法中,難以詳細地掌握差異。

另外,例如,在背景不同的情況下,由于背景的差異,難以詳細地掌握被實驗者的動作的差異。

另外,為了詳細地掌握差異,需要將成為比較對象的人的大小、位置細致地調(diào)整成相匹配。但是,該調(diào)整作業(yè)是非?;ㄙM時間勞力的作業(yè)。

因此,本發(fā)明的目的在于提供一種在與其他圖像、動畫相比較時容易掌握與比較對象的差異的機制。

另外,本發(fā)明的目的在于提供一種減輕成為比較對象的人的大小、位置的調(diào)整作業(yè)的時間勞力的機制。

本發(fā)明涉及一種信息處理裝置,其特征在于,具備:比較動畫選擇受理單元,受理進行比較的動畫的選擇;坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;以及顯示單元,通過和與由所述比較動畫選擇受理單元受理了選擇的動畫相關的項目對應起來的布局,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示。

本發(fā)明還涉及一種信息處理裝置,其特征在于,具備:坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;布局決定單元,根據(jù)所述被實驗者的動作方向來決定布局;以及顯示單元,通過由所述布局決定單元決定的布局,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示。

本發(fā)明還涉及一種信息處理裝置,其特征在于,具備:坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;顯示單元,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示;以及反轉指示受理單元,受理使所述被實驗者的骨骼信息或者成為比較對象的骨骼信息的左右反轉而進行顯示的指示,所述顯示單元使由所述反轉指示受理單元受理了使左右反轉而進行顯示的指示的骨骼信息的左右反轉而進行顯示。

本發(fā)明還涉及一種信息處理裝置,其特征在于,具備:坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;顯示單元,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息重疊顯示;位置調(diào)整指示受理單元,受理調(diào)整所述被實驗者的骨骼信息和成為比較對象的骨骼信息的位置的指示;以及位置調(diào)整單元,在由位置調(diào)整指示受理單元受理了位置調(diào)整的指示的情況下,通過使所述被實驗者的某一個關節(jié)坐標和與該關節(jié)坐標對應的成為所述比較對象的骨骼信息所相關的關節(jié)坐標一致來進行位置調(diào)整。

本發(fā)明還涉及一種信息處理裝置,其特征在于,具備:坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;顯示單元,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息重疊顯示;尺寸調(diào)整指示受理單元,受理調(diào)整所述被實驗者的骨骼信息和成為比較對象的骨骼信息的大小的指示;以及尺寸調(diào)整單元,在由尺寸調(diào)整指示受理單元受理了尺寸調(diào)整的指示的情況下,通過使所述被實驗者的某一個關節(jié)間的距離和與該關節(jié)間的距離對應的成為所述比較對象的骨骼信息所相關的關節(jié)間的距離一致來進行尺寸調(diào)整。

本發(fā)明還涉及一種信息處理裝置,其特征在于,具備:坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;顯示單元,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示;設定受理單元,在由所述顯示單元顯示的畫面中,受理顯示形式的設定;以及存儲單元,存儲由所述設定受理單元受理了的設定內(nèi)容。

本發(fā)明還涉及一種信息處理裝置,其特征在于,具備:坐標取得單元,取得被實驗者的關節(jié)的坐標信息;骨骼信息生成單元,根據(jù)由所述坐標取得單元取得的坐標信息,生成被實驗者的骨骼信息;顯示單元,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示;選擇受理單元,在所述顯示單元中顯示的畫面中,受理針對是否顯示包括被實驗者的背景影像的選擇;以及決定單元,依照由所述選擇受理單元受理了選擇的內(nèi)容,決定是否顯示包括被實驗者的背景影像。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:比較動畫選擇受理工序,所述信息處理裝置的比較動畫選擇受理單元受理進行比較的動畫的選擇;坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述信息處理裝置的骨骼信息生成單元根據(jù)在所述坐標取得工序中取得的坐標信息,生成被實驗者的骨骼信息;以及顯示工序,所述信息處理裝置的顯示單元通過和與通過所述比較動畫選擇受理工序受理了選擇的動畫相關的項目對應起來的布局,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述信息處理裝置的骨骼信息生成單元根據(jù)在所述坐標取得工序中取得的坐標信息,生成被實驗者的骨骼信息;布局決定工序,所述信息處理裝置的布局決定單元根據(jù)所述被實驗者的動作方向來決定布局;以及顯示工序,所述信息處理裝置的顯示單元通過在所述布局決定工序中決定的布局,將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述信息處理裝置的骨骼信息生成單元根據(jù)在所述坐標取得工序中取得的坐標信息,生成被實驗者的骨骼信息;顯示工序,所述信息處理裝置的顯示單元將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示;以及反轉指示受理工序,所述信息處理裝置的反轉指示受理單元受理使所述被實驗者的骨骼信息或者成為比較對象的骨骼信息的左右反轉而進行顯示的指示,在所述顯示工序中,使在所述反轉指示受理工序中受理了使左右反轉而進行顯示的指示的骨骼信息的左右反轉而進行顯示。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述信息處理裝置的骨骼信息生成單元根據(jù)在所述坐標取得工序中取得的坐標信息,生成被實驗者的骨骼信息;顯示工序,所述信息處理裝置的顯示單元將所述被實驗者的骨骼信息和成為比較對象的骨骼信息重疊顯示;位置調(diào)整指示受理工序,所述信息處理裝置的位置調(diào)整指示受理單元受理調(diào)整所述被實驗者的骨骼信息和成為比較對象的骨骼信息的位置的指示;以及位置調(diào)整工序,所述信息處理裝置的位置調(diào)整單元在通過位置調(diào)整指示受理工序受理了位置調(diào)整的指示的情況下,通過使所述被實驗者的某一個關節(jié)坐標和與該關節(jié)坐標對應的成為所述比較對象的骨骼信息所相關的關節(jié)坐標一致來進行位置調(diào)整。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述骨骼信息生成單元根據(jù)通過所述坐標取得工序取得的坐標信息,生成被實驗者的骨骼信息;顯示工序,所述信息處理裝置的顯示單元將所述被實驗者的骨骼信息和成為比較對象的骨骼信息重疊顯示;尺寸調(diào)整指示受理工序,所述信息處理裝置的尺寸調(diào)整指示受理單元受理調(diào)整所述被實驗者的骨骼信息和成為比較對象的骨骼信息的大小的指示;以及尺寸調(diào)整工序,在所述信息處理裝置的尺寸調(diào)整單元在尺寸調(diào)整指示受理工序中受理了尺寸調(diào)整的指示的情況下,通過使所述被實驗者的某一個關節(jié)間的距離和與該關節(jié)間的距離對應的成為所述比較對象的骨骼信息所相關的關節(jié)間的距離一致來進行尺寸調(diào)整。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述骨骼信息生成單元根據(jù)通過所述坐標取得工序取得的坐標信息,生成被實驗者的骨骼信息;顯示工序,所述信息處理裝置的顯示單元將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示;設定受理工序,所述信息處理裝置的設定受理單元在所述顯示工序中顯示的畫面中,受理顯示形式的設定;以及存儲工序,所述信息處理裝置的存儲單元存儲在所述設定受理工序中受理了的設定內(nèi)容。

本發(fā)明還涉及一種信息處理裝置中的信息處理方法,其特征在于,具備:坐標取得工序,所述信息處理裝置的坐標取得單元取得被實驗者的關節(jié)的坐標信息;骨骼信息生成工序,所述骨骼信息生成單元根據(jù)通過所述坐標取得工序取得的坐標信息,生成被實驗者的骨骼信息;顯示工序,所述信息處理裝置的顯示單元將所述被實驗者的骨骼信息和成為比較對象的骨骼信息并排顯示;選擇受理工序,所述信息處理裝置的選擇受理單元在所述顯示工序中顯示的畫面中,受理針對是否顯示包括被實驗者的背景影像的選擇;以及決定工序,所述信息處理裝置的決定單元依照通過所述選擇受理工序受理了選擇的內(nèi)容,決定是否顯示包括被實驗者的背景影像。

根據(jù)本發(fā)明,能夠在與其他圖像、動畫相比較時,容易掌握與比較對象的差異。

另外,根據(jù)本發(fā)明,減輕成為比較對象的人的大小、位置的調(diào)整作業(yè)的時間勞力。

附圖說明

圖1是示出信息處理裝置101的功能結構的圖。

圖2是示出信息處理裝置101的硬件結構的圖。

圖3是示出在對被實驗者進行攝影的同時進行測定的處理的流程圖。

圖4是示出使用預先記錄的運動信息的情況下的各項目的測定處理的流程圖。

圖5是示出報告制作處理的流程圖。

圖6是示出被實驗者列表的一個例子的圖。

圖7是示出各關節(jié)的坐標信息的一個例子的圖。

圖8是示出由運動信息取得部151取得的被實驗者的狀況的圖。

圖9是示出根據(jù)各關節(jié)的坐標信息形成的被實驗者的骨骼信息的一個例子的圖。

圖10是示出在本發(fā)明中從用戶受理在信息處理裝置101的顯示器212中顯示的被實驗者的選擇的畫面的一個例子的圖。

圖11是示出在本發(fā)明中當在步驟S301中從用戶受理了“通常步行”的項目的選擇的情況下信息處理裝置101的CPU201執(zhí)行的處理的一個例子的圖。

圖12是示出在本發(fā)明中當在步驟S301中從用戶受理了“通常步行”的項目的選擇的情況下在信息處理裝置101的顯示器212中顯示的畫面的一個例子的圖。

圖13是示出在本發(fā)明中當在步驟S301中從用戶受理了“睜眼單腳站立”的項目的選擇的情況下信息處理裝置101的CPU201執(zhí)行的處理的一個例子的圖。

圖14是示出在本發(fā)明中當在步驟S302中信息處理裝置101開始了被實驗者的攝影時在信息處理裝置101的顯示器212中顯示的畫面的一個例子的圖。

圖15是示出在本發(fā)明中在步驟S502中信息處理裝置101的CPU201提取測定結果的處理的一個例子的圖。

圖16是示出在本發(fā)明中在步驟S503中信息處理裝置101的CPU201制作報告的處理的一個例子的圖。

圖17是示出在本發(fā)明中在提取測量結果時在信息處理裝置101的顯示器212中顯示的畫面的一個例子的圖。

圖18是示出在本發(fā)明中在提取測量結果之后在信息處理裝置101的顯示器212中顯示的畫面的一個例子的圖。

圖19是示出在本發(fā)明中在信息處理裝置101的存儲裝置204中存儲測定結果的測定結果管理表格的一個例子的圖。

圖20是示出在本發(fā)明中由信息處理裝置101的CPU201制作并輸出到印刷裝置等的報告的一個例子的圖。

圖21是合成了在運動信息取得部151中攝影而取得的影像和骨骼信息的畫面的一個例子。

圖22是調(diào)整了顯示骨骼信息的區(qū)域的面積的畫面的一個例子。

圖23是將評價對象的動畫和比較對象的動畫縱向并排顯示的畫面的一個例子。

圖24是將評價對象的動畫和比較對象的動畫橫向并排顯示的畫面的一個例子。

圖25是示出針對每個項目登記了布局的表格的一個例子的圖。

圖26是示出使圖23的畫面中的上部的動畫的左右反轉了的情況下的圖。

圖27是使比較對象的動畫重疊顯示了的畫面的一個例子。

圖28是不顯示背景等而僅顯示了骨骼信息的畫面的一個例子。

圖29是示出評價被實驗者的動作并顯示針對被實驗者、助手的消息的處理的流程圖。

圖30是示出評價條件的一個例子的圖。

圖31是示出消息表格的一個例子的圖。

(符號說明)

101:信息處理裝置。

具體實施方式

以下,參照附圖,詳細說明本發(fā)明的實施方式。

圖1是示出信息處理裝置101的功能結構的圖。

運動信息取得部151探測進行護理、康復訓練的空間中的人(在本發(fā)明中,被實驗者(接受護理、康復訓練的人員))的活動,取得被實驗者的運動信息。

具體而言,運動信息取得部151是作為Kinect(注冊商標)而公知的傳感器群,內(nèi)置RGB照相機、深度傳感器、聲音傳感器等,能夠識別被攝體(在本發(fā)明中,被實驗者(接受護理、康復訓練的人員))的位置、活動、聲音、臉等。

深度傳感器設為采用利用紅外線來測定直至被實驗者的距離的方式的傳感器。根據(jù)該方式,無需對被實驗者附加標記等而能夠測定從傳感器至被實驗者的距離。

將由運動信息取得部151取得的各數(shù)據(jù)作為動畫數(shù)據(jù)存儲到存儲部165。

將由運動信息取得部151的各傳感器取得的運動信息發(fā)送到運動信息解析部152,進行數(shù)據(jù)解析。

在運動信息解析部152中,解析由運動信息取得部151取得的各數(shù)據(jù),將被實驗者的動作變換為坐標信息。

圖8示出了由運動信息取得部151取得的被實驗者的狀況。運動信息取得部151通過探測被實驗者的活動,與預先存儲的人體圖案進行匹配,得到被實驗者的人體表面的坐標。然后,計算形成該被實驗者的骨骼的各關節(jié)的坐標,根據(jù)計算出的坐標信息,生成被實驗者的骨骼信息。

圖7示出各關節(jié)的坐標信息的一個例子。另外,圖9示出根據(jù)各關節(jié)的坐標信息形成的被實驗者的骨骼信息的一個例子。

通過這樣計算各關節(jié)的坐標信息,并檢測各關節(jié)的坐標的變化,能夠識別被實驗者將腳抬起或者彎膝的動作。

測定部153根據(jù)由運動信息解析部152解析了的運動信息和與各項目對應的設定,進行該項目中的測定。

比較動畫選擇受理部154受理對作為在存儲部165中存儲的動畫的、希望與測定對象的動畫比較的動畫的選擇。

坐標取得部155取得由運動信息解析部152變換而得到的被實驗者的關節(jié)的坐標信息。

骨骼信息生成部156根據(jù)由坐標取得部155取得的坐標信息,生成被實驗者的骨骼信息。

顯示部157根據(jù)與各測定項目對應起來的布局、由布局決定部158決定的布局,并排顯示被實驗者的骨骼信息和比較對象的骨骼信息。另外,將被實驗者的骨骼信息和比較對象的骨骼信息重疊顯示。

布局決定部158根據(jù)被實驗者的動作方向,決定顯示骨骼信息的動畫數(shù)據(jù)的布局。具體而言,決定將被實驗者的動畫數(shù)據(jù)和比較對象的動畫數(shù)據(jù)上下排列或者左右排列等布局。

反轉指示受理部159受理使被實驗者的骨骼信息或者成為比較對象的骨骼信息的左右反轉而進行顯示的指示。在受理了反轉指示的情況下,顯示單元157使受理了反轉指示的骨骼信息的左右反轉而進行顯示。

位置調(diào)整指示受理部160受理調(diào)整被實驗者的骨骼信息和成為比較對象的骨骼信息的位置的指示。

在位置調(diào)整部161中,當由位置調(diào)整指示受理部160受理了位置調(diào)整指示時,通過使被實驗者的某一個關節(jié)坐標和與該關節(jié)坐標對應的成為比較對象的骨骼信息的關節(jié)坐標的位置一致,進行被實驗者的骨骼信息和比較對象的骨骼信息的位置調(diào)整。

尺寸調(diào)整指示受理部162受理調(diào)整被實驗者的骨骼信息和比較對象的骨骼信息的大小的指示。

尺寸調(diào)整部163在由尺寸調(diào)整指示受理部162受理了指示的情況下,通過使被實驗者的某一個關節(jié)間的距離和與該關節(jié)間的距離對應的比較對象的骨骼的關節(jié)間的距離一致來調(diào)整尺寸。另外,當在尺寸調(diào)整指示受理部162中受理了使骨骼信息的大小增大的指示、使骨骼信息的大小減小的指示的情況下,通過依照該指示使骨骼信息增大或者減小來調(diào)整尺寸。

設定受理部164受理顯示被實驗者的骨骼信息和比較對象的骨骼信息的畫面中的各種設定信息(比較動畫的組合、布局、位置、尺寸等設定信息)的設定。

然后,將所設定的信息存儲到存儲部165。

選擇受理部166在顯示畫面中,受理使背景影像顯示或者非顯示的選擇。

決定部167依照由選擇受理部166受理了的內(nèi)容,決定是否顯示背景影像。

圖2是示出本發(fā)明的實施方式的信息處理裝置101的硬件結構的一個例子的框圖。

如圖2所示,在信息處理裝置101中,經(jīng)由系統(tǒng)總線200,連接CPU(Central Processing Unit,中央處理單元)201、ROM(Read Only Memory,只讀存儲器)202、RAM(Random Access Memory,隨機存取存儲器)203、存儲裝置204、輸入控制器205、聲音輸入控制器206、視頻控制器207、存儲器控制器208以及通信I/F控制器209。

CPU201對與系統(tǒng)總線200連接的各設備、控制器總體地進行控制。

ROM202或者存儲裝置204保持作為CPU201執(zhí)行的控制程序的BIOS(Basic Input/Output System,基本輸入輸出系統(tǒng))、OS(Operating System,操作系統(tǒng))、用于實現(xiàn)本信息處理方法的計算機可讀取的程序以及所需的各種數(shù)據(jù)(包括數(shù)據(jù)表格)。

RAM203作為CPU201的主存儲器、工作區(qū)等發(fā)揮功能。CPU201通過在執(zhí)行處理時將所需的程序等從ROM202或者存儲裝置204載入到RAM203,并執(zhí)行所載入的程序,從而實現(xiàn)各種動作。

輸入控制器205控制來自鍵盤/觸摸面板210等輸入裝置的輸入。輸入裝置不限于此,也可以是鼠標、多觸摸屏幕等能夠檢測用多個手指觸摸了的位置的觸摸面板。

通過用戶對準在觸摸面板中顯示出的圖標、光標、按鈕并按下(用手指等觸摸),能夠進行各種指示。

使用該輸入裝置,輸入對于在各種通信裝置中可利用的通信目的地的目的地。

聲音輸入控制器206控制來自麥克風211的輸入。能夠?qū)柠溈孙L211輸入的聲音進行聲音識別。

視頻控制器207控制向顯示器212等外部輸出裝置的顯示。顯示器設為還包括與主體成為一體的筆記本型個人電腦的顯示器。此外,外部輸出裝置不限于顯示器,也可以是例如投影儀。另外,關于能夠通過上述觸摸操作進行受理的裝置,還能夠受理來自鍵盤/觸摸面板210的輸入。

此外,視頻控制器207能夠控制用于進行顯示控制的視頻存儲器(VRAM),作為視頻存儲器區(qū)域,既能夠利用RAM203的一部分,也能夠另外設置專用的視頻存儲器。

在本發(fā)明中,具有:第1視頻存儲器區(qū)域,用于用戶操作信息處理裝置的情況下的顯示;以及第2視頻存儲器區(qū)域,在顯示預定的畫面的情況下用于與第1視頻存儲器區(qū)域的顯示內(nèi)容重疊顯示。視頻存儲器區(qū)域不限于2個,只要信息處理裝置的資源能夠容許,可以具有多個。

存儲器控制器208控制向外部存儲器213的訪問。作為外部存儲器,能夠利用存儲引導程序、各種應用、字體數(shù)據(jù)、用戶文件、編輯文件以及各種數(shù)據(jù)等的外部存儲裝置(硬盤)、軟盤(FD)或者經(jīng)由適配器連接到PCMCIA卡槽的緊湊閃存(CompactFlash;注冊商標)存儲器等。

經(jīng)由通信I/F控制器209、網(wǎng)絡214與外部設備進行連接/通信,執(zhí)行基于網(wǎng)絡的通信控制處理。例如,能夠進行使用TCP/IP的通信、使用ISDN等電話線路以及移動電話的3G線路的通信。

此外,存儲裝置204是用于持久地存儲信息的介質(zhì),其方式不限于硬盤等存儲裝置。例如,也可以是SSD(Solid State Drive,固態(tài)驅(qū)動器)等介質(zhì)。

另外,還能夠用作在本實施方式中的通信終端中進行的各種處理時的臨時的存儲器區(qū)域。

接下來,使用圖3所示的流程圖,說明在對被實驗者進行攝影的同時進行測定的處理。此外,圖3的流程圖所示的處理是信息處理裝置101的CPU201讀出并執(zhí)行預定的程序的處理。

在步驟S301中,從用戶受理被實驗者的選擇和項目的選擇。

被實驗者信息登記于圖6所示的被實驗者列表中。另外,作為項目,有測量睜眼單腳站立的時間的“睜眼單腳站立”、測量在限定時間內(nèi)可進行幾次坐立動作的“椅子坐立”、測量最大步幅的“最大一步”、測量5m的距離的步行所需的時間的“通常步行”、測量直至從椅子站起并往返3m的距離而坐到椅子的時間的“TUG(TimedUp&Go)”等。

通過受理項目的選擇,讀入該項目的測定所需的設定文件、程序。

關于被實驗者信息,不僅可以從已經(jīng)登記的信息中選擇,也可以新登記。

在步驟S302中,從用戶受理攝影指示。當受理了攝影指示時,信息處理裝置101的運動信息取得部151開始對被實驗者攝影。即,取得包括被實驗者的圖像。另外,取得通過各傳感器得到的信息(被實驗者的各關節(jié)的坐標信息等)即運動信息。

在步驟S303中,當在攝影得到的影像中有多個人的情況下,受理關于哪一個人是被實驗者的選擇。

以下,使用圖10,詳細說明步驟S303的處理。

圖10是在步驟S303中信息處理裝置101從用戶受理關于哪一個人是被實驗者的選擇的畫面,圖10的畫面顯示于信息處理裝置101的顯示器212。

在圖10的1003中,顯示信息處理裝置101的運動信息取得部151取得的動畫。

在圖10的1001中,與通過各關節(jié)的坐標信息確定的骨骼信息一起,顯示由運動信息取得部151取得的人(被實驗者或者助手)的狀況。

首先,當通過由用戶實施的鼠標指示器1004的操作而按下人切換按鈕1005時,根據(jù)由運動信息取得部151取得的信息,將被實驗者的骨骼信息顯示于1001。

接下來,通過由用戶實施的鼠標指示器1004的操作,指定顯示于圖10的1001的人中的被實驗者。

然后,從下拉列表1002中,通過由用戶操作的鼠標指示器1004,針對通過鼠標指示器1004選擇出的人是誰進行選擇。

在下拉列表1002中,預先顯示信息處理裝置101管理的被實驗者列表(圖6)中包含的被實驗者的名字。

在步驟S304中,從在步驟S302中取得的運動信息中取得被實驗者的各關節(jié)的坐標信息。在使用再生動畫的情況下,使用在再生對象的動畫數(shù)據(jù)中包含的運動信息,取得被實驗者的各關節(jié)的坐標信息。另外,根據(jù)坐標信息,生成被實驗者的骨骼信息。

圖7示出各關節(jié)的坐標信息的一個例子。

在步驟S305中,合成在步驟S303中取得的影像和根據(jù)在步驟S304中取得的各關節(jié)的坐標信息而得到的骨骼信息,并顯示于顯示器212。

圖21示出合成了在運動信息取得部151中攝影而取得的影像和骨骼信息的畫面的一個例子。

在圖21的2101中,以合成的狀態(tài)顯示影像和骨骼信息。另外,在2102中,顯示從上方觀察被實驗者的情況下的骨骼信息,在2103中,顯示從旁邊觀察被實驗者的情況下的骨骼信息。

根據(jù)在運動信息取得部151中取得的各關節(jié)的坐標信息,計算并生成在2102、2103的區(qū)域中顯示的骨骼信息。

2102、2103的顯示區(qū)域的面積被調(diào)整為能夠顯示骨骼信息的面積。例如,圖21所示的畫面是未調(diào)整的情況下的畫面。在該情況下,盡管顯示于2103的骨骼信息幾乎不移動,仍在骨骼信息的周圍產(chǎn)生大的空白。

圖22是進行了尺寸的調(diào)整的情況下的畫面的一個例子。以將骨骼信息收納的方式進行調(diào)整,空白部分縮小。

通過這樣控制成不顯示無用的空白,能夠?qū)?個骨骼信息集中得較近,所以更容易觀察。

關于顯示范圍的決定方法,例如考慮確定收納骨骼信息的矩形、并從該矩形起將預定的寬度作為空白來進行顯示的方法。

在步驟S306中,使用在步驟S304中解析了的骨骼信息,進行與在步驟S301中選擇出的項目對應的測定。

使用圖11、圖13、圖29,說明具體的處理的內(nèi)容。

接下來,使用圖11,說明在本發(fā)明中,在步驟S301中從用戶受理了“通常步行”的項目的選擇的情況下,信息處理裝置101的CPU201執(zhí)行的處理。

此外,在圖11的處理中,在信息處理裝置101的顯示器212中顯示的畫面是例如圖12。

在此,說明圖12。

圖12的測量開始(結束)坐標1201表示開始或者結束預先設定的通常步行的測量的(x、y、z)坐標。在被實驗者的腳尖的x坐標與測量開始(結束)坐標1201的x坐標第1次重疊的定時,開始秒數(shù)的計數(shù)。然后,在與測量開始(結束)坐標1201的x坐標第2次重疊的定時,結束秒數(shù)的計數(shù)。

例如,在被實驗者從圖12的畫面的左側走來的情況下,在圖12的畫面左側的測量開始(結束)坐標1201的x坐標與被實驗者的腳尖的x坐標重疊的時間點,開始秒數(shù)的計數(shù)。然后,在圖12的畫面右側的測量開始(結束)坐標1201的x坐標與被實驗者的腳尖的x坐標重疊的時間點,結束秒數(shù)的計數(shù)。

在運動信息取得部151的特性方面,在從攝影范圍的左右兩端至預定的距離的范圍中,關節(jié)的坐標的確定精度低。因此,測量開始(結束)坐標1201被設定為與圖12的畫面左右兩端相比空出少許距離的位置(坐標)。

圖12的1202表示時間線,時間線1202在評價錄像得到的攝影數(shù)據(jù)的情況下顯示。

圖12的1203是評價時間指定部。用戶通過利用鼠標等的操作使評價時間指定部1203移動,能夠任意地指定要評價的時間。在評價錄像得到的攝影數(shù)據(jù)時,在希望在與測量開始(結束)坐標1201之間不同的區(qū)間中評價被實驗者的動作的情況下使用。

返回到圖11的說明。

在步驟S1101中,信息處理裝置101從成為當前處理對象的幀的圖像中確定被實驗者的腳尖的坐標。

在步驟S1102中,信息處理裝置101判定能否在步驟S1101中從成為當前處理對象的幀的圖像中確定出被實驗者的腳尖的坐標。如果能夠確定,則使處理轉移到步驟S1103,如果不能確定,則結束本處理。

說明執(zhí)行步驟S1102的處理的理由。運動信息取得部151以被實驗者將正面朝向運動信息取得部151為前提,確定被實驗者的各關節(jié)的位置坐標。因此,在如通常步行那樣被實驗者將側面朝向運動信息取得部151的情況下,難以通過圖3的步驟S304、步驟S305,取得被實驗者的各關節(jié)的坐標信息。如果不在取得各關節(jié)的坐標信息的情況下,則無法執(zhí)行步驟S1103以后的處理,所以通過步驟S1102的處理,判定能否執(zhí)行步驟S1103以后的處理。

在步驟S1103中,信息處理裝置101判定在步驟S1101中確定出的被實驗者的腳尖的坐標是否為預先設定的2個測量開始(結束)坐標1201的外側的坐標。

當在步驟S1101中確定出的被實驗者的腳尖的坐標是預先設定的2個測量開始(結束)坐標1201的外側的坐標的情況下,信息處理裝置101結束本處理。當在步驟S1101中確定出的被實驗者的腳尖的坐標是預先設定的2個測量開始(結束)坐標1201的除了外側以外(即,坐標上或者內(nèi)側)的坐標的情況下,信息處理裝置101使處理轉移到步驟S1104。

在步驟S1104中,信息處理裝置101判定在步驟S1101中確定出的被實驗者的腳尖的坐標是否為預先設定的2個測量開始(結束)坐標1201中的某一個坐標上。

當在步驟S1101中確定出的被實驗者的腳尖的坐標是預先設定的2個測量開始(結束)坐標1201中的某一個坐標上的情況下,信息處理裝置101使處理轉移到步驟S1105。當在步驟S1101中確定出的被實驗者的腳尖的坐標不是預先設定的2個測量開始(結束)坐標1201的任意一個坐標上的情況下,信息處理裝置101判斷為在步驟S1101中確定出的被實驗者的腳尖的坐標是預先設定的2個測量開始(結束)坐標1201的間(內(nèi)側)。然后,使處理轉移到步驟S1109。

在步驟S1105中,信息處理裝置101判定在步驟S1104中判定為是預先設定的2個測量開始(結束)坐標1201中的某一個坐標上是否為第1次。

當在步驟S1104中判定為是預先設定的2個測量開始(結束)坐標1201中的某一個坐標上為第1次的情況下,信息處理裝置101使處理轉移到步驟S1106。在判定為不是第1次(即第2次)的情況下,信息處理裝置101使處理轉移到步驟S1107。

在步驟S1106中,信息處理裝置101執(zhí)行秒數(shù)的計數(shù),結束本處理。

在步驟S1107中,信息處理裝置101結束在步驟S1106中執(zhí)行了的秒數(shù)的計數(shù)。然后,在步驟S1108中,執(zhí)行被實驗者的動作的評價,并存儲到測定結果管理表格(圖19)。

如果更具體地說明步驟S1108的處理,則信息處理裝置101首先通過測量開始點(X1,Y1,Z1)與測量結束點(X2,Y2,Z2)之間的X方向的距離即X1-X2的絕對值(單位是米),求出步行距離。

關于此處所稱的測量開始點,在被實驗者從圖12的畫面左側走來的情況下是指圖12的畫面左側的測量開始(結束)坐標1201(在從右側走來的情況下是指右側的測量開始(結束)坐標1201),或者當在步驟S1109中判斷為“否”時是指幀的圖像中包含的被實驗者的腳尖的坐標。

另外,關于此處所稱的測量結束點,在被實驗者從圖12的畫面左側走來的情況下是指圖12的畫面右側的測量開始(結束)坐標1201(在從右走來的情況下是指左側的測量開始(結束)坐標1201)。

此外,在本實施例中,基本上設為被實驗者向正側面步行來計算步行距離。

但是,還考慮被實驗者不筆直步行而斜向(向圖12的畫面跟前側或者里側)偏移的情況。因此,作為其他實施例,還提出考慮斜向(向圖12的畫面跟前側或者里側)偏移的情況而計算步行距離的方法。具體而言,根據(jù)測量開始點(X1,Y1,Z1)與測量結束點(X2,Y2,Z2)之間的x坐標和z坐標,計算步行距離。

接下來,信息處理裝置101通過將先前求出的步行距離除以在步驟S1107中直至結束計數(shù)所花費的時間,求出被實驗者的步行速度。

然后,信息處理裝置101最后計算在以先前求出的步行速度步行5m時所需的時間,根據(jù)該時間比預先設定的時間長還是短,判定是否進行了正確的通常步行。5m這樣的數(shù)字是為了判定被實驗者的通常步行的動作而所需的距離。

通過進行上述那樣的計算,例如,即使是被實驗者無法步行5m那樣的窄的房間,也能夠判定是否正確地進行了通常步行的動作。

在步驟S1109中,信息處理裝置101判定是否開始了秒數(shù)計數(shù)。

在判定為處于秒數(shù)計數(shù)的開始之后的情況下,信息處理裝置101結束本處理。在判定為處于秒數(shù)計數(shù)的開始之前的情況下,使處理轉移到步驟S1106。

在步驟S1109中判定為“否”的情況是指盡管被實驗者處于預先設定的2個測量開始(結束)坐標1201的內(nèi)側,但未開始秒數(shù)計數(shù)的情況。例如,當在被實驗者的腳尖到達預先設定的2個測量開始坐標1201上時未確定(識別)出被實驗者的各關節(jié)的坐標信息的情況下,在步驟S1109中判定為“否”。

在該情況下,在步驟S1106中,從在測量開始(結束)坐標1201之間識別出被實驗者的腳尖的坐標時起開始秒數(shù)的計數(shù),從而無需重新攝影而能夠評價被實驗者的動作。

以上,結束圖11的說明。

接下來,使用圖13,說明在本發(fā)明中在步驟S301中從用戶受理了“睜眼單腳站立”的項目的選擇的情況下,信息處理裝置101的CPU201執(zhí)行的處理。

在步驟S1301中,信息處理裝置101判定被實驗者的腳是否抬起。

更具體而言,首先,在執(zhí)行步驟S1301的處理之前,信息處理裝置101預先確定被實驗者的雙腳的腳后跟的y坐標的值。然后,通過確定各腳的腳后跟的坐標的值之差是預定的范圍以內(nèi),判斷為雙腳一起接觸地面。

接下來,在步驟S1301中,從成為當前處理對象的幀的圖像中,確定某一支腳的y坐標的值是否與在執(zhí)行步驟S1301的處理之前確定的被實驗者的雙腳的腳后跟的y坐標的值相比變化了預定以上。然后,在變化了預定以上的情況下,信息處理裝置101判斷為該腳抬起。

當在步驟S1301中判定為被實驗者的腳抬起的情況下,信息處理裝置101轉移到步驟S1302的處理。在判定為被實驗者的腳未抬起的情況下,信息處理裝置101轉移到步驟S1304的處理。

在步驟S1302中,信息處理裝置101判定在步驟S1301中判定為抬起的被實驗者的腳是否抬起至預定的高度。

在判定了在步驟S1301中判定為抬起的被實驗者的腳是否抬起至預定的高度的情況下,在步驟S1303中,信息處理裝置101開始秒數(shù)的計數(shù)。在判定為在步驟S1301中判定為抬起的被實驗者的腳未抬起至預定的高度的情況下,信息處理裝置101結束本處理。

更具體而言,根據(jù)被實驗者的各腳的y坐標的值是否與在執(zhí)行步驟S1301的處理之前確定的雙腳的腳后跟的y坐標的值相比變化了預定以上來進行判斷。在變化了預定以上的情況下,信息處理裝置101判斷為該腳抬起至預定的高度(參照圖30)。

此外,步驟S1302中的“預定”的值是比步驟S1301中的“預定”的值大的值。

在步驟S1304中,信息處理裝置101判定在比成為當前處理對象的幀的圖像靠前的幀中是否判斷為被實驗者的腳抬起(在步驟S1301中“是”)。

如果在比成為當前處理對象的幀的圖像靠前的幀的圖像中判斷為被實驗者的腳抬起(在步驟S1304中“是”),則使處理轉移到步驟S1305。在判定為在比當前測定的幀的圖像靠前的幀的圖像中未判斷為被實驗者的腳抬起(在步驟S1304中“否”)的情況下,判斷為被實驗者未抬起腳,結束本處理。

在步驟S1305中,信息處理裝置101判定被實驗者的腳是否放下。

更具體而言,在步驟S1305中,從成為當前處理對象的幀的圖像中,確定各腳的y坐標的值是否與在執(zhí)行步驟S1301的處理之前確定的被實驗者的雙腳的腳后跟的y坐標的值相比未變化預定以上,在未變化預定以上的情況下,判斷為該腳放下。

當在步驟S1305中判定為被實驗者的腳放下的情況下,轉移到步驟S1306的處理,結束在步驟S1303中執(zhí)行的秒數(shù)的計數(shù)。在判定為被實驗者的腳未放下的情況下,判定為被實驗者仍抬起腳,結束本處理。

在步驟S1307中,信息處理裝置101根據(jù)從在步驟S1303中開始秒數(shù)的計數(shù)起至在步驟S1306中結束計數(shù)為止計數(shù)了的秒數(shù)低于還是高于預定的秒數(shù)(例如24秒),評價被實驗者的運動能力。將評價結果存儲到測定結果管理表格(圖19)。

以上,結束圖13的說明。

此外,在圖13中,設為信息處理裝置101自動地判定被實驗者的腳的抬起放下,但也能夠如圖14所示,用戶(例如評價者)手動地指定被實驗者的腳的抬起放下。

因此,以下使用圖14,說明用戶(例如評價者)手動地指定被實驗者的腳的抬起放下的機制。

圖14是在步驟S302中信息處理裝置101開始被實驗者的攝影時在信息處理裝置101的顯示器212中顯示的畫面。

在1401中,顯示信息處理裝置101的運動信息取得部151取得的動畫。

1402是抬起放下按鈕。當通過由用戶實施的鼠標等的操作將抬起放下按鈕1402按下第1次時,停止圖13的處理,在被按下的定時判斷為被實驗者將腳抬起,開始秒數(shù)的計數(shù)。

然后,當通過由用戶實施的鼠標等的操作將抬起放下按鈕1402按下第2次時,信息處理裝置101判斷為被實驗者將腳放下,結束秒數(shù)的計數(shù)。然后,依照計數(shù)得到的秒數(shù),評價被實驗者的運動能力。

此外,在本實施例中,當通過由用戶實施的鼠標等的操作將抬起放下按鈕1402按下第1次時,信息處理裝置101使圖13的處理停止。但是,作為其他實施例,也可以當在圖13的步驟S1303的處理以后通過由用戶實施的鼠標等的操作按下了抬起放下按鈕1402的情況下,信息處理裝置101不執(zhí)行步驟S1304、步驟S1305的處理而結束秒數(shù)的計數(shù),或者,當在步驟S1302的處理之前通過由用戶實施的鼠標等的操作按下了抬起放下按鈕1402的情況下,信息處理裝置101不執(zhí)行步驟S1301、步驟S1302的處理而開始秒數(shù)的計數(shù),之后執(zhí)行步驟S1304以后的處理。

如圖14那樣用戶(例如評價者)能夠手動地指定被實驗者的腳的抬起放下,從而在如圖13那樣信息處理裝置101自動地判定被實驗者的腳的抬起放下的情況下,在盡管被實驗者抬起腳但信息處理裝置仍判定為未抬起腳的情況、盡管被實驗者放下腳但仍判定為未放下腳的情況下,也能夠修正判定結果。

以上,結束圖14的說明。

接下來,使用圖29,說明評價被實驗者的動作并且顯示針對被實驗者、助手的消息的處理。圖29的流程圖所示的處理是信息處理裝置101的CPU201讀出并執(zhí)行預定的控制程序的處理。

在步驟S2901中,判定確定出的骨骼信息是否滿足預先決定的評價條件。

在滿足評價條件的情況下(步驟S2901:“是”),使處理轉移到步驟S2902。

在不滿足評價條件的情況下(步驟S2901:“否”),使處理轉移到步驟S2903。

圖30示出評價條件的一個例子。如圖30所示,針對每個項目,將評價條件和評價內(nèi)容對應起來。

例如,關于“項目:椅子坐立”,在膝蓋的角度為175度以上的情況下,評價為站立的動作,在為95度以下的情況下,評價為就坐的動作。然后,在進行了站立的動作和就坐的動作的情況下,評價為將坐立動作進行了1次。

在睜眼單腳站立中,在左右的腳的高度之差為5cm以上的情況下,評價為抬起了單腳。

在步驟S2902中,對評價值進行相加等。例如,如果是椅子坐立,則加1次。另外,在睜眼單腳站立中,在滿足單腳站立的開始條件的情況下,開始單腳站立時間的測量。在滿足結束條件的情況下,結束單腳站立時間的測量。

在步驟S2903中,根據(jù)確定出的骨骼坐標,確定消息。

根據(jù)圖31所示的消息表格,確定消息內(nèi)容。例如,在項目:椅子坐立中,在膝蓋的角度為175度以上的情況下,確定“請坐”這樣的消息。另外,當在膝蓋的角度小于175度的狀態(tài)下轉移到就坐的動作的情況(膝蓋的角度變小的情況)下,確定“請站穩(wěn)”這樣的消息。

另外,在睜眼單腳站立中,如果是未抬起腳的狀態(tài),則確定“請將腳抬起”這樣的消息,在抬起的腳的高度較低的情況下,確定“請將腳再抬高點”這樣的消息,如果是穩(wěn)穩(wěn)地抬起腳的狀態(tài),則確定“測量中”這樣的消息。

通過這樣顯示消息,被實驗者、助手能夠識別是否進行了評價為穩(wěn)健的動作、如果進行什么樣的動作則會被評價。

在步驟S2904中,顯示在步驟2903中確定的消息。作為一個例子,示出圖22的2201。

返回到圖3的說明。

步驟S304~S306的處理是每當通過運動信息取得部151取得動畫幀時進行的處理。通過這樣每當取得幀時識別骨骼信息,能夠探測各關節(jié)的坐標信息的變化而識別動作。

在步驟S307中,信息處理裝置101的CPU201保存在步驟S306中測定出的結果(圖19)。

接下來,使用圖4,說明使用預先記錄的運動信息的情況下的各項目的測定處理。

此外,通過用戶的選擇,決定執(zhí)行圖3所示的實時的測定(在取得運動信息的同時還進行測定的處理)、還是執(zhí)行圖4所示的使用預先記錄的運動信息的測定。

在步驟S401中,從用戶受理對要再生的動畫(對希望測定的被實驗者的動作進行攝影而得到的動畫)的選擇,受理該動畫的再生指示。

此外,動畫數(shù)據(jù)包括通過運動信息取得部151的各傳感器取得的數(shù)據(jù)。

在步驟S402中,受理在步驟S401中受理了選擇的動畫和成為比較對象的動畫的選擇。

在步驟S403中,針對再生對象的動畫和比較對象的動畫,受理各種設定。

在步驟S404中,保存在步驟S402中受理了的設定。通過按下圖28中的2801的保存按鈕,執(zhí)行保存處理。

在步驟S405中,對被進行了再生指示的動畫和被設定為比較對象的動畫進行再生。

此時,在同時按下了再生按鈕的情況下,同時再生兩個動畫,在按下了單個再生按鈕的情況下,單獨地再生被按下的動畫。

然后,執(zhí)行圖3的步驟S304以后的處理。

如圖3、圖4所示,能夠切換在對被實驗者進行攝影的同時實時地評價動作的情況和保存對被實驗者進行攝影而得到的動畫而之后評價動作的情況,從而例如在希望當場反饋給被實驗者的情況下,用戶設定成實時地評價動作,在希望首先對多個被實驗者進行錄像而之后進行評價的情況、用戶(評價者)希望在反復觀察細致的活動等的同時進行確認的情況、希望將攝影得到的動畫作為其他項目進行評價的情況、希望通過注解功能確認被實驗者的骨骼的角度的情況、被實驗者和評價者在一起的情況下,用戶能夠設定成保存對被實驗者進行攝影得到的動畫而之后評價動作。

另外,在保存對被實驗者進行攝影得到的動畫而之后評價動作的情況下,具有在有誤檢測的情況下無需重新攝影而用戶能夠手動地變更評價結果這樣的優(yōu)點。

圖23、圖24示出比較畫面的一個例子。

圖23是將評價對象的動畫(骨骼信息)和比較對象的動畫(骨骼信息)縱向并排顯示的畫面的一個例子。

圖24是將評價對象的動畫(骨骼信息)和比較對象的動畫(骨骼信息)橫向并排顯示的畫面的一個例子。

關于比較畫面的布局(縱向排列、橫向排列),例如有如下方法:預先針對每個項目登記縱向排列還是橫向排列,依照該登記內(nèi)容進行顯示。圖25示出針對每個項目登記了布局的表格。

如圖25所示,示出椅子坐立是橫向排列,通常步行是縱向排列。這樣,通過預先登記,能夠?qū)⒈粚嶒炚咴谏舷路较蛏弦苿幽菢拥捻椖?“椅子坐立”等)設為橫向排列,將在左右方向上移動的項目(“通常步行”等)設為縱向排列。通過這樣根據(jù)移動方向決定排列方法,能夠以容易進行比較的布局進行顯示。

這樣進行預先登記的方法在預先確定項目的情況(預先決定項目的情況)下是有效的。

將表示是對哪個項目進行攝影而得到的數(shù)據(jù)的信息與通過步驟S401、S402選擇出的動畫數(shù)據(jù)對應起來記錄,使用圖25的表格,確定與該記錄的項目對應起來的布局。

另外,還有根據(jù)被實驗者的軌跡來決定布局的方法。例如,以如果被實驗者的軌跡(移動方向)是左右方向,則上下排列,如果被實驗者的軌跡是上下方向,則左右排列的方式,根據(jù)被實驗者的活動來決定布局。

通過這樣根據(jù)被實驗者的軌跡來進行判斷的方法,在未預先確定項目的情況下,也能夠以容易進行比較的布局來進行顯示。

另外,在比較畫面中,能夠使動畫的左右反轉。

圖26是示出使圖23的畫面中的上部的動畫的左右反轉了的情況下的圖。如圖26所示,在上部的動畫中拍攝的人在圖23中是右朝向,但在圖26中為左朝向。

通過在圖26的2601中示出的復選框中進行勾選,受理表示反轉的意思的指示。當勾選2601中的“上畫面反轉”時,上部的畫面反轉。當勾選“下畫面反轉”時,下部的畫面反轉。如果對兩者進行勾選,則上下兩方的畫面反轉。

通過這樣進行反轉,在例如在1個月前從影像的左向右步行而進行了測定、但本次從右向左進行了測定這樣的情況下,也能夠使兩者的步行方向統(tǒng)一,所以容易比較并且能夠詳細掌握兩者的差異。

另外,在比較畫面中,不僅能夠?qū)⒈容^對象的圖像并排顯示,而且還能夠重疊顯示。

圖27示出重疊顯示的一個例子。圖27中的2701和2702是比較對象的圖像。另外,2703是將2701和2702的圖像重疊而成的圖像。

在比較畫面中,能夠調(diào)整比較對象的圖像的尺寸、位置。

關于尺寸,通過在圖27的自動調(diào)整菜單2704的“大小”中進行勾選,使用例如直至頭部和腰部的長度,以使該長度在比較對象的骨骼信息之間一致的方式進行調(diào)整。這樣,通過使被實驗者的骨骼信息中的某一個關節(jié)間的距離和與該關節(jié)間的距離對應的成為比較對象的骨骼信息所相關的關節(jié)間的距離一致,進行尺寸調(diào)整。

另外,不僅能夠自動地調(diào)整,而且還能夠通過用戶的操作來調(diào)整。在該情況下,能夠通過按下圖27中的大小調(diào)整按鈕2705、2706來調(diào)整。在按下了增大按鈕2705的情況下進行增大,在按下了減小按鈕2706的情況下進行減小。

能夠這樣進行尺寸的調(diào)整,從而在對身高不同的人之間進行比較的情況、倍率與過去攝影得到的人不同的情況等下,仍容易比較并且能夠詳細地掌握兩者的差異。

關于位置,通過在圖27的自動調(diào)整菜單2704的“位置”中進行勾選,以使例如頭部的位置在比較對象的骨骼信息之間一致的方式進行調(diào)整。即,通過使被實驗者的某一個關節(jié)坐標和與該關節(jié)坐標對應的成為所述比較對象的骨骼信息所相關的關節(jié)坐標一致,進行位置調(diào)整。另外,以使人映出在合成圖像的中央的方式來調(diào)整位置。

另外,還能夠通過用戶進行拖動操作來調(diào)整位置。

這樣,通過能夠調(diào)整位置,能夠?qū)⒈容^對象的骨骼信息配置于期望的位置而進行比較或者使其重疊而進行比較,容易比較并且能夠詳細地掌握兩者的差異。

另外,當在自動調(diào)整菜單2704的“兩者”中進行勾選時,調(diào)整尺寸和位置這兩者。

另外,在比較畫面中,能夠不顯示包括被實驗者的背景影像而僅顯示骨骼信息。

圖28示出僅顯示了骨骼信息的畫面的一個例子。

在圖28所示的畫面的右端有顯示切換菜單,當在其中的“顏色”這樣的項目中進行勾選時,顯示背景,當取消勾選時,僅顯示骨骼信息。

即,受理針對是否顯示包括被實驗者的背景影像的選擇,依照所受理的內(nèi)容,決定是否顯示包括被實驗者的背景影像。

例如,在分別在不同的房間中對比較對象的動畫進行了攝影的情況下,背景的差異成為干擾而骨骼的活動的比較變得困難。特別是,在合成圖像中,不同的背景彼此重疊地顯示,所以非常難以觀察,難以比較。因此,通過消去背景,能夠明確地顯示比較對象,能夠詳細地掌握兩者的差異。

將在上述各種畫面中所設定的內(nèi)容(比較動畫的組合、畫面布局、位置、尺寸等)保存為比較腳本,可再利用。

在比較腳本的信息中,包括動畫文件的信息、再生開始位置、再生結束位置、縮放狀態(tài)、合成影像的已調(diào)整位置、左右反轉的設定。

這樣,通過將所設定的內(nèi)容保存為比較腳本,即使在之后希望再次重看時,也能夠省略再次設定的時間勞力。

接下來,使用圖5,說明報告制作處理。

在步驟S501中,從用戶受理被實驗者的選擇,受理該被實驗者的測定結果(報告)的輸出指示。

在步驟S502中,提取受理了輸出指示的被實驗者的測定結果。

在此,使用圖15,詳細說明測定結果提取處理。

在步驟S1501中,信息處理裝置101從用戶受理提取條件的設定。圖17示出提取條件設定畫面的影像。在圖17的畫面中,作為提取條件,設定開始日期1701、結束日期1702。

在步驟S1502中,信息處理裝置101從用戶受理項目的選擇。在圖17的畫面中,作為項目1703,從睜眼單腳站立、椅子坐立、最大一步、通常步行、TUG中選擇。

在步驟S1503中,信息處理裝置101依照在步驟S1501以及S1502中受理了的提取條件、項目,從圖19所示的測定結果管理表格中提取本次以及上次的測定結果。具體而言,通過按下圖17的提取按鈕1704,執(zhí)行本處理,在作為提取條件的開始日期1701和結束日期1702的范圍內(nèi),針對選擇出的項目1703,檢索測定結果管理表格,將最新的測定結果和第二新的測定結果作為本次結果、上次結果而提取。

針對這樣指定的項目(通常有多個指定),將在所指定的期間范圍中包含的最新的測定結果和第二新的結果作為本次測定結果、上次測定結果而提取,從而無需實施針對各個項目設定檢索條件來檢索測定結果并選定本次測定結果和上次測定結果這樣的一連串作業(yè),能夠提取用于輸出報告的測定結果。

在此,使用圖19,說明測定結果管理表格。在測定結果管理表格中,作為項目而包括測定結果ID1901、被實驗者1902、測定日期時間1903、項目1904、測定值1905、評價分數(shù)1906、動畫文件1907。測定結果ID1901是用于唯一地識別測定結果的字符串。被實驗者1902是接受了測定的被實驗者。測定日期時間1903是開始測定的日期時間。項目1904是被測定的項目,是睜眼單腳站立、椅子坐立、最大一步、通常步行、TUG中的某一個。測定值1905是表示測定結果的數(shù)值。評價分數(shù)1906是基于測定值1905進行評價的分數(shù)。動畫文件1907是與測定結果對應的動畫數(shù)據(jù)的文件名、或者向動畫數(shù)據(jù)的鏈接。

在步驟S1504中,信息處理裝置101將在步驟S1503中提取出的測定結果顯示于顯示器212等。圖18示出提取結果顯示畫面的影像。在圖18的畫面中,顯示與提取出的測定結果對應的動畫數(shù)據(jù)的縮略圖圖像1801。

返回到圖5的說明。

在步驟S503中,根據(jù)在步驟S502中提取出的結果,制作報告。

在此,使用圖16,詳細說明報告制作處理。

針對在步驟S1502中受理了選擇的每個項目,反復執(zhí)行步驟S1601至S1605的處理。

在步驟S1601中,信息處理裝置101取得在步驟S1503中提取出的本次以及上次的測定結果。

在步驟S1602中,信息處理裝置101判定在步驟S1601中取得的測定結果是否已評價。具體而言,根據(jù)是否在測定結果管理表格的評價分數(shù)1906中設定了值來進行判定。如果已評價,則進入到步驟S1604,如果未評價,則進入到步驟S1603。

在步驟S1603中,信息處理裝置101針對未評價的測定結果實施評價,登記到測定結果管理表格的測定值1905以及評價分數(shù)1906。

在步驟S1604中,信息處理裝置101從與測定結果對應的動畫中檢索動畫的各幀圖像,針對項目提取特征性的定時的幀圖像。關于決定特征性的定時的條件,預先針對每個項目而決定,例如如果是睜眼單腳站立則決定為將腳放到地面的定時、即狀態(tài)從將腳抬起的狀態(tài)轉變到將腳放到地面的狀態(tài)的定時,如果是最大一步則決定為將雙腳叉開最大的定時、即從判定為最高記錄時的將腳抬起的狀態(tài)將腳放到地面的定時。根據(jù)針對各關節(jié)的坐標數(shù)據(jù)的值、變化狀況、多個關節(jié)的坐標數(shù)據(jù)的相關關系等,設定具體的條件。此外,關于特征性的定時的幀圖像,既可以在本處理中提取,也可以在評價時提取并預先保存而在本處理中調(diào)出。另外,在本實施例中,針對每個項目提取出1個特征性的幀圖像,但也可以根據(jù)條件提取多個幀圖像。

在步驟S1605中,信息處理裝置101將在步驟S1604中提取出的特征性的幀圖像的縮略圖圖像和針對各項目的評價結果作為報告要素輸出。當在步驟S1604中提取出多個特征性的幀圖像的情況下,既可以將對應的縮略圖圖像排列而輸出多個,也可以匯成1個來輸出。

通過這樣作為報告要素而輸出針對各項目的評價結果和特征性的幀圖像的縮略圖圖像,不僅能夠通過數(shù)值數(shù)據(jù)掌握情況,也能夠在視覺上直觀地掌握測定結果是否良好等。

在步驟S1606中,匯集針對各項目輸出的報告要素,附加報告制作日、被實驗者信息、測定場所信息等與測定有關的信息來制作報告。

返回到圖5的說明。

在步驟S504中,信息處理裝置101的CPU201輸出在步驟S503中制作的報告。

圖20示出在本處理中制作并且在步驟S504中輸出的報告的輸出例。在圖20的輸出例中,在報告信息欄2001中顯示制作日、實施者(被實驗者)、實施場所、負責人,在綜合注釋欄2002中顯示來自評價者的注釋,在蛛網(wǎng)圖欄2003中顯示每個項目的評價分數(shù)的蛛網(wǎng)圖。在拾取項目欄2004中針對用戶所選擇的項目,根據(jù)在步驟S1605中提取出的特征性的圖像,顯示縮略圖以及骨骼圖像。在項目類別結果欄2005中,顯示按項目類別的本次以及上次的實施日、結果(測定值)、根據(jù)本次和上次的評價分數(shù)判定的改善程度、來自評價者對項目的注釋和在步驟S1605中提取出的特征性的幀圖像的縮略圖圖像。

另外,本發(fā)明中的程序是使計算機執(zhí)行圖3~圖5、圖11、圖13、圖15、圖16、圖29的處理的程序。此外,本發(fā)明中的程序也可以是圖3~圖5、圖11、圖13、圖15、圖16、圖29的各處理各自的程序。

如以上那樣,通過將記錄有實現(xiàn)上述實施方式的功能的程序的記錄介質(zhì)供給到系統(tǒng)或者裝置,并且該系統(tǒng)或者裝置的計算機(或者CPU、MPU)讀出并執(zhí)行在記錄介質(zhì)中儲存的程序,當然也能夠達到本發(fā)明的目的。

在該情況下,從記錄介質(zhì)讀出的程序自身實現(xiàn)本發(fā)明的新的功能,記錄有該程序的記錄介質(zhì)構成本發(fā)明。

作為用于供給程序的記錄介質(zhì),例如,能夠使用軟盤、硬盤、光盤、光磁盤、CD-ROM、CD-R、DVD-ROM、磁帶、非易失性的存儲卡、ROM、EEPROM、硅盤等。

另外,不僅通過計算機執(zhí)行所讀出的程序來實現(xiàn)上述實施方式的功能,而且當然還包括根據(jù)該程序的指示,在計算機上工作的OS(操作系統(tǒng))等進行實際處理的一部分或者全部,通過該處理實現(xiàn)上述實施方式的功能的情況。

進而,當然還包括以下情況:在將從記錄介質(zhì)讀出的程序?qū)懭氲讲迦胗谟嬎銠C的功能擴展板、與計算機連接的功能擴展部件所具備的存儲器之后,根據(jù)該程序代碼的指示,在該功能擴展板、功能擴展部件所具備的CPU等進行實際處理的一部分或者全部,通過該處理實現(xiàn)上述實施方式的功能。

另外,本發(fā)明既可以應用于由多個設備構成的系統(tǒng),也可以應用于由一個設備構成的裝置。另外,本發(fā)明當然還適用于通過對系統(tǒng)或者裝置供給程序來達成的情況。在該情況下,通過將儲存有用于達成本發(fā)明的程序的記錄介質(zhì)讀出到該系統(tǒng)或者裝置,該系統(tǒng)或者裝置能夠享受本發(fā)明的效果。

進而,通過從網(wǎng)絡上的服務器、數(shù)據(jù)庫等利用通信程序下載并讀出用于達成本發(fā)明的程序,該系統(tǒng)或者裝置能夠享受本發(fā)明的效果。此外,組合了上述各實施方式及其變形例的結構也全部包含于本發(fā)明。

當前第1頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
安义县| 盖州市| 许昌市| 大丰市| 手机| 上高县| 永福县| 永安市| 阜宁县| 福建省| 丰顺县| 会宁县| 阳高县| 台北县| 赤峰市| 吴桥县| 高尔夫| 广宁县| 梨树县| 徐汇区| 贡嘎县| 孟州市| 南投市| 普陀区| 绥中县| 聂荣县| 大石桥市| 乐平市| 吉林省| 卓资县| 绍兴县| 正镶白旗| 苏州市| 凤庆县| 廉江市| 洛川县| 鸡西市| 泗洪县| 虎林市| 湟中县| 阜康市|