信息处理装置以及信息处理方法
阅读：334发布：2020-05-12
专利汇可以提供信息处理装置以及信息处理方法专利检索，专利查询，专利分析的服务。并且本 发明 涉及信息处理装置以及信息处理方法。信息处理装置具备：比较动画选择受理单元，受理进行比较的动画的选择；坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；以及显示单元，通过和与由所述比较动画选择受理单元受理了选择的动画相关的项目对应起来的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。，下面是信息处理装置以及信息处理方法专利的具体信息内容。
1.一种信息处理装置，其特征在于，具备：
比较动画选择受理单元，受理进行比较的动画的选择；
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；以及
显示单元，通过和与由所述比较动画选择受理单元受理了选择的动画相关的项目对应起来的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
2.一种信息处理装置，其特征在于，具备：
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；
布局决定单元，根据所述被实验者的动作方向来决定布局；以及
显示单元，通过由所述布局决定单元决定的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
3.根据权利要求2所述的信息处理装置，其特征在于，
所述布局决定单元以在所述被实验者的活动是左右方向的情况下将被实验者的骨骼信息和成为比较对象的骨骼信息纵向并排显示、在所述被实验者的活动是上下方向的情况下将被实验者的骨骼信息和成为比较对象的骨骼信息横向并排显示的方式来决定布局。
4.一种信息处理装置，其特征在于，具备：
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；
显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；以及反转指示受理单元，受理使所述被实验者的骨骼信息或者成为比较对象的骨骼信息的左右反转而进行显示的指示，
所述显示单元使由所述反转指示受理单元受理了使左右反转而进行显示的指示的骨骼信息的左右反转而进行显示。
5.一种信息处理装置，其特征在于，具备：
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；
显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；
位置调整指示受理单元，受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的位置的指示；以及
位置调整单元，在由位置调整指示受理单元受理了位置调整的指示的情况下，通过使所述被实验者的某一个关节坐标和与该关节坐标对应的成为所述比较对象的骨骼信息所相关的关节坐标一致来进行位置调整。
6.根据权利要求5所述的信息处理装置，其特征在于，
所述位置调整指示受理单元进而通过由用户实施的拖动操作，受理所述骨骼信息的位置的调整，
所述位置调整单元依照由用户实施的拖动操作，调整该骨骼信息的位置。
7.一种信息处理装置，其特征在于，具备：
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；
显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；
尺寸调整指示受理单元，受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的大小的指示；以及
尺寸调整单元，在由尺寸调整指示受理单元受理了尺寸调整的指示的情况下，通过使所述被实验者的某一个关节间的距离和与该关节间的距离对应的成为所述比较对象的骨骼信息所相关的关节间的距离一致来进行尺寸调整。
8.根据权利要求7所述的信息处理装置，其特征在于，
所述尺寸调整指示受理单元通过从用户受理使骨骼信息的大小增大的指示或者减小的指示来受理尺寸调整指示，
所述尺寸调整单元依照由所述尺寸调整指示受理单元受理了的用户的指示，调整骨骼信息的尺寸。
9.一种信息处理装置，其特征在于，具备：
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；
显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；
设定受理单元，在由所述显示单元显示的画面中，受理显示形式的设定；以及存储单元，存储由所述设定受理单元受理了的设定内容。
10.根据权利要求9所述的信息处理装置，其特征在于，
在由所述存储单元存储的设定内容中，包括与比较动画的组合、布局、位置、尺寸相关的设定。
11.一种信息处理装置，其特征在于，具备：
坐标取得单元，取得被实验者的关节的坐标信息；
骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；
显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；
选择受理单元，在所述显示单元中显示的画面中，受理针对是否显示包括被实验者的背景影像的选择；以及
决定单元，依照由所述选择受理单元受理了选择的内容，决定是否显示包括被实验者的背景影像。
12.根据权利要求11所述的信息处理装置，其特征在于，
所述决定单元在由所述选择受理单元受理了表示显示包括被实验者的背景影像的意思的选择的情况下，决定显示包括被实验者的背景影像，
所述显示单元显示合成了包括被实验者的背景影像和骨骼信息的影像。
13.根据权利要求11所述的信息处理装置，其特征在于，
所述决定单元在由所述选择受理单元受理了表示不显示包括被实验者的背景影像的意思的选择的情况下，决定不显示包括被实验者的背景影像，
所述显示单元不显示包括被实验者的背景影像而显示骨骼信息。
14.一种信息处理装置中的信息处理方法，其特征在于，具备：
比较动画选择受理工序，所述信息处理装置的比较动画选择受理单元受理进行比较的动画的选择；
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；以及
显示工序，所述信息处理装置的显示单元通过和与通过所述比较动画选择受理工序受理了选择的动画相关的项目对应起来的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
15.一种信息处理装置中的信息处理方法，其特征在于，具备：
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；
布局决定工序，所述信息处理装置的布局决定单元根据所述被实验者的动作方向来决定布局；以及
显示工序，所述信息处理装置的显示单元通过在所述布局决定工序中决定的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
16.根据权利要求15所述的信息处理方法，其特征在于，
在所述布局决定工序中，以在所述被实验者的活动是左右方向的情况下将被实验者的骨骼信息和成为比较对象的骨骼信息纵向并排显示、在所述被实验者的活动是上下方向的情况下将被实验者的骨骼信息和成为比较对象的骨骼信息横向并排显示的方式来决定布局。
17.一种信息处理装置中的信息处理方法，其特征在于，具备：
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；
显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；以及
反转指示受理工序，所述信息处理装置的反转指示受理单元受理使所述被实验者的骨骼信息或者成为比较对象的骨骼信息的左右反转而进行显示的指示，
在所述显示工序中，使在所述反转指示受理工序中受理了使左右反转而进行显示的指示的骨骼信息的左右反转而进行显示。
18.一种信息处理装置中的信息处理方法，其特征在于，具备：
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；
显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；
位置调整指示受理工序，所述信息处理装置的位置调整指示受理单元受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的位置的指示；以及
位置调整工序，所述信息处理装置的位置调整单元在通过位置调整指示受理工序受理了位置调整的指示的情况下，通过使所述被实验者的某一个关节坐标和与该关节坐标对应的成为所述比较对象的骨骼信息所相关的关节坐标一致来进行位置调整。
19.根据权利要求18所述的信息处理方法，其特征在于，
在所述位置调整指示受理工序中，进而通过由用户实施的拖动操作，受理所述骨骼信息的位置的调整，
在所述位置调整工序中，依照由用户实施的拖动操作，调整该骨骼信息的位置。
20.一种信息处理装置中的信息处理方法，其特征在于，具备：
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述骨骼信息生成单元根据通过所述坐标取得工序取得的坐标信息，生成被实验者的骨骼信息；
显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；
尺寸调整指示受理工序，所述信息处理装置的尺寸调整指示受理单元受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的大小的指示；以及
尺寸调整工序，在所述信息处理装置的尺寸调整单元在尺寸调整指示受理工序中受理了尺寸调整的指示的情况下，通过使所述被实验者的某一个关节间的距离和与该关节间的距离对应的成为所述比较对象的骨骼信息所相关的关节间的距离一致来进行尺寸调整。
21.根据权利要求20所述的信息处理方法，其特征在于，
在所述尺寸调整指示受理工序中，通过从用户受理使骨骼信息的大小增大的指示或者减小的指示来受理尺寸调整指示，
在所述尺寸调整工序中，依照由所述尺寸调整指示受理单元受理了的用户的指示，调整骨骼信息的尺寸。
22.一种信息处理装置中的信息处理方法，其特征在于，具备：
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述骨骼信息生成单元根据通过所述坐标取得工序取得的坐标信息，生成被实验者的骨骼信息；
显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；
设定受理工序，所述信息处理装置的设定受理单元在所述显示工序中显示的画面中，受理显示形式的设定；以及
存储工序，所述信息处理装置的存储单元存储在所述设定受理工序中受理了的设定内容。
23.根据权利要求22所述的信息处理方法，其特征在于，
在通过所述存储工序存储的设定内容中，包括与比较动画的组合、布局、位置、尺寸相关的设定。
24.一种信息处理装置中的信息处理方法，其特征在于，具备：
坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；
骨骼信息生成工序，所述骨骼信息生成单元根据通过所述坐标取得工序取得的坐标信息，生成被实验者的骨骼信息；
显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；
选择受理工序，所述信息处理装置的选择受理单元在所述显示工序中显示的画面中，受理针对是否显示包括被实验者的背景影像的选择；以及
决定工序，所述信息处理装置的决定单元依照通过所述选择受理工序受理了选择的内容，决定是否显示包括被实验者的背景影像。
25.根据权利要求24所述的信息处理方法，其特征在于，
在所述决定工序中，在通过所述选择受理工序受理了表示显示包括被实验者的背景影像的意思的选择的情况下，决定显示包括被实验者的背景影像，
在所述显示工序中，显示合成了包括被实验者的背景影像和骨骼信息的影像。
26.根据权利要求24所述的信息处理方法，其特征在于，
在所述决定工序中，在通过所述选择受理工序受理了表示不显示包括被实验者的背景影像的意思的选择的情况下，决定不显示包括被实验者的背景影像，
在所述显示工序中，不显示包括被实验者的背景影像而显示骨骼信息。
信息处理装置以及信息处理方法
技术领域
[0001] 本发明涉及信息处理装置以及信息处理方法。
背景技术
[0002] 近年来，使用数字地记录人、物体的活动的运动捕捉技术来进行护理、康复训练中的效果测定。
[0003] 作为运动捕捉技术的方式之一，有以下方式：通过对被实验者附加标记并从多个方位利用照相机进行摄影，检测标记并将被实验者的活动变换为数字数据而记录。另外，还有以下方式：不使用标记而利用红外线传感器来测定从传感器至被实验者的距离，根据测定出的值，记录被实验者的活动。
[0005] 专利文献1：日本特开2015-61577号公报
发明内容
[0006] 在专利文献1中，记载了以下机制：根据利用运动捕捉技术取得的被实验者的各关节的坐标信息生成骨骼信息并将骨骼信息显示于画面，从而显示被实验者的动作。
[0007] 在专利文献1记载的机制中，在希望对过去的自己的动作、他人的动作与本次的动作进行比较的情况下，需要逐个确认各个图像、动画。但是，在该处理方法中，难以详细地掌握差异。
[0008] 另外，例如，在背景不同的情况下，由于背景的差异，难以详细地掌握被实验者的动作的差异。
[0010] 因此，本发明的目的在于提供一种在与其他图像、动画相比较时容易掌握与比较对象的差异的机制。
[0011] 另外，本发明的目的在于提供一种减轻成为比较对象的人的大小、位置的调整作业的时间劳力的机制。
[0012] 本发明涉及一种信息处理装置，其特征在于，具备：比较动画选择受理单元，受理进行比较的动画的选择；坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；以及显示单元，通过和与由所述比较动画选择受理单元受理了选择的动画相关的项目对应起来的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
[0013] 本发明还涉及一种信息处理装置，其特征在于，具备：坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；布局决定单元，根据所述被实验者的动作方向来决定布局；以及显示单元，通过由所述布局决定单元决定的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
[0014] 本发明还涉及一种信息处理装置，其特征在于，具备：坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；以及反转指示受理单元，受理使所述被实验者的骨骼信息或者成为比较对象的骨骼信息的左右反转而进行显示的指示，所述显示单元使由所述反转指示受理单元受理了使左右反转而进行显示的指示的骨骼信息的左右反转而进行显示。
[0015] 本发明还涉及一种信息处理装置，其特征在于，具备：坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；位置调整指示受理单元，受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的位置的指示；以及位置调整单元，在由位置调整指示受理单元受理了位置调整的指示的情况下，通过使所述被实验者的某一个关节坐标和与该关节坐标对应的成为所述比较对象的骨骼信息所相关的关节坐标一致来进行位置调整。
[0016] 本发明还涉及一种信息处理装置，其特征在于，具备：坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；尺寸调整指示受理单元，受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的大小的指示；以及尺寸调整单元，在由尺寸调整指示受理单元受理了尺寸调整的指示的情况下，通过使所述被实验者的某一个关节间的距离和与该关节间的距离对应的成为所述比较对象的骨骼信息所相关的关节间的距离一致来进行尺寸调整。
[0017] 本发明还涉及一种信息处理装置，其特征在于，具备：坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；设定受理单元，在由所述显示单元显示的画面中，受理显示形式的设定；以及存储单元，存储由所述设定受理单元受理了的设定内容。
[0018] 本发明还涉及一种信息处理装置，其特征在于，具备：坐标取得单元，取得被实验者的关节的坐标信息；骨骼信息生成单元，根据由所述坐标取得单元取得的坐标信息，生成被实验者的骨骼信息；显示单元，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；选择受理单元，在所述显示单元中显示的画面中，受理针对是否显示包括被实验者的背景影像的选择；以及决定单元，依照由所述选择受理单元受理了选择的内容，决定是否显示包括被实验者的背景影像。
[0019] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：比较动画选择受理工序，所述信息处理装置的比较动画选择受理单元受理进行比较的动画的选择；坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；以及显示工序，所述信息处理装置的显示单元通过和与通过所述比较动画选择受理工序受理了选择的动画相关的项目对应起来的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
[0020] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；布局决定工序，所述信息处理装置的布局决定单元根据所述被实验者的动作方向来决定布局；以及显示工序，所述信息处理装置的显示单元通过在所述布局决定工序中决定的布局，将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示。
[0021] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；以及反转指示受理工序，所述信息处理装置的反转指示受理单元受理使所述被实验者的骨骼信息或者成为比较对象的骨骼信息的左右反转而进行显示的指示，在所述显示工序中，使在所述反转指示受理工序中受理了使左右反转而进行显示的指示的骨骼信息的左右反转而进行显示。
[0022] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述信息处理装置的骨骼信息生成单元根据在所述坐标取得工序中取得的坐标信息，生成被实验者的骨骼信息；显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；位置调整指示受理工序，所述信息处理装置的位置调整指示受理单元受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的位置的指示；以及位置调整工序，所述信息处理装置的位置调整单元在通过位置调整指示受理工序受理了位置调整的指示的情况下，通过使所述被实验者的某一个关节坐标和与该关节坐标对应的成为所述比较对象的骨骼信息所相关的关节坐标一致来进行位置调整。
[0023] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述骨骼信息生成单元根据通过所述坐标取得工序取得的坐标信息，生成被实验者的骨骼信息；显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息重叠显示；尺寸调整指示受理工序，所述信息处理装置的尺寸调整指示受理单元受理调整所述被实验者的骨骼信息和成为比较对象的骨骼信息的大小的指示；以及尺寸调整工序，在所述信息处理装置的尺寸调整单元在尺寸调整指示受理工序中受理了尺寸调整的指示的情况下，通过使所述被实验者的某一个关节间的距离和与该关节间的距离对应的成为所述比较对象的骨骼信息所相关的关节间的距离一致来进行尺寸调整。
[0024] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述骨骼信息生成单元根据通过所述坐标取得工序取得的坐标信息，生成被实验者的骨骼信息；显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；设定受理工序，所述信息处理装置的设定受理单元在所述显示工序中显示的画面中，受理显示形式的设定；以及存储工序，所述信息处理装置的存储单元存储在所述设定受理工序中受理了的设定内容。
[0025] 本发明还涉及一种信息处理装置中的信息处理方法，其特征在于，具备：坐标取得工序，所述信息处理装置的坐标取得单元取得被实验者的关节的坐标信息；骨骼信息生成工序，所述骨骼信息生成单元根据通过所述坐标取得工序取得的坐标信息，生成被实验者的骨骼信息；显示工序，所述信息处理装置的显示单元将所述被实验者的骨骼信息和成为比较对象的骨骼信息并排显示；选择受理工序，所述信息处理装置的选择受理单元在所述显示工序中显示的画面中，受理针对是否显示包括被实验者的背景影像的选择；以及决定工序，所述信息处理装置的决定单元依照通过所述选择受理工序受理了选择的内容，决定是否显示包括被实验者的背景影像。
[0026] 根据本发明，能够在与其他图像、动画相比较时，容易掌握与比较对象的差异。
[0028] 图1是示出信息处理装置101的功能结构的图。
[0030] 图3是示出在对被实验者进行摄影的同时进行测定的处理的流程图。
[0031] 图4是示出使用预先记录的运动信息的情况下的各项目的测定处理的流程图。
[0032] 图5是示出报告制作处理的流程图。
[0033] 图6是示出被实验者列表的一个例子的图。
[0034] 图7是示出各关节的坐标信息的一个例子的图。
[0035] 图8是示出由运动信息取得部151取得的被实验者的状况的图。
[0036] 图9是示出根据各关节的坐标信息形成的被实验者的骨骼信息的一个例子的图。
[0037] 图10是示出在本发明中从用户受理在信息处理装置101的显示器212中显示的被实验者的选择的画面的一个例子的图。
[0038] 图11是示出在本发明中当在步骤S301中从用户受理了“通常步行”的项目的选择的情况下信息处理装置101的CPU201执行的处理的一个例子的图。
[0039] 图12是示出在本发明中当在步骤S301中从用户受理了“通常步行”的项目的选择的情况下在信息处理装置101的显示器212中显示的画面的一个例子的图。
[0040] 图13是示出在本发明中当在步骤S301中从用户受理了“睁眼单脚站立”的项目的选择的情况下信息处理装置101的CPU201执行的处理的一个例子的图。
[0041] 图14是示出在本发明中当在步骤S302中信息处理装置101开始了被实验者的摄影时在信息处理装置101的显示器212中显示的画面的一个例子的图。
[0042] 图15是示出在本发明中在步骤S502中信息处理装置101的CPU201提取测定结果的处理的一个例子的图。
[0043] 图16是示出在本发明中在步骤S503中信息处理装置101的CPU201制作报告的处理的一个例子的图。
[0044] 图17是示出在本发明中在提取测量结果时在信息处理装置101的显示器212中显示的画面的一个例子的图。
[0045] 图18是示出在本发明中在提取测量结果之后在信息处理装置101的显示器212中显示的画面的一个例子的图。
[0046] 图19是示出在本发明中在信息处理装置101的存储装置204中存储测定结果的测定结果管理表格的一个例子的图。
[0047] 图20是示出在本发明中由信息处理装置101的CPU201制作并输出到印刷装置等的报告的一个例子的图。
[0048] 图21是合成了在运动信息取得部151中摄影而取得的影像和骨骼信息的画面的一个例子。
[0049] 图22是调整了显示骨骼信息的区域的面积的画面的一个例子。
[0050] 图23是将评价对象的动画和比较对象的动画纵向并排显示的画面的一个例子。
[0051] 图24是将评价对象的动画和比较对象的动画横向并排显示的画面的一个例子。
[0052] 图25是示出针对每个项目登记了布局的表格的一个例子的图。
[0053] 图26是示出使图23的画面中的上部的动画的左右反转了的情况下的图。
[0054] 图27是使比较对象的动画重叠显示了的画面的一个例子。
[0055] 图28是不显示背景等而仅显示了骨骼信息的画面的一个例子。
[0056] 图29是示出评价被实验者的动作并显示针对被实验者、助手的消息的处理的流程图。
[0057] 图30是示出评价条件的一个例子的图。
[0058] 图31是示出消息表格的一个例子的图。
[0059] (符号说明)
[0060] 101：信息处理装置。
具体实施方式
[0061] 以下，参照附图，详细说明本发明的实施方式。
[0062] 图1是示出信息处理装置101的功能结构的图。
[0063] 运动信息取得部151探测进行护理、康复训练的空间中的人(在本发明中，被实验者(接受护理、康复训练的人员))的活动，取得被实验者的运动信息。
[0064] 具体而言，运动信息取得部151是作为Kinect(注册商标)而公知的传感器群，内置RGB照相机、深度传感器、声音传感器等，能够识别被摄体(在本发明中，被实验者(接受护理、康复训练的人员))的位置、活动、声音、脸等。
[0065] 深度传感器设为采用利用红外线来测定直至被实验者的距离的方式的传感器。根据该方式，无需对被实验者附加标记等而能够测定从传感器至被实验者的距离。
[0066] 将由运动信息取得部151取得的各数据作为动画数据存储到存储部165。
[0067] 将由运动信息取得部151的各传感器取得的运动信息发送到运动信息解析部152，进行数据解析。
[0068] 在运动信息解析部152中，解析由运动信息取得部151取得的各数据，将被实验者的动作变换为坐标信息。
[0069] 图8示出了由运动信息取得部151取得的被实验者的状况。运动信息取得部151通过探测被实验者的活动，与预先存储的人体图案进行匹配，得到被实验者的人体表面的坐标。然后，计算形成该被实验者的骨骼的各关节的坐标，根据计算出的坐标信息，生成被实验者的骨骼信息。
[0070] 图7示出各关节的坐标信息的一个例子。另外，图9示出根据各关节的坐标信息形成的被实验者的骨骼信息的一个例子。
[0071] 通过这样计算各关节的坐标信息，并检测各关节的坐标的变化，能够识别被实验者将脚抬起或者弯膝的动作。
[0072] 测定部153根据由运动信息解析部152解析了的运动信息和与各项目对应的设定，进行该项目中的测定。
[0073] 比较动画选择受理部154受理对作为在存储部165中存储的动画的、希望与测定对象的动画比较的动画的选择。
[0074] 坐标取得部155取得由运动信息解析部152变换而得到的被实验者的关节的坐标信息。
[0075] 骨骼信息生成部156根据由坐标取得部155取得的坐标信息，生成被实验者的骨骼信息。
[0076] 显示部157根据与各测定项目对应起来的布局、由布局决定部158决定的布局，并排显示被实验者的骨骼信息和比较对象的骨骼信息。另外，将被实验者的骨骼信息和比较对象的骨骼信息重叠显示。
[0077] 布局决定部158根据被实验者的动作方向，决定显示骨骼信息的动画数据的布局。具体而言，决定将被实验者的动画数据和比较对象的动画数据上下排列或者左右排列等布局。
[0078] 反转指示受理部159受理使被实验者的骨骼信息或者成为比较对象的骨骼信息的左右反转而进行显示的指示。在受理了反转指示的情况下，显示单元157使受理了反转指示的骨骼信息的左右反转而进行显示。
[0079] 位置调整指示受理部160受理调整被实验者的骨骼信息和成为比较对象的骨骼信息的位置的指示。
[0080] 在位置调整部161中，当由位置调整指示受理部160受理了位置调整指示时，通过使被实验者的某一个关节坐标和与该关节坐标对应的成为比较对象的骨骼信息的关节坐标的位置一致，进行被实验者的骨骼信息和比较对象的骨骼信息的位置调整。
[0081] 尺寸调整指示受理部162受理调整被实验者的骨骼信息和比较对象的骨骼信息的大小的指示。
[0082] 尺寸调整部163在由尺寸调整指示受理部162受理了指示的情况下，通过使被实验者的某一个关节间的距离和与该关节间的距离对应的比较对象的骨骼的关节间的距离一致来调整尺寸。另外，当在尺寸调整指示受理部162中受理了使骨骼信息的大小增大的指示、使骨骼信息的大小减小的指示的情况下，通过依照该指示使骨骼信息增大或者减小来调整尺寸。
[0083] 设定受理部164受理显示被实验者的骨骼信息和比较对象的骨骼信息的画面中的各种设定信息(比较动画的组合、布局、位置、尺寸等设定信息)的设定。
[0084] 然后，将所设定的信息存储到存储部165。
[0085] 选择受理部166在显示画面中，受理使背景影像显示或者非显示的选择。
[0086] 决定部167依照由选择受理部166受理了的内容，决定是否显示背景影像。
[0087] 图2是示出本发明的实施方式的信息处理装置101的硬件结构的一个例子的框图。
[0088] 如图2所示，在信息处理装置101中，经由系统总线200，连接CPU(Central Processing Unit，中央处理单元)201、ROM(Read Only Memory，只读存储器)202、RAM(Random Access Memory，随机存取存储器)203、存储装置204、输入控制器205、声音输入控制器206、视频控制器207、存储器控制器208以及通信I/F控制器209。
[0089] CPU201对与系统总线200连接的各设备、控制器总体地进行控制。
[0090] ROM202或者存储装置204保持作为CPU201执行的控制程序的BIOS(Basic Input/Output System，基本输入输出系统)、OS(Operating System，操作系统)、用于实现本信息处理方法的计算机可读取的程序以及所需的各种数据(包括数据表格)。
[0091] RAM203作为CPU201的主存储器、工作区等发挥功能。CPU201通过在执行处理时将所需的程序等从ROM202或者存储装置204载入到RAM203，并执行所载入的程序，从而实现各种动作。
[0093] 通过用户对准在触摸面板中显示出的图标、光标、按钮并按下(用手指等触摸)，能够进行各种指示。
[0094] 使用该输入装置，输入对于在各种通信装置中可利用的通信目的地的目的地。
[0096] 视频控制器207控制向显示器212等外部输出装置的显示。显示器设为还包括与主体成为一体的笔记本型个人电脑的显示器。此外，外部输出装置不限于显示器，也可以是例如投影仪。另外，关于能够通过上述触摸操作进行受理的装置，还能够受理来自键盘/触摸面板210的输入。
[0097] 此外，视频控制器207能够控制用于进行显示控制的视频存储器(VRAM)，作为视频存储器区域，既能够利用RAM203的一部分，也能够另外设置专用的视频存储器。
[0098] 在本发明中，具有：第1视频存储器区域，用于用户操作信息处理装置的情况下的显示；以及第2视频存储器区域，在显示预定的画面的情况下用于与第1视频存储器区域的显示内容重叠显示。视频存储器区域不限于2个，只要信息处理装置的资源能够容许，可以具有多个。
[0099] 存储器控制器208控制向外部存储器213的访问。作为外部存储器，能够利用存储引导程序、各种应用、字体数据、用户文件、编辑文件以及各种数据等的外部存储装置(硬盘)、软盘(FD)或者经由适配器连接到PCMCIA卡槽的紧凑闪存(CompactFlash；注册商标)存储器等。
[0100] 经由通信I/F控制器209、网络214与外部设备进行连接/通信，执行基于网络的通信控制处理。例如，能够进行使用TCP/IP的通信、使用ISDN等电话线路以及移动电话的3G线路的通信。
[0102] 另外，还能够用作在本实施方式中的通信终端中进行的各种处理时的临时的存储器区域。
[0103] 接下来，使用图3所示的流程图，说明在对被实验者进行摄影的同时进行测定的处理。此外，图3的流程图所示的处理是信息处理装置101的CPU201读出并执行预定的程序的处理。
[0104] 在步骤S301中，从用户受理被实验者的选择和项目的选择。
[0105] 被实验者信息登记于图6所示的被实验者列表中。另外，作为项目，有测量睁眼单脚站立的时间的“睁眼单脚站立”、测量在限定时间内可进行几次坐立动作的“椅子坐立”、测量最大步幅的“最大一步”、测量5m的距离的步行所需的时间的“通常步行”、测量直至从椅子站起并往返3m的距离而坐到椅子的时间的“TUG(TimedUp&Go)”等。
[0106] 通过受理项目的选择，读入该项目的测定所需的设定文件、程序。
[0107] 关于被实验者信息，不仅可以从已经登记的信息中选择，也可以新登记。
[0108] 在步骤S302中，从用户受理摄影指示。当受理了摄影指示时，信息处理装置101的运动信息取得部151开始对被实验者摄影。即，取得包括被实验者的图像。另外，取得通过各传感器得到的信息(被实验者的各关节的坐标信息等)即运动信息。
[0109] 在步骤S303中，当在摄影得到的影像中有多个人的情况下，受理关于哪一个人是被实验者的选择。
[0110] 以下，使用图10，详细说明步骤S303的处理。
[0111] 图10是在步骤S303中信息处理装置101从用户受理关于哪一个人是被实验者的选择的画面，图10的画面显示于信息处理装置101的显示器212。
[0112] 在图10的1003中，显示信息处理装置101的运动信息取得部151取得的动画。
[0113] 在图10的1001中，与通过各关节的坐标信息确定的骨骼信息一起，显示由运动信息取得部151取得的人(被实验者或者助手)的状况。
[0114] 首先，当通过由用户实施的鼠标指示器1004的操作而按下人切换按钮1005时，根据由运动信息取得部151取得的信息，将被实验者的骨骼信息显示于1001。
[0116] 然后，从下拉列表1002中，通过由用户操作的鼠标指示器1004，针对通过鼠标指示器1004选择出的人是谁进行选择。
[0117] 在下拉列表1002中，预先显示信息处理装置101管理的被实验者列表(图6)中包含的被实验者的名字。
[0118] 在步骤S304中，从在步骤S302中取得的运动信息中取得被实验者的各关节的坐标信息。在使用再生动画的情况下，使用在再生对象的动画数据中包含的运动信息，取得被实验者的各关节的坐标信息。另外，根据坐标信息，生成被实验者的骨骼信息。
[0119] 图7示出各关节的坐标信息的一个例子。
[0120] 在步骤S305中，合成在步骤S303中取得的影像和根据在步骤S304中取得的各关节的坐标信息而得到的骨骼信息，并显示于显示器212。
[0121] 图21示出合成了在运动信息取得部151中摄影而取得的影像和骨骼信息的画面的一个例子。
[0122] 在图21的2101中，以合成的状态显示影像和骨骼信息。另外，在2102中，显示从上方观察被实验者的情况下的骨骼信息，在2103中，显示从旁边观察被实验者的情况下的骨骼信息。
[0123] 根据在运动信息取得部151中取得的各关节的坐标信息，计算并生成在2102、2103的区域中显示的骨骼信息。
[0124] 2102、2103的显示区域的面积被调整为能够显示骨骼信息的面积。例如，图21所示的画面是未调整的情况下的画面。在该情况下，尽管显示于2103的骨骼信息几乎不移动，仍在骨骼信息的周围产生大的空白。
[0125] 图22是进行了尺寸的调整的情况下的画面的一个例子。以将骨骼信息收纳的方式进行调整，空白部分缩小。
[0126] 通过这样控制成不显示无用的空白，能够将3个骨骼信息集中得较近，所以更容易观察。
[0127] 关于显示范围的决定方法，例如考虑确定收纳骨骼信息的矩形、并从该矩形起将预定的宽度作为空白来进行显示的方法。
[0128] 在步骤S306中，使用在步骤S304中解析了的骨骼信息，进行与在步骤S301中选择出的项目对应的测定。
[0129] 使用图11、图13、图29，说明具体的处理的内容。
[0130] 接下来，使用图11，说明在本发明中，在步骤S301中从用户受理了“通常步行”的项目的选择的情况下，信息处理装置101的CPU201执行的处理。
[0131] 此外，在图11的处理中，在信息处理装置101的显示器212中显示的画面是例如图12。
[0132] 在此，说明图12。
[0133] 图12的测量开始(结束)坐标1201表示开始或者结束预先设定的通常步行的测量的(x、y、z)坐标。在被实验者的脚尖的x坐标与测量开始(结束)坐标1201的x坐标第1次重叠的定时，开始秒数的计数。然后，在与测量开始(结束)坐标1201的x坐标第2次重叠的定时，结束秒数的计数。
[0134] 例如，在被实验者从图12的画面的左侧走来的情况下，在图12的画面左侧的测量开始(结束)坐标1201的x坐标与被实验者的脚尖的x坐标重叠的时间点，开始秒数的计数。然后，在图12的画面右侧的测量开始(结束)坐标1201的x坐标与被实验者的脚尖的x坐标重叠的时间点，结束秒数的计数。
[0135] 在运动信息取得部151的特性方面，在从摄影范围的左右两端至预定的距离的范围中，关节的坐标的确定精度低。因此，测量开始(结束)坐标1201被设定为与图12的画面左右两端相比空出少许距离的位置(坐标)。
[0136] 图12的1202表示时间线，时间线1202在评价录像得到的摄影数据的情况下显示。
[0137] 图12的1203是评价时间指定部。用户通过利用鼠标等的操作使评价时间指定部1203移动，能够任意地指定要评价的时间。在评价录像得到的摄影数据时，在希望在与测量开始(结束)坐标1201之间不同的区间中评价被实验者的动作的情况下使用。
[0138] 返回到图11的说明。
[0140] 在步骤S1102中，信息处理装置101判定能否在步骤S1101中从成为当前处理对象的帧的图像中确定出被实验者的脚尖的坐标。如果能够确定，则使处理转移到步骤S1103，如果不能确定，则结束本处理。
[0141] 说明执行步骤S1102的处理的理由。运动信息取得部151以被实验者将正面朝向运动信息取得部151为前提，确定被实验者的各关节的位置坐标。因此，在如通常步行那样被实验者将侧面朝向运动信息取得部151的情况下，难以通过图3的步骤S304、步骤S305，取得被实验者的各关节的坐标信息。如果不在取得各关节的坐标信息的情况下，则无法执行步骤S1103以后的处理，所以通过步骤S1102的处理，判定能否执行步骤S1103以后的处理。
[0142] 在步骤S1103中，信息处理装置101判定在步骤S1101中确定出的被实验者的脚尖的坐标是否为预先设定的2个测量开始(结束)坐标1201的外侧的坐标。
[0143] 当在步骤S1101中确定出的被实验者的脚尖的坐标是预先设定的2个测量开始(结束)坐标1201的外侧的坐标的情况下，信息处理装置101结束本处理。当在步骤S1101中确定出的被实验者的脚尖的坐标是预先设定的2个测量开始(结束)坐标1201的除了外侧以外(即，坐标上或者内侧)的坐标的情况下，信息处理装置101使处理转移到步骤S1104。
[0144] 在步骤S1104中，信息处理装置101判定在步骤S1101中确定出的被实验者的脚尖的坐标是否为预先设定的2个测量开始(结束)坐标1201中的某一个坐标上。
[0145] 当在步骤S1101中确定出的被实验者的脚尖的坐标是预先设定的2个测量开始(结束)坐标1201中的某一个坐标上的情况下，信息处理装置101使处理转移到步骤S1105。当在步骤S1101中确定出的被实验者的脚尖的坐标不是预先设定的2个测量开始(结束)坐标1201的任意一个坐标上的情况下，信息处理装置101判断为在步骤S1101中确定出的被实验者的脚尖的坐标是预先设定的2个测量开始(结束)坐标1201的间(内侧)。然后，使处理转移到步骤S1109。
[0146] 在步骤S1105中，信息处理装置101判定在步骤S1104中判定为是预先设定的2个测量开始(结束)坐标1201中的某一个坐标上是否为第1次。
[0147] 当在步骤S1104中判定为是预先设定的2个测量开始(结束)坐标1201中的某一个坐标上为第1次的情况下，信息处理装置101使处理转移到步骤S1106。在判定为不是第1次(即第2次)的情况下，信息处理装置101使处理转移到步骤S1107。
[0148] 在步骤S1106中，信息处理装置101执行秒数的计数，结束本处理。
[0149] 在步骤S1107中，信息处理装置101结束在步骤S1106中执行了的秒数的计数。然后，在步骤S1108中，执行被实验者的动作的评价，并存储到测定结果管理表格(图19)。
[0150] 如果更具体地说明步骤S1108的处理，则信息处理装置101首先通过测量开始点(X1，Y1，Z1)与测量结束点(X2，Y2，Z2)之间的X方向的距离即X1－X2的绝对值(单位是米)，求出步行距离。
[0151] 关于此处所称的测量开始点，在被实验者从图12的画面左侧走来的情况下是指图12的画面左侧的测量开始(结束)坐标1201(在从右侧走来的情况下是指右侧的测量开始(结束)坐标1201)，或者当在步骤S1109中判断为“否”时是指帧的图像中包含的被实验者的脚尖的坐标。
[0152] 另外，关于此处所称的测量结束点，在被实验者从图12的画面左侧走来的情况下是指图12的画面右侧的测量开始(结束)坐标1201(在从右走来的情况下是指左侧的测量开始(结束)坐标1201)。
[0153] 此外，在本实施例中，基本上设为被实验者向正侧面步行来计算步行距离。
[0154] 但是，还考虑被实验者不笔直步行而斜向(向图12的画面跟前侧或者里侧)偏移的情况。因此，作为其他实施例，还提出考虑斜向(向图12的画面跟前侧或者里侧)偏移的情况而计算步行距离的方法。具体而言，根据测量开始点(X1，Y1，Z1)与测量结束点(X2，Y2，Z2)之间的x坐标和z坐标，计算步行距离。
[0155] 接下来，信息处理装置101通过将先前求出的步行距离除以在步骤S1107中直至结束计数所花费的时间，求出被实验者的步行速度。
[0156] 然后，信息处理装置101最后计算在以先前求出的步行速度步行5m时所需的时间，根据该时间比预先设定的时间长还是短，判定是否进行了正确的通常步行。5m这样的数字是为了判定被实验者的通常步行的动作而所需的距离。
[0157] 通过进行上述那样的计算，例如，即使是被实验者无法步行5m那样的窄的房间，也能够判定是否正确地进行了通常步行的动作。
[0158] 在步骤S1109中，信息处理装置101判定是否开始了秒数计数。
[0159] 在判定为处于秒数计数的开始之后的情况下，信息处理装置101结束本处理。在判定为处于秒数计数的开始之前的情况下，使处理转移到步骤S1106。
[0160] 在步骤S1109中判定为“否”的情况是指尽管被实验者处于预先设定的2个测量开始(结束)坐标1201的内侧，但未开始秒数计数的情况。例如，当在被实验者的脚尖到达预先设定的2个测量开始坐标1201上时未确定(识别)出被实验者的各关节的坐标信息的情况下，在步骤S1109中判定为“否”。
[0161] 在该情况下，在步骤S1106中，从在测量开始(结束)坐标1201之间识别出被实验者的脚尖的坐标时起开始秒数的计数，从而无需重新摄影而能够评价被实验者的动作。
[0162] 以上，结束图11的说明。
[0163] 接下来，使用图13，说明在本发明中在步骤S301中从用户受理了“睁眼单脚站立”的项目的选择的情况下，信息处理装置101的CPU201执行的处理。
[0164] 在步骤S1301中，信息处理装置101判定被实验者的脚是否抬起。
[0165] 更具体而言，首先，在执行步骤S1301的处理之前，信息处理装置101预先确定被实验者的双脚的脚后跟的y坐标的值。然后，通过确定各脚的脚后跟的坐标的值之差是预定的范围以内，判断为双脚一起接触地面。
[0166] 接下来，在步骤S1301中，从成为当前处理对象的帧的图像中，确定某一支脚的y坐标的值是否与在执行步骤S1301的处理之前确定的被实验者的双脚的脚后跟的y坐标的值相比变化了预定以上。然后，在变化了预定以上的情况下，信息处理装置101判断为该脚抬起。
[0167] 当在步骤S1301中判定为被实验者的脚抬起的情况下，信息处理装置101转移到步骤S1302的处理。在判定为被实验者的脚未抬起的情况下，信息处理装置101转移到步骤S1304的处理。
[0168] 在步骤S1302中，信息处理装置101判定在步骤S1301中判定为抬起的被实验者的脚是否抬起至预定的高度。
[0169] 在判定了在步骤S1301中判定为抬起的被实验者的脚是否抬起至预定的高度的情况下，在步骤S1303中，信息处理装置101开始秒数的计数。在判定为在步骤S1301中判定为抬起的被实验者的脚未抬起至预定的高度的情况下，信息处理装置101结束本处理。
[0170] 更具体而言，根据被实验者的各脚的y坐标的值是否与在执行步骤S1301的处理之前确定的双脚的脚后跟的y坐标的值相比变化了预定以上来进行判断。在变化了预定以上的情况下，信息处理装置101判断为该脚抬起至预定的高度(参照图30)。
[0171] 此外，步骤S1302中的“预定”的值是比步骤S1301中的“预定”的值大的值。
[0172] 在步骤S1304中，信息处理装置101判定在比成为当前处理对象的帧的图像靠前的帧中是否判断为被实验者的脚抬起(在步骤S1301中“是”)。
[0173] 如果在比成为当前处理对象的帧的图像靠前的帧的图像中判断为被实验者的脚抬起(在步骤S1304中“是”)，则使处理转移到步骤S1305。在判定为在比当前测定的帧的图像靠前的帧的图像中未判断为被实验者的脚抬起(在步骤S1304中“否”)的情况下，判断为被实验者未抬起脚，结束本处理。
[0174] 在步骤S1305中，信息处理装置101判定被实验者的脚是否放下。
[0175] 更具体而言，在步骤S1305中，从成为当前处理对象的帧的图像中，确定各脚的y坐标的值是否与在执行步骤S1301的处理之前确定的被实验者的双脚的脚后跟的y坐标的值相比未变化预定以上，在未变化预定以上的情况下，判断为该脚放下。
[0176] 当在步骤S1305中判定为被实验者的脚放下的情况下，转移到步骤S1306的处理，结束在步骤S1303中执行的秒数的计数。在判定为被实验者的脚未放下的情况下，判定为被实验者仍抬起脚，结束本处理。
[0177] 在步骤S1307中，信息处理装置101根据从在步骤S1303中开始秒数的计数起至在步骤S1306中结束计数为止计数了的秒数低于还是高于预定的秒数(例如24秒)，评价被实验者的运动能力。将评价结果存储到测定结果管理表格(图19)。
[0178] 以上，结束图13的说明。
[0179] 此外，在图13中，设为信息处理装置101自动地判定被实验者的脚的抬起放下，但也能够如图14所示，用户(例如评价者)手动地指定被实验者的脚的抬起放下。
[0180] 因此，以下使用图14，说明用户(例如评价者)手动地指定被实验者的脚的抬起放下的机制。
[0181] 图14是在步骤S302中信息处理装置101开始被实验者的摄影时在信息处理装置101的显示器212中显示的画面。
[0182] 在1401中，显示信息处理装置101的运动信息取得部151取得的动画。
[0183] 1402是抬起放下按钮。当通过由用户实施的鼠标等的操作将抬起放下按钮1402按下第1次时，停止图13的处理，在被按下的定时判断为被实验者将脚抬起，开始秒数的计数。
[0184] 然后，当通过由用户实施的鼠标等的操作将抬起放下按钮1402按下第2次时，信息处理装置101判断为被实验者将脚放下，结束秒数的计数。然后，依照计数得到的秒数，评价被实验者的运动能力。
[0185] 此外，在本实施例中，当通过由用户实施的鼠标等的操作将抬起放下按钮1402按下第1次时，信息处理装置101使图13的处理停止。但是，作为其他实施例，也可以当在图13的步骤S1303的处理以后通过由用户实施的鼠标等的操作按下了抬起放下按钮1402的情况下，信息处理装置101不执行步骤S1304、步骤S1305的处理而结束秒数的计数，或者，当在步骤S1302的处理之前通过由用户实施的鼠标等的操作按下了抬起放下按钮1402的情况下，信息处理装置101不执行步骤S1301、步骤S1302的处理而开始秒数的计数，之后执行步骤S1304以后的处理。
[0186] 如图14那样用户(例如评价者)能够手动地指定被实验者的脚的抬起放下，从而在如图13那样信息处理装置101自动地判定被实验者的脚的抬起放下的情况下，在尽管被实验者抬起脚但信息处理装置仍判定为未抬起脚的情况、尽管被实验者放下脚但仍判定为未放下脚的情况下，也能够修正判定结果。
[0187] 以上，结束图14的说明。
[0188] 接下来，使用图29，说明评价被实验者的动作并且显示针对被实验者、助手的消息的处理。图29的流程图所示的处理是信息处理装置101的CPU201读出并执行预定的控制程序的处理。
[0189] 在步骤S2901中，判定确定出的骨骼信息是否满足预先决定的评价条件。
[0190] 在满足评价条件的情况下(步骤S2901：“是”)，使处理转移到步骤S2902。
[0191] 在不满足评价条件的情况下(步骤S2901：“否”)，使处理转移到步骤S2903。
[0192] 图30示出评价条件的一个例子。如图30所示，针对每个项目，将评价条件和评价内容对应起来。
[0193] 例如，关于“项目：椅子坐立”，在膝盖的角度为175度以上的情况下，评价为站立的动作，在为95度以下的情况下，评价为就坐的动作。然后，在进行了站立的动作和就坐的动作的情况下，评价为将坐立动作进行了1次。
[0194] 在睁眼单脚站立中，在左右的脚的高度之差为5cm以上的情况下，评价为抬起了单脚。
[0195] 在步骤S2902中，对评价值进行相加等。例如，如果是椅子坐立，则加1次。另外，在睁眼单脚站立中，在满足单脚站立的开始条件的情况下，开始单脚站立时间的测量。在满足结束条件的情况下，结束单脚站立时间的测量。
[0196] 在步骤S2903中，根据确定出的骨骼坐标，确定消息。
[0197] 根据图31所示的消息表格，确定消息内容。例如，在项目：椅子坐立中，在膝盖的角度为175度以上的情况下，确定“请坐”这样的消息。另外，当在膝盖的角度小于175度的状态下转移到就坐的动作的情况(膝盖的角度变小的情况)下，确定“请站稳”这样的消息。
[0198] 另外，在睁眼单脚站立中，如果是未抬起脚的状态，则确定“请将脚抬起”这样的消息，在抬起的脚的高度较低的情况下，确定“请将脚再抬高点”这样的消息，如果是稳稳地抬起脚的状态，则确定“测量中”这样的消息。
[0199] 通过这样显示消息，被实验者、助手能够识别是否进行了评价为稳健的动作、如果进行什么样的动作则会被评价。
[0200] 在步骤S2904中，显示在步骤2903中确定的消息。作为一个例子，示出图22的2201。
[0201] 返回到图3的说明。
[0202] 步骤S304～S306的处理是每当通过运动信息取得部151取得动画帧时进行的处理。通过这样每当取得帧时识别骨骼信息，能够探测各关节的坐标信息的变化而识别动作。
[0203] 在步骤S307中，信息处理装置101的CPU201保存在步骤S306中测定出的结果(图19)。
[0204] 接下来，使用图4，说明使用预先记录的运动信息的情况下的各项目的测定处理。
[0205] 此外，通过用户的选择，决定执行图3所示的实时的测定(在取得运动信息的同时还进行测定的处理)、还是执行图4所示的使用预先记录的运动信息的测定。
[0206] 在步骤S401中，从用户受理对要再生的动画(对希望测定的被实验者的动作进行摄影而得到的动画)的选择，受理该动画的再生指示。
[0207] 此外，动画数据包括通过运动信息取得部151的各传感器取得的数据。
[0208] 在步骤S402中，受理在步骤S401中受理了选择的动画和成为比较对象的动画的选择。
[0209] 在步骤S403中，针对再生对象的动画和比较对象的动画，受理各种设定。
[0210] 在步骤S404中，保存在步骤S402中受理了的设定。通过按下图28中的2801的保存按钮，执行保存处理。
[0211] 在步骤S405中，对被进行了再生指示的动画和被设定为比较对象的动画进行再生。
[0212] 此时，在同时按下了再生按钮的情况下，同时再生两个动画，在按下了单个再生按钮的情况下，单独地再生被按下的动画。
[0213] 然后，执行图3的步骤S304以后的处理。
[0214] 如图3、图4所示，能够切换在对被实验者进行摄影的同时实时地评价动作的情况和保存对被实验者进行摄影而得到的动画而之后评价动作的情况，从而例如在希望当场反馈给被实验者的情况下，用户设定成实时地评价动作，在希望首先对多个被实验者进行录像而之后进行评价的情况、用户(评价者)希望在反复观察细致的活动等的同时进行确认的情况、希望将摄影得到的动画作为其他项目进行评价的情况、希望通过注解功能确认被实验者的骨骼的角度的情况、被实验者和评价者在一起的情况下，用户能够设定成保存对被实验者进行摄影得到的动画而之后评价动作。
[0215] 另外，在保存对被实验者进行摄影得到的动画而之后评价动作的情况下，具有在有误检测的情况下无需重新摄影而用户能够手动地变更评价结果这样的优点。
[0216] 图23、图24示出比较画面的一个例子。
[0217] 图23是将评价对象的动画(骨骼信息)和比较对象的动画(骨骼信息)纵向并排显示的画面的一个例子。
[0218] 图24是将评价对象的动画(骨骼信息)和比较对象的动画(骨骼信息)横向并排显示的画面的一个例子。
[0219] 关于比较画面的布局(纵向排列、横向排列)，例如有如下方法：预先针对每个项目登记纵向排列还是横向排列，依照该登记内容进行显示。图25示出针对每个项目登记了布局的表格。
[0220] 如图25所示，示出椅子坐立是横向排列，通常步行是纵向排列。这样，通过预先登记，能够将被实验者在上下方向上移动那样的项目(“椅子坐立”等)设为横向排列，将在左右方向上移动的项目(“通常步行”等)设为纵向排列。通过这样根据移动方向决定排列方法，能够以容易进行比较的布局进行显示。
[0221] 这样进行预先登记的方法在预先确定项目的情况(预先决定项目的情况)下是有效的。
[0222] 将表示是对哪个项目进行摄影而得到的数据的信息与通过步骤S401、S402选择出的动画数据对应起来记录，使用图25的表格，确定与该记录的项目对应起来的布局。
[0223] 另外，还有根据被实验者的轨迹来决定布局的方法。例如，以如果被实验者的轨迹(移动方向)是左右方向，则上下排列，如果被实验者的轨迹是上下方向，则左右排列的方式，根据被实验者的活动来决定布局。
[0224] 通过这样根据被实验者的轨迹来进行判断的方法，在未预先确定项目的情况下，也能够以容易进行比较的布局来进行显示。
[0225] 另外，在比较画面中，能够使动画的左右反转。
[0226] 图26是示出使图23的画面中的上部的动画的左右反转了的情况下的图。如图26所示，在上部的动画中拍摄的人在图23中是右朝向，但在图26中为左朝向。
[0227] 通过在图26的2601中示出的复选框中进行勾选，受理表示反转的意思的指示。当勾选2601中的“上画面反转”时，上部的画面反转。当勾选“下画面反转”时，下部的画面反转。如果对两者进行勾选，则上下两方的画面反转。
[0228] 通过这样进行反转，在例如在1个月前从影像的左向右步行而进行了测定、但本次从右向左进行了测定这样的情况下，也能够使两者的步行方向统一，所以容易比较并且能够详细掌握两者的差异。
[0229] 另外，在比较画面中，不仅能够将比较对象的图像并排显示，而且还能够重叠显示。
[0230] 图27示出重叠显示的一个例子。图27中的2701和2702是比较对象的图像。另外，2703是将2701和2702的图像重叠而成的图像。
[0231] 在比较画面中，能够调整比较对象的图像的尺寸、位置。
[0232] 关于尺寸，通过在图27的自动调整菜单2704的“大小”中进行勾选，使用例如直至头部和腰部的长度，以使该长度在比较对象的骨骼信息之间一致的方式进行调整。这样，通过使被实验者的骨骼信息中的某一个关节间的距离和与该关节间的距离对应的成为比较对象的骨骼信息所相关的关节间的距离一致，进行尺寸调整。
[0233] 另外，不仅能够自动地调整，而且还能够通过用户的操作来调整。在该情况下，能够通过按下图27中的大小调整按钮2705、2706来调整。在按下了增大按钮2705的情况下进行增大，在按下了减小按钮2706的情况下进行减小。
[0234] 能够这样进行尺寸的调整，从而在对身高不同的人之间进行比较的情况、倍率与过去摄影得到的人不同的情况等下，仍容易比较并且能够详细地掌握两者的差异。
[0235] 关于位置，通过在图27的自动调整菜单2704的“位置”中进行勾选，以使例如头部的位置在比较对象的骨骼信息之间一致的方式进行调整。即，通过使被实验者的某一个关节坐标和与该关节坐标对应的成为所述比较对象的骨骼信息所相关的关节坐标一致，进行位置调整。另外，以使人映出在合成图像的中央的方式来调整位置。
[0236] 另外，还能够通过用户进行拖动操作来调整位置。
[0237] 这样，通过能够调整位置，能够将比较对象的骨骼信息配置于期望的位置而进行比较或者使其重叠而进行比较，容易比较并且能够详细地掌握两者的差异。
[0238] 另外，当在自动调整菜单2704的“两者”中进行勾选时，调整尺寸和位置这两者。
[0239] 另外，在比较画面中，能够不显示包括被实验者的背景影像而仅显示骨骼信息。
[0240] 图28示出仅显示了骨骼信息的画面的一个例子。
[0241] 在图28所示的画面的右端有显示切换菜单，当在其中的“颜色”这样的项目中进行勾选时，显示背景，当取消勾选时，仅显示骨骼信息。
[0242] 即，受理针对是否显示包括被实验者的背景影像的选择，依照所受理的内容，决定是否显示包括被实验者的背景影像。
[0243] 例如，在分别在不同的房间中对比较对象的动画进行了摄影的情况下，背景的差异成为干扰而骨骼的活动的比较变得困难。特别是，在合成图像中，不同的背景彼此重叠地显示，所以非常难以观察，难以比较。因此，通过消去背景，能够明确地显示比较对象，能够详细地掌握两者的差异。
[0244] 将在上述各种画面中所设定的内容(比较动画的组合、画面布局、位置、尺寸等)保存为比较脚本，可再利用。
[0245] 在比较脚本的信息中，包括动画文件的信息、再生开始位置、再生结束位置、缩放状态、合成影像的已调整位置、左右反转的设定。
[0246] 这样，通过将所设定的内容保存为比较脚本，即使在之后希望再次重看时，也能够省略再次设定的时间劳力。
[0247] 接下来，使用图5，说明报告制作处理。
[0248] 在步骤S501中，从用户受理被实验者的选择，受理该被实验者的测定结果(报告)的输出指示。
[0249] 在步骤S502中，提取受理了输出指示的被实验者的测定结果。
[0250] 在此，使用图15，详细说明测定结果提取处理。
[0251] 在步骤S1501中，信息处理装置101从用户受理提取条件的设定。图17示出提取条件设定画面的影像。在图17的画面中，作为提取条件，设定开始日期1701、结束日期1702。
[0252] 在步骤S1502中，信息处理装置101从用户受理项目的选择。在图17的画面中，作为项目1703，从睁眼单脚站立、椅子坐立、最大一步、通常步行、TUG中选择。
[0253] 在步骤S1503中，信息处理装置101依照在步骤S1501以及S1502中受理了的提取条件、项目，从图19所示的测定结果管理表格中提取本次以及上次的测定结果。具体而言，通过按下图17的提取按钮1704，执行本处理，在作为提取条件的开始日期1701和结束日期1702的范围内，针对选择出的项目1703，检索测定结果管理表格，将最新的测定结果和第二新的测定结果作为本次结果、上次结果而提取。
[0254] 针对这样指定的项目(通常有多个指定)，将在所指定的期间范围中包含的最新的测定结果和第二新的结果作为本次测定结果、上次测定结果而提取，从而无需实施针对各个项目设定检索条件来检索测定结果并选定本次测定结果和上次测定结果这样的一连串作业，能够提取用于输出报告的测定结果。
[0255] 在此，使用图19，说明测定结果管理表格。在测定结果管理表格中，作为项目而包括测定结果ID1901、被实验者1902、测定日期时间1903、项目1904、测定值1905、评价分数1906、动画文件1907。测定结果ID1901是用于唯一地识别测定结果的字符串。被实验者1902是接受了测定的被实验者。测定日期时间1903是开始测定的日期时间。项目1904是被测定的项目，是睁眼单脚站立、椅子坐立、最大一步、通常步行、TUG中的某一个。测定值1905是表示测定结果的数值。评价分数1906是基于测定值1905进行评价的分数。动画文件1907是与测定结果对应的动画数据的文件名、或者向动画数据的链接。
[0256] 在步骤S1504中，信息处理装置101将在步骤S1503中提取出的测定结果显示于显示器212等。图18示出提取结果显示画面的影像。在图18的画面中，显示与提取出的测定结果对应的动画数据的缩略图图像1801。
[0257] 返回到图5的说明。
[0258] 在步骤S503中，根据在步骤S502中提取出的结果，制作报告。
[0259] 在此，使用图16，详细说明报告制作处理。
[0260] 针对在步骤S1502中受理了选择的每个项目，反复执行步骤S1601至S1605的处理。
[0261] 在步骤S1601中，信息处理装置101取得在步骤S1503中提取出的本次以及上次的测定结果。
[0262] 在步骤S1602中，信息处理装置101判定在步骤S1601中取得的测定结果是否已评价。具体而言，根据是否在测定结果管理表格的评价分数1906中设定了值来进行判定。如果已评价，则进入到步骤S1604，如果未评价，则进入到步骤S1603。
[0263] 在步骤S1603中，信息处理装置101针对未评价的测定结果实施评价，登记到测定结果管理表格的测定值1905以及评价分数1906。
[0264] 在步骤S1604中，信息处理装置101从与测定结果对应的动画中检索动画的各帧图像，针对项目提取特征性的定时的帧图像。关于决定特征性的定时的条件，预先针对每个项目而决定，例如如果是睁眼单脚站立则决定为将脚放到地面的定时、即状态从将脚抬起的状态转变到将脚放到地面的状态的定时，如果是最大一步则决定为将双脚叉开最大的定时、即从判定为最高记录时的将脚抬起的状态将脚放到地面的定时。根据针对各关节的坐标数据的值、变化状况、多个关节的坐标数据的相关关系等，设定具体的条件。此外，关于特征性的定时的帧图像，既可以在本处理中提取，也可以在评价时提取并预先保存而在本处理中调出。另外，在本实施例中，针对每个项目提取出1个特征性的帧图像，但也可以根据条件提取多个帧图像。
[0265] 在步骤S1605中，信息处理装置101将在步骤S1604中提取出的特征性的帧图像的缩略图图像和针对各项目的评价结果作为报告要素输出。当在步骤S1604中提取出多个特征性的帧图像的情况下，既可以将对应的缩略图图像排列而输出多个，也可以汇成1个来输出。
[0266] 通过这样作为报告要素而输出针对各项目的评价结果和特征性的帧图像的缩略图图像，不仅能够通过数值数据掌握情况，也能够在视觉上直观地掌握测定结果是否良好等。
[0267] 在步骤S1606中，汇集针对各项目输出的报告要素，附加报告制作日、被实验者信息、测定场所信息等与测定有关的信息来制作报告。
[0268] 返回到图5的说明。
[0269] 在步骤S504中，信息处理装置101的CPU201输出在步骤S503中制作的报告。
[0270] 图20示出在本处理中制作并且在步骤S504中输出的报告的输出例。在图20的输出例中，在报告信息栏2001中显示制作日、实施者(被实验者)、实施场所、负责人，在综合注释栏2002中显示来自评价者的注释，在蛛网图栏2003中显示每个项目的评价分数的蛛网图。在拾取项目栏2004中针对用户所选择的项目，根据在步骤S1605中提取出的特征性的图像，显示缩略图以及骨骼图像。在项目类别结果栏2005中，显示按项目类别的本次以及上次的实施日、结果(测定值)、根据本次和上次的评价分数判定的改善程度、来自评价者对项目的注释和在步骤S1605中提取出的特征性的帧图像的缩略图图像。
[0271] 另外，本发明中的程序是使计算机执行图3～图5、图11、图13、图15、图16、图29的处理的程序。此外，本发明中的程序也可以是图3～图5、图11、图13、图15、图16、图29的各处理各自的程序。
[0272] 如以上那样，通过将记录有实现上述实施方式的功能的程序的记录介质供给到系统或者装置，并且该系统或者装置的计算机(或者CPU、MPU)读出并执行在记录介质中储存的程序，当然也能够达到本发明的目的。
[0273] 在该情况下，从记录介质读出的程序自身实现本发明的新的功能，记录有该程序的记录介质构成本发明。
[0275] 另外，不仅通过计算机执行所读出的程序来实现上述实施方式的功能，而且当然还包括根据该程序的指示，在计算机上工作的OS(操作系统)等进行实际处理的一部分或者全部，通过该处理实现上述实施方式的功能的情况。
[0276] 进而，当然还包括以下情况：在将从记录介质读出的程序写入到插入于计算机的功能扩展板、与计算机连接的功能扩展部件所具备的存储器之后，根据该程序代码的指示，在该功能扩展板、功能扩展部件所具备的CPU等进行实际处理的一部分或者全部，通过该处理实现上述实施方式的功能。
[0277] 另外，本发明既可以应用于由多个设备构成的系统，也可以应用于由一个设备构成的装置。另外，本发明当然还适用于通过对系统或者装置供给程序来达成的情况。在该情况下，通过将储存有用于达成本发明的程序的记录介质读出到该系统或者装置，该系统或者装置能够享受本发明的效果。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 摄像装置和图像处理方法 | 2020-05-18 | 501 |
| 一种用于车购税自助办税终端的身份信息存储及校验的系统及方法 | 2020-05-21 | 162 |
| 洗衣机 | 2020-05-15 | 818 |
| 电力信息通信综合受理平台 | 2020-05-11 | 780 |
| 具有人像、指纹比对功能的居民身份证制证系统及方法 | 2020-05-12 | 124 |
| 一种基于P2P路由的分布式虚拟PSTN交换方法 | 2020-05-20 | 298 |
| 摄影装置以及图像处理方法 | 2020-05-18 | 186 |
| 办证信息自助采集设备及其方法 | 2020-05-14 | 384 |
| 信息处理装置以及信息处理方法 | 2020-05-12 | 334 |
| 信息处理装置以及信息处理方法 | 2020-05-13 | 110 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
QQ群二维码
意见反馈
意见反馈