首页 理论教育《人工智能舞蹈交互系统原理与设计》成果

《人工智能舞蹈交互系统原理与设计》成果

【摘要】:在动作识别的过程中,舞蹈动作被看作一系列姿态的时间序列。在舞蹈交互系统中,无论是动作的识别还是动作的分析与评估,都需要采用一种有效的方式对动作进行清晰的定义和可量化的描述。在后续的舞蹈交互系统中,针对动作识别和动作评估这两个研究领域,笔者将使用不同的特征子集来进行有针对性的研究。

舞蹈交互系统中,针对不同的研究需求,需要选择合适的特征子集来对动作进行有针对性的描述。

在动作识别的过程中,舞蹈动作被看作一系列姿态的时间序列。通过S-SOFM神经网络的学习方法,舞蹈动作被转换成一个结构化的姿态空间。也就是说,把动作看成离散的姿态序列,所以笔者在特征表示部分重点选择了身体结构和姿态两个子集。而在动作评估部分,不但要分析舞者的形体表现力,还要考虑动作的节奏和力效,所以笔者以身体结构、姿态和力效这三个子集为研究对象。空间特征主要是描述表演过程中表演者和环境的关系的,因此本次研究并未过多涉及。

在舞蹈交互系统中,无论是动作的识别还是动作的分析与评估,都需要采用一种有效的方式对动作进行清晰的定义和可量化的描述。本书通过“形态-力效”的结构化描述模型,从舞蹈动作的身体结构、姿态、空间、力量等方面入手,对舞蹈动作进行全面、细致的描述。在后续的舞蹈交互系统中,针对动作识别和动作评估这两个研究领域,笔者将使用不同的特征子集来进行有针对性的研究。本章提出的特征描述方法,适用于不同的研究需求,符合该系统的研究需要。

[1] LIU F,ZHUANG Y T,WU F,et al. 3D motion retrieval with motion index tree[J]. Computer vision and image understanding,2003,92(2-3):265-284.
LEE J,CHAI XJ,REISMA PSA,et al. Interactive control of avatars animated with human motion data[C]. Proceeding of SIGGRAPH 2002,San Antonio,Texas,2002:491-500.

[2] 杨涛,肖俊,吴飞,等.基于分层曲线简化的运动捕获数据关键帧提取[J].计算机辅助设计与图形学报,2006,18(11):1691-1697.
BARNES M A,KRASNOW D,TUPLING S J,et al. Knee rotation in classical dancers during the grand plié[J]. Medical problems of performing artists,2000,15(4):140-147.
NICHOLS L. Structure in motion:the influence of morphology,experience,and the ballet barre on verticality of alignment in the performance of the plié[M]//DT T.New directions in dance. Toronto:Pergamon Press,1979:147-157.

[3] MULLER M,RODER T. Motion templates for automatic classification and retrieval of motion capture data[C].Proceeding of the 2006 ACM SIGGRAPH/Eurograhpics Symposium on Computer Animation,Eurographics Association,2006:137-146.
MULLER M,BAAK A,SEIDEL H-P. Efficient and robust annotation of motion capture data[C].Proceeding of the 2009 ACM SIGGRAPH/Eurographics Symposium on Computer Animation,2009:17-26.
ZHAO Q,WANG L H,IP H H S,et al. Human 3D motion recognition based on spatial-temporal context of joints[C]. 20th International Conference on Pattern Recognition,2010:2740-2743.

[4] 韩鸿哲,李彬,王志良,等. 基于傅立叶描述子的步态识别[J].计算机工程,2005,31(2):48-49+162.
VINCS K,BARBOUR K. Snapshots of complexity:using motion capture and principal component analysis to reconceptualise dance,2014[J]. Digital creativity,2014,25(1):62-78.

[5] NAKAZAWA A,NAKAOKA S,SHIRATORI N,et al. Analysis and synthesis of human dance motions[C].Multisensor fusion and integration for intelligent system,MFI2003.Proceeding of IEEE International Conference on. IEEE:83-88.(www.chuimin.cn)

[6] KAHOL K,TRIPATHI P,PANCHANATHAN S. Automated gesture segmentation from dance sequence[C].Proceedings of Automatic Face and Gesture Recognition,Sixth IEEE International Conference on. IEEE,2004:883-888.

[7] HO E,CHAN J,KOMURA T,et al. Interactive partner control in close interactions for real-time applications[J]. ACM transactions on multimedia computing,communications,and applications,2013,9(3):21.

[8] LABAN R. The mastery of movement[M].Binsted,Hampshire,UK:Dance Books Ltd.,2011.

[9] 冯百跃. 舞蹈训练学概论[M].上海:上海音乐出版社,2009.
刘青戈. 现代舞蹈的身体语言[M].上海:上海音乐出版社,2004.

[10] 于平. 舞蹈形态学 [M]. 北京:北京舞蹈学院,1998.

[11] 盖斯特. 拉班记谱法:动作分析与记录系统:第四版[M].罗秉钰,译. 北京:中国出版传媒股份有限公司,中国对外翻译出版有限公司,2013.