虚拟鼓圈:扩展现实中的多节奏音乐互动
摘要:扩展现实领域的新兴技术为合奏音乐表演的研究和实践提供了丰富的新可能性。除了技术挑战外,在扩展现实中将音乐演奏者聚集在一起也引发了对他们的表演和身体协调的重要问题。在这项研究中,我们设计了一个扩展现实平台,用于评估两位音乐演奏者之间的远程、双向的复合节奏交互,通过他们的三维化身化身和共享的虚拟鼓圈进行实时中介。我们利用一个多层次分析框架来评估他们的演奏质量、身体协调和第一人称交互体验,使用统计技术进行时间序列分析和混合效应回归,并关注视觉耦合(不看/看作化身/看作真实)和听觉背景(节拍器/音乐)的对比。结果显示,具有音乐的听觉背景改善了演奏输出,表现为预测误差减小、运动能量增加和经验代理水平的增加。视觉耦合影响了体验质量,并诱导了亲社会效应,增加了伙伴现实感水平,从而提高了共享代理和自我他人融合的水平。音频背景和视觉耦合对演奏者之间的身体协调产生影响,表明预测为基础的补偿机制用于应对音乐交互中的新颖性、难度和表现力。这项研究通过使用方法论方法,为我们理解扩展现实中的音乐表演提供了理据,并提供了未来行动研究的基础和方向。
作者:Bavo Van Kerrebroeck, Kristel Cromb''e, St''ephanie Wilain, Marc Leman, Pieter-Jan Maes
论文ID:2308.01889
分类:Human-Computer Interaction
分类简称:cs.HC
提交时间:2023-08-31