阿尔托大学的研究人员正在寻找更好的方法来指导虚拟现实中的舞蹈编排。 他们开发的新 WAVE 技术将于 5 月在 CHI 会议上展示，该会议是人机交互研究的主要场所。
以前的技术很大程度上依赖于预演练和简化。
“在虚拟现实中，很难想象和传达舞者应该如何移动。 人体是如此多维，很难实时获取丰富的数据。”Perttu Hämäläinen 教授说。
研究人员首先尝试了以前舞蹈游戏中常见的可视化技术。 但在几个原型和舞台之后，他们决定尝试用体育赛事中熟悉的观众浪潮来引导舞蹈。
“模特舞者的波浪式动作可以让你提前看到接下来会发生什么样的动作。 而且你不必事先排练这个动作，”博士研究员马库斯·拉塔拉说。
一般来说，由于人类感知运动控制的延迟，人们无法实时跟随新的编排。 另一方面，研究人员开发的 WAVE 技术基于预测未来的运动，例如转弯。
“没有人知道如何引导现代舞这样连续、流畅的动作。 在我们实施的编舞中，挥手就是一种沟通，一种微规范，模特舞者在瞬间延迟的情况下遵循相同的编舞，”Hämäläinen 说。
从太极拳到夸张动作
共有 36 人参加了一分钟的舞蹈测试，将新的 WAVE 可视化与只有一名模特舞者跟随的传统虚拟版本进行比较。 这些技术之间的差异是显而易见的。
‘这种实现方式至少适合慢节奏的舞蹈风格。 舞者可以直接跳进去开始跳舞，而无需事先学习任何东西。 然而，在更快的动作中，视觉效果可能会变得混乱，需要进一步的研究和开发来适应和测试更多舞蹈风格的方法。”Hämäläinen 说。
除了虚拟舞蹈游戏外，新技术还可能适用于音乐视频、卡拉 OK 和太极拳。
“如果用户能够决定如何以适合他们的方式放置模特舞者，这对用户来说将是最佳选择。 如果这个想法更进一步，几个舞者可以在社交虚拟现实中互相发送动作。 它可能成为一种全新的一起跳舞的方式”，拉塔拉说。
目前主流的 VR 设备只能跟踪耳机和手持控制器的运动。 另一方面，机器学习数据有时可用于推断腿部如何移动。”Hämäläinen 说道。
“但在舞蹈中，推理更加困难，因为动作比走路等更奇怪，”拉塔拉补充道。
另一方面，如果真实的舞蹈空间中有一面镜子，您可以使用机器视觉来跟踪脚部的运动。 舞者的视野可以使用虚拟镜子进行修改。
“舞者的虚拟表演可以通过夸张来提高，例如通过增加灵活性、跳跃高度或臀部运动。 这可以让他们感觉自己比实际更有技能，研究表明这对体育活动动机有积极影响，”Hämäläinen 说。
这款虚拟舞蹈游戏是使用 Magics 基础设施的动作捕捉套件开发的，其中模型舞者穿着带有传感器的服装。 这些已被用来录制舞蹈动画。
适用于 Meta Quest 2 和 3 VR 设备的 WAVE 舞蹈游戏可在此处下载： https://github.com/CarouselDancing/WAVE。 Github 存储库还包含任何人都可以用来进一步开发游戏的开源代码。
参考：
Laattala, M.、Piitulainen, R.、Ady, N.、Tamariz, M. 和 Hämäläinen, P. (2024)。 VR 舞蹈的预期动作可视化。 ACM SIGCHI 计算系统中的人为因素年会。
资讯来源：由a0资讯编译自THECOINREPUBLIC。版权归作者A0资讯所有，未经许可，不得转载
