top of page

使用可穿戴技术手套在 VR 中演奏乐器

平台
Unity 和 Arduino

期间:
2023 年 4 月 - 5 月,波士顿

可交付成果
概念陈述
先例研究
用户测试
数据分析
Unity 和 Arduino 开发

屏幕截图 2023-06-09 12.08_edited.jpg

概念

内容:该设备探索了从需要物理乐器演奏音乐到使用可穿戴设备和虚拟现实的转变,让人们可以从任何地方探索音乐。该设备可用于收集节奏数据,帮助音乐家了解他们相对于节拍器的节奏。它是根据良好的钢琴技巧设计的。

资源 3_4x.png

对象:最初是新手或经验丰富的音乐家。将来,它可以成为音乐教师、作曲家或理疗师的工具。

如何:Unity、Arduino、手指運動、&觸覺反饋。

原因:购买优质乐器价格昂贵,携带不方便。有了这款可穿戴设备,人们可以试用乐器,并追踪他们的节奏精确度随着时间的推移如何提高。

研究目标

随时随地播放

探索激活你周围的表面

与虚拟现实互动

探索使用可穿戴技术触发 Unity 中的声音以用于虚拟现实

收集节奏数据

探索收集和分析与音乐家演奏节拍器的能力相关的数据

体验不同的环境

探索不同的环境如何影响音乐创作

视频:单排,播放Lalaland的音乐

视频:两排,实验仪器

收集数据,构建节拍器

数据分析

多近才算近? 时间戳显示音乐家是在节拍之前还是之后。

千分之一秒的成功率: 68%

百分之一秒的成功率: 95%

十分之一秒的成功率: 100%

用例: 跟踪随时间变化的节奏数据。音乐家可以使用节拍器跟踪自己的“节奏”并了解自己随着时间的推移如何进步。

屏幕截图 2023-06-09 晚上 10.19.27.png

先例资料

屏幕截图 2023-06-09 晚上 10.26.14.png
屏幕截图 2023-06-09 晚上 10.26.14.png
屏幕截图 2023-06-09 晚上 10.41.42.png

用戶測試

构建流程和迭代

下一步

未來的音樂合作


如何利用它來促進跨時區的音樂合作?

減少延遲

單擊按鈕時,應立即聽到聲音。

增加耐用性

使手套更耐用,以延長使用壽命並更容易穿脫。

bottom of page