News (CN)

日本开发商创建虚拟现实平台使钢琴学习民主化

VR Piano, tecnologia
照片: VR Piano, tecnologia - Chatchai.wa/ Shutterstock.com

VR 软件开发商 Piano Co., Ltd. 宣布扩展其混合现实应用程序 Sigure 的功能。该系统旨在改变音乐学习,允许用户在虚拟环境中练习乐器,而无需立即阅读传统乐谱。该倡议源于该项目的创建者本人在尝试恢复成人音乐学习时所面临的困难,寻求结合沉浸式技术和实践教育的解决方案。

该软件采用类似于节奏游戏的视觉机制,通过用户视野中的直接刺激促进音符和时间的同化。自首次推出以来,该平台不断更新,巩固了其基本训练和运动适应功能。工程团队当前的目标是将应用程序转变为一个完整的娱乐和音乐教育中心,为初学者和有经验的音乐家提供服务。

钢琴、乐器、科技
钢琴、乐器、技术 – Shyntartanya
/ Shutterstock.com

该公司总部位于横滨市,计划在未来几年内实施一系列复杂的技术创新。这些更新旨在利用空间处理和音频识别硬件方面的最新进展,打破历史上限制古典乐器研究的物理和财务障碍。

集成原声乐器的声音捕捉

开发阶段的主要创新之一是能够从原声钢琴产生的原始声音中检测音高。目前,大多数音乐学习应用程序都需要通过 MIDI 电缆或无线网络连接数字键盘来准确记录演奏的音符。新功能将允许虚拟现实设备的内置麦克风实时捕获和处理来自三角钢琴或立式钢琴的音频,过滤外部噪音以隔离每次按键的确切频率。

这种音频识别技术将评估音符的准确性和演奏时间,向用户提供有关其在数字界面上的表现的即时反馈。消除对连接电子设备的要求大大扩展了系统在不同环境中的兼容性。该公司的软件工程师致力于完善拾音算法,确保虚拟环境中的体验准确反映演奏传统乐器的真实感觉和声学动态。

音乐表演中的三维视觉元素

为了补充听觉体验,设计团队正在研究如何结合动态视觉效果,这些效果可以直接对虚拟或物理按键的触摸做出反应。该项目预计,施加在每个音符上的压力会触发用户视野中的三维动画,例如樱花的投影、定向光束或水花的模拟。此外,该系统将使用红外传感器跟踪玩家双手的运动,产生伴随表演的流畅性和触摸强度的发光光环。该图形层旨在丰富学习过程中的感官知觉,将通常单独且重复的练习课程转变为视觉刺激和互动活动。

这些图形元素的集成将在应用程序的下一版本中逐步进行。开发人员设定的目标是确保视觉效果与现有游戏界面协调一致,不会造成轻微干扰,从而影响阅读音符或专注于演奏音乐作品。

用于演示和社交互动的数字环境

创建专用于演奏会的虚拟空间是混合现实平台开发时间表中的另一个优先事项。

该系统将允许音乐家和观众聚集在个性化的数字房间中,无论他们的地理位置如何,从而创建一个现场表演的生态系统。

在这些展览期间,艺术家将拥有可以实时应用三维效果的工具,从而扩展传统声音之外的艺术表达的可能性。

该软件结构旨在支持不同规模的协作活动和虚拟音乐会,优化服务器基础设施以减少延迟并保证联合演示所需的同步。

硬件演变和高级触觉模拟

开发商的长期规划遵循对全球市场上虚拟和增强现实设备发展的预测。技术部门期望浸入式眼镜将变得越来越轻、更符合人体工程学且易于使用,在物理上类似于传统太阳镜,这将有助于在学习期间长时间使用。

结合缩小显示器的尺寸,使用配备触觉反馈执行器的混合现实手套代表了无需物理乐器的音乐学习的根本性技术飞跃。这些配件将为用户的手指提供精确的机械阻力和振动,模拟真实钢琴琴键的重量、擒纵机构和触觉响应,即使用户在桌子或平坦的表面上弹奏时也是如此。

通过将这些跟踪和物理模拟技术相结合,将不再需要拥有真实的仪器。用户将能够在任何环境中练习复杂的指法技巧,使在较小的住宅空间内进行音乐学习变得民主化,并消除与购买、运输和调音传统钢琴相关的高成本。

虚拟比赛和乐器多样化

– 为了鼓励用户持续参与,该应用程序将提供专注于多人互动和友好技术竞赛的游戏模式。

– 该系统将组织在线锦标赛,音乐家可以在全球排行榜上通过精确和节奏的对决来展示他们的技能。

– 实时二重奏会话将允许两名乐器演奏家同时演奏同一首曲子,协作共享乐谱的各个部分。

– 该软件还将扩大捕获范围,包括歌唱和吉他评论,创建更全面、更集成的音乐生态系统。

针对不同乐器和声音实施统一的评分系统将使该平台成为组建虚拟乐队的多功能工具。该公司认为这种多学科方法将提高用户保留率并使应用程序的目标受众多样化。

初学者音乐教育的民主化

该项目的核心理念仍然致力于消除技术和理论障碍,这些障碍往往会在最初几个月的实践中使新生失去动力。该软件当前的目录已经提供了广泛的流行音乐选择,包括日本动画配乐、当代日本流行音乐以及适合不同难度级别的古典作品。

视觉音符滚动格式允许没有任何正式音乐理论指导的人从第一天开始播放他们最喜欢的歌曲。该公司未来十年的战略规划预计将不断改进这些辅助工具,监控该行业的技术进步,以巩固该平台作为沉浸式互动音乐教育全球参考的平台。