News (TW)

日本開發商創建虛擬實境平台使鋼琴學習民主化

VR Piano, tecnologia
Foto: VR Piano, tecnologia - Chatchai.wa/ Shutterstock.com

VR軟體開發商Piano Co.、Ltd。宣布擴展其混合實境應用程式Sigure的功能。該系統旨在改變音樂學習方式,讓使用者在虛擬環境中練習樂器,而無需立即閱讀傳統樂譜。該倡議源於該計畫的創建者本人在嘗試恢復成人音樂學習時所面臨的困難,尋求結合沉浸式技術和實踐教育的解決方案。

軟體採用類似節奏遊戲的視覺機制,透過使用者視野中的直接刺激促進音符和時間的同化。 Desde 首次推出後,該平台不斷更新,鞏固了其基本訓練和運動適應功能。工程團隊目前的目標是將應用程式轉變為完整的娛樂和音樂教育中心,為初學者和有經驗的音樂家提供服務。

鋼琴、樂器、科技
鋼琴、樂器、技術 – Shyntartanya
/Shutterstock.com

该公司总部位于Yokohama市,计划在未来几年内实施一系列复杂的技术创新。這些更新旨在利用空間處理和音訊識別硬體的最新進展,打破歷史上限制古典樂器研究的物理和財務障礙。

Integração de captação sonora para instrumentos acústicos

開發階段的主要創新之一是能夠從原聲鋼琴產生的原始聲音中檢測音高。 Atualmente,大多數音樂學習應用程式需要透過 MIDI 電纜或無線網路連接數位鍵盤來準確記錄演奏的音符。新功能將允許虛擬實境設備的內建麥克風即時捕捉和處理來自三角鋼琴或直立式鋼琴的音頻,過濾外部噪音以隔離每次按鍵的確切頻率。

這種音訊辨識技術將評估音符的準確性和演奏時間,向使用者提供有關其在數位介面上的表現的即時回饋。消除對連接電子設備的要求大大擴展了系統在不同環境中的相容性。該公司的軟體工程師致力於完善拾音演算法,確保虛擬環境中的體驗準確反映演奏傳統樂器的真實感覺和聲學動態。

音樂表演中的立體視覺元素

為了補充聽覺體驗,設計團隊正在研究如何結合動態視覺效果,這些效果可以直接對虛擬或實體按鍵的觸摸做出反應。該專案預計,施加在每個音符上的壓力會觸發使用者視野中的三維動畫,例如櫻花的投影、定向光束或水花的模擬。此外,該系統將使用紅外線感測器追蹤玩家雙手的運動,產生伴隨表演的流暢性和觸摸強度的發光光環。 Essa圖形層旨在豐富學習過程中的感官知覺,將趨向於孤獨和重複的練習轉變為視覺刺激和互動活動。

這些圖形元素的整合將在應用程式的下一個版本中逐步進行。開發人員設定的目標是確保視覺效果與現有遊戲介面協調一致,不會造成輕微幹擾,進而影響閱讀音符或專注於演奏音樂作品。

用於演示和社交互動的數位環境

創建專用於演奏會的虛擬空間是混合實境平台開發時間表中的另一個優先事項。

該系統將允許音樂家和觀眾聚集在個性化的數位房間中,無論他們的地理位置如何,從而創建一個現場表演的生態系統。

在這些展覽期間,藝術家將擁有可以即時應用三維效果的工具,從而擴展傳統聲音之外的藝術表達的可能性。

該軟體結構旨在支援不同規模的協作活動和虛擬音樂會,優化伺服器基礎設施以減少延遲並確保聯合演示所需的同步。

硬體演變和高級觸覺模擬

開發商的長期規劃遵循對全球市場上虛擬和擴增實境設備發展的預測。技術部門期望浸入式眼鏡將變得越來越輕、更符合人體工學且易於使用,在物理上類似於傳統太陽眼鏡,這將有助於在學習期間長時間使用。

結合縮小顯示器的尺寸,使用配備觸覺回饋執行器的混合實境手套代表了無需物理樂器的音樂學習的根本性技術飛躍。 Esses 配件將為使用者的手指提供精確的機械阻力和振動,模擬真實鋼琴琴鍵的重量、排氣和觸覺響應,即使使用者在桌子或平面上彈奏時也是如此。

透過將這些追蹤和物理模擬技術相結合,將不再需要擁有真實的儀器。使用者將能夠在任何環境中練習複雜的指法技巧,使在較小的住宅空間內進行音樂學習變得民主化,並消除與購買、運輸和調音傳統鋼琴相關的高成本。

虛擬比賽和樂器多樣化

– Para 為了鼓勵用戶持續參與,該應用程式將接收專注於多人互動和友善技術競賽的遊戲模式。

– 該系統將組織線上錦標賽,音樂家可以在全球排行榜上透過精確和節奏的對決來展示他們的技能。

– 即時二重奏會話將允許兩名樂器演奏家同時演奏同一首曲子,協作共享樂譜的各個部分。

– 該軟體還將擴大捕獲範圍,包括歌唱和吉他評論,創建更全面、更整合的音樂生態系統。

針對不同樂器和聲音實施統一的評分系統將使該平台成為組建虛擬樂隊的多功能工具。該公司認為這種多學科方法將提高用戶保留率並使應用程式的目標受眾多樣化。

初學者音樂教育的民主化

該計畫的核心理念仍然致力於消除技術和理論障礙,這些障礙往往會在最初幾個月的實踐中使新生失去動力。該軟體目前的目錄已經提供了廣泛的流行音樂選擇,包括日本動畫配樂、當代日本流行音樂以及適合不同難度級別的古典作品。

視覺音符滾動格式允許沒有任何正式音樂理論指導的人從第一天開始播放他們最喜歡的歌曲。該公司未來十年的策略規劃預計將不斷改進這些輔助工具,監控該行業的技術進步,以鞏固該平台作為沉浸式互動音樂教育全球參考的平台。