VR programmatūras izstrādātājs Piano Co., Ltd. paziņoja par savas jauktās realitātes lietojumprogrammas Sigure funkcionalitātes paplašināšanu. Sistēma tika izstrādāta, lai pārveidotu mūzikas mācīšanos, ļaujot lietotājiem praktizēt instrumentu virtuālajā vidē bez tūlītējas nepieciešamības lasīt tradicionālās notis. Iniciatīva radās no grūtībām, ar kurām saskārās pats projekta veidotājs, cenšoties atsākt mūzikas studijas pieaugušā vecumā, meklējot risinājumu, kas apvienotu ieskaujošās tehnoloģijas un praktisko izglītību.
Programmatūra darbojas ar vizuālo mehāniku, kas ir līdzīga ritma spēlēm, atvieglojot nošu un laika asimilāciju, izmantojot tiešus stimulus lietotāja redzes laukā. Desde pēc sākotnējās palaišanas platforma ir saņēmusi pastāvīgus atjauninājumus, kas konsolidēja tās pamata apmācības un motora pielāgošanas funkcijas. Inženieru komandas pašreizējais mērķis ir pārveidot lietojumprogrammu par pilnīgu izklaides un muzikālās izglītības centru, kas apkalpos gan iesācējus, gan mūziķus ar iepriekšēju pieredzi.
/ Shutterstock.com
Uzņēmums, kura galvenā mītne atrodas pilsētā Yokohama, tuvāko gadu laikā plāno ieviest virkni sarežģītu tehnoloģisku jauninājumu. Atjauninājumu mērķis ir nojaukt fiziskos un finansiālos šķēršļus, kas vēsturiski ir ierobežojuši piekļuvi klasisko instrumentu izpētei, izmantojot jaunākos sasniegumus telpiskās apstrādes un audio atpazīšanas aparatūras jomā.
Skaņas uztveršanas integrācija akustiskajiem instrumentiem
Viens no galvenajiem jauninājumiem izstrādes fāzē ir spēja noteikt augstumu no neapstrādātas skaņas, ko rada akustiskās klavieres. Atualmente, Lielākajai daļai mūzikas mācību programmu ir nepieciešams savienot digitālās klaviatūras, izmantojot MIDI kabeļus vai bezvadu tīklus, lai precīzi ierakstītu atskaņotās notis. Jaunā funkcionalitāte ļaus virtuālās realitātes ierīces iebūvētajam mikrofonam reāllaikā uztvert un apstrādāt skaņu no flīģeļa vai stāvklavierēm, filtrējot ārējos trokšņus, lai izolētu precīzu katra taustiņa nospiešanas frekvenci.
Šī audio atpazīšanas tehnoloģija novērtēs notu precizitāti un atskaņošanas laiku, sniedzot lietotājam tūlītēju atgriezenisko saiti par viņu veiktspēju digitālajā saskarnē. Prasības pēc pieslēgtām elektroniskām iekārtām atcelšana ievērojami paplašina sistēmas savietojamību dažādās vidēs. Uzņēmuma programmatūras inženieri strādā, lai pilnveidotu noņemšanas algoritmus, nodrošinot, ka pieredze virtuālajā vidē precīzi atspoguļo tradicionālā instrumenta spēles autentisko sajūtu un akustisko dinamiku.
Trīsdimensiju vizuālie elementi muzikālajā izpildījumā
Lai papildinātu dzirdes pieredzi, dizaina komanda pēta dinamisku vizuālo efektu iekļaušanu, kas tieši reaģē uz virtuālo vai fizisko taustiņu pieskārienu. Projekts paredz, ka spiediens, kas tiek izdarīts uz katru noti, lietotāja redzes laukā iedarbina trīsdimensiju animācijas, piemēram, ķiršu ziedu projekciju, virziena gaismas starus vai ūdens šļakatu simulācijas. Turklāt sistēma izsekos spēlētāja roku kustībai, izmantojot infrasarkanos sensorus, radot gaismas auru, kas pavada snieguma plūstamību un pieskāriena intensitāti. Essa grafiskā slāņa mērķis ir bagātināt maņu uztveri mācību laikā, pārveidojot prakses, kas mēdz būt vientuļas un atkārtotas, vizuāli stimulējošās un interaktīvās aktivitātēs.
Šo grafisko elementu integrācija notiks pakāpeniski nākamajās lietojumprogrammas versijās. Izstrādātāju izvirzītais mērķis ir nodrošināt, lai vizuālie efekti darbotos harmonijā ar esošo spēles interfeisu, neradot vieglus traucējumus, kas traucē nošu lasīšanai vai koncentrēšanos uz skaņdarba izpildi.
Digitālās vides prezentācijām un sociālajai mijiedarbībai
Apsvērumiem veltītu virtuālo telpu izveide ir vēl viena prioritāte jauktās realitātes platformas izstrādes laika skalā.
Sistēma ļaus mūziķiem un skatītājiem sanākt kopā personalizētās digitālās telpās neatkarīgi no to ģeogrāfiskās atrašanās vietas, radot ekosistēmu dzīvajām priekšnesumiem.
Šo izstāžu laikā mākslinieku rīcībā būs instrumenti trīsdimensiju efektu pielietošanai reāllaikā, paplašinot mākslinieciskās izteiksmes iespējas ārpus tradicionālās skaņas.
Programmatūras struktūra tika izstrādāta, lai atbalstītu dažāda mēroga sadarbības pasākumus un virtuālos koncertus, optimizējot servera infrastruktūru, lai samazinātu latentumu un garantētu kopīgām prezentācijām nepieciešamo sinhronizāciju.
Aparatūras attīstība un uzlabota taustes simulācija
Izstrādātāja ilgtermiņa plānošana seko prognozēm par virtuālās un paplašinātās realitātes ierīču attīstību globālajā tirgū. Tehnoloģiju sektora cerības ir, ka iegremdējamās brilles kļūs arvien vieglākas, ergonomiskākas un pieejamākas, fiziski atgādinot parastās saulesbrilles, kas atvieglos ilgstošu lietošanu mācību sesiju laikā.
Kopā ar displeju izmēra samazināšanu jauktās realitātes cimdu izmantošana, kas aprīkoti ar taustes atgriezeniskās saites izpildmehānismiem, ir būtisks tehnoloģisks lēciens mūzikas apguvei bez fiziskiem instrumentiem. Esses aksesuāri nodrošinās precīzu mehānisko pretestību un vibrāciju lietotāja pirkstiem, imitējot īstu klavieru taustiņu svaru, izplūdi un taustes reakciju pat tad, kad lietotājs spēlē uz galda vai līdzenas virsmas.
Izmantojot šīs izsekošanas un fiziskās simulācijas tehnoloģijas, nepieciešamība iegūt īpašumā reālu instrumentu tiks apieta. Lietotāji varēs praktizēt sarežģītas pirkstīšanas tehnikas jebkurā vidē, demokratizējot piekļuvi mūzikas studijām mazākās dzīvojamās telpās un novēršot augstās izmaksas, kas saistītas ar tradicionālo klavieru iegādi, transportēšanu un skaņošanu.
Virtuālās sacensības un instrumentu dažādošana
– Para Lai veicinātu nepārtrauktu lietotāju iesaistīšanos, lietojumprogramma saņems spēļu režīmus, kas vērsti uz vairāku spēlētāju mijiedarbību un draudzīgu tehnisko konkurenci.
– Sistēma organizēs tiešsaistes turnīrus, kuros mūziķi varēs demonstrēt savas prasmes precizitātes un ritma dueļos ar globāliem līderu sarakstiem.
– Reāllaika duetu sesijas ļaus diviem instrumentālistiem vienlaikus atskaņot vienu un to pašu skaņdarbu, kopīgi dalot partitūras sadaļas.
– Programmatūra arī paplašinās savu uztveršanas jomu, iekļaujot dziedāšanu un ģitāras recenzijas, radot visaptverošāku un integrētāku mūzikas ekosistēmu.
Vienotas vērtēšanas sistēmas ieviešana dažādiem instrumentiem un balsij platformu pārveidos par daudzpusīgu virtuālo joslu veidošanas rīku. Uzņēmums uzskata, ka šī daudznozaru pieeja palielinās lietotāju noturēšanu un dažādos aplikācijas mērķauditoriju.
Mūzikas izglītības demokratizācija iesācējiem
Projekta galvenā filozofija joprojām ir vērsta uz tehnisko un teorētisko šķēršļu novēršanu, kas bieži vien demotivē jaunos studentus pirmajos prakses mēnešos. Programmatūras pašreizējais katalogs jau piedāvā plašu populārās mūzikas izvēli, tostarp japāņu animācijas skaņu celiņus, mūsdienu J-Pop hitus un klasiskās kompozīcijas, kas pielāgotas dažādām grūtības pakāpēm.
Vizuālais piezīmju ritināšanas formāts ļauj cilvēkiem bez formālas mācības mūzikas teorijā sākt atskaņot savas iecienītākās dziesmas no pirmās dienas. Uzņēmuma stratēģiskā plānošana nākamajai desmitgadei paredz nepārtrauktu šo pieejamības rīku uzlabošanu, nozares tehnoloģiskā progresa uzraudzību, lai platformu nostiprinātu kā globālu atsauci ieskaujošā un interaktīvā muzikālajā izglītībā.
