Ove zvukove ljudi nikada dosad nisu čuli

Foto: 123RF

JESSE ENGEL svira instrument koji bismo mogli opisati kao kombinaciju klavikorda i Hammonda, dakle, kombinacija klasike iz 18. s rhythm and bluesom iz 20. stoljeća. Nakon toga pomiče marker preko ekrana na svojem laptopu i instrument se mijenja. Sada je 15 posto klavikord, a 75 posto Hammond.

"Ovo nije kao sviranje dvaju instrumenata u isto vrijeme", govori za Wired jedan od Engelovih kolega, Cinjon Resnick. I to je važno naglasiti jer ovaj stroj ne kombinira zvuk klavikorda i Hammonda već stvara potpuno novi zvuk koristeći matematičke karakteristike nota koje nastaju kombinacijom dvaju instrumenata. Isto to mogu učiniti s brojnim drugim instrumentima, a sve zahvaljujući umjetnoj inteligenciji.

Naime, Engel i Resnick članovi su Google Magente, malog tima istraživača umjetne inteligencije koji su zaposleni zgradi ovog internetskog giganta, a NSynth (Neural Synthesizer) njihov je najnoviji projekt koji će kasnije ovog tjedna prezentirati na Moogfestu u Durhamu u Sjevernoj Karolini.

Google je NSynth prvi puta spomenuo prošlog mjeseca u svom blogu, a glazbenicima će omogućiti korištenje potpuno novih alata. Kritičar Marc Weidenbaum tvrdi da kombiniranje i spajanje više instrumenata nije nova pojava, ali i da bi Google ovu tehnologiju mogao pogurati u potpuno drugom smjeru.

"Umjetnički gledano, ovo bi moglo iznjedriti neke kul stvari, a budući da se radi o Googleu, ljudi će ih slijediti", govori Marc.

Magenta je dio Google Braina, glavnog laboratorija zaduženog za umjetnu inteligenciju gdje vojska znanstvenika istražuje granice neuralnih mreža, kompleksnih matematičkih sustava koji uče kako obaviti određeni zadatak analizirajući goleme količine podataka, a posljednjih godina, sustav se pokazao učinkovitim u prepoznavanju objekata i lica na fotografijama, identificiranju naredbi koje izgovaramo svojim pametnim telefonima i prijevodima stranih jezika. Ekipa iz Magente pokušava ovu priču prebaciti u svijet glazbe, učeći strojeve koji bi ubuduće mogli stvarati novu vrstu glazbe.

NSynth počinje kao golema baza zvukova. Engel i njegov tim skupili su zvukove tisuća različitih instrumenata koje zatim pohranjuju u neuralnu mrežu. Analizirajući note, neuralna mreža naučila je karakteristike svakog instrumenta. Nakon toga stvorila matematički vektor za svaki od instrumenata. Koristeći ove vektore, stroj je u stanju oponašati svaki zvuk, bio to klavikord ili Hammonda, ali i kombinirati ove zvukove.

Ukratko, strojevi će stvarati zvukove koje ljudi nikada prije nisu čuli.

Ekipa je nedavno stvorila i sučelje koja vam omogućuje da istražite prostor koji postoji između četiri različita instrumenta, a konačna je ideja istražiti granice umjetničkog stvaranja. Primjerice, druga neuralna mreža mogla bi učiti nove načine oponašanja i kombiniranja novonastalih zvukova i tako bi jedna umjetna inteligencija mogla surađivati s drugom.

osim toga, stvorili su i novo igralište za istraživače umjetne inteligencije i ostale računalne znanstvenike. Svoj su istraživački rad objavili i u njemu objasnili i opisali NSynthove algoritme, a svatko može skinuti njihovu bazu zvukova. Douglas Eck, koji nadgleda tim Magenta, nada se da će istraživači stvoriti veću ponudu alata za svakog umjetnika, ne samo glazbenike.

Pročitajte više