Se vad Project Magenta -människor har gjort. Efter att ha skapat NSynth -algoritmen har de kommit fram till en maskin för att fungera som instrument, fungerar som det fysiska gränssnittet för NSynth -algoritmen.
Så vad handlar maskinen - och algoritmen - om?
Till att börja med, Magenta är ett projekt i Google. Det fokuserar på maskininlärningsverktyg, hjälpa konstnärer att skapa konst och musik på nya sätt. De blev upptagna med Google Creative Labs för att skapa NSynth Super -instrumentet. Så nu kan musiker göra musik med ljud som genereras av NSynth -algoritmen från fyra olika ljud.
NSynth Super har en pekskärm:du kan dra fingrarna över för att spela ljud.
(NSynth är en förkortning för "Neural Synthesizer." NSynth använder ett djupt neuralt nätverk för att lära sig egenskaper hos ljud, och skapa nya ljud baserat på egenskaperna.)
Google lade upp en video på tisdagen och du kan se, och hör, instrumentet i aktion. Londonbaserade producenten Hector Plimmer undersökte ljud som genererades av NSynth-maskininlärningsalgoritmen. I
NSynth Super kan spelas via valfri MIDI -källa, som en DAW, sequencer eller tangentbord. (DAW är digital ljudarbetsstation. MIDI står för Musical Instrument Digital Interface.)
Så hur fungerar detta instrument egentligen? I ett experiment, 16 ursprungliga källljud över ett intervall av 15 tonhöjden spelades in i en studio och matades sedan in i NSynth -algoritmen, att beräkna ljuden i förväg. Utgångarna, över 100, 000 nya ljud, laddades in i upplevelseprototypen. Varje urtavla tilldelades 4 källljud. Med rattarna, musiker kan välja de ljud som de vill utforska mellan, och dra fingret över pekskärmen för att navigera i ljuden som kombinerar de akustiska egenskaperna hos de fyra källljuden.
På DJ Mag , nyheten översattes till en "ny pekskärmsmaskinvara som är baserad på AI." Tittarna fick veta att "NSynth Super använder ny teknik för att kombinera ljud och texturer."
Declan McGlynn in DJ Mag tittade på vad som gör detta tillvägagångssätt speciellt. "NSynth tolkar ljuden som siffror och genererar matematiskt en ny serie" tal "som sedan omvandlas till ljud."
Man kan lösa sig för att anta att detta tillvägagångssätt bara är att blanda ljud. Chris Davies in SlashGear förklarade vad som är "nytt" med ljuden:"Kort sagt, det tar kärnaspekterna för olika ljud och genererar sedan nya klangfiler och dynamik som skulle vara svårt - eller till och med omöjligt - att generera med en traditionell analog eller digital synt. "
Vad är några exempel på hur detta fungerar? McGlynn:"Ljudet inkluderar en bils motor i kombination med en sitar, ett basljud som morfar med åska och mycket mer. Resultatet är en verkligt unik utgång, med den nya hårdvaran som gör det möjligt för användare att flytta mellan fyra ljud på en färgstark X/Y -pad. "
Vad kommer härnäst? Det är inte som om du kan gå in i en butik och hitta detta på en hylla. Ändå, koden och designfilerna finns på GitHub. Chris Davies sa, "Google släpper också NSynth Super som ett projekt med öppen källkod. Det inkluderar inte bara mjukvarusidan - som använder TensorFlow och openFrameworks - utan scheman och designmallar för hårdvaran, för."
Davies tillade, din NSynth Super ska vara funktionellt identisk även om den kanske inte ser lika snygg ut som Googles, beroende på hur mycket du har att spendera på material, och vad du använder för att göra höljet.
Så, open source -versionen av NSynth Super -prototypen inklusive all källkod, scheman, och designmallar finns att ladda ner på GitHub.
GitHubs sida sa att Touch -gränssnittet är en kapacitiv sensor, som musmattan på en bärbar dator, för att utforska de nya ljud som NSynth genererade mellan ditt valda ljudkälla.
GitHubs sida sa att fodralet för elektroniken kan tillverkas med en laserskärare, och hålls ihop med vanliga skruvar och beslag. Denna design kan anpassas med olika material, färger, rattar, och former.
© 2018 Tech Xplore
