Har du någonsin önskat att du kunde lägga till ett kraftfullt saxofonsolo i din mix? Med detta fantastiska verktyg från Google kan du förvandla allt från din röst till andra instrument till autentiska ljudinspelningar.
Är du redo att öppna din värld av musikalisk syntes? Förbered dig på att upptäcka musikens otroliga potential i en värld med AI. Från de kraftfulla hjärnorna i Googles Magenta-team är Tone Transfer ett experiment för att omvandla vilket ljud som helst till en inspelning som är som om det hade kommit från dessa ikoniska instrument själva.
Teamet tränade sin AI genom att få den att lyssna på autentiskt ljud från instrument. De gav den 10 minuters inspelningar av instrument, till exempel en fiol, och sa åt den att förstå hur instrumentet skapar det ljud genom att mäta dess tonhöjd och ljudstyrka.
De visar på sin hemsida hur AI:n långsamt virade sitt huvud runt det unika ljudet från varje instrument. Efter en timmes träning var resultaten fortfarande ganska tydligt syntetiserade ljud. Efter tre timmar började den unika tonen komma igenom och sedan efter 10 timmars träning kunde AI:n replikera ett otroligt exakt fiolljud.
Det lärs ut att förstå vad som gör dessa instrument unika utöver bara ljudet skapar. Det är här resultatet av detta maskininlärda verktyg skiljer sig från många syntetiserade versioner av instrument. Den plockar upp element som bågen som skrapar och andan som kommer genom ett blåsinstrument och integrerar dem i det övergripande ljudet – vilket ger en verkligt autentisk modell.
Med den kraftfulla förståelsen för hur ett instrument fungerar kan du sedan ge det vilken ljudinspelning som helst och AI kommer att förvandla det till hur det skulle låta när det kommer ut ur en mängd instrument. Vill du veta något bra? Du kan göra det själv!
Tone Transfer-webbplatsen låter dig leka med deras lagerprover, inklusive fåglar som twittrar, panorera kraschar och en cello som spelar. Men mycket roligare, du kan spela in ditt eget ljud i den genom en mikrofon eller från ett instrument. Vem vill inte sjunga med i en melodi och förvandla sig till ett saxofonstycke!
En sak som jag har märkt, och det här kan vara enbart ett problem för mig, är att verktyget slutar känna igen tonhöjden cirka 10 sekunder in i inspelningen och du kan bara spela in i högst 15 sekunder. Som du kan höra nedan, i det mycket melankoliska resultatet av mitt försök att återskapa Giant Steps, spårar tonhöjden av på en ton i slutet – men den är fortfarande lika imponerande innan den punkten.
