Google MusicLM AI wordt geïntroduceerd, een baanbrekend AI-systeem dat in staat is om muziekstukken in elk genre te componeren met een tekstbeschrijving. Ondanks zijn indrukwekkende capaciteiten, heeft het bedrijf ervoor gekozen om voorzichtig te zijn en heeft het momenteel geen plannen om het publiekelijk beschikbaar te maken. Terwijl eerdere generatieve AI-systemen voor muziek, zoals Riffusion en Dance Diffusion, pogingen hebben ondernomen om liedjes te componeren, werden ze beperkt door technische beperkingen en onvoldoende trainingsgegevens, wat resulteerde in composities die complexiteit en hifi missen. Google MusicLM AI vertegenwoordigt echter een grote sprong voorwaarts en is mogelijk het eerste systeem dat deze uitdagingen overwint.
whoa, dit is groter dan ChatGPT voor mij.
google bijna opgelost muziek generatie, zou ik zeggen. https://t.co/s9PQaJ5R6A— Keunwoo Choi (@keunwoochoi) 27 januari 2023
Maak kennis met Google MusicLM AI, de eerste belangrijke tool voor tekst-naar-muziek
Een recent academisch papier benadrukt de ontwikkeling van MusicLM, een AI-systeem dat is getraind op een enorme dataset bestaande uit 280.000 uur muziek. Het doel van het systeem was om nummers te genereren met “aanzienlijke complexiteit” op basis van tekstuele beschrijvingen, zoals “betoverend jazznummer met een gedenkwaardige saxofoonsolo en een solozanger” of “Berlijnse techno uit de jaren 90 met een lage bas en een sterke kick”. De uitvoer geproduceerd door Google MusicLM AI, hoewel niet noodzakelijkerwijs zo fantasierijk of muzikaal verenigd als een menselijke artiest, vertoont niettemin een opmerkelijke gelijkenis met door mensen gecomponeerde muziek.
Het zou een understatement zijn om uit te drukken hoe indrukwekkend de output van Google MusicLM AI is, vooral gezien de afwezigheid van menselijke muzikanten of instrumentalisten in het creatieproces. Ondanks de soms lange en complexe beschrijvingen, heeft MusicLM het opmerkelijke vermogen om ingewikkelde elementen zoals instrumentale riffs, melodische lijnen en emotionele ondertonen in zijn composities op te nemen.
De mogelijkheden van Google MusicLM AI gaan verder dan alleen het genereren van korte muziekfragmenten. Het Google-onderzoeksteam demonstreerde het vermogen van het systeem om voort te bouwen op reeds bestaande melodieën, of ze nu worden geneuried, gezongen, gefloten of op een instrument worden gespeeld. Bovendien heeft MusicLM de mogelijkheid om verschillende opeenvolgende beschrijvingen te nemen en een melodisch verhaal van enkele minuten te maken, waardoor het geschikt is voor de soundtrack van een film.
De veelzijdigheid van Google MusicLM AI strekt zich uit tot het sturen door een combinatie van afbeeldingen en bijschriften, en het produceren van audio die het geluid van een bepaald instrument binnen een bepaald genre nabootst. De expertise van de AI “muzikant” kan ook worden aangepast, waardoor het systeem muziek kan genereren die wordt beïnvloed door verschillende locaties, tijdsperioden of specifieke doeleinden, zoals opbeurende muziek voor lichaamsbeweging.
U kunt Google MusicLM AI’s bereiken GitHub-pagina om naar enkele voorbeelden te luisteren!
Is Google AI-muziekcomponist echt goed?
Het is echter belangrijk op te merken dat Google MusicLM AI niet zonder fouten is. Een deel van de output die door het systeem wordt geproduceerd, kan een onsamenhangende kwaliteit vertonen, een natuurlijk resultaat van de trainingsprocedure. Het vermogen van het systeem om zang te genereren, inclusief koorharmonieën, voldoet niet aan de verwachtingen. De gegenereerde teksten zijn vaak onbegrijpelijk, bestaande uit gebroken Engels of betekenisloos gebrabbel, en de gesynthetiseerde zang mist de verfijning van een enkele artiest en klinkt in plaats daarvan als een hybride van verschillende stemmen.
Google’s nieuwe muziekmodel MusicLM is de doorbraak van de week.
Hier is het in actie.
Beschrijf gewoon de muziek en het zal het nummer genereren: pic.twitter.com/xAhzHfGnMH
— Pete (@nonmayorpete) 27 januari 2023
Ondanks zijn indrukwekkende mogelijkheden erkennen de Google-onderzoekers de talrijke ethische dilemma’s die een systeem als MusicLM met zich meebrengt, waaronder de waarschijnlijkheid van het opnemen van auteursrechtelijk beschermd materiaal van de trainingsgegevens in de gegenereerde nummers. Tijdens hun experimenten ontdekten ze dat ongeveer 1% van de gegenereerde muziek een exacte kopie was van de nummers uit de trainingsdataset. Deze hoge incidentie van duplicatie heeft ertoe geleid dat de onderzoekers hebben besloten om Google MusicLM AI in zijn huidige vorm niet vrij te geven.
“We erkennen het risico van mogelijke verduistering van creatieve inhoud die aan de use case is gekoppeld. We benadrukken sterk de noodzaak van meer werk in de toekomst om deze risico’s in verband met het genereren van muziek aan te pakken’, aldus de co-auteurs van de paper.
Als MusicLM of een soortgelijk systeem in de toekomst zou worden uitgebracht, zullen er waarschijnlijk aanzienlijke juridische problemen ontstaan, ongeacht hoe het systeem op de markt wordt gebracht of gepositioneerd, of het nu gaat om een hulpmiddel voor artiesten of niet. Dit is een zorg die al is ontstaan met betrekking tot eenvoudigere AI-systemen. In 2020 diende het platenlabel van Jay-Z claims in wegens inbreuk op het auteursrecht tegen het YouTube-kanaal, Vocal Synthesis, voor het gebruik van AI om covers te maken van Jay-Z’s nummers, waaronder Billy Joel’s “We Didn’t Start the Fire”. Na aanvankelijk de video’s te hebben verwijderd, heeft YouTube ze later hersteld, waarbij werd vastgesteld dat de verwijderingsverzoeken “onvolledig” waren. De legaliteit van door AI gegenereerde muziek blijft een grijs gebied.
Google kondigt MusicLM aan: een model om muziek te genereren uit tekst. Hier zijn enkele gekke dingen die het kan doen:
1. Gegeven audio van een melodie, kan het nieuwe muziek genereren, geïnspireerd door die melodie, aangepast door prompts! Hier is iemand die bella ciao neuriede in een a capella refrein, EDM, enz. pic.twitter.com/HKDnXI1C8U
— bloedingedge.ai (@bloedingedgeai) 27 januari 2023
Naarmate AI-technologie voor het genereren van muziek zich blijft ontwikkelen, blijven vragen over de legaliteit ervan op de voorgrond staan. Eric Sunray, een juridische stagiair bij de Music Publishers Association, heeft een wit papier dat stelt dat systemen zoals MusicLM inbreuk maken op de rechten die worden beschermd door de Amerikaanse Copyright Act door het creëren van “tapijten van coherente audio” van auteursrechtelijk beschermd materiaal dat bij hun training wordt gebruikt.
Deze zorgen zijn herhaald met betrekking tot AI-systemen op andere gebieden, waaronder het genereren van afbeeldingen, code en tekst, aangezien hun trainingsgegevens vaak van internet worden gehaald zonder toestemming van de makers. De kwestie van redelijk gebruik is ook besproken na de release van OpenAI’s Jukebox, waarbij sommigen twijfels hebben over het gebruik van auteursrechtelijk beschermd materiaal bij het trainen van AI-modellen.
Zoals Andy Baio van Waxy opmerkt, wordt gespeculeerd dat muziek die door AI-systemen is gegenereerd, kan worden beschouwd als een afgeleid werk vanuit het perspectief van een gebruiker, waardoor alleen de originele componenten auteursrechtelijk worden beschermd. De definitie van wat “originaliteit” in deze context inhoudt, blijft onduidelijk, waardoor de commerciële exploitatie van dergelijke muziek een onbekend terrein is. Als de gegenereerde muziek echter binnen de reikwijdte van redelijk gebruik valt, zoals parodie of commentaar, wordt het probleem minder ingewikkeld. Desalniettemin voorspelt Baio dat het rechtssysteem geval per geval zal moeten benaderen om tot een uitspraak te komen.
Naarmate het juridische landschap blijft evolueren, kan duidelijkheid over de kwestie rond muziekgenererende AI op handen zijn. Verschillende lopende rechtszaken, waaronder een over de rechten van artiesten wiens werk zonder hun toestemming of medeweten wordt gebruikt bij de training van AI-systemen, zullen waarschijnlijk gevolgen hebben voor de industrie. Alleen de tijd zal de uitkomst van deze juridische procedure onthullen.
Heb je de nieuwe AI-tekstclassificatie van OpenAI gehoord voor het detecteren van door AI gegenereerde teksten?