Adobe's GenAI verandert tekstaanwijzingen in muziek: hier is een eerste blik

Snelle links

⭐ Adobe onthult Project Music GenAI Control

⭐ Waar haalt GenAI zijn bronmateriaal vandaan?

Belangrijkste opmerkingen

Adobe heeft een geavanceerde tool ontwikkeld, genaamd Project Music GenAI Control, waarmee gebruikers muzikale composities kunnen genereren door tekstuele beschrijvingen in te voeren of bestaande melodische patronen als referentie te gebruiken. Bovendien biedt dit innovatieve platform gebruikers de mogelijkheid om de resulterende audio-uitvoer nauwkeurig af te stemmen voor optimale creativiteit en artisticiteit.

GenAI is ontwikkeld in samenwerking met vooraanstaande universiteiten, waarbij de nadruk ligt op een diepgaand niveau van controle over het proces van muzikale compositie, terwijl er geen extra bewerkingstoepassingen nodig zijn.

Hoewel het erop lijkt dat GenAI zich houdt aan de ethische richtlijnen van Adobe met betrekking tot het gebruik van gegevens, bestaat er nog steeds bezorgdheid over mogelijke schendingen van intellectuele eigendomsrechten met betrekking tot door AI geproduceerde muzikale composities.

Adobe heeft onlangs de ontwikkeling aangekondigd van een AI-muziekgenerator die bekend staat als GenAI. Deze innovatieve tool stelt gebruikers in staat om muziek te genereren op basis van ingevoerde tekst en de output te verfijnen door middel van aanpassingsopties. Eén cruciale vraag blijft echter onbeantwoord - wat zijn de bronnen van audiogegevens die GenAI gebruikt in het compositieproces?

Adobe onthult Project Music GenAI Control

Adobe kondigde een AI-krachtpatser aan, Project Music GenAI Control, die een efficiëntere en leukere manier belooft om muziek te integreren in het maken van content. Met GenAI kunnen gebruikers muziek genereren met een eenvoudig tekstvoorstel of een referentiemelodie, en vervolgens hun creaties verbeteren en verfijnen met behulp van verschillende bewerkingsfuncties.

Geavanceerd ontwerp:De lopende ontwikkeling van het Project Music GenAI Control prototype is een samenwerking tussen onderzoekers van de gerespecteerde instituten, de Universiteit van Californië en Carnegie Mellon University. In dit stadium zijn details over de officiële lancering van het project nog onduidelijk, zoals of het zal worden uitgebracht als een onafhankelijke toepassing of naadloos geïntegreerd in bestaande softwareplatforms van Adobe, met name Premiere Pro.

Door gebruik te maken van Adobe’s innovatieve AI-technologie, bekend als Firefly, kan men audio genereren door een tekstuele prompt te geven of een muzikale referentie te uploaden. Vervolgens hebben gebruikers de mogelijkheid om verschillende kenmerken van het gegenereerde geluid te manipuleren met behulp van aanpasbare parameters, waaronder aanpassingen aan tempo, ritme, duur en looping-mogelijkheden, waardoor uiteindelijk naadloos uitgebreide sequenties kunnen worden gemaakt.

Volgens Nicholas Bryan, een Senior Research Scientist bij Adobe Research, zoals verwoord in het persbericht van het bedrijf,

Een van de fascinerende aspecten van deze innovatieve tools ligt in het feit dat ze verder gaan dan alleen het genereren van audio; in plaats daarvan verheffen ze het domein van geluidsmanipulatie naar een niveau dat vergelijkbaar is met dat van beeldbewerkingssoftware zoals Adobe Photoshop. Door muzikanten te voorzien van een gelijkwaardige mate van gedetailleerde controle over elk afzonderlijk geluidselement, bieden deze tools een vorm van “pixel-niveau” precisie die tot nu toe onbereikbaar was binnen het auditieve domein.

GenAI overtreft niet alleen conventionele AI-muziektoepassingen zoals MusicLM, maar maakt ook aanvullende audiobewerkingsprogramma’s overbodig. Er wordt dan ook verwacht dat deze innovatie een grote impact zal hebben op contentmakers op YouTube, podcastplatforms en mensen die op zoek zijn naar ongecompliceerde loop-sequenties en fundamentele geluidsmanipulaties.

Waar haalt GenAI het bronmateriaal vandaan?

In de blogpost vermeldt Adobe dat het zich wil houden aan zijn AI ethics principles , om ervoor te zorgen dat de AI-technologie op verantwoorde wijze wordt ontwikkeld. We kunnen aannemen dat dit betekent dat GenAI wordt getraind op gegevens die eerlijk zijn, zoals in het publieke domein of werk onder de juiste licentie. Adobe is naar verluidt ook bezig met de ontwikkeling van watermerktechnologie, zodat we kunnen zien of audio door GenAI is gegenereerd.

De uitsluiting van de referentiemelodiefunctie uit onze discussie vormt een uitdaging bij het bepalen van de in aanmerking komende tracks die gebruikers kunnen uploaden naar het platform. Het is cruciaal voor Adobe om deze kwestie voorzichtig te benaderen, omdat het opnemen van auteursrechtelijk beschermde muzikale composities kan leiden tot juridische geschillen met platenmaatschappijen en uitvoerende kunstenaars.

Of AI-gegenereerde muziek het intellectuele eigendom van artiesten schendt is nog maar de vraag. Platformen zoals TikTok en Spotify hebben echter al een aantal deepfake tracks verwijderd die vocale samples van artiesten gebruiken zonder hun toestemming. Een goed voorbeeld is het AI-nummer Heart on My Sleeve met nepvocalen van The Weeknd en Drake, zoals The Guardian rapporteerde.

Niet alle artiesten houden zich bezig met de uitdagingen die kunstmatige intelligentie in muziek met zich meebrengt. Grimes heeft zich bijvoorbeeld bereid verklaard om met AI samen te werken zolang ze een passende vergoeding krijgt voor nummers die met haar vocale bijdragen worden gemaakt.

Genetische algoritmen zijn de afgelopen jaren steeds populairder geworden als middel om tools voor kunstmatige intelligentie te genereren waarmee gebruikers relatief eenvoudig inhoud kunnen creëren.Eén zo’n hulpmiddel heet GenAI, dat de potentie heeft om een revolutie teweeg te brengen in het maken van muziek door een groot deel van het compositie- en arrangeerproces te automatiseren. Deze vooruitgang kan echter ook een grote uitdaging vormen voor muzikanten wier werk onbedoeld in deze composities kan worden opgenomen, wat kan leiden tot juridische geschillen over auteursrecht.