Blijf de tekst-naar-muziek-rage voor door te experimenteren met Meta's AI-muziektool.

Meta heeft de code vrijgegeven voor MusicGen, een andere AI-muziekgenerator die tekstbeschrijvingen kan omzetten in muzikale deuntjes. De demo is online te vinden en je hebt alleen een browser nodig om hem uit te proberen. De resultaten zijn niet slecht, maar meer dan dat, het laat zien hoe ver AI-muziekmodellen zijn gevorderd.

Dit is wat u moet weten over MusicGen en hoe u muziek kunt genereren.

Wat is MusicGen?

In juni 2023 bracht Meta zijn AI-model voor het genereren van muziek uit, genaamd MusicGen. Het is niet het eerste bedrijf dat het complexe probleem aanpakt van het synthetiseren van rauwe muziek uit een eenvoudige tekstbeschrijving; tot nu toe kan dat maak muziek met OpenAI's Jukebox of genereer songfragmenten met MusicLM.

Maar het is het eerste bedrijf dat de code open-source maakt, zodat u de software lokaal op uw computer kunt uitvoeren computer als je een GPU hebt met minimaal 16 GB geheugen, hoewel we het konden laten werken met slechts 11 NL.

instagram viewer

Maak je geen zorgen als je de hardware niet hebt, want je kunt de MusicGen-webapp gratis uitproberen met een browser. Van de online demo kun je verwachten dat het iets meer dan een minuut duurt om een ​​audiofragment van ongeveer 12 seconden te genereren.

Hoe klinkt MusicGen?

Volgens Meta kan MusicGen muzieksamples van hoge kwaliteit produceren, al ontdekten we dat de betrokken onderzoekers dat bepaalden hoge kwaliteit als 32kHz. Dit zit ergens tussen de vereisten van spraaksynthese (16kHz) en de standaard voor digitale muziek in (44,1 kHz).

In werkelijkheid voldoet de audio niet aan de minimale kwaliteitsnormen die u misschien gewend bent te horen op de radio of streamingplatforms. In vergelijking met andere AI-muziekgeneratoren, en rekening houdend met waar de technologie zich op het moment van schrijven bevindt, is de audiokwaliteit redelijk goed met een laag ruisniveau in het bestand.

Hoe dicht komt de muziek overeen met de aanwijzingen? U kunt daar snel een idee van krijgen door te luisteren naar de voorbeelden die we hieronder hebben gegenereerd. Over het algemeen slaagt het erin zich te houden aan populaire muziekgenres en tegelijkertijd een meer samenhangende muzikale structuur te behouden in vergelijking met zijn voorgangers.

Muziek genereren met MusicGen

MusicGen is gemakkelijk te gebruiken en u hoeft zich niet aan te melden. De interface is ook eenvoudig, waardoor het gemakkelijk is om voor de lol uit te proberen.

Zo genereer je muziek met MusicGen:

  1. Open de MusicGen-webapp.
  2. In het tekstvak getiteld Beschrijf je muziek, voer uw prompt in. Je kunt zoiets eenvoudigs proberen als 'Iers volksliedje' of het gedetailleerder maken door het instrument, het tempo, het genre of de emotie op te nemen.
  3. druk de Genereer knop om het proces te starten. Na een minuut of twee verschijnt er een audiospeler in de module Generated Music aan de rechterkant.
  4. Plaats de muisaanwijzer op de module om de bedieningselementen van de speler weer te geven en naar het bestand te luisteren, of druk op het downloadpictogram in de rechterbovenhoek om het bestand op uw computer op te slaan. Merk op dat het alleen beschikbaar is om te downloaden als een .mp4-bestand.
  5. Als u wilt proberen de resultaten te conditioneren met behulp van een bestaande melodie, kunt u een opname uploaden in de module naast het tekstvak. Als alternatief kunt u selecteren microfoon om een ​​melodie op te nemen met uw microfoon.

Conditionering op een melodie gebruikt zowel de tekstbeschrijving als de melodie die u opgeeft als referentie. Dit is een handig hulpmiddel om de resultaten die u van MusicGen krijgt vorm te geven.

Wat zijn de beperkingen voor het gebruik van MusicGen Audio?

De code voor MusicGen wordt vrij verspreid onder de MIT-licentie met enkele beperkingen. Wat betreft de audio die u met het model genereert, is het onduidelijk of er wettelijke richtlijnen zijn. In plaats daarvan wil je er misschien acht op slaan Meta's waarschuwing over het gebruik van MusicGen:

"Het model mag niet worden gebruikt om opzettelijk muziekstukken te maken of te verspreiden die vijandige of vervreemdende omgevingen voor mensen creëren. Dit omvat het genereren van muziek die mensen naar verwachting verontrustend, verontrustend of aanstootgevend zouden vinden; of inhoud die historische of huidige stereotypen propageert."

Meta legt verder uit dat MusicGen bedoeld is voor onderzoekers die AI-muziekgeneratie willen verkennen en niet voor "downstream-gebruik", waarmee we veronderstellen activiteiten te bedoelen zoals het uploaden en distribueren van AI-muziek op streaming platforms.

De ethische voor- en nadelen weerspiegelen AI-kunstgeneratie. Het verkrijgen van toestemming om gegevens te gebruiken om AI-modellen te trainen, plus het probleem van het compenseren/crediteren van artiesten indien van toepassing, zijn allemaal redenen voor Meta om op safe te spelen.

Kortom, het verkennen van het model voor de lol zal waarschijnlijk geen kwaad doen, maar het kan een neteligere kwestie zijn als het gaat om het gebruik van audio voor commerciële muziek. Veel mensen vragen zich af wat de toekomst van popmuziek met AI lijkt op.

Door nog een ander muziekgenererend model toe te voegen aan wat er is, heeft Meta MusicGen uitgebracht, een open-source AI-model dat in staat is om rauwe muziek te genereren uit een eenvoudige tekstbeschrijving. Als je nieuwsgierig bent naar het uitproberen van de technologie, kun je de demo uitproberen met alleen een webbrowser.