Come fare musica AI con MusicGen di Meta

Meta ha rilasciato il codice per MusicGen, un altro generatore di musica AI che può trasformare le descrizioni testuali in melodie musicali. La demo può essere trovata online e per provarla è sufficiente un browser. I risultati non sono male ma, soprattutto, dimostrano fino a che punto sono progrediti i modelli musicali AI.

Ecco cosa devi sapere su MusicGen e su come generare musica.

Cos'è MusicGen?

Nel giugno 2023, Meta ha rilasciato il suo modello di generazione musicale AI chiamato MusicGen. Non è la prima azienda ad affrontare il complesso problema di sintetizzare musica grezza da una semplice descrizione testuale; finora, puoi crea musica con Jukebox di OpenAI O generare frammenti di canzoni con MusicLM.

Ma è la prima azienda a rendere il codice open-source, permettendoti di eseguire il software localmente sul tuo computer se si dispone di una GPU con un minimo di 16 GB di memoria, anche se siamo riusciti a farlo funzionare con solo 11 GB.

Non preoccuparti se non hai l'hardware, perché puoi provare l'app Web MusicGen gratuitamente utilizzando un browser. Dalla demo online, puoi aspettarti che ci voglia poco più di un minuto per generare uno snippet audio lungo circa 12 secondi.

Come suona MusicGen?

Secondo Meta, MusicGen può produrre campioni musicali di alta qualità, anche se abbiamo scoperto che i ricercatori coinvolti hanno definito alta qualità come 32kHz. Questo si trova da qualche parte tra i requisiti della sintesi vocale (16kHz) e lo standard per la musica digitale (44,1 kHz).

In realtà, l'audio non soddisfa gli standard minimi di qualità che potresti essere abituato a sentire alla radio o sulle piattaforme di streaming. Tuttavia, rispetto ad altri generatori di musica AI, e considerando dove si trova la tecnologia al momento della scrittura, la qualità audio è abbastanza buona con un basso livello di rumore nel file.

In che misura la musica è allineata con le istruzioni? Puoi fartene rapidamente un'idea ascoltando gli esempi che abbiamo generato di seguito. In generale, riesce ad aderire ai generi musicali popolari pur mantenendo una struttura musicale più coerente rispetto ai suoi predecessori.

Come generare musica usando MusicGen

MusicGen è facile da usare e non richiede la registrazione. Anche l'interfaccia è semplice, rendendo facile provare per divertimento.

Ecco come generare musica con MusicGen:

1. Apri il Applicazione web MusicGen.
2. Nella casella di testo intitolata Descrivi la tua musica, inserisci il tuo prompt. Puoi provare qualcosa di semplice come "melodia folk irlandese" o renderlo più dettagliato includendo lo strumento, il tempo, il genere o l'emozione.
3. premi il creare pulsante per avviare il processo. Dopo un minuto o due, un lettore audio apparirà nel modulo Musica generata a destra.
4. Passa il mouse sopra il modulo per mostrare i controlli del lettore e ascolta il file, oppure premi l'icona di download nell'angolo in alto a destra per salvare il file sul tuo computer. Tieni presente che è disponibile solo per il download come file .mp4.
5. Se vuoi provare a condizionare i risultati utilizzando una melodia esistente, puoi caricare una registrazione nel modulo accanto alla casella di testo. In alternativa, puoi selezionare microfono per registrare una melodia utilizzando il microfono.

Il condizionamento su una melodia utilizzerà sia la descrizione del testo che la melodia che fornisci come riferimento. Questo è uno strumento utile per modellare i risultati che ottieni da MusicGen.

Quali sono le restrizioni sull'uso di MusicGen Audio?

Il codice per MusicGen è distribuito gratuitamente sotto licenza MIT con poche restrizioni. Per quanto riguarda l'audio generato utilizzando il modello, non è chiaro se esistano linee guida legali. Invece, potresti voler prestare attenzione L'avvertimento di Meta sull'uso di MusicGen:

"Il modello non dovrebbe essere utilizzato per creare o diffondere intenzionalmente brani musicali che creano ambienti ostili o alienanti per le persone. Ciò include la generazione di musica che le persone troverebbero prevedibilmente inquietante, angosciante o offensiva; o contenuti che propagano stereotipi storici o attuali."

Meta spiega inoltre che MusicGen è destinato ai ricercatori che desiderano esplorare la generazione di musica AI e non per "Usi a valle", che presumiamo significhi attività come il caricamento e la distribuzione di musica AI in streaming piattaforme.

IL pro e contro etici rispecchiano la generazione artistica AI. Ottenere il consenso per utilizzare i dati per addestrare i modelli di intelligenza artificiale, oltre al problema di compensare/accreditare gli artisti quando appropriato, sono tutti motivi per cui Meta va sul sicuro.

In breve, è improbabile che esplorare il modello per divertimento causi danni, ma potrebbe essere un problema più spinoso quando si tratta di utilizzare l'audio per la musica commerciale. Molte persone si chiedono cosa il futuro della musica pop con l'intelligenza artificiale sembra.

Aggiungendo un altro modello di generazione di musica a ciò che è là fuori, Meta ha rilasciato MusicGen, un modello AI open source in grado di generare musica grezza da una semplice descrizione testuale. Se sei curioso di provare la tecnologia, puoi provare la demo usando solo un browser web.