Meta’s MusicGen: l’AI open source che trasforma testo e melodia in nuove canzoni. Matthias Bastian, giornalista online e co-fondatore di THE DECODER, è convinto che l’intelligenza artificiale cambierà radicalmente il rapporto tra esseri umani e computer. MusicGen di Meta è in grado di generare brevi brani musicali basati su input testuali, che possono essere combinati con una melodia esistente. Basato su un modello Transformer, MusicGen predice la sezione successiva di una composizione musicale, scomponendo i dati audio in componenti più piccoli tramite l’audio tokenizer EnCodec di Meta. Grazie a un training su 20.000 ore di musica con licenza, comprensivo di una vasta raccolta interna di tracce di alta qualità e dati musicali da Shutterstock e Pond5, MusicGen si distingue per la sua efficienza e velocità. È in grado di gestire sia prompt testuali che musicali, consentendo di combinare stili diversi e creare composizioni uniche. Rispetto ad altri modelli musicali come Riffusion, Mousai, MusicLM e Noise2Music, MusicGen ottiene punteggi migliori sia in metriche oggettive che soggettive, garantendo un’ottima corrispondenza tra musica e testo. Nel complesso, si posiziona un gradino sopra Google’s MusicLM, aprendo nuove possibilità nell’ambito della generazione musicale guidata dall’IA.
__________
“Meta’s open source AI MusicGen turns text and melody into new songs“