A Meta anunciou nesta semana o MusicGen, seu novo modelo de IA que gera novas músicas a partir de prompts (comandos) de texto. A Inteligência Artificial também pode ser aplicada a uma canção já existente.
O que você precisa saber
Em uma postagem no Twitter, Felix Kreuk, engenheiro de pesquisa de IA da Meta, mostrou as possibilidades de uso do MusicGen.
Apresentamos MusicGen: Um modelo de geração de música simples e controlável. MusicGen pode ser solicitado por texto e melodia. Lançamos código (MIT) e modelos (CC-BY NC) para pesquisa aberta, reprodutibilidade e para a comunidade musical.
Felix Kreuk, engenheiro de pesquisa de IA da Meta.
Felix explica que o MusicGen foi construído com um tokenizador de áudio EnCodec e usa a API do Hugging Face, que permite aos usuários testarem o modelo online.
Em um artigo, a Meta explicou que testou três versões da ferramenta, com 300 milhões, 1,5 bilhão e 3,3 bilhões de parâmetros. Nas avaliações, a empresa descobriu que os usuários preferem a versão intermediária, de 1,5 bilhão.
A Meta diz que as músicas usadas no treinamento da ferramenta são liberadas por acordos legais com os detentores de direitos autorais.
O novo modelo de linguagem para músicas compete com o MusicLM, lançado recentemente pelo Google. A Meta comparou o desempenho do MusicGen com o MusicLM e outros modelos parecidos, como o Riffusion e o Mousai. Clique aqui e ouça a diferença.
Com informações de The Decoder, TechXplore e Gizmodo.
Já assistiu aos novos vídeos no YouTube do Olhar Digital? Inscreva-se no canal!
Fonte: Olhar Digital
Comentários