AudioCraft: IA generativa da Meta que cria música a partir de texto

Segundo o comunicado oficial da Meta, AudioCraft consiste em três modelos (MusicGen, AudioGen e EnCodec) e funciona para música, som, compressão e geração.

• MusicGen: treinado com música de propriedade da Meta e especificamente licenciada, gera música a partir de entradas de usuário baseadas em texto.
• AudioGen: treinado em efeitos sonoros públicos, gera áudio a partir de entradas de usuário baseadas em texto.
• EnCodec: permite a geração de música de maior qualidade com menos artefatos.

Meta quer que as pessoas “brinquem” com o AudioCraft

“A família de modelos AudioCraft é capaz de produzir áudio de alta qualidade com consistência de longo prazo e pode ser facilmente interagida por meio de uma interface natural. Com o AudioCraft, simplificamos o design geral de modelos generativos para áudio em comparação com trabalhos anteriores no campo – dando às pessoas a receita completa para brincar com os modelos existentes que a Meta vem desenvolvendo nos últimos anos, além de capacitá-los a ultrapassar os limites e desenvolver seus próprios modelos”, disse a Meta.

Artistas e especialistas do setor levantaram preocupações sobre violações de direitos autorais, já que o software de aprendizado de máquina funciona reconhecendo e replicando padrões de dados extraídos da web.

Observação: Usuários comuns, isto é, que não são desenvolvedores, ainda não conseguem usar a plataforma de forma completa. Por tanto, não há avaliação para ferramenta. Assim que disponibilizada de forma integral, a equipe avaliará.

Leia também: