Resumo:
- A Meta lançou hoje o SeamlessM4T, um modelo de tradução multilíngue e multimodal que pode traduzir e transcrever fala e texto em quase 100 idiomas, incluindo idiomas com poucos recursos.
- O modelo é baseado no modelo UnitY, um modelo multitarefa de tradução de fala e texto.
- O anúncio do SeamlessM4T é um avanço significativo na tecnologia de tradução.
O modelo é capaz de traduzir e transcrever fala e texto em quase 100 idiomas, incluindo idiomas com poucos recursos.
PUBLICIDADE
Introducing SeamlessM4T, the first all-in-one, multilingual multimodal translation model.
— Meta AI (@MetaAI) August 22, 2023
This single model can perform tasks across speech-to-text, speech-to-speech, text-to-text translation & speech recognition for up to 100 languages depending on the task.
Details ⬇️
Em resumo, você grava um áudio e coloca para a ferramenta traduzir no idioma que quiser. A diferença do produto da Meta, de acordo com a empresa, é que a base de dados conta com uma gama maior de idiomas e pode traduzir simultaneamente para mais de uma opção.
O SeamlessM4T é baseado no modelo UnitY, um modelo multitarefa de tradução de fala e texto. Isso permite que o modelo aprenda as relações entre fala e texto, o que pode melhorar a precisão da tradução.
De acordo com o comunicado oficial da empresa, o modelo também é treinado em um conjunto de dados de ponta, o SpeechMatrix. Esse conjunto de dados inclui 270.000 horas de alinhamentos de fala e texto, o que fornece ao modelo um grande volume de dados para aprender.
PUBLICIDADE
O modelo, de acordo com a Meta, ainda pode conter várias falhas, pois ainda está em desenvolvimento. No entanto, é possível testar a plataforma através do link.
Veja também:
