A startup de IA de Elon Musk, a xAI, está prestes a lançar a próxima geração do seu modelo de linguagem Grok em agosto. A intenção é competir diretamente com a OpenAI, e Musk já adiantou novidades.
Em um post na rede social X (substituta do Twitter), Musk confirmou o lançamento do Grok 2, um modelo de linguagem avançado, para daqui a poucas semanas. Respondendo a um usuário sobre o treinamento do modelo, ele o descreveu como uma “grande melhoria” em relação à geração atual.
Tanto Musk quanto a xAI ainda revelaram poucas informações sobre o Grok 2. Em março, Musk afirmou que o modelo superaria os concorrentes “em todas as métricas”.
O lançamento do Grok 2 será seguido pelo Grok 3, previsto para o final do ano. Segundo Musk, o Grok 3 estará no mesmo nível “ou além” do GPT-5, o ainda não lançado modelo da OpenAI que promete ser um grande salto na tecnologia de linguagem.
Para treinar o Grok 3, a xAI precisará de um enorme cluster com 100.000 GPUs Nvidia H100. Com esse poder computacional, Musk acredita que o modelo será “algo realmente especial”.
Em uma conversa recente no X Spaces, Musk mencionou que a xAI está enfrentando desafios para conseguir dados suficientes para treinar o massivo Grok 3. A solução pode ser a inclusão de dados sintéticos ou extraídos de vídeos no processo de treinamento.
A primeira versão do Grok foi lançada em novembro de 2023, pouco depois da fundação da xAI para competir com a OpenAI. Desde então, a startup já captou US$ 6 bilhões em investimentos e está avaliada em US$ 24 bilhões.
Em abril, a xAI lançou o Grok 1.5, com capacidades de raciocínio aprimoradas e a habilidade de lidar com textos maiores, graças a um contexto expandido.
Ao contrário dos modelos da OpenAI, a linha Grok da xAI é conhecida pelo tom rebelde e satírico, gerando respostas com menos filtros.
Após o lançamento do 1.5, a equipe da xAI vem trabalhando no Grok 2, utilizando serviços de nuvem da Oracle e de alguns data centers da X, já que a startup ainda não possui infraestrutura própria dedicada a treinar modelos de IA.
Durante a conferência de resultados do segundo trimestre, Larry Ellison, fundador e CTO da Oracle, comentou que a xAI “quer muito mais GPUs do que os que fornecemos”.
“Demos a eles uma quantidade considerável, mas eles querem mais, e estamos trabalhando para conseguir isso”, disse Ellison.
Para expandir a capacidade de treinamento da xAI, Musk fechou parcerias com Nvidia, Dell e Supermicro para construir uma “gigafábrica de computação” para a xAI, com o objetivo de criar o que pode se tornar o maior supercomputador do mundo.
Leia também:
Este post foi modificado pela última vez em 11 de julho de 2024 16:36
A Walt Disney está formando um novo grupo para coordenar o uso da empresa de…
A Nvidia acaba de publicar uma nova pesquisa apresentando o HOVER, uma pequena rede neural…
O ChatGPT agora é oficialmente um mecanismo de busca com inteligência artificial (IA). A empresa…
A Ucrânia está usando dezenas de sistemas de inteligência artificial (IA) fabricados localmente para seus…
A Alphabet, dona do Google, anunciou na quinta-feira (31) um conjunto de recursos que incorporam…
A startup de design Recraft acaba de anunciar seu novo modelo de inteligência artificial (IA)…