Gemini recupera o primeiro lugar no ranking de LLM

Publicado por
Isabella Caminoto

O mais recente modelo experimental Gemini da Google (1121) acabou de recuperar o primeiro lugar no ranking de desempenho de inteligência artificial (IA) do LM Arena, marcando a terceira mudança entre OpenAI e Google em apenas uma semana.

Saiba os detalhes
  • O novo Gemini-exp-1121 da Google mostra ganhos significativos em métricas-chave, ficando em primeiro lugar nas categorias de codificação, matemática, escrita criativa e prompts difíceis.
  • Os lançamentos rápidos começaram com a versão 1114 do Google assumindo a liderança em 14 de novembro, seguido pelo ‘anonymous-chatbot’ (GPT-4o atualizado) dias depois.
  • A mais nova iteração do Gemini melhora em 20 pontos em relação ao seu predecessor, solidificando sua posição em tarefas de visão e melhorando as capacidades de raciocínio.
  • A atualização da OpenAI priorizou a escrita criativa e os recursos de uso de arquivos, embora uma nova análise mostre um aumento de velocidade em determinados benchmarks.
Por que isso importa

Falando sobre OpenAI e Google trocando golpes, a rivalidade também se estende aos rankings de LLM. A OpenAI manteve os primeiros lugares anteriormente através de atualizações constantes, mas o Google parece ter aumentado o ritmo de lançamento também. Ferro afia ferro, tanto no campo de batalha quanto na Arena LM.

Leia também:

Este post foi modificado pela última vez em %s = human-readable time difference 14:22

Isabella Caminoto

Advogada e mestranda em Direito Internacional, tenho a democracia e a liberdade como bandeiras irrenunciáveis. Sou apaixonada pelos animais e acredito que o bem-estar do nosso planeta deveria ser o destaque diário da pauta da nossa sociedade.

Posts recentes

Google se associa à Apptronik para desenvolver robôs humanoides

O Google DeepMind acaba de anunciar uma parceria estratégica com a Apptronik, uma empresa de…

20 de dezembro de 2024

Genesis: Um novo patamar para simulações físicas em IA

Uma equipe de pesquisadores de 20 laboratórios diferentes acaba de apresentar o Genesis, um motor…

20 de dezembro de 2024

Google lança seu próprio modelo de IA de “raciocínio”

O Google acabou de lançar o que está chamando de um novo modelo de inteligência…

19 de dezembro de 2024

GitHub Copilot agora é gratuito

A GitHub, de propriedade da Microsoft, acaba de anunciar um nível gratuito de seu Copilot…

19 de dezembro de 2024

ChatGPT ganha um novo número de telefone; veja

A OpenAI acaba de lançar uma nova maneira surpreendente de acessar o ChatGPT - através…

19 de dezembro de 2024

Google lança novo benchmark para testar a factualidade de LLMs

O Google DeepMind acaba de lançar o FACTS Grounding, um novo benchmark projetado para avaliar…

18 de dezembro de 2024