Frame: Os óculos com redes multimodais de IA financiadas pelo criador do Pokémon Go

Na semana em que os amantes de gadgets de todo o mundo ficam encantados com o Vision Pro, uma startup jovem e corajosa está tentando abrir espaço para seu dispositivo de realidade aumentada que apresenta um formato totalmente diferente do dispositivo da Apple.

Publicado por

Juliana Caminoto

10 de fevereiro de 2024 14:00

Reprodução: Brilliant Labs

A Brilliant Labs, com sede em Singapura, anunciou nesta quinta-feira (8) seu novo produto, Frame, um par de óculos AR leves alimentados por um assistente de IA multimodal chamado Noa.

Os óculos chamaram a atenção e o investimento de John Hanke, CEO da Niantic, plataforma de realidade aumentada por trás de jogos como Pokémon Go.

Em um vídeo de demonstração, um dos fundadores do Brilliant Labs pediu a Noa por voz uma autoapresentação. Após cerca de três segundos, o agente gerou e projetou uma resposta em texto nas lentes.

Vision Pro marca o grande passo inicial da Apple em direção à IA

O lançamento do Vision Pro da Apple representa um marco significativo na jornada da empresa em direção à inteligência artificial (IA) e à computação espacial, marcando seu primeiro grande lançamento de produto neste domínio desde os AirPods e o Apple Watch.

Além de comandos de voz, Noa é capaz de processamento visual, geração e tradução de imagens, graças aos poucos modelos de inteligência artificial que integrou: motor de busca conversacional Perplexity AI; Modelo de texto para imagem da Stability AI, o mais recente modelo de geração de texto da OpenAI, GPT4; e o sistema de reconhecimento de fala Whisper. As lentes da Frame possuem resolução de 640 x 400 para exibição de vídeos e fotos.

Perplexity AI: A inteligência artificial que cita fonte de respostas

O Perplexity AI é um chatbot gratuito baseado no modelo do GPT-3.5, o mesmo disponível pelo ChatGPT, que atua como um mecanismo de busca. É uma ferramenta projetada para auxiliar os usuários na busca por informações na web.

Com esses recursos, o usuário que faz compras em um shopping pode pedir a Noa que verifique os preços online de um par de sapatos que está procurando por meio do Frame, por exemplo.

Stability AI lança ferramenta de IA que gera música a partir de prompts de texto; conheça o Stable Audio

A Stability AI, empresa de inteligência artificial por trás do Stable Diffusion, anunciou nesta quarta (13) o lançamento de seu produto inaugural de IA para geração de música e som, o Stable Audio. O produto é voltado para usuários que buscam criar amostras para suas músicas e faixas de áudio.

“O futuro da interação humano/IA ganhará vida em wearables inovadores e novos dispositivos, e estou muito entusiasmado por trazer o mecanismo de resposta em tempo real da Perplexity para o Frame da Brilliant Labs”, Aravind Srinivas, CEO e fundador da Perplexity, disse em um comunicado.

Revolução ‘wearable’ de IA: um mercado que deverá ultrapassar US$ 250 bilhões até 2032

Em 2023, a startup Humane lançou o Pin, um dispositivo vestível com o ChatGPT, da OpenAI, que projeta texto e imagens nas mãos, sugerindo um futuro sem smartphones.

A questão é se o Frame será responsivo o suficiente para que qualquer uma de suas respostas geradas por IA seja útil.

Os dispositivos habilitados para Bluetooth da Brilliant Labs dependem de um smartphone para acessar os vários modelos de IA atuais. Eventualmente, porém, os fundadores querem acabar com o host do telefone e incorporar modelos leves de aprendizado de máquina diretamente nos óculos.

Leia também:

Apple lança novo editor de imagens impulsionado por IA

A Apple introduziu um modelo de inteligência artificial (IA) para a edição de fotos através de prompts. Denominado MGIE – Edição de Imagem Guiada por Modelo de Linguagem de Grande Escala Multimodal – este modelo de código aberto possibilita que os usuários utilizem linguagem natural para instruir o editor sobre seus objetivos desejados.

Este post foi modificado pela última vez em %s = human-readable time difference 12:29

Juliana Caminoto

Advogada com especialização em compliance e auditoria, estou sempre conectada às redes sociais e em busca de novos desafios. Sou mãe de pet e amo viajar.