Os óculos do Projeto Astra do Google levam Gemini AI para o mundo real

Resumo

  • A Pesquisa Google adiciona consultas de vídeo, mas os óculos de IA do Project Astra oferecem pesquisa de informações mais intuitiva em tempo real.
  • Gemini AI no Astra otimiza bastante diversas tarefas cotidianas, como interpretar referências desenhadas à mão e gerar nomes de bandas.
  • O potencial wearable Project Astra do Google combina óculos inteligentes com recursos avançados de IA para assistência na vida real.



Há anos, a Pesquisa Google tem sido muito textual, com utilitários como a pesquisa reversa de imagens e, mais recentemente, o Google Lens, agregando um grau de conveniência por meio de pesquisas visuais. Embora a empresa tenha anunciado hoje suporte para consultas de vídeo na Pesquisa em sua conferência anual de desenvolvedores, a Gemini AI possibilitou uma maneira totalmente nova de pesquisar informações usando IA quase em tempo real com o Projeto Astra.


Relacionado

Google I/O 2024: tudo anunciado até agora

Este ano é tudo sobre IA – aqui está tudo o que o Google falou até agora

Durante a apresentação principal do Google I/O, o fundador do Google DeepMind, Demis Hassabis, falou sobre os desafios técnicos do processamento de entrada multimodal para interações de IA no Gemini. A apresentação então foi cortada em dois clipes consecutivos, com o primeiro apresentando avisos audiovisuais em tempo real enquanto o apresentador pede ao aplicativo Gemini em seu telefone para identificar objetos, criar rimas poéticas, resumir o código na tela e identificar um local com base na visualização. de uma janela como um player GeoGuessr.

No entanto, a parte mais legal foi o segmento mais curto que se seguiu, onde o apresentador vestiu um volumoso par de óculos inteligentes com câmeras e acesso Gemini para tornar a experiência do aplicativo móvel mais, bem… móvel.



Projeto Astra é o Google Glass que merecemos

Com o codinome Project Astra, esses óculos se parecem com óculos inteligentes típicos, com um design robusto que lembra as armações Bose, mas com recursos que lembram os óculos inteligentes da Meta em colaboração com a Ray-Ban. Usando os óculos, o apresentador poderia direcionar a atenção da IA ​​para o que quer que estivesse olhando de forma mais intuitiva, sem gerenciar um dispositivo secundário.

No primeiro exemplo, Gemini no Astra otimizou um fluxograma de servidor adicionando um cache, depois entendeu uma referência desenhada à mão ao paradoxo do gato de Schrödinger e, por último, escolheu um nome humorístico para uma banda composta por um golden retriever e seu tigre de brinquedo.

“Um agente universal de IA que pode ser útil em todos os aspectos da vida”


Pelo que vale, o Google afirma que o vídeo não foi acelerado e foi gravado em uma única tomada. Mesmo que tenha sido acelerado, é incrível o quanto os óculos podem fazer com câmeras, alto-falantes e os mais recentes avanços tecnológicos do Google. Outro elemento notável é o imediatismo da resposta da IA, o que nos levaria a acreditar que os óculos estão emparelhados com hardware mais poderoso, como um telefone, porque a rede e o processamento integrado nos óculos acrescentariam um volume considerável ao design.

Embora a empresa não tenha se comprometido com os prazos para um possível lançamento do Projeto Astra como um produto tangível, estamos felizes que a empresa não tenha abandonado a computação vestível desde que o Google Glass não decolou.