O Google disponibilizou oficialmente nesta quinta-feira, 1º de outubro de 2026, o recurso Guided Vision no Gemini Live para smartphones e tablets com o sistema operacional Android. A ferramenta foi projetada em conjunto com a comunidade de pessoas cegas ou com baixa visão e tem como foco oferecer interpretação visual dinâmica e assistência por voz em tempo real através da câmera do aparelho móvel.

Desenvolvido para atuar como um interlocutor conversacional, o Guided Vision permite que o usuário compartilhe a imagem da câmera enquanto conversa com o Gemini Live. Se o enquadramento estiver inadequado — como uma câmera apontada alto demais, muito perto ou descentralizada —, a inteligência artificial fornece instruções verbais imediatas, sugerindo inclinar o aparelho, afastar-se ou mover a câmera lentamente para o lado até obter o campo de visão necessário para responder com precisão.

Parceria técnica e testes com especialistas

Segundo detalhado por Isha Sheth, gerente sênior de produtos do Gemini Live, o desenvolvimento da tecnologia envolveu uma parceria direta com a organização Aira. O treinamento do modelo consumiu dezenas de milhares de horas de dados visuais interpretados. Além disso, mais de 1.000 membros da rede Trusted Tester da Aira submeteram o sistema a testes de estresse em situações cotidianas reais, enquanto especialistas da instituição trabalharam lado a lado com os engenheiros do Google na criação e validação das travas de segurança do recurso.

O processo de refinamento das descrições por voz também incorporou avaliações práticas de comunidades de acessibilidade em múltiplos países, incluindo Brasil, Índia, Singapura, Indonésia e Japão, garantindo naturalidade nas instruções de redirecionamento e nas respostas em diferentes idiomas.

Aplicações práticas no dia a dia

O sistema auxilia em diversas demandas cotidianas em que a confirmação visual rápida é relevante:

  • Leitura de rótulos e textos pequenos: identifica tabelas nutricionais em embalagens de alimentos, configurações de botões em eletrodomésticos, ciclos de máquinas de lavar e cardápios impressos em locais de iluminação reduzida.
  • Localização de objetos: ajuda a rastrear itens perdidos ou guardados nas proximidades imediatas, como encontrar um fone de ouvido caído no chão ou um tempero específico dentro de um armário cheio.
  • Identificação de cores e padrões: descreve formatos, tonalidades e estampas de roupas, auxiliando na escolha de peças que combinem entre si.
  • Exploração de novos ambientes: oferece panoramas descritivos sobre a disposição de cômodos desconhecidos e objetos distribuídos sobre mesas ou bancadas.

A funcionalidade também beneficia pessoas idosas, indivíduos com dificuldades de leitura ou qualquer pessoa em ambientes de pouca luminosidade que precise decifrar letras pequenas.

Integração nativa ao ecossistema Android

O acesso ao Guided Vision foi desenhado para se integrar às ferramentas nativas de acessibilidade do Android:

  1. Aplicativo Gemini: o usuário pode ativar a opção nas configurações de perfil do aplicativo móvel do Gemini e, em seguida, iniciar uma sessão do Gemini Live tocando no botão para compartilhar a câmera.
  2. Atalhos do sistema operacional: no caminho de Configurações do Android > Acessibilidade > Assistência visual > Guided Vision, é possível vincular o acionamento ao botão flutuante de acessibilidade, ao gesto de deslizar dois dedos ou ao pressionamento simultâneo das duas teclas físicas de volume.
  3. Compatibilidade com TalkBack: quem utiliza o leitor de tela Google TalkBack pode abrir o menu da ferramenta com um toque de três dedos e acionar o Guided Vision diretamente.

Limitações e diretrizes de segurança

O Google reforça que o Guided Vision é uma tecnologia de inteligência artificial generativa de apoio e pode apresentar falhas. A empresa alerta expressamente que a ferramenta não é um dispositivo médico, não substitui bengalas brancas e não foi desenvolvida para navegação externa, condução segura em deslocamentos ou detecção de obstáculos físicos. A recomendação oficial é que os usuários continuem utilizando suas ferramentas tradicionais de mobilidade e segurança.

O Guided Vision está disponível em aparelhos com Android 9 ou versões superiores, em idiomas e regiões que contam com suporte ao Gemini Live, exigindo apenas a atualização do app Gemini e dos componentes do sistema Android.