News · Gemini Robotics, da Google, transforma linguagem natural em ações robóticas

Frontend

Gemini Robotics, da Google, transforma linguagem natural em ações robóticas

Dois novos modelos Gemini recebem linguagem e imagens como input e produzem movimento físico como output, reformulando a interface entre pessoas e máquinas.

O que os dois modelos fazem, na prática

A Google DeepMind anunciou dois modelos a 12 de março. O Gemini Robotics é descrito como um modelo visão-linguagem-ação (VLA): recebe linguagem natural e imagens como input e produz ações que permitem a um robô mover-se e executar tarefas fisicamente.

O segundo, o Gemini Robotics-ER, é um modelo de raciocínio que aprimora competências como identificar objetos e as suas partes no espaço tridimensional. Vale a pena notar esta divisão — um modelo produz movimento, o outro constrói a compreensão espacial de que esse movimento depende.

As demonstrações escolhidas pela Google — dobrar origamis, preparar merendas, formar palavras com peças de Scrabble — são tarefas de manipulação deliberadamente comuns, e não espetáculos encenados. Cada uma exige manusear objetos pequenos com margens de erro reduzidas.

O prompt como interface

Para quem pensa em frontends, o dado mais relevante aqui é o formato de input. A interface declarada do Gemini Robotics é linguagem natural e imagens. O anúncio não menciona consolas de ensino, programação por waypoints ou linguagens específicas para planeamento de movimento — a linguagem é a superfície de controlo.

Isto elimina uma distinção habitual. Na web, uma caixa de chat é uma camada de conveniência sobre uma API. Num robô, uma caixa de chat que produz ações é a própria API. O mesmo campo de texto que dobra uma grua de origami também agarra uma peça de Scrabble; o frontend e o atuador estão separados apenas pelo modelo.

Isto também traz à superfície questões de interface que os assistentes apenas de texto nunca precisaram de resolver bem. Quando o output é movimento físico, a ambiguidade num prompt tem um custo que nenhum botão de repetição consegue cobrir por completo.

O que um vídeo de demonstração mostra — e o que não mostra

Esta publicação é uma entrada de feed em vídeo, não um relatório técnico. Nomeia dois modelos, descreve os respetivos inputs e outputs a um nível geral e mostra tarefas. Não divulga taxas de sucesso, detalhes de hardware, nem a variedade de objetos a que os modelos conseguem generalizar.

Por isso, a leitura honesta é limitada: a Google está a posicionar o Gemini como base para a robótica, com o raciocínio sobre o espaço tridimensional isolado num modelo próprio. A variedade de tarefas no vídeo é um sinal sobre a generalidade pretendida, mas um vídeo é um artefacto cuidadosamente selecionado, não um benchmark.

Porque é que esta abordagem de linguagem para ação importa para quem constrói produtos

A implicação concreta deste anúncio é que a Google está a tratar um robô como mais uma superfície que fala o formato de input do Gemini — entra texto e imagens, sai output estruturado — sendo que, neste caso, o output é ação física em vez de uma sequência de tokens.

Se esta abordagem se mantiver válida além das demonstrações, o trabalho de design para robótica aproxima-se do trabalho de desenhar qualquer interface de linguagem: escrever instruções claras, gerir a ambiguidade e decidir o que o modelo tem permissão para tentar. A distância entre dar um prompt a um chatbot e comandar um robô reduz-se a uma questão de consequências, não de formato de API.

Find this story relevant to you?

Contact us to find a unique solution

Contact us

Precisa de um parceiro de engenharia de IA que saiba executar?

Ajudamos equipas em Portugal a integrar IA em produtos, automatizar processos de alto valor e modernizar os sistemas que suportam o negocio.

Get in touch

Leitura relacionada

Mais análises sobre entrega de produto, AI operacional e o trabalho de sistemas que faz com que a implementação funcione na prática.

Jul, 13 4 min de leitura
Frontend

A DNP colocou o ChatGPT Enterprise diante de dez departamentos e tratou a janela de chat como interface

Jul, 13 4 min de leitura
Frontend

A AdventHealth implementa o ChatGPT em nove estados ao tratar a adoção como o produto

Jul, 13 Leitura de 4 min
Frontend

A AP+ utiliza a Codex para criar prototípagens de pagamento funcionais, e não apenas ecrãs clicáveis