News · Gemini Robotics di Google trasforma il linguaggio naturale in azioni robotiche

Frontend

Gemini Robotics di Google trasforma il linguaggio naturale in azioni robotiche

Due nuovi modelli Gemini accettano linguaggio e immagini in input e restituiscono movimento fisico, ridefinendo l'interfaccia tra persone e macchine.

Cosa fanno davvero i due modelli

Google DeepMind ha annunciato due modelli il 12 marzo. Gemini Robotics viene descritto come un modello vision-language-action (VLA): prende in input linguaggio naturale e immagini e restituisce azioni che permettono a un robot di muoversi fisicamente e svolgere compiti.

Il secondo, Gemini Robotics-ER, è un modello di ragionamento che affina competenze come l'identificazione di oggetti e delle loro parti nello spazio 3D. Vale la pena notare questa separazione: un modello produce il movimento, l'altro costruisce la comprensione spaziale da cui il movimento dipende.

Le demo scelte da Google — piegare origami, preparare il pranzo, comporre parole con le tessere dello Scrabble — sono compiti di manipolazione deliberatamente comuni, non spettacoli allestiti ad arte. Ognuno richiede di gestire piccoli oggetti con margini di errore quasi nulli.

Il prompt è l'interfaccia

Per chi ragiona in termini di frontend, l'aspetto degno di nota qui è il formato di input. L'interfaccia dichiarata per Gemini Robotics è linguaggio naturale e immagini. Nell'annuncio non si parla di teach pendant, programmazione a waypoint o DSL per la pianificazione del movimento: il linguaggio è la superficie di controllo.

Questo azzera una distinzione familiare. Sul web, una chat è un livello di comodità sopra un'API. Su un robot, una chat che genera azioni è l'API. Lo stesso campo di testo che piega una grue di carta afferra anche una tessera dello Scrabble; il frontend e l'attuatore sono separati solo dal modello.

Solleva inoltre questioni di interfaccia che gli assistenti solo testuali non hanno mai dovuto affrontare seriamente. Quando l'output è movimento fisico, l'ambiguità in un prompt ha un costo che nessun tasto

Cosa dice — e cosa non dice — un video demo

Questo post è un contenuto per il feed video, non un report tecnico. Nomina due modelli, ne descrive input e output a grandi linee e mostra alcuni compiti. Non pubblica tassi di successo, dettagli hardware o la gamma di oggetti su cui i modelli generalizzano.

La lettura onesta è quindi limitata: Google sta posizionando Gemini come base per la robotica, con il ragionamento sullo spazio 3D ritagliato in un modello a parte. La varietà dei compiti nel video è un segnale sull'ampiezza d'uso prevista, ma un video è un artefatto curato, non un benchmark.

Perché l'impostazione linguaggio-verso-azione conta per chi costruisce

L'implicazione specifica di questo annuncio è che Google tratta un robot come un'altra superficie che parla il formato di input di Gemini — testo e immagini in entrata, output strutturato in uscita — dove l'output, in questo caso, è azione fisica invece di un flusso di token.

Se questa impostazione si conferma oltre le demo, il lavoro di progettazione per la robotica si avvicina a quello della progettazione di qualsiasi interfaccia linguistica: scrivere istruzioni chiare, gestire l'ambiguità e decidere cosa il modello può tentare di fare. Il divario tra dare un prompt a un chatbot e comandare un robot si riduce a una questione di conseguenze, non di forma dell'API.

Find this story relevant to you?

Contact us to find a unique solution

Contact us

Cerchi un partner di ingegneria AI capace di costruire davvero?

Aiutiamo le aziende a integrare l AI nei prodotti, automatizzare i flussi di lavoro ad alto valore e modernizzare i sistemi software che sostengono la crescita.

Get in touch

Letture correlate

Altre analisi su delivery di prodotto, IA operativa e il lavoro sui sistemi che fa reggere il deployment alla prova dei fatti.

Jul, 13 4 min di lettura
Frontend

DNP ha messo ChatGPT Enterprise davanti a dieci dipartimenti e ha trattato la finestra di chat come interfaccia

Jul, 13 4 min di lettura
Frontend

AdventHealth distribuisce ChatGPT in nove stati trattando l'adozione come il vero prodotto

Jul, 13 4 min di lettura
Frontend

AP+ usa Codex per costruire prototipi di pagamento che si comportano come il sistema reale, non solo schermate cliccabili