«У нас были модели, чтобы помочь роботам с определенными задачами и раньше понимать естественный язык, но это было изменение шагов», — объясняет Каролина. «Робот никогда не видел ничего, что связано с баскетболом или этой конкретной игрушкой. Однако он понял что -то сложное -« хлопнул мяч » — и осторожно выполнил действие. Во время его первой попытки.«»

Этот универсальный робот был оснащен Роботизированные Близнецы Модель, которая является частью нового семейства мультимодальных моделей для робототехники. Модели полагаются на Gemini 2.0 благодаря прекрасной корректировке с конкретными данными о роботах, добавив физическое действие к мультимодальным выходам Близнецов, таких как текст, видео и аудио. «Этот шаг излагает основы робототехники следующего поколения, которые могут быть полезны в ряде приложений», — сказал генеральный директор Google Sundar Pichai, когда объявление о новых моделях на xПолем

Модели робототехники Близнецов очень умелые, интерактивные и общие, что означает, что они могут поощрять роботов реагировать на новые объекты, среды и инструкции без дальнейшего обучения. Полезно, учитывая амбиции команды.

«Наша миссия состоит в том, чтобы построить ИИ, воплощенный в пищевых роботов, которые помогают вам с ежедневными задачами в реальном мире», — объясняет Каролина, чье увлечение робототехникой началось с карикатур инфантильной научной литературы, созданную мечтами об автоматических задачах. «Наконец, роботы будут только другой поверхностью, на которой мы взаимодействуем с ИИ, как наши телефоны или наши компьютеры — агенты в физическом мире».