Google показав нову ШІ модель для роботів, що працює без інтернету

Команда дослідників штучного інтелекту Google DeepMind презентувала свою нову ШІ-модель для роботів Gemini Robotics On-Device. Вони кажуть, що це їхня найпотужніша VLA-модель, яка може працювати локально — без інтернету.

Вона базується на можливостях попередній моделі компанії Gemini Robotics, яку випустили у березні. Gemini Robotics On-Device створили для «дворуких» роботів із мінімальними обчислювальними ресурсами.

У блозі йдеться, що нова модель розуміє інструкції природною мовою, виконує дуже точні та складні завдання (наприклад, розстібає блискавку на сумці чи складає одяг). І в все це — безпосередньо на самому роботі, без інтернету чи хмарної обробки.

У тестових порівняннях Google Gemini Robotics On-Device працює майже на рівні хмарної Gemini Robotics. Компанія стверджує, що вона перевершує інші локальні моделі в загальних бенчмарках — однак не уточнила, які взяли для порівняння.

Під час демонстрації Google показала, як роботи, що працюють на локальній моделі Gemini Robotics On-Device, виконують завдання на кшталт розстібання сумок і складання одягу.

Модель спочатку навчали для роботів ALOHA, але згодом її адаптували для роботи на дворукому роботові Franka FR3 та гуманоїді Apollo від Apptronik.

Дослідники кажуть, що Franka FR3 успішно справлявся із новими завданнями та об’єктами, які модель раніше не бачила — наприклад, збирав деталі на виробничому конвеєрі.

Також Google DeepMind випускає Gemini Robotics SDK — інструмент для розробників. Він дозволяє навчати роботів новим завданням, показавши їм всього 50–100 демонстрацій.