109 504 строки С++ или 1000 часов видео? Figure AI обновила робомодель Helix 02

Компания Figure AI представила новую версию своей нейросетевой системы управления гуманоидным роботом. Helix 02, в отличие от предшественника, контролирует всё тело сразу – от пальцев на руках до стоп. И чтобы доказать ее эффективность, инженеры попросили робота выполнить, пожалуй, самое скучное, но на удивление сложное домашнее задание: разгрузить и загрузить посудомоечную машину.

Демонстрация длится 4 минуты и включает 61 последовательное действие, выполненные без вмешательства человека. Робот открывает машину, вынимает чистую пластиковую посуду, расставляет ее на столе, а затем загружает грязные тарелки обратно. Самое интересное происходит, когда у него заняты руки: чтобы прикрыть выдвинутый ящик, он использует бедро, а чтобы приподнять дверцу посудомойки – ногу.

Компания называет это «самой длинной и сложной автономной задачей», когда-либо выполненной гуманоидным роботом. При этом в Figure AI честно отмечают, что посуда – пластиковая, а данные о проценте ошибок или количестве попыток для съемки ролика не раскрываются. Тем не менее, если действия были полностью автономными, это серьезный шаг вперед по сравнению с ранними, более «постановочными» демо.

Ключевое достижение Helix 02 – объединение локомоции и манипуляции в рамках единого контроллера. Раньше это были две разные системы: робот шел, останавливался, стабилизировался, брал предмет и снова шел. Новая же сквозная нейросеть, обученная на более чем 1000 часов данных о движениях человека, принимает решения для всего тела одновременно. Этот подход, по словам разработчиков, позволил заменить 109 504 строки прописанного вручную C++-кода, отвечавшего за баланс и координацию.

Архитектура системы трехуровневая:

System 0 (10 млн параметров, работает на 1 кГц) – быстрая моторная