Американский робототехнический стартап Figure показал, как два андроида F.03 за две минуты наводят порядок в спальне. Роботы открывают дверь, задвигают стул, развешивают одежду, выбрасывают мусор в ведро, а затем вместе заправляют постель. Описание теста опубликовано в блоге компании.
В феврале 2025 года Figure представил обновленную версию своей универсальной системы управления Helix 02 для человекоподобных роботов. Она позволяет андроидам использовать не только руки, но и все свое тело для взаимодействия с окружением, удерживая при этом баланс. Однако до сих пор компания демонстрировала в основном индивидуальную работу роботов, а их взаимодействие друг с другом сводилось в простейшим действиям — например, передаче предметов из рук в руки.
В новом испытании разработчики Figure решили проверить способность системы Helix 02 к сложной координации действий между роботами без явного обмена данными. В тесте приняли участие два андроида F.03, которые должны были навести порядок в импровизированной спальне. Роботы не имеют общего планировщика задач и не передают друг другу команды через сеть. Каждый из них работает под управлением своей визуально-языковой VLA-модели (Vision-Language-Action). Как и люди, выполняющие совместную работу, они оценивают намерения партнера и подстраивают свои действия, ориентируясь исключительно на то, что видят их камеры.
В начале опубликованного на YouTube двухминутного видеоролика один из F.03 подходит к двери и открывает ее, запуская внутрь напарника. После этого роботы приступают к уборке. Один из них задвигает офисный стул под стол, удерживая его за спинку двумя руками и толкая всем телом, одновременно подходя ближе к столу. Затем робот закрывает крышку стоящего на столе ноутбука и поднимает наушники, чтобы повесить их на стойку. После этого он выбрасывает в стоящую рядом корзину мусор, балансируя при этом на одной ноге и нажимая второй на педаль, чтобы открыть крышку.
Роботы могут взаимодействовать с деформируемыми объектами: один из них берет, переносит через комнату и вешает на крючок предмет одежды и раскладывает подушки на кровати. Координация совместных действий двух андроидов показана на примере работы с большим одеялом. Эта задача особенно сложна, так как одеяло — деформируемый объект без четкой геометрии и очевидных точек захвата. Чтобы выполнить действие андроиды встают с противоположных сторон двуспальной кровати. Перед выполнением синхронных совместных действий один из андроидов кивает другому головой. Каждому из них приходится самостоятельно выбирать место для захвата ткани, предсказывая, что будет делать напарник и с частотой десятки раз в секунду корректировать свои действия по мере того, как одеяло складывается, натягивается и перемещается под действием совместных усилий.
Разработчики подчеркивают, что все продемонстрированные навыки — от балансирования на одной ноге до совместного манипулирования одеялом — использованы андроидами без внесения изменений в ядро системы управления. Helix 02 выучила новые паттерны поведения просто за счет добавления новых данных в обучающую выборку. По словам инженеров Figure, это первое известное им успешное применение нейросетевой модели для управления совместной локоманипуляцией человекоподобных роботов, где решения принимаются только на основе визуальной информации с камер.