XYZ показала физический ИИ на данных с объектов на NVIDIA AI Day Seoul

От данных с площадки к симуляции

Компания сочетает вычислительную платформу NVIDIA для ИИ и инфраструктуру симуляции роботов в единый конвейер разработки физического ИИ. Данные о реальном поведении, накопленные на 50 сервисных объектах, которыми управляет её дочерняя компания, загружаются в виртуальную среду цифрового двойника. Там проходят точное обучение и многократная проверка, после чего результат возвращается к физическим операциям реальных роботов. По словам XYZ, цикл «сбор на объекте — обучение в виртуальной среде — выполнение в реальности» работает как маховик и повышает коммерческую зрелость роботов в неструктурированных условиях.

Ключевое ПО — собственный фреймворк BrainX. Он позволяет роботу не просто распознавать команды на естественном языке, а оценивать обстановку целиком, планировать и выполнять длинные последовательности действий. Взаимодействие с пользователем, планирование маршрута и точная физическая манипуляция объединены в одну систему. XYZ поэтапно внедряет её в аппаратные решения, в первую очередь в полугуманоидного робота DEUX.

Складывание одежды вдвое быстрее

Также представлены результаты исследования в условиях, приближенных к коммерческим. Складывание одежды считается одной из сложных задач работы с неструктурированными объектами: время сократилось с 50 до 25 секунд, то есть на 50%, при успешности выполнения 96%. В компании считают, что это подтверждает скорость и экономическую целесообразность, достаточные для немедленного применения в промышленности.

Хван Сон Дже заявил, что для самостоятельной работы роботов за пределами лабораторий нужна интегрированная система, где сбор данных, высокоточная симуляция и управление реальными устройствами работают без разрывов. Компания намерена развивать сотрудничество с экосистемой NVIDIA и ускорять глобальную коммерциализацию решений физического ИИ.