RealWorld представила DexBench для оценки ловкости рук роботов

Помимо доли успешно выполненных задач, оценивается обобщающая способность: справляется ли робот с объектами, физическими свойствами и расположением предметов, которых не было при обучении.

Основа — инструменты Nvidia

Бенчмарк построен на открытом инструменте Nvidia Isaac Lab-Arena, который масштабно оценивает модели управления роботами в симуляции, и на открытом физическом движке Newton. Они позволяют воспроизводить контакт пальцев с предметами, деформируемые объекты и движущееся оборудование. 3D-данные и среды для симуляции предоставили N.Light, SpaceAI и PhysicsSimLab. Зарубежные робототехнические компании, включая Genesis AI и Mimic Robotics, тестируют предварительную версию.

RealWorld планирует открыть код, среды оценки, данные симуляции и обучения, базовые показатели моделей и таблицу лидеров, чтобы исследователи и разработчики могли сравнивать модели на равных условиях. Первые базовые показатели получены на RLDX 1.1 — следующей версии собственной базовой модели компании. Дальше она намерена усилить проверку соответствия симуляции реальным роботам и расширить список поддерживаемых роботов и типов рук.

В тот же день на форуме партнёрства для ИИ-стартапов, организованном совместно с министерством науки и ИКТ Кореи, Nvidia объявила о планах инвестировать в RealWorld, Motif Technologies и Upstage. Сумма не раскрыта. RealWorld направит средства на развитие модели и расширение внедрения на производстве. Глава компании Рю Чжун Хи отметил, что без объективного измерения точной манипуляции ИИ для роботов не дойдёт до практического применения.