리얼월드, 로봇 손 조작 평가 기준 ‘덱스벤치’ 공개

4개 산업, 15개 작업

기존 벤치마크가 주로 테이블 위에서 물체를 집어 옮기는 단순 작업을 평가했다면, 덱스벤치는 유통, 물류, 조립, 호텔 식음료 등 4개 산업 환경에서 15개 작업을 구현했습니다. 상품 꺼내 배치하기, 롤케이지에서 물품 내리기, 커넥터 꽂기와 나사 조이기, 접시 쌓기와 액체 따르기 등입니다. 가상 환경의 물체와 설비는 실제 제품 규격에 맞췄습니다.

평가 항목에는 작업 성공률과 함께 학습 때 보지 못한 물체, 물리적 특성, 공간 배치에서도 작업을 해내는지 보는 ‘일반화’ 성능이 포함됩니다. 엔비디아의 오픈소스 시뮬레이션 평가 도구 ‘아이작 랩-아레나’와 오픈소스 물리 엔진 ‘뉴턴’을 기반으로 해 손가락과 물체의 접촉, 형태가 바뀌는 물체, 움직이는 설비 같은 복잡한 물리 현상을 재현합니다.

향후 계획

개발에는 엔닷라이트, 스페이스에이아이, 피직스심랩이 3D 데이터와 환경을 제공했고, 제네시스 AI와 미믹 로보틱스 등 해외 기업이 사전 공개 버전을 시험 중입니다. 리얼월드는 코드, 평가 환경, 시뮬레이션·학습 데이터, 기준 모델 성능, 순위표를 공개할 계획입니다. 첫 기준 성능은 차기 파운데이션 모델 ‘리얼덱스(RLDX) 1.1’로 측정했습니다. 시뮬레이션과 실제 로봇 결과를 비교하는 검증을 강화하고 지원 로봇과 손 종류도 늘립니다.

엔비디아는 과학기술정보통신부와 연 ‘AI 스타트업 파트너십 포럼’에서 리얼월드, 모티프테크놀로지스, 업스테이지에 투자한다고 밝혔습니다. 금액은 공개되지 않았으며, 리얼월드는 파운데이션 모델 고도화와 산업 현장 배포 확대에 투자금을 쓸 계획입니다.