Open Source Robotics

고품질 오픈소스 로봇 프로젝트, 도구 및 소프트웨어의 엄선된 컬렉션.

Isaac Lab-Arena

로봇 벤치마크를 만들고 수천 개의 병렬 시뮬레이션 환경에서 정책을 대규모로 시험하는 NVIDIA의 오픈 프레임워크

라이선스

Apache 2.0(독점 부분이 있는 Isaac Sim 위에서 동작)

코드: LICENSE.md에 따르면 Apache-2.0. 파일이 Markdown 제목으로 시작하기 때문에 GitHub에는 라이선스가 표시되지 않습니다. 필요한 실행 환경: Isaac Sim. NVIDIA의 독점 Omniverse 라이선스가 적용되는 구성 요소를 포함하며, Arena를 실행하려면 그 EULA에 동의해야 합니다. Arena와 함께 쓰는 모델과 벤치마크(GR00T, π0.5, 외부 작업 모음 등)는 각자의 라이선스를 따릅니다. 2026-11-06에 LICENSE.md와 README로 확인했습니다.

개요

Isaac Lab-Arena는 시뮬레이션에서 로봇 벤치마크를 만들고 그 안에서 정책을 대규모로 평가하기 위한 NVIDIA의 오픈소스 프레임워크입니다. Isaac Lab을 확장하며, 환경을 장면, 로봇 임바디먼트, 작업으로 조합하기 때문에 하나의 작업을 새 코드 없이 다른 로봇, 물체, 환경에 다시 쓸 수 있습니다. 하나의 정책을 GPU 한 대의 수천 개 병렬 환경에서 돌리거나 여러 대의 머신에 나눠 실행할 수 있으며, 결과를 보면 정책이 작업의 어느 단계에서 실패하는지, 어떤 조건에 민감한지 알 수 있습니다. 현재 알파 단계의 소프트웨어이고 최신 릴리스 계열은 0.3.1이며, RoboDojo, RoboTwin 2.0, Lightwheel의 RoboCasa 및 LIBERO 작업 모음 같은 공개 벤치마크가 이미 이 위에서 돌아갑니다.

Isaac Lab-Arena는 시뮬레이션 벤치마크를 만들고 그 안에서 로봇 정책을 평가하기 위한 NVIDIA의 프레임워크로, Isaac Sim 위에서 동작하는 Isaac Lab의 확장으로 작성되었습니다. 로봇, 물체, 환경의 조합마다 별도의 설정을 쓰는 대신, 서로 독립적인 세 부분으로 환경을 조합합니다. 물체와 가구가 놓인 장면, 임바디먼트(센서, 관측, 행동을 갖춘 로봇), 그리고 작업(로봇이 해야 할 일과 성공을 판정하는 방식)입니다. Arena는 이들을 표준 Isaac Lab 환경으로 조립하므로, 작업을 Franka 팔에서 휴머노이드로, 또는 주방에서 포장 작업대로 옮기려면 구성 요소 하나만 바꾸면 됩니다. 물체는 좌표 대신 위에, 옆에 같은 관계로 배치되고, 짧은 기술을 이어 긴 작업을 만들 수 있으며, 변형 시스템은 하나의 환경을 조명, 배경, 카메라 파라미터, 물체 질량에 걸친 스윕으로 바꿉니다. 이는 통제된 형태의 도메인 랜덤화입니다. 실험적인 에이전트는 일상 언어로 쓴 작업 설명을 SimReady 에셋으로 구성한 편집 가능한 환경 명세로 바꿔 줍니다.

평가에서는 하나의 정책을 GPU 한 대의 수천 개 환경에서 실행하며, 각 환경에는 서로 다른 물체를 둘 수 있습니다. 여러 작업과 정책을 묶은 실험은 로컬에서 돌리거나 OSMO로 여러 노드에 분산할 수 있습니다. 정책은 서버 뒤에서 동작하며 하나의 관측·행동 인터페이스로 Arena와 통신합니다. 저장소에는 GR00T, OpenPI의 π0.5, DreamZero 연동이 들어 있고, 다른 모델도 같은 방식으로 연결할 수 있습니다. 결과는 전체 지표와 에피소드별 지표로 돌아옵니다. 하위 작업 술어는 각 실행이 어디까지 진행됐는지(잡기, 들어 올리기, 옮기기, 놓기)를 기록하고, 민감도 분석은 정책이 어떤 조건에서 무너지는지 보여 줍니다. 변형되는 물체나 접촉이 많은 작업(예: 기어 삽입)에는 Newton을 PhysX 대신 물리 백엔드로 쓸 수 있습니다.

NVIDIA의 공개 글에 따르면, 10개의 RoboCasa 작업에서 작업마다 4,096개의 환경 변형으로 GR00T N1.5를 평가하는 데 GPU 8대 병렬 실행으로 0.76시간이 걸렸고, 같은 프레임워크에서 하나씩 순서대로 실행할 때의 34.9시간보다 약 40배 빨랐습니다. 문서의 예비 테스트에서는 RTX 5880 Ada GPU 한 대에서 카메라 없이 1,024개의 병렬 환경으로 초당 2,390 환경 스텝을 측정했습니다.

벤치마크는 각 작성자의 저장소에 있고 Arena 위에서 실행됩니다. README에는 Lightwheel이 RoboCasa와 LIBERO에서 가져온 작업 모음, RoboTwin 2.0, Isaac for Healthcare의 RHEO 워크플로, VABAR, DexBench, RoboDojo가 올라 있습니다. NVIDIA는 정밀 삽입, 접기, 도구 사용 같은 양팔 작업과 함께 RoboDojo의 Arena 지원을 발표했으며, RoboDojo의 Arena 브랜치는 ARX의 양팔 로봇 X5에서 54개의 작업을 실행합니다. Arena 자체에도 DROID 조작 작업 31개로 이뤄진 Kitchen Benchmark와 RoboLab을 본뜬 작업이 들어 있으며, 예제 환경에 목록이 있습니다. Arena 환경은 LeRobot의 Environment Hub에서 공유하고 LeRobot의 자체 평가 명령으로 평가할 수도 있으며, Hugging Face의 글이 SmolVLA로 이를 보여 줍니다.

중요한 이유

비전-언어-행동 모델 같은 범용 정책은 많은 작업, 로봇, 조건에서 얼마나 버티는지로 평가받는데, 이를 실제 하드웨어에서 시험하는 일은 느리고 비싸며 반복하기도 어렵습니다. 시뮬레이션은 저렴한 첫 번째 점검이지만, 벤치마크는 대개 자체 환경, 스크립트, 실행기를 따로 갖고 있어서 하나의 정책을 여러 벤치마크에서 시험하려면 별도의 설정이 여러 개 필요합니다. Arena는 이들을 하나의 공통 기반 위에 올립니다. 벤치마크 작성자는 같은 장면, 로봇, 지표를 재사용하고, 정책을 만드는 팀은 하나의 클라이언트로 모든 벤치마크를 실행할 수 있습니다. 술어와 민감도 도구는 하나의 성공률이 가리는 것, 즉 정책이 어느 단계에서 어떤 조건에서 실패했는지에도 답합니다. 우리 카탈로그에는 다른 평가 도구로 SimplerEnv와 Inspect Robots가 있습니다. Arena는 새 벤치마크를 만들고 GPU 규모로 실행하도록 만들어진 도구이며, RoboDojo, RoboTwin, Lightwheel이 기반으로 삼고 LeRobot의 Environment Hub가 지원하는 토대입니다.

해결하는 문제

범용 로봇 정책을 제대로 평가하려면 많은 작업, 로봇, 물체, 조건에서 실행해 봐야 합니다. 시뮬레이션에서는 보통 조합마다 환경과 실행기를 손으로 작성하고, 실행을 하나씩 차례로 돌려야 합니다. Arena는 이를 재사용 가능한 구성 요소, GPU 병렬 평가, 공통 지표로 대신합니다. 벤치마크는 한 번 작성해 설정으로 변형을 주고 대규모로 실행하며, 서로 다른 벤치마크도 같은 정책 인터페이스로 실행할 수 있습니다.

핵심 요점

  • 환경은 장면, 임바디먼트, 작업의 독립된 블록으로 조합되며 표준 Isaac Lab 환경이 됩니다
  • 하나의 정책을 GPU 한 대의 수천 개 병렬 환경에서, 또는 OSMO로 여러 머신에 걸쳐 실행합니다
  • 정책은 하나의 인터페이스를 가진 서버 뒤에서 동작하며, GR00T, π0.5, DreamZero 연동이 포함되어 있습니다
  • 하위 작업 진행도와 민감도 분석으로 정책이 어디서, 어떤 조건에서 실패하는지 알 수 있습니다
  • 이를 기반으로 만든 공개 벤치마크로 RoboDojo, RoboTwin 2.0, Lightwheel의 RoboCasa 및 LIBERO 작업 모음이 있습니다
  • 알파 단계 소프트웨어로, API가 릴리스마다 바뀌며 NVIDIA는 프로덕션 사용을 권하지 않습니다

대상

  • 비전-언어-행동 모델이나 다른 범용 정책을 학습시키며 많은 작업에서 반복 가능한 평가가 필요한 팀
  • 다른 사람이 장면, 로봇, 지표를 다시 만들지 않고도 실행할 수 있는 작업을 공개하려는 벤치마크 작성자
  • 자신의 환경에 평가, 통제된 변형, 실패 분석을 더하고 싶은 Isaac Lab 사용자
  • Environment Hub를 통해 시뮬레이션 환경을 공유하려는 LeRobot 사용자

한계

  • 알파 단계 소프트웨어(버전 0.3)로, 공개 API가 지원 중단 경고 없이 바뀌며 NVIDIA는 프로덕션 사용을 권하지 않습니다
  • Linux 전용(Ubuntu 22.04 이상)이며, Isaac Sim의 하드웨어 요구 사항을 충족하는 NVIDIA GPU가 필요합니다
  • NVIDIA의 독점 라이선스 조건이 적용되는 구성 요소를 포함한 Isaac Sim 위에서 동작하므로, 전체 스택이 오픈소스는 아닙니다
  • NVIDIA 스택에 묶여 있습니다. 모든 환경이 Isaac Lab 환경이므로 Arena로 만든 벤치마크는 그곳에서만 실행됩니다
  • 버전은 태그가 붙은 GitHub 릴리스가 아니라 릴리스 브랜치로 제공되며, 각각 특정 버전의 Isaac Lab과 Isaac Sim에 고정되어 있습니다
  • 에이전트 기반 환경 생성은 실험적 기능으로 표시되어 있으며, 에이전트와 설계가 바뀔 수 있습니다

이 웹사이트는 JavaScript가 필요합니다. 오픈소스 로봇 프로젝트를 탐색하려면 JavaScript를 활성화하세요.