Gymnasium-Robotics

Farama Foundation이 만든 Gymnasium용 로봇 강화 학습 벤치마크 환경

라이선스

MIT

개요

Gymnasium-Robotics는 Farama Foundation이 OpenAI Gym 로보틱스의 공식 후속으로 유지하는 강화학습용 로보틱스 커뮤니티의 레퍼런스 벤치마크 스위트를 제공합니다. Fetch 로봇팔 조작, Shadow 손재주 제어, 멀티 에이전트 MuJoCo, 미로 내비게이션, Adroit 손 태스크, Franka Kitchen 환경을 포함하며, 모두 일관된 Gymnasium API와 멀티 골 지원을 갖추고 있습니다.

Gymnasium-Robotics는 Gymnasium API와 MuJoCo 물리를 사용하여 로봇 조작 및 내비게이션을 위한 표준화된 강화학습 환경을 제공합니다. Fetch 로봇팔 태스크, Shadow Hand 제어, 멀티 에이전트 시나리오, 미로 내비게이션, Adroit 손 태스크, Franka Kitchen을 포함합니다.

중요한 이유

표준화된 벤치마크는 재현 가능한 RL 연구에 필수적입니다. Gymnasium-Robotics는 Farama Foundation이 유지하는 OpenAI Gym 로보틱스의 공식 후속으로, 사실상 모든 로보틱스 RL 논문과 튜토리얼이 참조하는 사실상의 표준입니다.

해결하는 문제

로보틱스용 RL 알고리즘 평가에는 표준화되고 재현 가능한 환경이 필요합니다. Gymnasium-Robotics는 공정한 알고리즘 비교를 위한 일관된 API, 보상 구조, 관측 공간을 갖춘 벤치마크를 제공합니다.

핵심 요점

• 분야 전체에서 사용되는 사실상의 표준 로보틱스 RL 벤치마크
• Fetch, Shadow Hand, MaMuJoCo, Maze, Adroit, Franka Kitchen 환경
• Hindsight Experience Replay(HER) 지원 멀티 골 API
• 일관된 Gymnasium API로 pip 설치 가능

대상

• 표준 로보틱스 벤치마크가 필요한 강화학습 연구자
• 조작용 RL 접근법을 평가하는 로보틱스 엔지니어
• 로봇 학습 과목을 가르치는 교육자

한계

• 실제 로봇과 비교하여 간소화된 물리 시뮬레이션
• MuJoCo 물리 백엔드에 한정
• 태스크가 실제 조작 복잡도에 비해 제한된 시나리오를 나타냄