ABC-130k
가장 큰 오픈소스 양손 로봇 원격 조작 데이터셋: 130,919개 에피소드
라이선스
Apache-2.0
개요
ABC-130k는 가장 큰 오픈소스 로봇 원격 조작 데이터셋입니다. 두 대의 팔을 갖춘 YAM 스테이션에서 수집된 130,919개의 양손(bimanual) 조작 궤적 — 총 3,598시간 — 을 포함하며, 각 스테이션은 두 개의 6-DOF 팔, 평행 조(parallel-jaw) 그리퍼, 세 대의 카메라(상부 한 대와 손목 장착 두 대)를 갖추고 있습니다. 에피소드 중 43,090개에는 하위 작업(subtask) 주석이 포함되어 있으며, 이는 에피소드 데이터와 별도로 저장됩니다. 데이터셋은 MCAP 형식으로 Apache-2.0 하에 공개되며, 관절 상태, 그리퍼 위치, 동기화된 비디오 스트림과 함께 동반 연구 논문 및 학습/배포 코드를 제공합니다. Amazon FAR가 제작했습니다.
ABC-130k는 범용 조작(generalist manipulation)의 핵심 병목 — 실제 로봇 데이터의 규모와 다양성 — 을 겨냥하며, 이를 충분히 다루어지지 않은 양손 환경에 대해 수행합니다. 모든 궤적은 표준화된 두 팔 YAM 스테이션에서의 사람 원격 조작 시연으로, 전체 관절/그리퍼 상태와 세 개의 동기화된 카메라 시점이 포함된 MCAP로 캡처됩니다. 대규모 주석 부분집합은 더 세분화된 학습 및 평가를 위한 하위 작업 레이블을 추가합니다. 130,919개 에피소드와 3,598시간으로, 현재까지 공개 라이선스된 가장 큰 원격 조작 코퍼스이며, 해당 데이터로 정책을 학습하고 배포하기 위한 코드와 함께 제공됩니다.
중요한 이유
범용 조작 정책은 실제 로봇 데이터의 규모와 다양성에 의해 병목이 발생하며, 대부분의 대규모 오픈 데이터셋은 단일 팔(single-arm)입니다. ABC-130k는 기반(foundation) 규모이면서 동시에 양손이며, 이 분야가 가장 부족한 두 팔 협응(coordination)을 다루고, 양손 조작의 학습 및 벤치마킹을 위한 공개 라이선스 자원을 커뮤니티에 제공합니다. 월 약 32,000회의 다운로드는 강력하고 즉각적인 채택을 시사합니다.
해결하는 문제
오픈 로봇 학습 데이터는 대부분 단일 팔이며 규모가 제한적이었습니다. 두 팔 조작의 학습 및 벤치마킹을 위한 기반 규모의 공개 라이선스된 양손 원격 조작 데이터셋이 존재하지 않았습니다.
핵심 요점
- 현재까지 가장 큰 오픈 원격 조작 데이터셋: 130,919개 에피소드, 3,598시간, 약 22 TB
- 양손 두 팔 YAM 스테이션: 두 개의 6-DOF 팔, 평행 그리퍼, 세 대의 카메라
- 에피소드 데이터와 별도로 저장된 하위 작업 주석이 포함된 43,090개 에피소드
- 관절/그리퍼 상태와 동기화된 비디오를 갖춘 MCAP 형식, 그리고 논문 및 학습/배포 코드
- Apache-2.0 라이선스; 월 약 32k 다운로드
대상
- 양손 조작 연구자
- 로봇 파운데이션 모델 학습자
- 모방 학습 팀
- 벤치마크 및 평가 구축자
한계
- 총 약 22 TB — 상당한 저장 공간 및 대역폭 요구사항
- 단일 하드웨어 플랫폼(두 팔 YAM 스테이션)에서 수집됨
- 자율적이거나 최적인 궤적이 아닌 원격 조작 시연
- 하위 작업 주석은 일부(130,919개 중 43,090개 에피소드)만 다룸