ABC-130k
Größter Open-Source-Datensatz für bimanuelle Roboter-Teleoperation: 130.919 Episoden
Lizenz
Apache-2.0
Überblick
ABC-130k ist der größte Open-Source-Datensatz für Roboter-Teleoperation. Er enthält 130.919 bimanuelle Manipulationstrajektorien – insgesamt 3.598 Stunden –, erfasst an zweiarmigen YAM-Stationen, die jeweils mit zwei 6-DOF-Armen, Parallelbacken-Greifern und drei Kameras (eine über Kopf und zwei am Handgelenk montiert) ausgestattet sind. 43.090 der Episoden tragen Teilaufgaben-Annotationen, die getrennt von den Episodendaten gespeichert sind. Der Datensatz ist unter Apache-2.0 im MCAP-Format veröffentlicht, mit Gelenkzuständen, Greiferpositionen und synchronisierten Videostreams, zusammen mit einem begleitenden Forschungspapier sowie Trainings- und Deployment-Code. Erstellt von Amazon FAR.
ABC-130k zielt auf den zentralen Engpass bei der generalistischen Manipulation ab – den Umfang und die Vielfalt realer Roboterdaten – und tut dies für die unterversorgte bimanuelle Konfiguration. Jede Trajektorie ist eine menschliche Teleoperations-Demonstration an einer standardisierten zweiarmigen YAM-Station, erfasst als MCAP mit vollständigem Gelenk-/Greiferzustand und drei synchronisierten Kameraansichten. Eine große annotierte Teilmenge fügt Teilaufgaben-Labels für feinkörnigeres Lernen und Evaluieren hinzu. Mit 130.919 Episoden und 3.598 Stunden ist er bis dato das größte offen lizenzierte Teleoperations-Korpus und wird mit Code zum Trainieren und Deployen von Policies auf den Daten ausgeliefert.
Warum es wichtig ist
Generalistische Manipulations-Policies werden durch den Umfang und die Vielfalt realer Roboterdaten ausgebremst, und die meisten großen offenen Datensätze sind einarmig. ABC-130k ist sowohl im Foundation-Maßstab als auch bimanuell und deckt die Zweiarm-Koordination ab, an der es dem Fachgebiet am meisten mangelt; er gibt der Community eine offen lizenzierte Ressource zum Trainieren und Benchmarken der bimanuellen Manipulation. Rund 32.000 Downloads pro Monat signalisieren eine starke, unmittelbare Akzeptanz.
Welches Problem es löst
Offene Roboterlern-Daten sind größtenteils einarmig und im Umfang begrenzt; es gab keinen offen lizenzierten bimanuellen Teleoperations-Datensatz im Foundation-Maßstab zum Trainieren und Benchmarken der Zweiarm-Manipulation.
Wichtigste Punkte
- Bis dato größter offener Teleoperations-Datensatz: 130.919 Episoden, 3.598 Stunden, ~22 TB
- Bimanuelle zweiarmige YAM-Stationen: zwei 6-DOF-Arme, Parallelgreifer, drei Kameras
- 43.090 Episoden mit Teilaufgaben-Annotationen, getrennt von den Episodendaten gespeichert
- MCAP-Format mit Gelenk-/Greiferzustand und synchronisiertem Video, plus Papier und Trainings-/Deployment-Code
- Lizenziert unter Apache-2.0; ~32k Downloads/Monat
Für wen
- Forschende im Bereich bimanuelle Manipulation
- Trainer von Roboter-Foundation-Modellen
- Teams im Imitationslernen
- Ersteller von Benchmarks und Evaluierungen
Einschränkungen
- ~22 TB insgesamt – erhebliche Anforderungen an Speicher und Bandbreite
- Erfasst auf einer einzigen Hardwareplattform (zweiarmige YAM-Stationen)
- Teleoperations-Demonstrationen, keine autonomen oder optimalen Trajektorien
- Teilaufgaben-Annotationen decken eine Teilmenge ab (43.090 von 130.919 Episoden)