Open Source Robotics

Una raccolta curata di progetti, strumenti e software di robotica open source di alta qualità per la comunità della robotica.

ABC-130k

Il più grande dataset open source di teleoperazione robotica bimanuale: 130.919 episodi

Licenza

Apache-2.0

Panoramica

ABC-130k è il più grande dataset open source di teleoperazione robotica. Contiene 130.919 traiettorie di manipolazione bimanuale, per un totale di 3.598 ore, raccolte su stazioni YAM a due bracci, ciascuna dotata di due bracci a 6 gradi di libertà, pinze a ganasce parallele e tre telecamere (una dall'alto e due montate sui polsi). 43.090 episodi hanno annotazioni dei sottocompiti, conservate separatamente dai dati degli episodi. Il dataset è rilasciato con licenza Apache-2.0 in formato MCAP, con stati dei giunti, posizioni delle pinze e flussi video sincronizzati, insieme a un articolo di ricerca e al codice di addestramento e deployment. Creato da Amazon FAR.

ABC-130k affronta il collo di bottiglia centrale della manipolazione generalista, cioè la scala e la varietà dei dati di robot reali, e lo fa per il contesto bimanuale, poco servito. Ogni traiettoria è una dimostrazione umana in teleoperazione su una stazione YAM a due bracci standardizzata, registrata in MCAP con lo stato completo di giunti e pinze e tre viste di telecamera sincronizzate. Un ampio sottoinsieme annotato aggiunge etichette dei sottocompiti per un apprendimento e una valutazione più granulari. Con 130.919 episodi e 3.598 ore è, a oggi, il più grande corpus di teleoperazione con licenza aperta, e viene distribuito con il codice per addestrare e distribuire policy su questi dati.

Perché è importante

Le policy di manipolazione generaliste sono limitate dalla scala e dalla varietà dei dati di robot reali, e la maggior parte dei grandi dataset aperti è a braccio singolo. ABC-130k ha sia la scala dei foundation model sia la natura bimanuale, copre la coordinazione a due bracci che più manca al settore e offre alla comunità una risorsa con licenza aperta per addestrare e valutare la manipolazione bimanuale. Circa 32.000 download al mese indicano un'adozione forte e immediata.

Il problema che risolve

I dati aperti per l'apprendimento robotico sono in gran parte a braccio singolo e di scala limitata; non esisteva un dataset di teleoperazione bimanuale con licenza aperta e con la scala dei foundation model per addestrare e valutare la manipolazione a due bracci.

Punti chiave

  • Il più grande dataset aperto di teleoperazione a oggi: 130.919 episodi, 3.598 ore, ~22 TB
  • Stazioni YAM bimanuali a due bracci: due bracci a 6 gradi di libertà, pinze parallele, tre telecamere
  • 43.090 episodi con annotazioni dei sottocompiti conservate separatamente dai dati degli episodi
  • Formato MCAP con stato di giunti e pinze e video sincronizzato, più articolo e codice di addestramento e deployment
  • Licenza Apache-2.0; ~32k download al mese

A chi si rivolge

  • Ricercatori di manipolazione bimanuale
  • Chi addestra foundation model per la robotica
  • Team di apprendimento per imitazione
  • Chi costruisce benchmark e sistemi di valutazione

Limiti

  • ~22 TB in totale: requisiti notevoli di archiviazione e larghezza di banda
  • Raccolto su un'unica piattaforma hardware (stazioni YAM a due bracci)
  • Dimostrazioni in teleoperazione, non traiettorie autonome o ottimali
  • Le annotazioni dei sottocompiti coprono un sottoinsieme (43.090 episodi su 130.919)

Questo sito richiede JavaScript. Attiva JavaScript per esplorare i nostri progetti di robotica open source.