DROID
76.000 traiettorie di manipolazione robotica da 564 scene diverse
Licenza
Not specified
Panoramica
DROID (Distributed Robot Interaction Dataset) è un dataset di manipolazione robotica su larga scala raccolto in ambienti reali, con 76.000 traiettorie di dimostrazione per 350 ore di dati di interazione. Raccolto in 564 scene distinte che coprono 86 compiti diversi presso 13 istituzioni in tutto il mondo, fornisce dati di addestramento vari e di alta qualità per sviluppare policy robotiche più capaci e robuste. Usa una configurazione Franka Panda standardizzata con telecamere stereo.
DROID (Distributed Robot Interaction Dataset) è un dataset di manipolazione robotica su larga scala acquisito in ambienti reali non vincolati anziché in laboratori controllati. Composto da 76.000 traiettorie di manipolazione per un totale di 350 ore di funzionamento del robot, il dataset abbraccia 564 scene diverse e 86 compiti differenti raccolti presso 13 istituzioni. Tutti i dati sono stati raccolti con una configurazione standardizzata del braccio robotico Franka Panda, garantendo coerenza nel corpo del robot e massimizzando al tempo stesso la varietà di ambienti e compiti. La raccolta in ambienti reali cattura la complessità, la variabilità e l'imprevedibilità degli scenari di manipolazione reali, comprese le variazioni di illuminazione, gli sfondi ingombri e la varietà di oggetti che di solito mancano nei dataset di laboratorio. Questo rende DROID particolarmente prezioso per addestrare policy di manipolazione robuste che devono funzionare in modo affidabile al di fuori di contesti controllati.
Perché è importante
DROID è il dataset di manipolazione robotica in ambienti reali più vario mai raccolto. A differenza dei dataset solo di laboratorio, DROID cattura la variabilità del mondo reale (illuminazione, sfondi, oggetti e stili degli operatori diversi), rendendo le policy addestrate su di esso molto più robuste alle condizioni di impiego.
Il problema che risolve
La maggior parte dei dataset robotici viene raccolta in laboratori controllati con una varietà visiva limitata. Le policy addestrate su questi dati falliscono quando vengono impiegate in case e uffici reali. DROID fornisce la varietà visiva e ambientale necessaria per una manipolazione robusta nel mondo reale.
Punti chiave
- 76.000 traiettorie di dimostrazione in 564 scene uniche
- 350 ore di dati di interazione nel mondo reale con informazioni sensoriali ricche
- Raccolto in ambienti reali diversi, non solo in laboratori di ricerca
- Ogni traiettoria include telecamere al polso, telecamere esterne e annotazioni linguistiche
- Modelli preaddestrati e ricette di fine-tuning forniti per l'uso diretto
A chi si rivolge
- Ricercatori che addestrano policy di manipolazione robuste
- Team che costruiscono robot per la casa o per l'ufficio
- Sviluppatori che eseguono il fine-tuning di modelli Vision-Language-Action (VLA) per l'impiego reale
- Laboratori che hanno bisogno di dati di preaddestramento vari per il trasferimento sim-to-real
Limiti
- Centrato sulla manipolazione da tavolo a braccio singolo con robot Franka
- La varietà delle scene è alta, ma quella dei compiti è moderata
- Le grandi dimensioni del download possono risultare poco pratiche per i gruppi di ricerca più piccoli
- Siti di raccolta principalmente negli Stati Uniti