Grabette
Dispositivo portatile aperto per registrare dati di manipolazione robotica come dataset LeRobot
Licenza
Apache-2.0
Panoramica
Un sistema portatile open source di Pollen Robotics (Hugging Face) per registrare dimostrazioni di manipolazione robotica. Un dispositivo Grabette registra flussi sincronizzati di telecamera e unità di misura inerziale (IMU) da dispositivi tenuti in mano o montati su una pinza, ricostruisce le traiettorie della telecamera con lo SLAM ed esporta dataset LeRobot per l'apprendimento di policy. La pipeline di raccolta dati è indipendente dal robot, con una variante montata (Gripette) e l'integrazione con OpenArm come esempio di riferimento.
Il sistema è composto da quattro parti: il registratore portatile Grabette (Raspberry Pi 4, telecamera di profondità stereo OAK-D SR, fisheye Arducam, batteria PiSugar, sensori di angolo su misura sui perni della pinza), la pinza Gripette montata sul robot, una pipeline di postelaborazione che esegue lo SLAM e produce dataset LeRobot, e le integrazioni, con un braccio OpenArm a 7 gradi di libertà come riferimento, compresi modelli URDF/MuJoCo, codice di addestramento Diffusion Policy e una pipeline di fine-tuning per pi0.5. L'elettronica su misura (sensore di angolo, HMI, Pi HAT) è disponibile come progetti KiCad aperti nel repository elec_grabette. Il CAD dell'hardware è pubblicato su Onshape, con file STL e STEP nel repository (Git LFS), e sono supportate sia la versione per mano sinistra sia quella per mano destra.
Perché è importante
Il collo di bottiglia dell'apprendimento robotico si è spostato dai modelli ai dati. Grabette lo affronta con un dispositivo che chiunque può stampare e montare: le dimostrazioni si raccolgono a mano, senza bisogno di un robot durante la raccolta, e si esportano direttamente come dataset LeRobot, alimentando un archivio di dati condiviso dalla comunità.
Il problema che risolve
Raccogliere dimostrazioni di manipolazione robotica richiede di norma un robot strumentato e una configurazione di teleoperazione, il che rende costosi i dataset grandi e diversificati. Grabette sposta la raccolta in un registratore portatile a forma di pinza: telecamere e unità di misura inerziale (IMU) catturano la dimostrazione, lo SLAM ricostruisce la traiettoria in seguito, e l'output è pronto per l'addestramento.
Punti chiave
- La raccolta a mano svincola la registrazione delle dimostrazioni dall'hardware del robot: chiunque può contribuire con dati
- Flussi sincronizzati di telecamera e unità di misura inerziale (IMU) più lo SLAM offline sostituiscono costosi sistemi di motion capture o la cinematica del robot
- L'esportazione diretta in dataset LeRobot si collega subito all'ecosistema aperto per l'apprendimento di policy
- Completamente aperto in tutto lo stack: CAD stampabile, elettronica KiCad, firmware, postelaborazione e integrazioni per l'addestramento
- La variante Gripette monta gli stessi sensori su un robot reale per ottenere dati di fine-tuning a bordo del robot
A chi si rivolge
- Ricercatori di apprendimento robotico che costruiscono dataset di manipolazione
- Sviluppatori dell'ecosistema lerobot che vogliono dati di addestramento senza un secondo robot
- Laboratori che standardizzano la raccolta dati distribuita tra più sedi
- Maker che contribuiscono con dimostrazioni a un dataset condiviso dalla comunità
Limiti
- Progetto molto giovane, lanciato pubblicamente a luglio 2026: sono da aspettarsi revisioni rapide di hardware e software
- Dipende da hardware di telecamera specifico (OAK-D SR, fisheye Arducam), la cui disponibilità e il cui prezzo variano a seconda della regione
- Le traiettorie ricostruite con lo SLAM cedono un po' di precisione rispetto ai sistemi di cattura strumentati