Galaxea Open-World Dataset
Dataset di manipolazione mobile nel mondo reale, raccolto in case e uffici su robot Galaxea R1
Licenza
CC-BY-NC-SA-4.0
Panoramica
Il Galaxea Open-World Dataset è un dataset di robot reali su larga scala di Galaxea AI: centinaia di ore di dimostrazioni di manipolazione mobile raccolte sui manipolatori mobili R1 Lite dell'azienda, al lavoro in ambienti residenziali, cucine, negozi e uffici autentici, non in riproduzioni di laboratorio. Ogni traiettoria contiene viste RGB sincronizzate, propriocezione e annotazioni linguistiche dettagliate, e il dataset è la base della famiglia di modelli VLA a doppio sistema G0 (GalaxeaVLA), rilasciata apertamente e addestrata su di esso.
La release di Galaxea mira al divario tra le dimostrazioni raccolte in laboratorio e il mondo aperto in cui devono operare i robot di servizio: i dati sono raccolti in spazi reali abitati, con il disordine, l'illuminazione e le variazioni di disposizione naturali, su un'incarnazione coerente (R1 Lite: base omnidirezionale, due bracci, gradi di libertà del busto), che secondo l'articolo di accompagnamento è decisiva per il trasferimento delle policy. Il corpus organizza i compiti dalle abilità elementari (prendere, posare, aprire, pulire) alle routine domestiche a lungo orizzonte, ciascuno con un'annotazione linguistica gerarchica (segmentazione in sottocompiti più istruzioni per i singoli passi), consentendo sia l'addestramento di modelli Vision-Language-Action (VLA) piatti sia architetture a doppio sistema in cui un pianificatore impartisce sotto-obiettivi linguistici a una policy di basso livello (la famiglia di modelli G0 rilasciata dimostra esattamente questo, con checkpoint aperti e codice di addestramento e valutazione in GalaxeaVLA). La distribuzione avviene su Hugging Face in formati standard con strumenti compatibili con LeRobot. Accanto ad AgiBot World rappresenta la nuova generazione di dati robotici aperti su scala aziendale: corpus a incarnazione singola, gestiti da operatori professionisti e raccolti in ambienti reali, su cui la ricerca VLA ora addestra e confronta i modelli.
Perché è importante
La maggior parte dei dati di manipolazione proviene dai laboratori; il corpus di Galaxea è stato raccolto dove i robot lavoreranno davvero, in case e uffici reali, ed è distribuito con l'intero stack aperto di modelli Vision-Language-Action (VLA) addestrato su di esso, il che ne fa una delle poche release aperte end-to-end di dati+modello nella manipolazione mobile.
Il problema che risolve
Le policy addestrate su dimostrazioni di laboratorio falliscono nel disordine e nella varietà di disposizione reali. Questo dataset fornisce dimostrazioni di manipolazione mobile da ambienti autentici con etichette linguistiche gerarchiche, più i modelli aperti G0 che dimostrano ciò che i dati consentono.
Punti chiave
- Centinaia di ore di dimostrazioni reali di manipolazione mobile su robot Galaxea R1 Lite
- Raccolte in case, cucine, negozi e uffici autentici, non in riproduzioni di laboratorio
- Annotazioni linguistiche gerarchiche: segmenti di sottocompiti più istruzioni a livello di passo
- Base della famiglia aperta di modelli VLA a doppio sistema G0 (checkpoint e codice in GalaxeaVLA)
- Distribuito su Hugging Face con strumenti compatibili con LeRobot
A chi si rivolge
- Ricercatori di manipolazione mobile e modelli VLA
- Sviluppatori di policy per robot di servizio
- Ricercatori di policy gerarchiche e a doppio sistema
- Curatori di dataset per l'apprendimento robotico
Limiti
- Incarnazione singola (Galaxea R1 Lite): l'uso cross-embodiment richiede adattamenti
- Download molto grande alla scala completa
- La distribuzione dei compiti riflette l'orientamento di Galaxea ai robot di servizio (abilità domestiche e d'ufficio)