Articulated object

• Categoria: Planning & manipulation › Manipulation
• Tag: manipulation, 3d-perception, kinematics, mobile-manipulation, household-robotics

Un oggetto fatto di parti rigide collegate da giunti, di solito rotoidali o prismatici, come una porta, un cassetto, un portatile o un forno, le cui parti si muovono l'una rispetto all'altra quando un robot lo manipola.

Definizione

Un oggetto articolato (articulated object) è costituito da corpi rigidi collegati da giunti che consentono un moto relativo vincolato. Nella manipolazione robotica i giunti hanno di solito un solo grado di libertà: giunti rotoidali per porte, coperchi e schermi di portatili, e giunti prismatici per cassetti e pannelli scorrevoli. Molte formulazioni, compresa quella di FlowBot3D, assumono che un corpo sia fisso rispetto al mondo, come la struttura di un mobile o un forno, quindi il compito è muovere le altre parti. In generale, oggetti articolati come forbici, pinze o un portatile su una scrivania possono anche muoversi nel loro insieme.

Manipolare questi oggetti significa rispettare il vincolo cinematico. Un robot che apre una porta deve muovere la mano lungo un arco attorno all'asse della cerniera; tirare in linea retta all'indietro genera grandi forze interne o fa perdere la presa. Gli approcci differiscono in quanto modellano. Le pipeline basate su modello stimano esplicitamente la struttura cinematica: quali parti sono corpi, il tipo di giunto, la direzione e la posizione dell'asse e lo stato corrente del giunto, spesso osservando le parti muoversi e adattando modelli rotoidali o prismatici. Gli approcci basati sull'apprendimento predicono questa struttura da una singola nuvola di punti o immagine, oppure la saltano e predicono direttamente grandezze locali, come un flusso di articolazione che dà la direzione in cui si muoverebbe ogni punto di una parte, o una mappa di affordance che indica dove afferrare e tirare. La percezione interattiva combina le due cose: il robot muove un po' una parte, osserva il risultato e aggiorna la sua stima.

Gli oggetti articolati sono di solito rappresentati come i robot, cioè come alberi cinematici in formati come URDF. Dataset di simulazione come PartNet-Mobility, usato con il simulatore SAPIEN, forniscono un ampio insieme di oggetti domestici annotati per l'addestramento e il test. Le difficoltà pratiche comprendono limiti dei giunti sconosciuti, attrito e carichi di molle, chiavistelli e maniglie che richiedono un'azione separata, e viste parziali in cui l'asse del giunto è nascosto.

Perché è importante

Gran parte dell'ambiente costruito quotidiano è articolato: porte, cassetti, mobili, frigoriferi ed elettrodomestici. I robot domestici e di servizio devono aprirli e chiuderli in modo affidabile, e questo richiede di ragionare sui vincoli cinematici invece di trattare l'oggetto come un corpo rigido libero.

Applicazioni principali

• Aprire porte, cassetti e mobili in case e uffici
• Azionare elettrodomestici come forni, lavastoviglie e frigoriferi
• Benchmark di manipolazione mobile domestica
• Costruire gemelli digitali interattivi di scene interne
• Usare utensili incernierati come pinze e forbici

In pratica

Un team che programma un manipolatore mobile per aprire i pensili di una cucina acquisisce una nuvola di punti del mobile con una telecamera di profondità. Una rete segmenta l'anta e predice l'asse della cerniera oppure una direzione di moto per punto, e il sistema sceglie una presa sulla maniglia o sul bordo dell'anta. Il braccio segue poi l'arco previsto in controllo di impedenza, così che gli errori nella stima dell'asse vengano assorbiti dalla cedevolezza invece di accumulare grandi forze. Quando l'anta si è mossa un po', il sistema stima di nuovo l'asse dal percorso effettivo della mano e prosegue con l'arco corretto, fermandosi quando la forza misurata indica il limite del giunto.

Idee sbagliate comuni

• Aprire una porta è un puro problema di controllo di posizione — la mano deve seguire il vincolo del giunto, quindi la cedevolezza o il controllo di forza contano quanto posizioni accurate
• L'asse del giunto deve essere noto con esattezza prima di agire — molti sistemi partono da una stima approssimativa e la affinano durante l'interazione
• Gli oggetti articolati sono sempre fissi rispetto al mondo — molti benchmark assumono una base fissa per semplicità, ma anche utensili e dispositivi portatili si muovono nel loro insieme

Chi dovrebbe saperlo

• Ingegneri di manipolazione mobile e domestica
• Ricercatori di percezione robotica che lavorano sulla comprensione di scene 3D
• Chi costruisce simulazioni e dataset
• Sviluppatori di robot di servizio

Tecnologie correlate

• Dataset PartNet-Mobility (PartNet-Mobility Dataset)
• Simulatore SAPIEN (SAPIEN Simulator)
• URDF
• Reti di segmentazione di nuvole di punti (Point Cloud Segmentation Networks)
• Stima della struttura cinematica (Kinematic Structure Estimation)

Termini correlati

• Interactive Perception
• URDF
• Impedance Control
• Point Cloud
• Joint
• Affordance

Progetti correlati

• LeRobot: HuggingFace ML library for real-world robotics in PyTorch
• Isaac Lab: NVIDIA robot learning framework: one task API across Newton, PhysX and Isaac Sim
• NVIDIA Isaac GR00T: NVIDIA open foundation model for humanoid robot reasoning and skills
• OpenVLA: 7B-parameter Vision-Language-Action model for robotic manipulation
• Mobile ALOHA: Bimanual mobile manipulation with 4 robot arms on a wheeled base for teleoperation
• Drake: MIT robotics toolbox for model-based dynamics, optimization, and control system design