Pick-and-Place
- Aussi appelé: pick and place, pick-place
- Catégorie: Planning & manipulation › Manipulation
- Mots-clés: manipulation, grasping, industrial-automation, benchmark-task, robot-learning
Tâche de manipulation qui consiste à saisir un objet à un endroit et à le relâcher à une pose cible spécifiée ; opération de base de l'automatisation industrielle et banc d'essai standard de l'apprentissage robotique.
Définition
La prise et dépose (pick-and-place) est la tâche qui consiste à déplacer un objet de l'endroit où il se trouve vers celui où il doit être : le robot s'approche de l'objet, le saisit, le soulève et le transporte, puis le relâche à une position et une orientation cibles. C'est le travail le plus courant confié aux robots industriels, des robots SCARA et delta qui déplacent des pièces sur des lignes de convoyage aux machines spécialisées qui placent des composants électroniques sur des circuits imprimés, et c'est aussi la famille de tâches la plus courante dans les jeux de données et les bancs d'essai de l'apprentissage robotique.
Un système complet de prise et dépose enchaîne plusieurs problèmes. La perception localise l'objet et, si nécessaire, estime sa pose. La planification de saisie choisit où et comment le tenir, que ce soit par une prise antipodale à mâchoires parallèles, une ventouse ou une main à plusieurs doigts. La planification de mouvement produit des mouvements sans collision d'approche, de levée, de transport et de retrait, généralement avec des segments rectilignes près de l'objet. La dépose doit trouver une pose où l'objet est stable, n'entre pas en collision avec son environnement et satisfait la tâche, par exemple debout, inséré dans un montage ou empilé. Dans les usines structurées, les montages et la géométrie connue des pièces éliminent l'essentiel de l'incertitude, si bien que la tâche se réduit à des positions apprises exécutées à grande vitesse. Dans les environnements non structurés comme le prélèvement en vrac (bin picking) en entrepôt ou le rangement domestique, les difficultés sont l'encombrement, les objets inconnus, les articles transparents ou déformables et l'occlusion.
Dans la recherche en apprentissage, les épisodes de prise et dépose sont souvent spécifiés en langage naturel, par exemple placer un objet dans un récipient désigné par son nom, et servent à tester la généralisation à de nouveaux objets, scènes et instructions. Une saisie réussie n'est pas une tâche réussie : l'objet doit être tenu d'une manière qui permette la dépose, c'est pourquoi le choix de la saisie est souvent conditionné par la pose de dépose.
Pourquoi c'est important
La plupart de la manipulation pratique se ramène à prendre des objets et à les poser quelque part. Comprendre toute la chaîne perception, saisie, planification de mouvement et dépose, et savoir où chaque maillon échoue, est une connaissance de base pour quiconque construit ou évalue un système de manipulation.
Applications principales
- Chargement de machines et transfert de pièces sur les lignes de production
- Assemblage électronique avec placement de composants montés en surface
- Préparation de commandes et prélèvement en vrac en entrepôt
- Emballage et palettisation
- Bancs d'essai de manipulation conditionnée par le langage pour les modèles Vision-Langage-Action
- Rangement domestique et apport d'objets en assistance
En pratique
Dans une cellule logistique, un bras à six axes équipé d'une pince à ventouse surplombe un bac d'articles mélangés. Une caméra de profondeur image le bac, un modèle propose des points de préhension par ventouse sur des surfaces planes et dégagées, et chaque candidat est noté selon la qualité de l'étanchéité et le risque de collision avec les parois du bac. Le bras approche selon la normale à la surface, contrôle la pression de vide pour confirmer l'étanchéité, soulève verticalement pour dégager les articles voisins et se dirige vers un carton d'expédition. La pose de dépose est calculée à partir de l'espace libre du carton pour que l'article ne tombe que d'une faible hauteur. Les prises échouées, détectées par la perte de vide, sont enregistrées avec l'image de profondeur afin que le modèle de saisie puisse être réentraîné sur ses erreurs.
Idées reçues
- La prise et dépose est un problème résolu — c'est une routine avec des pièces connues et fixées, mais l'encombrement et les objets inconnus, transparents et déformables en font encore un domaine de recherche actif
- La dépose est la moitié facile — la dépose exige une pose stable, sans collision et conforme à la tâche, et certaines saisies rendent impossible la dépose requise
- Une saisie réussie signifie une tâche réussie — les objets peuvent glisser, tourner dans la pince ou être tenus d'une manière qui bloque la dépose prévue
- Des taux de réussite élevés sur un banc d'essai signifient que le système est prêt pour le monde réel — les scènes et les ensembles d'objets des bancs d'essai sont restreints, si bien que les résultats se transfèrent souvent mal à de nouveaux objets ou à un autre éclairage
Qui devrait le savoir
- Intégrateurs en automatisation industrielle et en cellules robotisées
- Ingénieurs en manipulation et en planification de saisie
- Chercheurs en apprentissage robotique qui évaluent des politiques
- Makers qui construisent leurs premiers projets de bras
Technologies associées
- Pinces à vide et à ventouse
- Pinces à mâchoires parallèles
- MoveIt
- Robots delta et SCARA
- Estimation de pose d'objet
Termes associés
Projets associés
- LeRobot: HuggingFace ML library for real-world robotics in PyTorch
- OpenPI: Physical Intelligence VLA foundation models for general robot control
- Isaac Lab: NVIDIA robot learning framework: one task API across Newton, PhysX and Isaac Sim
- NVIDIA Isaac GR00T: NVIDIA open foundation model for humanoid robot reasoning and skills
- OpenVLA: 7B-parameter Vision-Language-Action model for robotic manipulation
- Drake: MIT robotics toolbox for model-based dynamics, optimization, and control system design