Shared Autonomy
- Aussi appelé: shared control, assistive teleoperation
- Catégorie: Control › Human in the loop
- Mots-clés: human-robot-interaction, teleoperation, assistive-robotics, intent-inference, control-arbitration
Schéma de commande dans lequel un opérateur humain et un robot agissent en même temps sur la même tâche, le robot inférant le but de l'opérateur et mêlant sa propre assistance aux commandes.
Définition
L'autonomie partagée (shared autonomy) désigne les systèmes dans lesquels un humain et un robot commandent le même robot en même temps. L'opérateur donne des commandes au moyen d'un joystick, d'une interface cerveau-machine, d'un dispositif de téléopération ou d'une autre entrée, et le robot ne se contente pas de les exécuter : il estime ce que l'opérateur cherche à accomplir et apporte ses propres actions en vue de ce but. Le résultat se situe entre la téléopération directe, où le robot suit exactement les commandes, et l'autonomie complète, où l'humain ne fait que fixer la tâche.
La plupart des formulations comportent deux parties. L'inférence d'intention (intent inference) maintient une croyance sur des buts candidats, par exemple l'objet que l'utilisateur veut saisir, mise à jour à partir des entrées de l'utilisateur et du mouvement du robot jusque-là. L'arbitrage (arbitration) décide comment combiner l'assistance du robot et la commande de l'utilisateur. Dragan et Srinivasa (2013) l'ont formulé comme un mélange de politiques (policy blending), où la commande exécutée est un mélange pondéré de l'entrée de l'utilisateur et de la prédiction du robot, le poids augmentant à mesure que la confiance dans le but prédit croît. D'autres approches traitent le but inconnu comme un état caché dans un processus de décision markovien partiellement observable et choisissent des actions utiles pour plusieurs buts plausibles, ou apprennent l'assistance directement à partir de données, par exemple en associant des entrées utilisateur de faible dimension à des actions latentes apprises.
Le compromis central se situe entre assistance et autorité de commande. Une assistance agressive peut accomplir les tâches plus vite, mais agit sur de mauvaises hypothèses lorsque les buts sont ambigus, et les utilisateurs disent souvent leur frustration quand le robot passe outre leurs commandes. Beaucoup de systèmes laissent donc l'humain reprendre la main à tout moment, affichent dans l'interface le but inféré par le robot, ou adaptent le niveau d'assistance à chaque utilisateur au fil d'interactions répétées. L'autonomie partagée se distingue du contrôle alterné (traded control), où l'autorité passe de l'humain au robot par épisodes discrets, et de l'interaction physique humain-robot, où l'humain guide le robot par contact direct plutôt que par un dispositif d'entrée.
Pourquoi c'est important
Beaucoup de robots utiles ne peuvent pas encore être entièrement autonomes, et beaucoup d'utilisateurs ne peuvent pas téléopérer avec précision un bras à nombreux degrés de liberté au moyen d'un joystick ou d'une autre entrée limitée. L'autonomie partagée laisse le robot gérer le positionnement fin pendant que l'humain garde les décisions, ce qui rend les bras d'assistance, la manipulation à distance et les tâches de pilotage difficiles praticables par des non-spécialistes.
Applications principales
- Bras robotisés d'assistance pour les personnes à mobilité réduite des membres supérieurs
- Manipulation à distance avec des dispositifs d'entrée limités ou une latence de communication
- Commande d'appareils robotisés par interface cerveau-machine et par électromyographie
- Aide à la conduite et évitement de collision dans les véhicules semi-autonomes
- Pilotage de drones et d'aéronefs avec stabilisation automatique et évitement d'obstacles
- Chirurgie assistée par robot avec guides virtuels et contraintes de mouvement
En pratique
Un bras d'assistance monté sur un fauteuil roulant est commandé par un joystick à deux axes, si bien que l'utilisateur ne peut pas commander à la fois les six degrés de liberté de l'effecteur terminal. Le logiciel détecte les objets candidats sur une table avec une caméra de profondeur et maintient pour chacun une probabilité d'être la cible, mise à jour selon la façon dont les mouvements récents du joystick de l'utilisateur pointent vers lui. Tant que la croyance est répartie entre plusieurs objets, le bras suit presque directement les commandes de l'utilisateur. Lorsqu'un objet devient nettement le plus probable, le contrôleur mêle à la commande un mouvement vers une pose de pré-saisie de cet objet, y compris la rotation du poignet que le joystick ne peut pas exprimer. L'utilisateur peut à tout moment pousser contre l'assistance, ce qui abaisse la probabilité de ce but et lui rend l'autorité. Les ingénieurs règlent la fonction de mélange et enregistrent les reprises de main pour repérer où l'inférence se trompe.
Idées reçues
- L'autonomie partagée consiste à basculer entre modes manuel et automatique — c'est le contrôle alterné ; l'autonomie partagée combine les deux sources de commande en continu
- Plus d'assistance est toujours mieux — une assistance fondée sur une mauvaise estimation du but ralentit les utilisateurs, et beaucoup d'utilisateurs préfèrent garder davantage de contrôle, même au prix d'un peu de vitesse
- Le robot doit connaître le but à l'avance — l'inférence du but à partir des entrées de l'utilisateur fait partie du problème, et les bons systèmes agissent de manière sensée tant que le but reste incertain
- L'autonomie partagée est la même chose que la téléopération — en téléopération simple, le robot reproduit les commandes de l'opérateur, alors qu'en autonomie partagée il ajoute ses propres actions
Qui devrait le savoir
- Ingénieurs en robotique d'assistance et de rééducation
- Chercheurs en téléopération et en interaction humain-robot
- Concepteurs d'interfaces pour des robots commandés par des non-spécialistes
- Ingénieurs qui conçoivent des aides à la conduite ou au pilotage
Technologies associées
- Mélange de politiques (Policy Blending)
- Inférence d'intention (Intent Inference)
- Guides virtuels (Virtual Fixtures)
- Interfaces cerveau-machine
- Bras robotisés d'assistance
Termes associés
- Teleoperation
- Physical Human-Robot Interaction
- Partially Observable Markov Decision Process (POMDP)
- Inverse Reinforcement Learning
- Safety Filter
Projets associés
- SO-101 Open Robot Arm: 6-DOF robot arm for teleoperation and AI robotics research
- XLeRobot: Practical dual-arm mobile home robot for $660 with <4hrs assembly
- DimOS: Python robotics runtime with agents, SLAM and teleop, no ROS required
- Mobile ALOHA: Bimanual mobile manipulation with 4 robot arms on a wheeled base for teleoperation
- GEAR-SONIC: NVIDIA's whole-body controller for the Unitree G1, trained to track any human motion
- OpenArm: 7DOF humanoid arm for physical AI research in contact-rich environments
Vidéos
- Shared autonomy for interactive robotics: The Royal Society
- Shared Autonomy: the robots are ready, are you? | Sethu Vijayakumar | TEDxUniversityofEdinburgh: TEDx Talks