Wizard of Oz

Aussi appelé: WoZ, Wizard-of-Oz prototyping
Catégorie: Control › Human in the loop
Mots-clés: human-robot-interaction, user-studies, research-methods, teleoperation, social-robotics

Méthode d'étude dans laquelle un opérateur humain caché, le magicien, pilote tout ou partie du comportement d'un robot pendant que les participants interagissent avec le robot comme s'il était autonome.

Définition

Dans une étude Wizard of Oz (WoZ), une personne hors du champ de vision du participant, le magicien (wizard), pilote tout ou partie du comportement d'un robot, comme sa parole, ses gestes, sa navigation ou ses choix, pendant que le participant interagit avec lui comme s'il agissait de lui-même. Le nom renvoie à l'opérateur caché derrière le rideau dans Le Magicien d'Oz. La méthode est née de la recherche en interaction humain-ordinateur sur les interfaces en langage naturel, où elle permettait aux concepteurs d'étudier comment les gens parleraient à des systèmes qu'on ne savait pas encore construire, et elle est devenue une méthode standard en interaction humain-robot (HRI).

Le WoZ permet aux chercheurs d'étudier comment les gens réagissent à des capacités qui ne fonctionnent pas encore de manière fiable, comme la conversation ouverte, la perception sociale ou une alternance fluide des tours de parole, et de tester des idées de conception avant que la technologie sous-jacente n'existe. Le pilotage par le magicien va de la téléopération complète au choix parmi des comportements préparés, et beaucoup d'études mêlent des composants pilotés par le magicien et des composants autonomes, par exemple une navigation autonome avec un dialogue piloté par le magicien. Les bonnes pratiques comprennent un protocole écrit pour le magicien, une formation et des contrôles de cohérence des magiciens, la journalisation de chaque action du magicien et une indication claire des comportements pilotés par le magicien.

La méthode a des limites connues. Les résultats décrivent comment les gens réagissent à un robot idéalisé plutôt qu'au système réellement réalisable, et le jugement et le temps de réaction du magicien font partie du traitement expérimental. Les participants peuvent soupçonner la tromperie, ce qui peut modifier leur comportement. Comme les participants sont délibérément induits en erreur sur l'autonomie du robot, un examen éthique et un débriefing après la séance sont la norme. Les journaux des actions du magicien sont aussi utilisés ensuite pour concevoir un comportement autonome ou comme démonstrations pour l'apprentissage, ce qui les rend utiles au-delà de l'étude d'origine.

Pourquoi c'est important

De nombreuses questions de HRI portent sur la façon dont les gens réagissent à des capacités robotiques pas encore assez fiables pour être déployées. Le Wizard of Oz rend ces études possibles, mais limite aussi ce que signifient leurs résultats ; bien lire des résultats de HRI exige donc de savoir quelles parties du robot étaient pilotées par une personne.

Applications principales

Prototypage du comportement conversationnel et social des robots avant qu'il puisse être automatisé
Étude de la confiance, de l'engagement et de l'acceptation en interaction humain-robot
Études de longue durée et en conditions réelles (in the wild) où l'autonomie est incomplète
Collecte de données d'interaction pour concevoir ou entraîner des comportements autonomes
Premiers tests de concepts de robots d'assistance et de service avec les utilisateurs visés

En pratique

Une équipe de HRI veut savoir si un robot social qui change de rôle pendant un jeu de groupe maintient l'engagement des joueurs sur plusieurs séances. Une reconnaissance fiable de l'état de chaque joueur et une politique solide pour choisir les rôles ne sont pas encore disponibles. Un magicien installé dans une pièce voisine regarde donc les flux des caméras et sélectionne le rôle et les énoncés du robot dans une interface préparée, tandis que la synthèse vocale et les gestes s'exécutent automatiquement. Le magicien suit un protocole de décision écrit, et chaque sélection est journalisée avec un horodatage. Après les séances, les participants sont débriefés et on leur demande s'ils croyaient le robot autonome, et l'équipe indique, à côté des résultats, quels comportements étaient pilotés par le magicien.

Idées reçues

Wizard of Oz signifie simplement que le robot est téléopéré — les magiciens ne pilotent souvent que certains comportements, fréquemment en choisissant parmi des options préparées, tandis que d'autres parties fonctionnent de façon autonome
Les résultats WoZ montrent ce qu'un robot autonome accomplira — ils montrent comment les gens réagissent à un système idéalisé, auquel une mise en œuvre réelle peut ne pas correspondre
Recourir à un magicien dispense d'un contrôle expérimental rigoureux — le timing et le jugement du magicien varient, si bien que protocoles, formation et journalisation sont nécessaires pour garder des conditions cohérentes

Qui devrait le savoir

Chercheurs en interaction humain-robot
Concepteurs de robots sociaux et de service
Chercheurs UX qui prototypent le comportement des robots
Évaluateurs éthiques qui examinent des études impliquant une tromperie

Technologies associées

Interfaces de téléopération (Teleoperation Interfaces)
Autonomie partagée (Shared Autonomy)
Outils de création de comportements (Behavior Authoring Tools)
Journalisation des interactions et annotation vidéo (Interaction Logging and Video Annotation)
Protocoles de débriefing des participants (Participant Debriefing Protocols)

Termes associés

Projets associés

SO-101 Open Robot Arm: 6-DOF robot arm for teleoperation and AI robotics research
XLeRobot: Practical dual-arm mobile home robot for $660 with <4hrs assembly
DimOS: Python robotics runtime with agents, SLAM and teleop, no ROS required
Mobile ALOHA: Bimanual mobile manipulation with 4 robot arms on a wheeled base for teleoperation
GEAR-SONIC: NVIDIA's whole-body controller for the Unitree G1, trained to track any human motion
OpenArm: 7DOF humanoid arm for physical AI research in contact-rich environments