Open Source Robotics

Une collection organisée de projets, outils et logiciels robotiques open source de haute qualité.

USD

  • Aussi appelé: Universal Scene Description, OpenUSD, Pixar USD
  • Catégorie: Software & tooling › Tools & formats
  • Mots-clés: robot-description, simulation, file-format

Format ouvert de description de scènes créé par Pixar, qu'Isaac Sim et d'autres simulateurs utilisent pour décrire robots, environnements et leur physique dans des fichiers en couches.

Définition

Universal Scene Description (USD) est un framework ouvert de description de scènes 3D, créé chez Pixar pour la production de films et publié en open source en 2016. Un stage USD est une hiérarchie de prims, chacune dotée de propriétés typées, et il peut être assemblé à partir de nombreux fichiers : les sous-couches (sublayers) empilent les modifications, les références et les payloads importent d'autres assets, et les variant sets basculent entre des alternatives, comme deux pinces sur un même bras. Les fichiers existent en texte lisible (.usda), en binaire compact (.usdc) ou en archive compressée (.usdz).

La robotique l'a adopté parce que la simulation pour l'apprentissage robotique a besoin de mondes entiers, pas de robots isolés. NVIDIA a bâti Isaac Sim et Omniverse sur USD : un robot, ses capteurs, l'entrepôt où il travaille et les objets qu'il manipule vivent tous dans un même stage. Le schéma UsdPhysics ajoute corps rigides, formes de collision, propriétés de masse, articulations et chaînes articulées (articulations), et c'est ce qui transforme un modèle de rendu en un objet qu'un moteur physique peut faire évoluer pas à pas. Les robots décrits en URDF ou en MJCF sont généralement convertis en USD à l'import plutôt qu'écrits directement en USD.

En pratique, c'est le système de composition qui compte le plus. Plusieurs personnes peuvent travailler sur une même scène sans écraser le travail des autres, et une scène d'entraînement randomisée peut changer de textures, d'éclairage ou de placement d'objets en modifiant une couche plutôt qu'en copiant des fichiers. Le prix à payer est la complexité : USD est bien plus vaste qu'URDF, ses conventions propres à la robotique se stabilisent encore, et un même robot peut se présenter différemment selon l'outil qui a écrit le fichier.

L'Alliance for OpenUSD, fondée en 2023 par Pixar, Adobe, Apple, Autodesk et NVIDIA, travaille désormais à sa normalisation. Le code est publié sous la Tomorrow Open Source Technology License, c'est-à-dire la licence Apache 2.0 avec une section sur les marques différente.

Pourquoi c'est important

Une part croissante de la simulation robotique utilise USD pour décrire le monde dans lequel un robot travaille, et pas seulement le robot. C'est important parce que l'apprentissage robotique à grande échelle repose sur de nombreuses scènes variées, et les couches d'USD permettent à une équipe de construire un environnement, de le faire varier par programme et de le partager sans copier de fichiers. Quiconque fait entrer un robot dans Isaac Sim, ou utilise des bibliothèques d'assets prêts pour la simulation, le rencontrera, généralement après avoir converti un modèle URDF ou MJCF.

Applications principales

  • Description de robots, de capteurs et d'environnements dans Isaac Sim et Omniverse
  • Constitution de bibliothèques d'assets prêts pour la simulation, réutilisables par de nombreux projets
  • Randomisation de scènes pour les données synthétiques et l'apprentissage robotique, sans copier de fichiers
  • Jumeaux numériques d'usines et d'entrepôts réunissant CAO, robots et implantation
  • Échange de scènes 3D entre outils de CAO, de rendu et de simulation

En pratique

La plupart des équipes de robotique n'écrivent pas l'USD à la main. Elles exportent le robot depuis la CAO ou convertissent un fichier URDF ou MJCF existant avec l'importeur d'un simulateur, puis vérifient le résultat : axes et limites des articulations, formes de collision et propriétés de masse sont les points où les conversions échouent le plus souvent. Les environnements sont assemblés à partir d'assets référencés, et les variations d'entraînement sont appliquées comme des couches séparées pour que la scène de base reste intacte. Les fichiers texte .usda sont utiles pour lire et comparer, les fichiers binaires .usdc pour tout ce qui est volumineux.

Idées reçues

  • USD remplace URDF : en pratique, la plupart des robots sont encore décrits d'abord en URDF et en MJCF, et USD est souvent le format vers lequel on les convertit pour la simulation
  • Un fichier USD est un fichier unique : un stage est généralement composé de nombreuses couches et d'assets référencés, et déplacer un fichier sans les autres le casse
  • Convertir un robot en USD préserve automatiquement sa physique : limites des articulations, entraînements, formes de collision et inertie doivent souvent être vérifiés après l'import
  • USD est un format NVIDIA : il a été créé chez Pixar et il est aujourd'hui normalisé par l'Alliance for OpenUSD

Qui devrait le savoir

  • Toute personne qui fait entrer un robot dans Isaac Sim ou un autre simulateur fondé sur USD
  • Les ingénieurs qui construisent des environnements de simulation ou des jumeaux numériques
  • Les chercheurs qui génèrent des données d'entraînement synthétiques avec des scènes randomisées
  • Les développeurs qui convertissent des modèles de robots entre URDF, MJCF et USD

Technologies associées

  • URDF
  • MJCF
  • NVIDIA Isaac Sim
  • NVIDIA Omniverse
  • Schéma UsdPhysics
  • glTF
  • Assets SimReady

Termes associés

  • URDF
  • Digital Twin
  • Sim2Real
  • Domain Randomization

Projets associés

  • GENESIS: World's fastest physics engine: 43M FPS for embodied AI learning
  • LeRobot: HuggingFace ML library for real-world robotics in PyTorch
  • text-to-cad: Lets AI coding agents design parts in Python CAD and export robots to MuJoCo
  • SolidCraft: Open-source parametric 3D CAD in Rust that exports robot assemblies to URDF
  • PyBullet: Python physics simulator for robotics and RL research with fast CPU-based simulation
  • Newton: Open GPU physics engine for robot learning, with Kamino for closed-loop linkages

Vidéos

  • Five Things to Know About USD | NVIDIA Omniverse Tutorials: NVIDIA
  • Import Your Robots From URDF to USD - Isaac Sim Tutorial: LycheeAI

Ce site nécessite JavaScript. Veuillez activer JavaScript pour explorer nos projets de robotique open source.