Open Source Robotics

Eine kuratierte Sammlung hochwertiger Open-Source-Robotikprojekte, Werkzeuge und Software für die Robotik-Community.

USD

  • Auch genannt: Universal Scene Description, OpenUSD, Pixar USD
  • Kategorie: Software & tooling › Tools & formats
  • Schlagwörter: robot-description, simulation, file-format

Offenes Szenenbeschreibungsformat von Pixar, mit dem Isaac Sim und andere Simulatoren Roboter, Umgebungen und ihre Physik in geschichteten Dateien beschreiben.

Definition

Universal Scene Description (USD) ist ein offenes Framework zur Beschreibung von 3D-Szenen, das bei Pixar für die Filmproduktion entstand und 2016 als Open Source veröffentlicht wurde. Eine USD-Stage ist eine Hierarchie von Prims, die jeweils typisierte Eigenschaften tragen, und sie lässt sich aus vielen Dateien zusammensetzen: Sublayer legen Änderungen übereinander, References und Payloads binden andere Assets ein, und Variant Sets schalten zwischen Alternativen um, etwa zwischen zwei Greifern am selben Arm. Dateien gibt es als lesbaren Text (.usda), kompaktes Binärformat (.usdc) oder gepacktes Archiv (.usdz).

Die Robotik hat USD übernommen, weil Simulation für Roboterlernen ganze Welten braucht, nicht einzelne Roboter. NVIDIA hat Isaac Sim und Omniverse auf USD aufgebaut, sodass ein Roboter, seine Sensoren, das Lager, in dem er arbeitet, und die Gegenstände, die er handhabt, alle in einer Stage liegen. Das UsdPhysics-Schema ergänzt Starrkörper, Kollisionsformen, Masseeigenschaften, Gelenke und Articulations; erst dadurch wird aus einem gerenderten Modell etwas, das eine Physik-Engine Schritt für Schritt berechnen kann. In URDF oder MJCF beschriebene Roboter werden meist beim Import in USD umgewandelt, statt direkt in USD geschrieben zu werden.

In der Praxis zählt vor allem das Kompositionssystem. Mehrere Personen können an einer Szene arbeiten, ohne sich gegenseitig zu überschreiben, und eine randomisierte Trainingsszene kann Texturen, Beleuchtung oder Objektplatzierung austauschen, indem sie einen Layer ändert, statt Dateien zu kopieren. Der Preis ist Komplexität: USD ist weit umfangreicher als URDF, seine robotikspezifischen Konventionen sind noch im Entstehen, und derselbe Roboter kann je nach Werkzeug, das die Datei geschrieben hat, unterschiedlich aussehen.

Die Alliance for OpenUSD, 2023 von Pixar, Adobe, Apple, Autodesk und NVIDIA gegründet, arbeitet inzwischen an seiner Standardisierung. Der Code steht unter der Tomorrow Open Source Technology License, also der Apache License 2.0 mit einem abweichenden Markenabschnitt.

Warum es wichtig ist

Ein wachsender Teil der Robotersimulation beschreibt mit USD die Welt, in der ein Roboter arbeitet, nicht nur den Roboter selbst. Das ist wichtig, weil großskaliges Roboterlernen auf viele unterschiedliche Szenen angewiesen ist, und mit den Layern von USD kann ein Team eine Umgebung bauen, sie programmatisch variieren und teilen, ohne Dateien zu kopieren. Wer einen Roboter in Isaac Sim bringt oder simulationsfertige Asset-Bibliotheken nutzt, begegnet USD, meist nachdem ein URDF- oder MJCF-Modell darin umgewandelt wurde.

Wichtige Anwendungen

  • Beschreibung von Robotern, Sensoren und Umgebungen in Isaac Sim und Omniverse
  • Aufbau simulationsfertiger Asset-Bibliotheken, die viele Projekte wiederverwenden können
  • Randomisierung von Szenen für synthetische Daten und Roboterlernen, ohne Dateien zu kopieren
  • Digitale Zwillinge von Fabriken und Lagern, die CAD, Roboter und Layout vereinen
  • Austausch von 3D-Szenen zwischen CAD-, Rendering- und Simulationswerkzeugen

In der Praxis

Die meisten Robotikteams schreiben USD nicht von Hand. Sie exportieren den Roboter aus dem CAD oder wandeln eine vorhandene URDF- oder MJCF-Datei mit dem Importer eines Simulators um und prüfen dann das Ergebnis: Gelenkachsen, Gelenkgrenzen, Kollisionsformen und Masseeigenschaften sind die Stellen, an denen Umwandlungen meist schiefgehen. Umgebungen werden aus referenzierten Assets zusammengesetzt, und Trainingsvarianten werden als eigene Layer angewendet, damit die Basisszene unverändert bleibt. Textdateien im Format .usda eignen sich zum Lesen und Vergleichen, binäre .usdc-Dateien für alles Große.

Häufige Missverständnisse

  • USD ersetzt URDF: In der Praxis werden die meisten Roboter weiterhin zuerst in URDF und MJCF beschrieben, und USD ist oft das Format, in das sie für die Simulation umgewandelt werden
  • Eine USD-Datei ist eine einzelne Datei: Eine Stage setzt sich meist aus vielen Layern und referenzierten Assets zusammen, und wer eine Datei ohne die anderen verschiebt, macht sie unbrauchbar
  • Die Umwandlung eines Roboters in USD erhält seine Physik automatisch: Gelenkgrenzen, Antriebe, Kollisionsformen und Trägheit müssen nach dem Import oft geprüft werden
  • USD ist ein NVIDIA-Format: Es wurde bei Pixar entwickelt und wird heute von der Alliance for OpenUSD standardisiert

Wer das wissen sollte

  • Alle, die einen Roboter in Isaac Sim oder einen anderen USD-basierten Simulator bringen
  • Ingenieure, die Simulationsumgebungen oder digitale Zwillinge aufbauen
  • Forschende, die mit randomisierten Szenen synthetische Trainingsdaten erzeugen
  • Entwickler, die Robotermodelle zwischen URDF, MJCF und USD umwandeln

Verwandte Technologien

  • URDF
  • MJCF
  • NVIDIA Isaac Sim
  • NVIDIA Omniverse
  • UsdPhysics-Schema
  • glTF
  • SimReady-Assets

Verwandte Begriffe

  • URDF
  • Digital Twin
  • Sim2Real
  • Domain Randomization

Verwandte Projekte

  • GENESIS: World's fastest physics engine: 43M FPS for embodied AI learning
  • LeRobot: HuggingFace ML library for real-world robotics in PyTorch
  • text-to-cad: Lets AI coding agents design parts in Python CAD and export robots to MuJoCo
  • SolidCraft: Open-source parametric 3D CAD in Rust that exports robot assemblies to URDF
  • PyBullet: Python physics simulator for robotics and RL research with fast CPU-based simulation
  • Newton: Open GPU physics engine for robot learning, with Kamino for closed-loop linkages

Videos

  • Five Things to Know About USD | NVIDIA Omniverse Tutorials: NVIDIA
  • Import Your Robots From URDF to USD - Isaac Sim Tutorial: LycheeAI

Diese Website benötigt JavaScript. Bitte aktivieren Sie JavaScript, um unsere Open-Source-Robotikprojekte zu erkunden.