USD
- 別名: Universal Scene Description, OpenUSD, Pixar USD
- カテゴリ: Software & tooling › Tools & formats
- タグ: robot-description, simulation, file-format
Pixarが開発したオープンなシーン記述フォーマット。Isaac Simなどのシミュレーターが、ロボット、環境、その物理特性をレイヤー化したファイルで記述するのに使います。
定義
Universal Scene Description(USD)は3Dシーンを記述するためのオープンなフレームワークで、Pixarが映画制作のために開発し、2016年にオープンソースとして公開しました。USDのステージはプリム(prim)の階層で、各プリムは型付きのプロパティを持ち、多数のファイルから組み立てることができます。サブレイヤーは編集を重ね合わせ、リファレンスとペイロードは別のアセットを取り込み、バリアントセットは同じアームに付けた2種類のグリッパーのような選択肢を切り替えます。ファイルには、人が読めるテキスト形式(.usda)、コンパクトなバイナリ形式(.usdc)、ZIPパッケージ形式(.usdz)があります。
ロボティクスでUSDが採用されたのは、ロボット学習のためのシミュレーションには、ロボット単体ではなく世界全体が必要だからです。NVIDIAはIsaac SimとOmniverseをUSDの上に構築したため、ロボット、そのセンサー、作業する倉庫、扱う物体のすべてが1つのステージの中に存在します。UsdPhysicsスキーマは剛体、衝突形状、質量特性、関節、アーティキュレーションを加えるもので、これによってレンダリング用のモデルが物理エンジンで時間発展を計算できる対象になります。URDFやMJCFで記述されたロボットは、USDで手書きされるのではなく、通常はインポート時にUSDへ変換されます。
実際の作業で最も重要なのはコンポジションの仕組みです。複数の人が互いの作業を上書きすることなく1つのシーンを扱えますし、ランダム化した学習用シーンでは、ファイルをコピーせずにレイヤーを変えるだけでテクスチャ、照明、物体の配置を入れ替えられます。その代償は複雑さです。USDはURDFよりはるかに大きく、ロボット向けの慣習はまだ固まりつつある段階で、同じロボットでもファイルを書き出したツールによって見え方が変わることがあります。
2023年にPixar、Adobe、Apple、Autodesk、NVIDIAが設立したAlliance for OpenUSDが、現在その標準化に取り組んでいます。コードはTomorrow Open Source Technology Licenseで公開されており、これは商標に関する条項だけが異なるApache License 2.0です。
重要な理由
ロボットシミュレーションでは、ロボット自体だけでなくロボットが働く世界の記述にもUSDを使う場面が増えています。大規模なロボット学習には多様なシーンが大量に必要で、USDのレイヤーを使えば、チームは1つの環境を作り、プログラムで変化を加え、ファイルをコピーせずに共有できるからです。ロボットをIsaac Simに持ち込む人や、シミュレーション対応のアセットライブラリを使う人は、多くの場合URDFやMJCFのモデルをUSDに変換したあとで、必ずこのフォーマットに出会います。
主な用途
- Isaac SimとOmniverseでのロボット、センサー、環境の記述
- 多くのプロジェクトで再利用できるシミュレーション対応アセットライブラリの構築
- ファイルをコピーせずに、合成データとロボット学習のためにシーンをランダム化すること
- CAD、ロボット、レイアウトを組み合わせた工場や倉庫のデジタルツイン
- CAD、レンダリング、シミュレーションのツール間での3Dシーンの受け渡し
実際の使われ方
ほとんどのロボティクスチームはUSDを手書きしません。CADからロボットを書き出すか、シミュレーターのインポーターで既存のURDFやMJCFのファイルを変換し、その結果を確認します。変換でよく問題が起きるのは、関節軸、可動範囲、衝突形状、質量特性です。環境は参照したアセットから組み立て、学習用のバリエーションは別のレイヤーとして適用することで、ベースのシーンには手を加えずにおきます。テキスト形式の.usdaは読んだり差分を取ったりするのに便利で、規模の大きいものにはバイナリ形式の.usdcが向いています。
よくある誤解
- USDはURDFを置き換える:実際には、ほとんどのロボットは今もまずURDFやMJCFで記述され、USDはシミュレーションのために変換される先であることが多い
- USDファイルは1つのファイルで完結している:ステージは通常、多数のレイヤーと参照アセットから組み立てられており、1つのファイルだけを移動すると壊れてしまう
- ロボットをUSDに変換すれば物理特性は自動的に保たれる:インポート後に、可動範囲、ドライブ、衝突形状、慣性を確認する必要があることが多い
- USDはNVIDIAのフォーマットである:USDはPixarが生み出したもので、現在はAlliance for OpenUSDが標準化を進めている
知っておくべき人
- ロボットをIsaac SimなどのUSDベースのシミュレーターに持ち込むすべての人
- シミュレーション環境やデジタルツインを構築するエンジニア
- ランダム化したシーンで合成学習データを生成する研究者
- URDF、MJCF、USDの間でロボットモデルを変換する開発者
関連技術
- URDF
- MJCF
- NVIDIA Isaac Sim
- NVIDIA Omniverse
- UsdPhysicsスキーマ
- glTF
- SimReadyアセット
関連用語
関連プロジェクト
- GENESIS: World's fastest physics engine: 43M FPS for embodied AI learning
- LeRobot: HuggingFace ML library for real-world robotics in PyTorch
- text-to-cad: Lets AI coding agents design parts in Python CAD and export robots to MuJoCo
- SolidCraft: Open-source parametric 3D CAD in Rust that exports robot assemblies to URDF
- PyBullet: Python physics simulator for robotics and RL research with fast CPU-based simulation
- Newton: Open GPU physics engine for robot learning, with Kamino for closed-loop linkages
動画
- Five Things to Know About USD | NVIDIA Omniverse Tutorials: NVIDIA
- Import Your Robots From URDF to USD - Isaac Sim Tutorial: LycheeAI