NVIDIA Agent ToolkitがOmniverseライブラリで拡張、AIエージェントがシミュレーション対応の仮想世界構築を可能に

テクノロジー

OmniverseライブラリがフィジカルAI機能を提供

NVIDIA Agent Toolkitは、ツール、スキル、データソースを連携させるAIエージェントの構築を支援します。Omniverseライブラリは、以下の機能を提供し、これらのエージェントの能力を3DおよびフィジカルAIのワークフローへと拡張します。

新たなOmniverseライブラリはGitHubで公開されており、AIエージェントがシーンの検証、変更のテスト、シミュレーション用3Dアセットの準備といったワークフローを構築するためのツールを利用できます。また、BlenderにOmniverseライブラリを統合するための新しいブループリントもGitHubで利用可能です。

これらのライブラリの主な機能は以下の通りです。

  • NVIDIA RTX センサー シミュレーション (ovrtx): アプリケーションが3Dシーンからカメラ、LiDRA、レーダー、その他のセンサー出力を生成するのに役立ちます。これにより、開発者とAIエージェントは、フィジカルAIシステムが仮想環境をどのように認識するかをテストできます。

  • 物理的動作 (ovphysx): GPUで高速化された物理学を使用して、衝突、質量、摩擦、運動などの特性を用いて3Dシーンに現実的な挙動をもたらします。これにより、オブジェクトとシステムがシミュレーションでどのように相互作用するかを事前にテストできます。

  • シミュレーション対応3Dオブジェクト (CAD-to-SimReadyスキル): コンピューター支援設計 (CAD) データをOpenUSD上に構築されたSimReadyアセットに変換するのに役立ちます。これにより、フィジカルAIシミュレーションと仮想テストに必要な特性が3Dコンテンツに付与されます。

ソフトウェア開発企業による活用

SideFXやPTCといったソフトウェアメーカーは、エージェント対応のセンサーシミュレーション、物理演算、アセット検証を実現するためにOmniverseライブラリを統合しています。これにより、開発者やテクニカルアーティストが3Dコンテンツ制作で既に利用しているアプリケーションやワークフローに、自律的に動作するエージェント型AIを組み込むことが可能になります。

SideFXは、OpenUSDワークフローやovrtx、ovphysxライブラリを使用し、エージェントが同社の「Houdini」によるプロシージャル3Dコンテンツ制作ワークフローにOmniverseライブラリを統合する可能性を模索しています。SideFXの社長兼CEOであるKim Davidson氏は、「シミュレーション、ロボティクス、産業用AIに求められる、複雑かつ制御可能な世界を構築するには、プロシージャル3D制作が不可欠です。NVIDIA OmniverseライブラリとOpenUSDを活用することで、SideFXはエージェント対応ツールがHoudiniのワークフローをどのように支援できるかを検証しています」と述べています。

PTCのCADおよび製品データ管理 (PDM) プラットフォーム「Onshape」は、OpenUSDとovrtxを活用し、クラウドネイティブな設計ワークフローと物理シミュレーションを連携させています。これにより、製品設計データと、CAD、PDM、コラボレーション、シミュレーションといった各ワークフローとの一貫性が保たれるよう支援しています。PTCの社長兼CEOであるNeil Barua氏は、「NVIDIA Omniverseライブラリは、検証やテストを製品設計の現場により近い段階で実施可能にするシミュレーション対応ワークフローの実現に貢献しています」と語っています。

Blenderへの統合と幅広い動作環境

SIGGRAPHで展示された「SimReady」Blenderは、NVIDIA OmniverseライブラリとNVIDIA NemoClaw™を使用してBlender上で構築されたサンプルワークフローです。これは、クリエイターが制御を維持したまま、NVIDIA RTXセンサーシミュレーション、物理演算、検証機能といったエージェント対応のシミュレーション機能を、既存の3Dアプリケーションにどのように組み込めるかを示すものです。現在、このワークフローは、BlenderへのOmniverseライブラリ統合に向けたブループリントとして公開されています。

また、このデモでは、NVIDIA Agent Toolkitの一部であるOmniverseライブラリを使用して構築されたこれらのワークフローが、NVIDIA RTX Spark™を搭載したコンパクトなRTXシステムから、NVIDIA GB300搭載のNVIDIA DGX Station™に至るまで、どのようにローカル環境で実行できるかを紹介しています。

スタートアップ企業の取り組み

NVIDIA Inceptionプログラムに参加している企業を含むスタートアップ各社も、Omniverseのライブラリやスキルを活用し、エージェントが支援するアセットおよびシーン準備のワークフローを導入しています。

  • Palatial: OmniverseのCAD-to-SimReadyスキルを使用し、CADデータからSimReadyアセットの作成と検証を大規模に自動化しています。

  • Lightwheel: OpenUSDを基盤とするOmniverse Content Agentsを同社のSimReadyGen技術に活用し、テキストプロンプトから物理的に正確なSimReadyアセットを生成しています。

  • ForgeCADおよびMoonlake AI: Omniverseの機能を活用したエージェント駆動型の3Dコンテンツワークフローを模索しており、フィジカルAIシミュレーション用のアセット生成、拡張、準備の効率化に取り組んでいます。

関連情報

詳細については、SIGGRAPHでのNVIDIA基調講演をご覧になるか、NVIDIA Omniverseライブラリのウェブサイトにて、利用可能なサンプルやドキュメントをご確認ください。

NVIDIAはAIとアクセラレーテッドコンピューティングの世界的リーダーです。

コメント