NVIDIA Agent ToolkitがOmniverseライブラリで拡張、AIエージェントがシミュレーション環境を構築可能に

NVIDIA Agent ToolkitにNVIDIA Omniverseライブラリが新たに組み込まれ、AIエージェントがシミュレーション対応の3Dワールドを構築する能力が向上しました。これにより、ソフトウェア開発者は既存のアプリケーションに物理的なAI機能を統合しやすくなります。

シミュレーション対応ワールド構築の重要性

ロボット、工場、自律型システムは、現実世界で稼働する前に、シミュレーション環境で設計、テスト、トレーニングを行う必要があります。このシミュレーションで使う3Dコンテンツは、ただ見た目がリアルなだけでなく、適切な構造、素材、サイズ、ラベル、センサー、そして物理的な特性を備えていることが求められます。

NVIDIA Agent ToolkitにOmniverseライブラリが統合されたことで、AIエージェントはワークフローの構築、シーンの検証、問題の特定、アセットの準備を行うためのツールとスキルを手に入れました。これにより、開発者は3Dコンテンツをシミュレーション可能な環境へと、より素早く移行できるようになります。

NVIDIAの創業者兼CEOであるジェンスン・フアン氏は、「物理的なAIの時代は、まずシミュレーションの中で築かれるでしょう。Omniverseライブラリを組み込んだNVIDIA Agent Toolkitは、開発者がすでに使っている3DツールにAIエージェントを導入します。これにより、ロボットや工場、自律型システムが現実世界に投入されるずっと前に、それらをトレーニングしテストするための、シミュレーション対応の環境構築が可能になるのです」と述べています。

新しいOmniverseライブラリの機能

新しいOmniverseライブラリは、GitHubで公開されており、以下の主要な機能を提供します。

NVIDIA RTX センサーシミュレーション (ovrtx): アプリケーションが3Dシーンからカメラ、LiDAR、レーダーなどのセンサー出力を生成するのを助けます。これにより、物理的なAIシステムが仮想環境をどのように認識するかをテストできます。
物理的動作 (ovphysx): GPUで高速化された物理演算を使用し、衝突、質量、摩擦、動きといった特性を3Dシーンに加えます。これにより、オブジェクトやシステムがシミュレーションでどのように相互作用するかを事前にテストできます。
シミュレーション対応3Dオブジェクト (CAD-to-SimReady スキル): コンピューター支援設計（CAD）データをOpenUSDに基づいて構築されたSimReadyアセットに変換します。これにより、物理的なAIシミュレーションや仮想テストに必要な特性を3Dコンテンツに付与します。

これらのライブラリは、AIエージェントがシーンの検証、変更のテスト、シミュレーション用3Dアセットの準備といったワークフローを構築するために利用できます。BlenderにOmniverseライブラリを統合するための新しいブループリントもGitHubで利用可能です。

ソフトウェア開発企業による活用

SideFXやPTCといったソフトウェアメーカーは、エージェント対応のセンサーシミュレーション、物理演算、アセット検証を実現するためにOmniverseライブラリを統合しています。これにより、開発者やテクニカルアーティストが3Dコンテンツ制作で使っているアプリケーションやワークフローに、自律的に動作するAIを組み込むことが可能になります。

SideFXは、OpenUSDワークフローやovrtx、ovphysxライブラリを使い、同社の「Houdini」によるプロシージャル3Dコンテンツ制作ワークフローにOmniverseライブラリを統合する可能性を探っています。

SideFXの社長兼CEOであるKim Davidson氏は、「シミュレーション、ロボティクス、産業用AIに求められる、複雑かつ制御可能な世界を構築するには、プロシージャル3D制作が不可欠です。NVIDIA OmniverseライブラリとOpenUSDを活用することで、SideFXはエージェント対応ツールがHoudiniのワークフローをどのように支援できるかを検証しています。これにより、テクニカルアーティストはクリエイティブなプロセスを自らコントロールしつつ、シミュレーション用のプロシージャルコンテンツのレビュー、テスト、準備を行えるようになります」と述べています。

PTC Onshape CADおよび製品データ管理（PDM）プラットフォームは、OpenUSDとovrtxを活用し、クラウドネイティブな設計ワークフローと物理シミュレーションを連携させています。これにより、製品設計データと、CAD、PDM、コラボレーション、シミュレーションといった各ワークフローとの一貫性を保つよう支援しています。

PTCの社長兼CEOであるNeil Barua氏は、「エンジニアリングチームは、開発プロセス全体を通じて、設計、コラボレーション、シミュレーションをより密接に連携させる方法を求めています。PTCとNVIDIAの取り組みはこの広範なビジョンを支えるものであり、NVIDIA Omniverseライブラリは、検証やテストを製品設計の現場により近い段階で実施可能にするシミュレーション対応ワークフローの実現に貢献しています」と話しています。

対応システムと今後の展望

SIGGRAPHで展示された「SimReady」Blenderは、NVIDIA OmniverseライブラリとNVIDIA NemoClaw™を使用してBlender上で構築されたサンプルワークフローです。このデモでは、NVIDIA Agent Toolkitの一部であるOmniverseライブラリを使用して構築されたこれらのワークフローが、NVIDIA RTX Spark™を搭載したコンパクトなRTXシステムから、NVIDIA GB300搭載のNVIDIA DGX Station™に至るまで、どのようにローカル環境で実行できるかを紹介しています。

RTX Sparkシステムは、今秋よりASUS、Dell Technologies、HP、Lenovo、Microsoft Surface、MSIから発売され、その後AcerやGIGABYTEからもモデルが投入される予定です。DGX Stationシステムは、ASUS、Dell、GIGABYTE、HP、MSI、Supermicro、Exxactから注文可能です。

NVIDIA Inceptionプログラムに参加している企業を含むスタートアップ各社も、Omniverseのライブラリやスキルを活用し、エージェントが支援するアセットおよびシーン準備のワークフローを導入しています。例えば、PalatialはOmniverseのCAD-to-SimReadyスキルを使って、CADデータからSimReadyアセットの作成と検証を自動化しています。Lightwheelは、OpenUSDを基盤とするOmniverse Content AgentsをSimReadyGen技術に活用し、テキストプロンプトから物理的に正確なSimReadyアセットを生成しています。

NVIDIAは、SIGGRAPHでの基調講演でこれらの技術について詳しく説明しました。NVIDIA Omniverseライブラリの詳細や、利用可能なサンプルおよびドキュメントについては、NVIDIA Omniverseのウェブサイトで確認できます。