NVIDIA、デジタルツイン「Omniverse」新版で生成AIとOpenUSDに積極対応　アドビ、RealityKit、ボストンダイナミクス、ボルボなどの連携事例を多数紹介

2023年8月9日 By ロボスタ編集部

NVIDIAはロスエンゼルスで開催中のコンピュータグラフィックスとインタラクティブ技術の学会イベント「SIGGRAPH 2023」で「NVIDIA Omniverse」プラットフォームのメジャーリリースを発表した。これにより「OpenUSD」フレームワークと生成AIを使用して 3Dパイプラインを最適化および強化するための新しい基盤アプリケーションとサービスが開発者や産業企業向けに提供されることになる。

OpenUSDネイティブソフトウェアプラットフォーム「Omniverse」はアップデートにより、Cesium、Convai、Move AI、SideFX Houdini、Wonder Dynamics が OpenUSD経由で Omniverse に接続されるようになった。
「Omniverse」はOpenUSDベースの 3Dツールとアプリケーションを接続し、描写、シミュレーションするためのプラットフォームで、デジタルツインをグループで共有しながら構築し、産業のデジタル化のための仮想世界と高度なワークフローの作成が可能だ。

Omniverse KitとOmniverse Audio2Faceの進化

プラットフォームのアップデートの主な内容は、ネイティブOpenUSDアプリケーションおよび拡張機能を開発するエンジン「Omniverse Kit」の進化と、「NVIDIA Omniverse Audio2Face」基盤アプリと、空間コンピューティング機能の進化となっている。

Omniverse アップグレードの主な改善点

現状で解っている「Omniverse Kit」アップデートの概要は次の通り。

新しいモジュラーアプリの構築
Omniverse 拡張機能へのアクセス、共有、管理のための中央リポジトリである新しい Omniverse Kit Extension Registry により、開発者はアプリケーションの機能のオンとオフを簡単に切り替えることができ、NVIDIA が提供する 600 を超えるコアOmniverse 拡張機能からカスタムアプリを構築することがこれまでより簡単になる。

新しい開発者テンプレートとリソース
新しいアプリケーションとエクスペリエンスのテンプレートにより、OpenUSD と Omniverse を使い始める開発者は、最小限のコーディングで可能になる。

効率とユーザーエクスペリエンスの向上
新しいレンダリングの最適化は、Omniverse RTX レンダラーに完全に統合された DLSS 3テクノロジーを備えた NVIDIA RTX GPU の NVIDIA Ada Lovelace アーキテクチャの機能強化を最大限に活用し、新しいAIノイズ除去機能によりリアルタイムの大規模な産業シーンの4Kパストレースが可能になる。

ネイティブ RTX を活用した空間統合
新しい拡張現実 (XR) 開発者ツールにより、ユーザーは空間コンピューティングオプションを Omniverse ベースのアプリケーションにネイティブに構築できるため、ユーザーは 3D プロジェクトや仮想世界を好きなように体験できる柔軟性が得られる。

これらの新しいプラットフォームのアップデートは、Omniverse 基盤アプリケーションで提供される。
クリエイター、企業、開発者がコピー、拡張、または強化できる完全にカスタマイズ可能なリファレンスアプリケーションとして活用できるようになる予定。アップグレードされたアプリケーションには次のものが含まれるという。

Omniverse USD Composer
3D ユーザーが大規模な OpenUSD ベースのシーンを組み立てることが可能になる。（https://www.nvidia.com/ja-jp/omniverse/apps/create/）

Omniverse Audio2Face
音声ファイルのみからリアルな顔のアニメーションやジェスチャーを作成する生成AIアプリケーションプログラミングインターフェイスへのアクセスを提供し、多言語サポートと新しい女性ベースモデルが追加された。

OpenUSD がOmniverse エコシステムを拡大
NVIDIA はまた、OpenUSDとして知られるUniversal Scene Descriptionの採用を加速するための、開発者や企業向けの幅広いフレームワーク、リソース、サービスも発表した。
（https://nvidianews.nvidia.com/news/nvidia-omniverse-opens-portals-to-vast-worlds-of-openusd）

OpenUSDと新しいOmniverse Cloud API

さらにNVIDIAは、開発者がOpenUSDパイプラインとアプリケーションをよりシームレスに実装、展開できるよう、NVIDIAが構築した新しいOmniverse Cloud APIを発表した。ChatUSDは開発者向けの大規模言語モデル（LLM）コパイロットで、USDの知識に関する質問に答えたり、Python-USDコードスクリプトを生成したりすることができる。

OpenUSD によって実現される新しい Omniverse 接続が利用可能になり、複雑な生産パイプラインのデータのサイロ化を解消する機会が産業企業にさらに広がったとしている。

Adobe FireflyをOmniverseのAPIで活用可能に

Adobe Substance 3D、生成AI、OpenUSD イニシアチブ全体での連携を拡大するため、Adobe と NVIDIA は、Adobe Firefly (Adobe のクリエイティブな生成 AI モデルファミリ) を OmniverseのAPIとして利用できるようにし、開発者やクリエイターが設計プロセスを強化できるようにする計画を発表した。

Wonder Dynamics は、Wonder Studio AI プラットフォームを介した新しい OpenUSD エクスポートサポートにより Omniverse に接続され、コンピューターで生成されたキャラクターを自動的にアニメーション化、ライティングし、実写シーンに合成する。
新しい OpenUSD エクスポートサポートにより、アーティストは3Dシーンをすべて単一のカメラから生成してエクスポートできるようになる。

USDZ形式の Luma AI のリアリティキャプチャモデルは、Omniverse に簡単にインポートできる。アバター関連の会社 Convaiとキャラクターエンジン会社 Inworld AIのツールが Omniverseに接続されている。

Convaiのような AIツールを使用すると、クリエイターはデジタルツイン環境にキャラクターを追加して、環境やオブジェクトの関連情報を提供したり、ツアーガイドや仮想ロボットになったりすることができる。 Move AIにより、Move Oneアプリを使用した単一カメラのモーションキャプチャが可能になる。これを使用して 3Dキャラクターアニメーションを生成し、OpenUSD にエクスポートして Omniverseで使用できる。

Omniverse ユーザーは、ARKitやRealityKitなど、他の OpenUSD ベースの空間コンピューティングプラットフォームと互換性のあるコンテンツ、エクスペリエンス、アプリケーションを構築できるようになった。さらに、Khronos Group の OpenXRオープン標準の新しいサポートにより、HTC VIVE、Magic Leap 、Varjoなどのメーカーのより多くのヘッドセットに Omniverse の使用が拡大される。

また、SideFX Houdiniのユーザーは、Houdini デジタルアセットを Omniverse ビューポートに直接ロードできるようになり、Houdiniベースの接続されたワークフローがよりシームレスになる。

Cesium for Omniverse と呼ばれる Omniverse 用の Cesium拡張機能は、仮想世界で大規模な地理空間データセット (OpenUSD でサポートされているデータセットを含む) をストリーミングするためのオープンスタンダードである 3D Tiles (タイル）を有効にする。
Omniverse 経由で利用できるようになった Cadence DataCenter Design Softwareは、ユーザーがデジタルツインの完全なコンテキストで数値流体力学シミュレーションを確認できるようにする。 Cadenceデータセンター拡張機能を使用すると、ユーザーは実装前に設計と運用上の考慮事項を計画、テスト、検証できる。そして、Blackshark.AI ワールドデジタルツインプラットフォームが Omniverse に接続された。

デジタル化に Omniverse を使用している事例

顧客は、ロボットのシミュレーションから AI モデルのトレーニング、アニメーションの改善に至るまで、さまざまなタスクに Omniverse を使用しているという。

ボストンダイナミクスはOmniverseでロボットと相互作用をシミュレーション

Boston Dynamics AI Institute は、Omniverse を使用してロボットとその相互作用をシミュレーションし、新しいロボティクスと制御システムの設計を可能にしている。

また、自動車および自律システムの産業化における大手企業の 1 つであるContinentalは、モバイルロボットビジネスで「Omniverse」を使用して、物理的に正確な合成データ（https://www.nvidia.com/en-us/omniverse/synthetic-data/）を大規模に生成し、コンピュータービジョン AIモデルをトレーニングし、システム統合テストを実行している。Volvo Cars は、デジタルツインを OpenUSDベースに移行し、Omniverseを使用して、顧客がオンラインで購入決定を支援する没入型のビジュアライゼーションを作成している。

ブランドデザインおよびエクスペリエンスエージェンシーのMarks Designは、Omniverse と OpenUSDを使用してコラボレーションを合理化し、アニメーション、ビジュアライゼーション、レンダリングのワークフローを改善している。

新しいOmniverse システムとパートナー

NVIDIA は、世界的なシステムメーカーと協力して、Omniverse 向けに最適に構成されたワークステーションを数百万のデザイナー、アーキテクト、エンジニアに提供している。新しいシステムは、NVIDIA Omniverse Enterpriseソフトウェアとバンドルされた最大4つの NVIDIA RTX 6000 Ada世代GPUを備えており、OpenUSDワールド構築、生成AI 強化したデザインコラボレーション、およびその他の産業用デジタル化アプリケーションを加速する。

Omniverse ユーザーは、新しい NVIDIA L40S GPUを利用することもできる。これは、最もグラフィックスを多用するワークロードを高速化する強力なユニバーサルデータセンターGPUだ。

NVIDIA Omniverse担当者のコメント

NVIDIA Omniverseおよびシミュレーションテクノロジ担当バイスプレジデントであるレブレバレディアン (Rev Lebaredian)氏は次のように述べている。

Lebaredian氏
「産業界はワークフローのデジタル化に競って取り組んでおり、OpenUSD対応の接続された、相互運用可能な 3D ソフトウェアエコシステムへの需要が高まっています。最新の Omniverse アップデートにより、開発者は OpenUSD を通じて生成 AI を利用してツールを強化できるようになり、企業は産業用アプリケーションのデジタルのテスト場として、より大規模で複雑な世界規模のシミュレーションを構築できるようになります」