NVIDIA は、3D ワールドやメタバースの開発を加速させるため、業界を超えてクリエイターがジェネレーティブ AI で新たな可能性を切り開けるよう、数多くの AI 研究プロジェクトを立ち上げています。
ジェネレーティブ AI はメタバースのあらゆる側面に触れ、Omniverse ACE で AI アバターに命を吹き込むような用途で既に活用されています。音声からアニメーションを生成する Audio2Face や Audio2Gesture など、これらのプロジェクトの多くは、Omniverse コミュニティで広く愛されるツールになりました。
CES において、NVIDIA は、仮想世界をこれまで以上に迅速かつ容易に作成するために、Omniverse に搭載される新しいジェネレーティブ AI 技術を発表しました。これらのモデルは、NVIDIA パートナーによるサードパーティ コネクタと、NVIDIA 研究チームが AI ToyBox の拡張機能として公開した内部 AI プロジェクトの両方を利用できます。
NVIDIA Omniverse で利用可能なすべてのジェネレーティブ AI 研究プロジェクトとコネクタは、合法的にライセンスされ、購入されたデータセットを使用しています。
ジェネレーティブ AI コネクタと拡張機能で 3D コンテンツ制作を加速
NVIDIA Omniverse は、最新かつ優れたジェネレーティブ AI 技術を、サードパーティ技術によるコネクタや拡張機能と共にもたらします。
Move.ai は体の動きからアニメーションを生成します。Move.ai を使えば、人の動きをどこでもキャプチャして、Omniverse に直接エクスポートすることができます。
Lumirithmic は、顔のスキャンから頭部の 3D メッシュを生成します。このコネクタにより、顔のスキャンから映画レベルのアバターを簡単に作成することができ、あらゆる業界で大規模な 3D スキャンが可能になります。Lumirithmic の共同設立者/CEO であるGaurav Chawla 氏は、「NVIDIA と協力して、Omniverse を通じて当社の 3D フェイシャル スキャン製品を、クリエイター、ゲーマー、開発者に提供し、ゲーム、アドテク、メタバース、その他のアプリケーション向けの最高品質の 3D フェイスのアクセスを身近にできることを楽しみにしています。」と語っています。
Elevate3D は、360° の映像記録からリアルな製品の 3D ビジュアライゼーションを生成し、Neural Radiance Fields (NeRF) を活用して、比類ない視覚的忠実度を持つ 3D メッシュを作成します。「Omniverse のおかげで、幅広いワークフローと業界に当社の技術を提供することができます。さらに、優れたドキュメントと開発者の経験により、このプラットフォーム上で拡張機能を構築することができました。」と、Elevate3D の共同設立者である Alexandre Carlier 氏と Martin Danelljan 氏は述べています。「この拡張機能は、物理的な物体をスキャンする際の課題を過去のものにするでしょう。」
最新のジェネレーティブ AI 研究の模索と実験
AI ワークフローは、Omniverse が提供する体験の中核です。そのため NVIDIA は、3D アーティストやクリエイターが AI を使ってワークフローを高速化できるよう、常に新しい研究プロジェクトに取り組んでいます。これらの AI プロジェクトの多くは、Machinima のポーズ推定や、筆で簡単に描いた線や形から 360 度の画像を生成する NVIDIA Canvas のような、広く使用されている機能へと広がっています。
GET3D は、CES で発表された新しいジェネレーティブ AI モデルで、2D の画像、テキスト、数値などのデータから、トポロジ、豊富な幾何学的詳細、およびテクスチャを持つ 3D 形状を生成します。これらの 3D 形状やテクスチャを持つメッシュは、動物や人間の形をとることができ、自動車、椅子、バイク、建物なども近々登場する予定で、複数の業界のクリエイターが、仮想世界でコンテンツの量と多様性を迅速に拡張できるようになります。
GET3D は、GANVerse3D Image2Car や AI Animal Explorer など、NVIDIA が公開している既存のジェネレーティブ AI 研究プロジェクトとともに、Omniverse AI ToyBox で利用することができるようになる予定です。AI ToyBox には、最新の NVIDIA AIプロジェクトがすべて収められており、コンテンツ制作者が仮想世界の新たな可能性を探求するための力を与えてくれます。
AIとメタバース: 共存関係
メタバースの拡張には AI がとても重要です。自動車、医療機器、倉庫ロボットなど、世界の産業はソフトウェアデファインドになっています。これらのソフトウェアデファインド技術は、実環境での徹底的なテストなしには開発と展開ができません。
メタバースにおけるデジタル ツインは、物理的に正確な仮想環境を提供し、開発者がインテリジェント ロボットなどのソフトウェアデファインド技術の AI をこれまでよりも迅速にシミュレーションおよびテストすることを可能にします。メタバースで作成された合成データは、従来よりも多くのデータで AI を学習させることができるため、最先端の AI アプリケーションの学習をさらに加速させます。
AIとメタバースの新時代を切り開く、こうしたデジタル ツインや仮想環境の拡張には、ジェネレーティブ AI が鍵となります。
開発者は、Omniverse のモジュール開発フレームワークで 3D 世界のためのジェネレーティブ AI ツールを構築でき、企業は NVIDIA Omniverse Enterprise でデジタル ツイン シミュレーションを拡張するために最新のジェネレーティブ AI 技術を活用することができます。
Omniverse のニュースレターに登録すると、Omniverse のジェネレーティブ AI に関する最新情報を受け取ることができます。Instagram、Twitter、YouTube をフォローすると、次期リリースや事例などの最新情報をいち早く確認できます。
Omniverse Developer リソース センター で追加情報にアクセスしたり、Omniverse の最新チュートリアルを見ることが可能で、サポートのためのフォーラムをチェックすることもできます。Omniverse コミュニティ、Discord サーバー、Twitch チャンネルに参加すれば、コミュニティと交流することができます。
翻訳に関する免責事項
この記事は、「Rapidly Generate 3D Assets for Virtual Worlds with Generative AI」の抄訳で、お客様の利便性のために機械翻訳によって翻訳されたものです。NVIDIA では、翻訳の正確さを期すために注意を払っておりますが、翻訳の正確性については保証いたしません。翻訳された記事の内容の正確性に関して疑問が生じた場合は、原典である英語の記事を参照してください。
