ロボット工学の時代が到来しました。世界中の研究者や企業が、物理的 AI によって駆動されるロボットを開発しています。これらの物理的 AI は、命令を理解し、現実世界で複雑な課題を自律的に遂行できるモデルです。マルチモーダルな大規模言語モデル (LLM) は、ロボットが周囲の世界を学習、認識、理解し、行動を計画する上での重要な技術的進歩です。人間の実演から、ロボットは粗大および微細な運動技能を使って世界と相互作用するために必要なスキルを学習できるようになりました。

ロボット工学を進歩させる不可欠な技術の1つが強化学習です。LLMが人間からのフィードバックによる強化学習を必要とするのと同様に、物理的 AI も物理シミュレーション環境からのフィードバックによる強化学習を使ってスキルを習得できます。これらのシミュレーション環境、または「ロボットジム」では、ロボットが物理法則に従う仮想世界で行動を行うことで、決定を学習します。このような環境でロボットは、安全かつ迅速に複雑で動的な課題を遂行し、試行錯誤を通してスキルを磨くことができます。

Nvidia Omniverseは、これらの物理的 AI を作成できるオペレーティングシステムです。Omniverseは、リアルタイムの物理ベースレンダリング、物理シミュレーション、そして生成型 AI 技術を組み合わせた仮想世界シミュレーション開発プラットフォームです。Omniverseでは、ロボットが物体を精密に操作する (把握や取り扱いなど) や、障害物や危険を回避しながら最適なパスを見つけて自律的に移動するといったスキルを学習できます。Omniverseでの学習により、「シミュレーション-実世界」のギャップを最小限に抑え、学習した行動の転移を最大化できます。

生成型物理 AI を搭載したロボットを構築するには、3つの主要コンポーネントが必要です。モデルの訓練にはNvidia AI スーパーコンピューター、モデルの実行にはNvidia Jetson Orin およびNextGen Jetson Thorロボットスーパーコンピューター、そしてロボットがシミュレーション世界で学習・スキル向上できるNvidia Omniverseです。Nvidiaは、開発者や企業が最適なスタックを選択できるよう、必要なプラットフォーム、アクセラレーションライブラリ、AI モデルを提供しています。AI の次の波が到来し、物理 AI によるロボット工学が産業を革新していきます。

私たちと同じように人工知能が私たちと対話する未来を想像してみてください。これが、デジタルヒューマンの驚くべき現実です。デジタルヒューマンは、顧客サービスから広告、ゲームまで、さまざまな産業を革新していきます。その可能性は無限大です。

高度な AI モデルを使うことで、デジタルヒューマンは私たちと人間のように見て、理解し、やりとりできるようになります。デジタルヒューマンの基盤となるのは、多言語音声認識・合成、そして自然会話を理解・生成する大規模言語モデルです。これらの AI モデルは、リアルタイムのパストレース型サブサーフェススキャッタリングを使って、肌の柔らかく透明感のある外観を再現する生成型 AI にも接続されています。

NVIDIA Aceは、デジタルヒューマン技術を簡単にデプロイできる最適化されたマイクロサービスのスイートです。開発者は、Aceマイクロサービスを既存のフレームワーク、エンジン、デジタルヒューマンエクスペリエンスに統合できます。これには、意図を理解し他のモデルをオーケストレーションするneotron SLMおよびLLMマイクロサービス、対話音声と翻訳のためのReva音声マイクロサービス、そして顔面・ボディアニメーションのためのオーディオ-to-faceおよびジェスチャーマイクロサービスが含まれます。Aceマイクロサービスは、NVIDIA Exel加速インフラストラクチャのグローバルネットワーク上で実行され、100以上の地域にわたって低遅延のデジタルヒューマン処理を提供します。

デジタルヒューマンは、さまざまな産業における新しく強化された体験を可能にします。AI顧客サービスエージェントとして、より魅力的で個別化された対話を実現できます。AI医療従事者として、患者のケアを提供し、タイムリーで個別化されたケアを行うことができます。さらに、AI ブランドアンバサダーとして、マーケティングや広告の次のトレンドを牽引することもできます。デジタルヒューマンの台頭は、AI 駆動の仮想存在が私たちの生活に自然に溶け込む未来を垣間見せています。

NVIDIA 加速コンピューティングの需要が急増しています。従来のデータセンターがAI工場に変貌しつつあるためです。世界最大の電子機器メーカーであるFoxconnは、Nvidia Omniverseを使ったロボット工場の構築によって、この需要に応えようとしています。

AIファクトリープランナーは、Omniverseを使って、Siemens Teamcenter、Siemens NX、Autodesk Revitなどの主要業界アプリケーションからの施設・設備データをデジタルツインに統合します。レイアウトや生産ラインの最適化、Nvidia MetropolisビジョンAIによる将来の運用監視のための最適なカメラ配置を行います。

バーチャル統合により、建設中の物理的な変更オーダーに伴う膨大なコストを節減できます。Foxconnチームは、デジタルツインを真実の源泉として使い、正確な設備レイアウトを伝達・検証します。Omniverseデジタルツインは、また、Foxconnの開発者がNvidia Isaac AIアプリケーションによるロボットの認識・操作、およびNvidia MetropolisによるセンサーフュージョンAIアプリケーションを訓練・テストする「ロボットジム」でもあります。

Omniverseでは、FoxconnがアセンブリラインにJetsonコンピューターにデプロイする前に、2つのロボットAIをシミュレーションします。Isaac操作ライブラリとオブジェクト識別、欠陥検出、軌道計画のためのAIモデルをシミュレーションし、HGXシステムをテストポッドに転送するためのIsaac Perceptor搭載のFBOT AMRの3Dマッピングと再構築をシミュレーションします。

Omniverseにより、Foxconnは、Nvidia Isaacを搭載したロボットを使ってNvidia AIスーパーコンピューターを製造するロボット工場を構築しています。

Nvidiaの新しいゲームアシスタントは、ゲーマーがお気に入りのゲームやアプリケーションに関与する方法を変革することを目指す、非常に興味深い開発です。この AI 駆動のアシスタントは、ゲームに関する知識を提供し、プレイヤーにゲームエクスペリエンスを向上させるための貴重な洞察とおすすめを提供するように設計されています。

Nvidiaのゲームアシスタントの主な機能は以下の通りです:

1. ゲーム内アシスト: アシスタントはゲームのメカニクス、アイテムの場所、最適な戦略について質問に答えることで、新規プレイヤーの立ち上がりを助け、熟練プレイヤーがゲームの奥深さをより効果的に探索できるようサポートします。

2. コンテキスト対応のおすすめ: プレイヤーのゲーム内の行動とプログレスを理解することで、アシスタントはプレイスルーに合わせてカスタマイズされたおすすめ (初期武器、クラフト素材、次のステップなど) を提供できます。

3. システム最適化: アシスタントはFPSやPCレイテンシーなどのシステムパフォーマンスメトリクスを提供し、設定と構成の最適化をおすすめすることで、効率とレスポンシブネスの向上を支援します。

4. シームレスな統合: NvidiaはStudio Wildcard などのゲームスタジオと提携し、アシスタントをゲームエクスペリエンスに自然で直感的に統合しています。

このゲームアシスタントは、ゲーミング業界への AI 技術の統合における重要な一歩を表しています。個別化されたガイダンスとシステム最適化を提供することで、アシスタントは新規および熟練プレイヤーの両方にとってゲームエクスペリエンスをより魅力的で報わされるものにする可能性があります。

ゲーミング業界が進化し続ける中で、NvidiaのようなAI駆動アシスタントの統合は、プレイヤーが好きな仮想世界を探索する方法を定義する重要な機能となる可能性があります。