概要
NVIDIAが、ARグラスやXRヘッドセット向けのAIエージェントを開発できるオープンソースライブラリ「NVIDIA XR AI」をパブリックベータで公開しました。デバイスのカメラ・マイク映像をGPUで動くAIサービスにつなぎ、リアルタイムの視覚・音声対話を実現します。
何が発表・更新されたのか
XRデバイスとクラウドやエッジのAIサービスを接続するための再利用可能な基盤「NVIDIA XR AI」がベータ提供されました。視覚理解の「NVIDIA Cosmos」、言語処理の「Nemotron」、企業データ連携の「Model Context Protocol(MCP)」、エージェント制御の「NeMo Agent Toolkit」を組み合わせる、モジュール型のアーキテクチャです。
なぜ重要なのか
ARグラスのハードは整っても、映像・音声・AIモデル・企業データ・デバイス対応を統合する基盤づくりが課題でした。XR AIはこの「インフラの隙間」を埋め、ユーザーが見ているものを理解して同じセッション内で応答するエージェントを作りやすくします。
誰に関係があるのか
XR・ARアプリを開発する技術者や、フィールドサービス・製造・医療・研修など「手がふさがる現場」でのAI活用を検討する企業に関係します。実際にStanfordやPrinceton、Siemensが研究文脈での活用を進めています。
仕事や業務でどう使えるのか
現場作業員が必要な情報を探したり、手順をガイドしたり、作業結果を確認・記録したりといった用途が想定されています。映像と音声でAIに質問し、企業ツールを呼び出して回答を得る使い方ができます。
注意点
現時点ではパブリックベータでの提供です。日本での提供状況や対象プラン、利用料金の詳細については、公式情報上では確認できませんでした。導入には開発環境やGPUリソースの準備が必要です。
公式情報
関連キーワード
- NVIDIA XR AI
- AIエージェント
- NVIDIA Cosmos / Nemotron
- Model Context Protocol(MCP)
- ARグラス・XRデバイス

