开源项目

NVIDIA/xr-ai:XR 场景多模态 Agent 基础组件

NVIDIA/xr-ai

智能体系统Agent 环境交互

概述

xr-ai 是 NVIDIA 发布的 XR 方向 AI 基础项目,面向多端实时多模态 Agent 场景,提供三方面基础能力:感知能力用于理解用户所处的真实与虚拟环境,工具调用能力让 Agent 能够执行外部操作,XR 交互基础则负责与头显等设备的交互体系对接。将 Agent 能力引入 AR/VR 场景需要解决实时性、多模态融合与端侧算力约束,厂商官方提供基础组件有助于降低原型搭建成本。