
开脱双手、AI随行
(映维网Nweon 2026年06月18日)英伟达日前晓谕,面向AR眼镜及XR建设的AI拓荒平台NVIDIA XR AI已发挥进入公开测试阶段。这个器具为拓荒者提供了一套齐全的框架,可用于构建具备空间感知能力的多模态AI代理,撑抓智能体通过视频、音频和传感器数据及时相识物理天下,并调用企业器具与学问库提拔有蓄意。
从工场车间平直术室,从科研实验室到深海探险,英伟达正将代理式AI从屏幕对话推向信得过的职责流,开启“开脱双手、AI随行”的全新东说念主机配合时期。

AI正在卓越聊天机器东说念主和副驾驶,进入物理天下。在实验室、工场和病院,新一代AI代理正运行与东说念主们并肩职责,匡助他们相识环境、获取学问并及时领受步履。
相干词,构建大要聚拢模子、手段、器具、器具集和代理运行时来匡助东说念主们完成实质职责的代理系统,是一项挑战。为了在动态的信得过环境中灵验运作,代理不成仅仅生成回应。
就像东说念主类职责者一样,它们需要学问、器具和专科手段,通过视频、音频和传感器数据来感知和相识天下,解读快速变化的要求和空间落魄文,从企业系统中检索信息,推理下一步最好步履,并使用软件器具来完成任务。扫数这一切齐必须在低蔓延下完成,而且以一种撑抓用户且不形成干豫的格式进行。
NVIDIA XR AI这个拓荒者库旨在匡助拓荒者构建代理型应用。通过将AR眼镜和XR建设的输入与AI模子、企业数据、器具和加快预计相贯穿,NVIDIA XR AI使得代理大要在职责流中进行感知、推理和步履。
开云体育(kaiyun)官方网站它为拓荒者构建或贯穿企业XR应用的手段和器具提供了基础,并简化了多模态感知、企业检索、推理模子和代理编排的集成。相干功能共同使得构建具有空间意志的多模态AI代理变得愈加容易,可在AR和XR体验中提供低蔓延、落魄文感知的提拔。
所述平台网罗了四项中枢能力:
摄取来自AR和XR建设的试验天下信号,包括视频、音频、深度、姿态和传感器数据。
将代理贯穿到挑升的器具和工作,包括用于视觉AI和视频相识的NVIDIA Metropolis及NVIDIA Metropolis视频搜索与摘抄,以及用于企业学问检索和检索增强生成的NVIDIA NeMo Retriever。
撑抓平淡的AI模子生态系统,包括NVIDIA Nemotron推理模子、NVIDIA Cosmos Reason过甚他兼容的基础模子。
集成代理编排和加快运行时工作,澳门永利皇宫中国官网入口匡助拓荒者从原型过渡到出产。NVIDIA NeMo Agent Toolkit撑抓器具使用、推理职责流和多代理融合,而NVIDIA加快预计平台(包括NVIDIA DGX Spark、NVIDIA DGX Station和NVIDIA RTX PRO系统)则提供了在云表、数据中心和边际环境运行推理的基础设施。
上述功能共同使AI代理大要相识周围环境、造访企业学问、推理复杂任务并及时提供情境化提拔。
各行业已将NVIDIA XR AI过问使用
在制造、科学、医疗保健、想象和千里浸式学习鸿沟,拓荒者和企业如故在应用NVIDIA XR AI,以便将AI代理镶嵌到实质职责发生的所在。
西门子正在策动配景下探索,怎样应用NVIDIA XR AI和NVIDIA DGX Spark匡助工场工程师查找调节信息、排查问题、考证职责并纪录车间发生的情况。借助系统,领导轻量化眼镜的工程师不错向AI代理商榷可编程逻辑遏抑器问题并接管及时指导,从而贯穿工业系统、数字孪生和自动化职责流。
在策动实验室,Rana正在LabOS系统中引入NVIDIA XR AI,将空间智能径直带入科学策动职责流。LabOS为复杂的实验职责流提供及时、开脱双手的指导,领先应用于斯坦福大学医学院和普林斯顿大学的干细胞挽救和基因剪辑策动。基于XR AI架构构建的LabOS共同科学家大要在实验室环境中感知、相识和步履,匡助策动东说念主员识别正确的样本和CRISPR基因剪辑器,指导每个实验措施,并在东说念主类、机器东说念主和AI系统在实验台配合时,生成结构化、可复现的纪录。
VITURE将NVIDIA XR AI集成到可一稔界面中,为职责主说念主员提供了一种开脱双手的格式,在职责现场找到正确的配景信息并指导下一走路动。相似的XR AI基础当然地从实验室彭胀到临床和工业环境。
在手术室中,匹兹堡大学医学中心展示了NVIDIA XR AI怎样通过落魄文感知提拔撑抓手术团队。系统以NVIDIA XR AI和NVIDIA DGX Station算作基础,并旨在匡助团队查找信息并指引珍想法,而不会为外科大夫增多视觉芜杂。系统不错在保抓对患者和手术温雅的同期,呈现存用的落魄文信息。
在汽车想象鸿沟,Innoactive展示了企业如安在千里浸式职责流中拿获相干信息和数据以撑抓想象有蓄意。由NVIDIA DGX Spark系统驱动的体验匡助团队保留来自想象评审、产物展厅和数字孪生的落魄文,使空间职责从一次性会议革新为可近似的企业过程。
屡次赢得学院奖和艾好意思奖的故事叙述与千里浸式媒体职责室Atlantic Studios,正在使用NVIDIA XR AI让不雅众探索泰坦尼克号现今情状的千里浸式扫描。用户不错使用语音指示寻找趣味点,并指引探索这一历史功绩:将复杂的水下模子飘零为互动空间故事,及时回答问题、呈现配景信息并匡助用户学习。
英伟达归来说念:“跟着AI代理赢得感知物理天下、使用器具、造访企业学问并与东说念主类配合的能力永利官网app下载,它们正在成为新一类的数字职责者。NVIDIA XR AI提供了拓荒者构建代理所需的库和加快预计基础,并适用于实验室、工场、病院和千里浸式环境。”