NVIDIA CloudXR平台借助NVIDIA GPU、NVIDIA虚拟工作站和AWS云服务,将任意展厅或零售场所变为XR虚拟体验展厅。
NVIDIA和AWS将XR串流方式的未来带向云端。
今日,NVIDIA宣布其NVIDIA CloudXR平台将在支持NVIDIA V100和T4 GPU的Amazon EC2 P3与G4实例上可用,让云用户能够将高质量沉浸式体验以串流方式传输到远程VR和AR设备。
CloudXR平台包括NVIDIA CloudXR软件开发套件、NVIDIA虚拟工作站软件和NVIDIA AI SDK,可提供照片级逼真的图像并具有多功能XR耳机的移动便捷性。XR是VR(虚拟现实)、AR(增强现实)和混合现实的统称。
凭借从云端以串流方式传输的功能,专业人士现在可以在任何地方轻松设置、扩展和访问沉浸式体验,且不再受到昂贵工作站或外部VR追踪系统的束缚。
CloudXR等高级工具日益增长的可用性,为增强协作、精简工作流程和高保真虚拟环境打下了基础。XR解决方案还为添加AI特征和功能带来了全新可能。
制造业、媒体和娱乐、医疗等行业的许多抢先体验客户与合作伙伴,通过CloudXR平台将照片级逼真的图像与无线头戴式显示器的移动性结合起来,以增强沉浸式体验。
Lucid Motors最近发布了全新Lucid Air。这款强大高效的电动汽车让用户能够通过ZeroLight平台的自定义设置进行体验。Lucid Motors的虚拟设计展厅在CloudXR平台上开发而成。通过AWS以串流方式传输,顾客能够在展厅内身临其境地查看Lucid Air的各项先进功能。
Lucid Motors数字互动营销总监Thomas Orenz表示:“NVIDIA CloudXR让全世界的人们都能身临其境地体验全新Lucid Air的个性化设计。通过使用AWS云服务,我们无需在现场部署服务器,能够在节省基础设施成本的同时,为客户动态扩展VR配置体验。”
另一个在AWS上使用CloudXR 的早期用户是位于芝加哥的酒店设计、品牌管理和发展公司Gettys Group。Gettys经常与可视化公司Theia Interactive合作,将设计流程转化为交互式虚幻引擎VR体验。
疫情期间,Gettys和Theia借助NVIDIA CloudXR将客户项目交付到本地Oculus Quest头戴式显示器(HMD)当中,通过NVIDIA虚拟工作站从AWS EC2 P3实例以串流方式传输。
新一代云端串流方式传输
基于NVIDIA RTX GPU上的CloudXR可从任意地点以串流方式传输沉浸式AR、VR或混合现实体验。
该平台包括:
Amazon EC2 G4和P3实例上的NVIDIA CloudXR平台支持NVIDIA T4和V100 GPU,让企业可以为全球各地的任何用户提供高质量的虚拟体验。
供应情况
AWS上的NVIDIA CloudXR将于明年年初正式上市并在未来几个月发布私测版。
好文章,需要你的鼓励
这项研究由浙江大学、复旦大学等机构联合完成,提出了ReVisual-R1模型,通过创新的三阶段训练方法显著提升了多模态大语言模型的推理能力。研究发现优化的纯文本冷启动训练、解决强化学习中的梯度停滞问题、以及分阶段训练策略是关键因素。ReVisual-R1在各类推理基准测试中超越了现有开源模型,甚至在某些任务上超过了商业模型,为多模态推理研究开辟了新途径。
这项研究提出了一种名为"批评式微调"的创新方法,证明仅使用一个问题的批评数据就能显著提升大语言模型的推理能力。研究团队对Qwen和Llama系列模型进行实验,发现这种方法在数学和逻辑推理任务上都取得了显著提升,平均提高15-16个百分点,而且只需要强化学习方法1/20的计算资源。这种简单高效的方法为释放预训练模型的潜在推理能力提供了新途径。
新加坡国立大学研究团队开发了名为IEAP的图像编辑框架,它通过将复杂编辑指令分解为简单原子操作序列解决了当前AI图像编辑的核心难题。研究发现当前模型在处理不改变图像布局的简单编辑时表现出色,但在需要改变图像结构时效果差。IEAP框架定义了五种基本操作,并利用思维链推理技术智能分解用户指令,实验证明其性能显著超越现有方法,尤其在处理复杂多步骤编辑时。
Character AI的研究者开发出TalkingMachines系统,通过自回归扩散模型实现实时音频驱动视频生成。研究将预训练视频模型转变为能进行FaceTime风格对话的虚拟形象系统。核心创新包括:将18B参数的图像到视频DiT模型改造为音频驱动系统、通过蒸馏实现无错误累积的无限长视频生成、优化工程设计降低延迟。系统可让多种风格的虚拟角色与人进行自然对话,嘴型与语音同步,为实时数字人交互技术开辟了新可能。