Nvidia近日对超逼真实时3D图形协作和模拟平台Omniverse进行了多项升级更新,包括为企业用户和创作者提供更高的性能和新的工具。
Nvidia Omniverse平台作为一种“元宇宙”平台,让艺术家、工程师、创作者和其他人可以在大规模虚拟世界中进行远程协作,重新创建和模拟他们可以想象的任何事物,例如汽车、飞机、建筑物和工厂等等。使用Omniverse Enterprise平台可以利用“数字孪生”完全模拟出工厂车间,让工业元宇宙能够像在现实世界中一样移动并且与实际物理环境进行交互。
本周,Nvidia在CES 2023大会的特别演讲中宣布对Omniverse Enterprise进行重大更新,包括支持新的GeForce RTX 4090和4080图形卡的Nvidia Ada Lovelace架构,以及最新的数据中心级OVX图形计算系统。
Omniverse生态系统还扩展到涵盖新的连接器,让艺术家和设计师们能够连接更多的软件,例如Adobe Substance 3D Painter、Autodesk Alias、PTC Creo和Kitware Paraview。
Nvidia还宣布全面推出Omniverse DeepSearch,这是一项人工智能服务,允许团队使用自然语言或者2D参考图像快速筛选大型的、未标记的3D模型数据库,从而找出完美的资产。使用该工具可以更轻松地显示和发现团队需要的模型,而无需花费数小时使用简单的文本一次一页地浏览目录进行搜索。
Omniverse平台的核心组件也得到了更新,包括Omniverse Kit软件开发工具包,现在可以更轻松地为Nvidia平台快速构建高级工具和应用。另外,Omniverse Create是一个用于创建大型3D世界的参考应用,现在增加了对DLSS3和多视角的支持,可以更轻松地创建大型的、复杂的资产。还有用于查看3D场景的参考应用Omniverse View也已经增加加了标记、注释和简单导航等功能,使演示文稿更具有交互性。
Omniverse Nucleus是与Omniverse Enterprise平台一起推出的数据库服务器和协作引擎,已经通过改进的IT工具进行了更新,例如扩展的版本控制和原子检查点,以及针对云、本地环境和混合工作流更新了大文件传输功能。
Zaha Hadid Architects是一家以各种独特文化建筑设计而闻名的建筑公司,该公司一直使用Omniverse平台来加速自身的设计和开发工作流程,同时也在开发他们的自定义工具,让该平台使用元宇宙风格的应用设计和构建建筑物的3D模型。
Zaha Hadid Architects公司副总监Shajay Bhooshan表示:“我们正在与Nvidia展开合作,将Omniverse作为我们技术堆栈的连接基础设施。我们的目标是在各个项目阶段保留设计意图并提高生产力。”
汽车制造商梅赛德斯奔驰同样一直在他们的全球工厂中使用Omniverse Enterprise平台,从而在全球制造工厂实现所谓的“工业元宇宙”。梅赛德斯奔驰公司借助Omniverse平台,可以在生产环境中使用全保真的数字孪生,让分布在全球各地的团队能够实时协作、修改装配线和生产线,并在不中断当前站点的情况下查看各项计划会给运营带来怎样的影响。
由于数字孪生与真实世界的工厂车间尽可能接近并精确模拟,因此设计师和工程师可以看到修改数字孪生会给真实世界怎样的影响,因此,一旦他们完成了模拟,就可以更好地预测工厂需要如何改变,然后再投入数百万美元或者数小时的工作时间来改变装配线。
Omniverse平台的创作者版还增加了面向动画师、创作者和开发人员的更新功能,提供了人工智能驱动的工具,其中包括Omniverse Launcher新增的生成功能,让用户在启动平台时就可以访问这些工具。
新工具包括Omniverse Audio2Face,这是一种支持人工智能的工具,可以从附加的音频文件中自动生成逼真的面部表情,这样创作者就不需要逐帧模拟他们自己的脸,而是让AI自动生成,他们只需要在这之后进行一些微调就行了。
除了Audio2Face之外,Audio2Gesture和Audio2Emotion也进行了性能上的升级,现在更易于集成了。Audio2Gesture可以创造逼真的上半身动作,Audio2Emotion则可以让角色根据声音表达逼真的情绪,例如快乐的表情或者悲伤的面部表情。
YouTube上一位网名为JSFilmz的热门创作者Jae Solina说:“对3D技能的需求正在飙升,但对某些人来说,学习3D可能是非常可怕的,而且绝对要耗费大量时间。但是,这些新平台的开发,不仅让创意人员和技术专业人员能够继续使用他们最喜欢的3D工具工作,而且还增强了他们的技能,甚至是使用AI来协助他们完成工作流程。”
这些AI辅助工具都已经添加到Nvidia Canvas中,让艺术家们可以生成整个景观并通过简单的笔触对其进行扩展。很快,所有使用RTX的用户都可以下载Canvas并创建全景环境,只需按几下按钮,即可创建AI生成的图像。
好文章,需要你的鼓励
铠侠正在测试最新的UFS v4.1嵌入式闪存芯片,专为智能手机和平板电脑设计,可提供更快的下载速度和更流畅的设备端AI应用性能。该芯片采用218层TLC 3D NAND技术,提供256GB、512GB和1TB容量选择。相比v4.0产品,随机写入性能提升约30%,随机读取性能提升35-45%,同时功耗效率改善15-20%。新标准还增加了主机发起碎片整理、增强异常处理等功能特性。
上海AI实验室团队提出创新的异步拍摄方案,仅用普通相机就能实现高速4D重建。该方法通过错开相机启动时间将有效帧率从25FPS提升至100-200FPS,并结合视频扩散模型修复稀疏视角导致的重建伪影。实验结果显示,新方法在处理快速运动场景时显著优于现有技术,为低成本高质量4D内容创作开辟新路径。
谷歌在伦敦云峰会上发布Firebase Studio更新,新增Gemini命令行界面集成、模型上下文协议支持和"代理模式"。代理模式提供三种AI协作层次:对话式"询问"模式用于头脑风暴,人机协作代理需开发者确认代码变更,以及几乎完全自主的代理模式。尽管谷歌声称已有数百万应用使用该平台,但目前仍需精心设计提示词,非工程师用户还无法直接创建成熟应用。
上海AI实验室联手复旦大学提出了POLAR方法,这是一种革命性的奖励模型训练技术。通过让AI学会识别不同策略间的差异而非死记评分标准,POLAR在多项任务上实现了显著提升,7B参数模型超越72B现有最强基线,为AI对齐问题提供了全新解决思路。