来自拉斯维加斯的消息——显卡芯片巨头Nvidia周日推出由Xavier驱动的下一代自动驾驶堆栈,此堆栈是Nvidia在砸在汽车AI上20亿美元的研发结果。
Nvidia称Xavier 是“世界上最强大的SoC(片上系统)”,Xavier可处理来自车辆雷达、摄像头、激光雷达和超声波系统的5级自主驾驶数据,能效比市场上同类产品更高,体积更小。
Xavier的内置晶体管超过90亿个,含一颗定制的8核CPU、一颗512核Volta GPU、一个8K HDR视频处理器、一个深度学习加速器、数个新型计算机视觉加速器以及30瓦功率下每秒可执行30万亿次操作的能力。
Xavier曾于一年前在新闻里出现过,但Nvidia表示Xavier现在已经成了两个软件平台(Drive IX和刚刚宣布的Drive AR)的根基,Drive IX和Drive AR均为Nvidia旗下Pegasus AI计算平台的一部分。Nvidia首席执行官Jensen Huang周日晚间在CES上做主题演讲时宣布了推出该新平台的消息。
Nvidia的Xavier片上系统。
Drive IX属于人工智能层,Nvidia表示,汽车制造商利用Drive IX可以将汽车数据整合到汽车用户体验和操作控制里。Drive IX系统可分析汽车内部和外部的传感器数据,继而为司机和乘客提供智能助理技术,可识别司机和乘客的脸部、声音和手势。
对于Nvidia而言,自主驾驶和领导地位意味着更多用于高性能计算以及云计算的GPU使用案例。
Nvidia也在大力推动Drive IX的使用,希望Drive IX成为车辆安全性和便利性的终极SDK。例如,利用面部识别和视线跟踪,Drive IX系统可以在手握驾驶盘、昏昏欲睡的司机睡着以前发警报提醒他们,或是根据脸部识别在满载一袋袋生活用品的车辆到来时自动打开出入口的门。
而Drive AR则是面向信息娱乐应用,Drive AR基本上会掀起计算机视觉、计算机图形、人机交互、AI的热潮并将成为车内增强现实接口的强大动力。Nvidia还推出了AutoSim,AutoSim是个模拟虚拟驾驶环境,用户利用该虚拟驾驶环境可在生产前配置车辆上的摄像头。
Huang表示,“增强现实将定义用户界面。”
一切都与Drive Pegasus AI计算平台相关,Nvidia称Drive Pegasus AI “可将一整车个人电脑的性能放在自动级别外形规格里交付,这些外形规格只有车牌照那么大“,而处理能力可达每秒320万亿次操作。对于Nvidia的客户来说,Pegasus主板据称将是生产完全自动驾驶汽车之路。
Huang表示,“我们开发了整套自主车辆软件。我们现在有超过300个客户在开发Nvidia Drive。”
其他涉及客户的新闻,Nvidia日前透露,德国汽车制造商大众汽车(Volkswagon)计划在Drive IX平台上开发下一代智能大众汽车。大众汽车首席执行官赫伯特·迪斯(Herbert Diess)登台介绍了新的大众汽车I.D. Buzz。大众汽车I.D. Buzz为一电动汽车原型,大众汽车希望大众汽车I.D. Buzz将巩固自己在汽车AI计算市场的霸主地位。
优步(Uber)也出柜成为Nvidia的客户,坊间消息称拼车巨头优步已经在旗下的自动驾驶汽车和卡车车队中用上了基于Nvidia GPU的AI计算系统。
好文章,需要你的鼓励
随着员工自发使用生成式AI工具,CIO面临影子AI的挑战。报告显示43%的员工在个人设备上使用AI应用处理工作,25%在工作中使用未经批准的AI工具。专家建议通过六项策略管理影子AI:建立明确规则框架、持续监控和清单跟踪、加强数据保护和访问控制、明确风险承受度、营造透明信任文化、实施持续的角色化AI培训。目标是支持负责任的创新而非完全禁止。
NVIDIA研究团队开发的OmniVinci是一个突破性的多模态AI模型,能够同时理解视觉、听觉和文本信息。该模型仅使用0.2万亿训练样本就超越了使用1.2万亿样本的现有模型,在多模态理解测试中领先19.05分。OmniVinci采用三项核心技术实现感官信息协同,并在机器人导航、医疗诊断、体育分析等多个实际应用场景中展现出专业级能力,代表着AI向真正智能化发展的重要进步。
英国正式推出DaRe2THINK数字平台,旨在简化NHS全科医生参与临床试验的流程。该平台由伯明翰大学和MHRA临床实践研究数据链开发,能够安全传输GP诊所与NHS试验研究人员之间的健康数据,减少医生的管理负担。平台利用NHS现有健康信息,安全筛查来自450多家诊所的1300万患者记录,并使用移动消息系统保持试验对象参与度,为传统上无法参与的人群开辟了研究机会。
Salesforce研究团队发布BLIP3o-NEXT,这是一个创新的图像生成模型,采用自回归+扩散的双重架构设计。该模型首次成功将强化学习应用于图像生成,在多物体组合和文字渲染方面表现优异。尽管只有30亿参数,但在GenEval测试中获得0.91高分,超越多个大型竞争对手。研究团队承诺完全开源所有技术细节。