在AI技术进步的推动下,机器人市场正在呈指数级增长。传感器技术和经济的进步创造了联网设备的繁荣,也被称为物联网。据预测,到2025年将达到1500亿台设备,到2030年将超过1万亿台设备,这为处于边缘的AI提供了巨大的机会。机器人技术和嵌入式计算正在改变制造业、医疗 、零售业、交通、智慧城市和其他重要的经济部门。
在此背景下,NVIDIA创建了不同技术规格的Jetson嵌入式计算平台,该平台为创建软件定义的自主机器而设计,根据算力、产品设计、外接传感器等需求,为各行业提供了低功耗高性能的AI解决方案。近日,NVIDIA发布NVIDIA Jetson AGX Orin,该产品是NVIDIA Jetson的最新一代产品。据悉,NVIDIA Jetson AGX Orin模块和开发者工具包将于2022年第一季度上市。

软硬件创新
2020年NVIDIA发布了Ampere架构,Jetson AGX Orin建立在NVIDIA Ampere架构之上,处理能力提升了6倍并保持了与前代机型Jetson AGX Xavier相同的外形尺寸和引脚兼容性。它每秒可进行200万亿次运算(TOPS),可与内置GPU的服务器相媲美,但尺寸却只有人的手掌那么大。
Jetson AGX Orin采用NVIDIA Ampere架构GPU和Arm Cortex-A78AE CPU以及新一代深度学习和视觉加速器。高速接口、更快的存储带宽和对多模态传感器的支持,为多个并行AI应用流水线输送数据。

除了硬件创新,全新Jetson计算机可以加速整个NVIDIA AI软件栈,使开发者能够部署最大、最复杂的模型以解决自然语言理解、3D感知、多传感器融合等领域的边缘AI和机器人技术挑战。
使用Jetson AGX Orin的客户可以运用NVIDIA CUDA-X加速计算栈、NVIDIA JetPack SDK和最新NVIDIA工具进行应用开发和优化,包括云原生开发工作流程。来自NVIDIA NGC目录的预训练模型已经过优化并且可以使用NVIDIA TAO工具套件和客户数据集进行微调。这减少了生产级AI的部署时间和成本,而云原生技术实现了产品整个生命周期内的无缝更新。
Jetson 嵌入式计算合作伙伴生态系统包含广泛的服务和产品,包括摄像头和其他多模传感器、载体板、硬件设计服务、AI和系统软件、开发工具和定制软件开发。
针对特定用例的软件框架包括用于机器人技术的NVIDIA Isaac Sim on Omniverse,NVIDIA DRIVE用于自动驾驶,NVIDIA Metropolis用于智慧城市。 最新的Isaac版本包括对机器人操作系统(ROS)开发人员社区的重要支持。 NVIDIA 还发布了用于合成数据生成和Isaac GEM的全新Omniverse Replicator,这些硬件加速软件包使ROS开发者更容易在Jetson平台上构建高性能AI机器人。
通过软硬件协同,Jetson AGX Orin使85万名Jetson开发者和6000多家在其基础上构建商业产品的公司能够创建和部署以前不可能实现的自主机器和边缘AI应用。
加速行业落地
全新Jetson平台带来了NVIDIA Ampere架构的性能和多功能性,使应用于从农业和制造业到医疗和智慧城市等诸多领域的自主移动机器人取得了更大的进步。
同时,Jetson平台配备了一套详尽的软件,可以方便快捷地开发智能城市、工厂、物联网、医疗保健、农业等领域的人工智能应用程序。
得益于广泛的生态系统合作伙伴,基于Jetson平台的人工智能解决方案在各种各样的用例和行业中的巨大成功和部署。
Jetson AGX Orin为NVIDIA Clara Holoscan提供动力,这是医疗行业的一个新计算平台,允许开发者构建软件定义的医疗设备,在边缘运行低延迟流媒体应用程序。CT扫描仪和重症监护病房摄像头等设备需要这样的处理能力,才能将数据从传感器传输到数据管道,从而实现AI决策支持。这允许开发人员创建AI微服务,在设备上运行低延迟流式应用程序,同时将更复杂的任务传递给数据中心。
DRIVE AGX Orin同样由Jetson AGX Orin等NVIDIA Ampere架构提供支持,是运输行业的首选平台。 它是新发布的NVIDIA DRIVE Concierge和DRIVE Chauffeur背后的先进处理器,这两个AI平台致力于通过AI助手重新定义车内乘客体验,并分别为安全的自动驾驶提供动力。 数十家全球汽车和卡车制造商、新能源汽车初创公司和机器人出租车公司正在将其高性能AI计算用于其下一代智能、软件定义的移动解决方案。
结语
作为Jetson AGX Xavier的接替者,Jetson AGX Orin在硬件架构层面进行了更新,同时得益于丰富的软件生态,Jetson平台能够在行业中加速落地,打开了边缘AI和自主机器的想象空间。
好文章,需要你的鼓励
美国多州和部分国家要求特定应用进行年龄验证,澳大利亚已禁止16岁以下用户使用社交媒体。新提案《应用商店问责法案》建议由苹果和谷歌负责统一验证用户年龄,而非各开发者单独验证。这将提升用户体验,用户只需向苹果或谷歌验证一次身份。凭借苹果在隐私保护方面的优势,该方案可扩展至Safari浏览器,为需要年龄验证的网站提供确认信息,而无需透露用户个人数据。
Meta AI首次发布多模态奖励评估基准MMRB2,专门评价AI同时处理文字和图像的能力。该基准包含四大任务类型共4000个专家标注样本,测试23个先进模型。结果显示最佳模型Gemini 3 Pro达75-80%准确率,仍低于人类90%水平。研究揭示AI评价存在视觉偏见等问题,为多模态AI发展提供重要参考标准。
AI编程助手Cursor背后的公司Anysphere宣布收购AI代码审查工具初创公司Graphite。据报道收购价远超Graphite今年早些时候B轮融资时2.9亿美元的估值。此次收购具有战略意义,将AI代码生成与AI代码审查工具相结合,可大幅提升从编写到交付的整体效率。Anysphere估值已达290亿美元,近期频繁收购,上月收购技术招聘公司,今年7月还收购AI客户关系管理初创公司Koala的团队。
快手推出的Kling-Omni是首个真正统一的AI视频制作系统,能够理解文字、图像、视频等多种输入方式,不仅可以生成视频,还能进行复杂编辑和推理。该系统通过三个核心模块的协作,实现了从创意理解到最终输出的全流程自动化,让普通用户也能制作专业水准的视频内容,代表了AI视频技术的重要突破。