相信看过《流浪地球2》的朋友一定对其中的各种机器人印象深刻,带有机械臂的巡检机器人自主操作监测指标,保障空间站人员生命安全;地球联合政府会议厅,机器人驻守一旁辅助人类科学决策;北京航天中心数据中心,巡检机器人支撑着海量数据平稳运作;行星发动机机库中,移动机器人有条不紊地搬运传送着物料……
其实在现实生活中,在高性能边缘计算芯片和人工智能的加持下,机器人,正在从实验室走向商业落地。对于工程师而言,抓住机器人领域的快速发展的机会,才能立于不败之地。
边缘AI和机器人应用开发正当时
边缘人工智能已成为一个重要的增长市场。从技术发展方面看,芯片和软件技术的迭代一定程度推动了边缘AI的发展。过去芯片的算力无法满足边缘AI应用,同时软件配置通常是利用专家系统或者是基本机器学习系统来实现AI功能。
但是现在随着深度学习软件上的发展,以及高算力、低功耗的边缘处理器的普及,边缘AI在技术支持层面也得到了更好的发展。
与此同时,人工智能和机器学习应用程序的加入增加了垂直领域边缘部署的复杂性。从自主移动机器人、零售、智慧城市、农业、物流、制造到医疗保健,各个行业都在为边缘技术注入大量人工智能。
开发机器人是一项涉及多学科的工作。机械工程师、电气工程师、计算机科学家和AI工程师齐聚一堂,携手打造机器人。
目前已经有不少AI框架已经逐步支持端侧AI了,也有芯片厂商推出来面向AI的开箱即用的工具。例如依托Jetson平台,NVIDIA打造云原生软件堆栈、预先训练的模型、应用程序框架和不断发展的生态系统来简化边缘AI和机器人应用开发,从而实现快速上市。
NVIDIA Jetson让边缘AI和机器人应用开发易如反掌
NVIDIA Jetson是面向边缘计算的人工智能平台,适用于自主机器和其他嵌入式应用程序。而NVIDIA Jetson Nano是一款面向嵌入式和边缘人工智能市场的低成本入门级人工智能计算机。
NVIDIA Jetson Nano可以并行运行多个神经网络,用于图像分类、对象检测、分割和语音处理等应用。所有这些都被打包到一个易于使用的平台中,该平台的功耗仅为5瓦。
同时,NVIDIA还提供了Jetson Nano开发套件,以令人惊叹的速度轻松设置和运行现代人工智能算法。
从预测公交车到达时间到实时国际象棋游戏分析,从基于AI的音乐合成器到实验室设备的自动视觉警报系统, Jetson开发人员可以使用Jetson Nano开发套件发现AI的各种功能。
比如明尼苏达大学的研究人员开发了一种neuroprosthetic hand,它使用基于递归神经网络(RNN)的AI模型来读取和解码截肢者从周围神经活动中移动手指的意图。AI模型使用NVIDIA Jetson Nano作为便携式独立单元进行部署。
开发者Arthur Findelair演示了如何增强无人机的计算机视觉能力,并使用Jetson Nano的计算能力实现了无人机的手势控制。
NVIDIA Jetson的创新永无止境
NVIDIA正在继续增强Jetson系列,在2022年秋季GTC上发布的 Jetson Orin Nano系列为入门级 AI 设定了新标准。
Orin Nano模组在外形和引脚上与之前发布的Orin NX模组完全兼容。用户使用AGX Orin开发者套件开发适合Orin Nano系列的应用,能够灵活地设计一个系统来支持多个Jetson模组并轻松扩展其应用。
Orin Nano通过高速I/O和NVIDIA Ampere架构GPU支持多个并发AI应用流水线。零售分析、工业质量控制等入门级设备和应用的开发者将能够以较低的成本更容易地获得更复杂的AI模型。
Orin Nano模组将分为两个版本:Orin Nano 8GB提供最高40TOPS性能,功率为7W至15W;4GB版本提供最高20TOPS性能,功率仅为5W至10W。
Orin Nano得到了NVIDIA JetPack SDK的支持并由NVIDIA CUDA-X加速计算堆栈驱动。该计算堆栈也被用于创造工业物联网、制造业、智慧城市等领域的开创性AI产品。
目前,NVIDIA活跃的Jetson生态系统正在迅速发展。该生态系统已拥有超过100万名开发者、6000名客户、2000家初创企业和150家合作伙伴。Jetson合作伙伴提供从AI软件、硬件和应用设计服务到摄像头、传感器和外设、开发者工具以及开发系统等各类支持。
好文章,需要你的鼓励
宏碁Aspire 14 AI在Costco售价500美元,成为最便宜的Copilot Plus PC。该笔记本搭载英特尔Lunar Lake处理器,拥有现代化配置而非过时组件。配备16GB内存和1TB固态硬盘,电池续航近19小时。虽然设计和显示屏表现一般,但整体性能出色,AI处理能力达到40万亿次操作每秒,是预算有限用户的优质选择。
CORA是微软研究院与谷歌研究团队联合开发的突破性AI视觉模型,发表于2023年CVPR会议。它通过创新的"区域提示"和"锚点预匹配"技术,成功解决了计算机视觉领域的一大挑战——开放词汇目标检测。CORA能够识别训练数据中从未出现过的物体类别,就像人类能够举一反三一样。在LVIS数据集测试中,CORA的性能比现有最佳方法提高了4.6个百分点,尤其在稀有类别识别上表现突出。这一技术有望广泛应用于自动驾驶、零售、安防和辅助技术等多个领域。
博通公司第三季度业绩超预期,每股收益1.69美元,营收159.6亿美元,同比增长22%。公司获得来自新客户的100亿美元定制AI芯片订单,推动股价在盘后交易中上涨超3%。AI相关营收同比增长63%至52亿美元,预计第四季度将超过62亿美元。公司专注为超大规模云基础设施提供商设计定制芯片,已成为英伟达的主要竞争对手之一,年内股价上涨32%,市值超1.4万亿美元。
中国电信研究院联合重庆大学、北航发布T2R-bench基准,首次系统评估AI从工业表格生成专业报告的能力。研究涵盖457个真实工业表格,测试25个主流AI模型,发现最强模型得分仅62.71%,远低于人类专家96.52%。揭示AI在处理复杂结构表格、超大规模数据时存在数字计算错误、信息遗漏等关键缺陷,为AI数据分析技术改进指明方向。