总部位于东京的初创企业Telexistence本周宣布将在日本数百家全家(FamilyMart)便利店部署NVIDIA AI驱动的智能机器人来为货架补货。
全日本共有56000家便利店,密度居全球第三。其中约16000家由全家经营。Telexistence希望为这些商店节省时间,将重复性的工作(如为货架补充饮料)交给机器人,使店员能够处理与顾客互动等更复杂的任务。
这只是Telexistence机器人的功能之一,这些机器人在NVIDIA Jetson边缘AI和机器人平台上运行。该公司还在开发能够使用机器人分拣包裹的AI仓储物流系统。
Telexistence首席执行官Jin Tomioka表示:“我们希望将机器人部署到各个支持人们日常生活的行业,首先就是便利店这个我们在日常生活中离不开,但却面临着劳动力短缺问题的行业,尤其是在便利店星罗密布的日本。”
这家成立于2017年的公司下一步准备扩张到美国的便利店。美国的零售业同样受到劳动力短缺的困扰,该国目前有15万家便利店,超过一半的消费者表示他们每月至少去一次便利店。
请观看视频“Telexistence将为日本300家便利店安装AI补货机器人”:https://youtu.be/8C_OKyh0hq4
Telexistence将在全家便利店部署补货机器人
Telexistence将于8月开始在300家全家便利店部署名为TX SCARA的补货机器人,并计划在未来几年将这种自主机器人部署到更多的全家便利店以及其他主要的连锁便利店。
Tomioka表示:“为了给货架补货,便利店店员在里屋耗费了大量本该在外面与顾客打交道的时间。机器人服务可以让店员有更多的时间与顾客接触。”
TX SCARA一边在轨道上运行,一边通过多个摄像头扫描每个货架并使用AI识别数量过少的饮料,然后规划补货路线。这套AI系统为饮料自动补货的成功率达到98%以上。
即便在极少数情况下,该机器人对饮料的摆放位置判断失误或者饮料翻倒,店员也不需要放下手中的工作来让机器人重新运转。待命的Telexistence远程操作人员会通过使用NVIDIA GPU进行视频流传输的虚拟现实(VR)系统进行手动控制,为便利店迅速解决问题。
Telexistence估计,一家繁忙的便利店每天需要补充1000多份饮料。TX SCARA的云系统会根据机器人在运行过程中的补货名称、日期、时间和数量来维护一个产品销售数据库,使AI能够根据过去的销售数据考虑哪些商品需要优先补货。

使用NVIDIA Jetson进行边缘AI处理
TX SCARA内置多个AI模型。物体检测模型可以识别商店里的饮料类型,确定哪种饮料属于哪个货架,并且与另一个模型一起帮助检测机器人手臂的运动,使机器人可以拿起饮料并准确地将其放在货架上的产品之间。第三个模型负责异常检测,即识别饮料是否掉落或离开货架。还有一个模型负责检测每个货架区域中哪些饮料的数量不足。
Telexistence团队将自定义的预训练神经网络作为基础模型,通过添加合成和注释的真实世界数据来微调应用的神经网络。该团队使用一个模拟环境创建了8万多张合成图像用于增强他们的数据集,使机器人能够学会检测任何颜色、图案、照明环境中的饮料。
该团队依靠NVIDIA DGX Station来训练AI模型。机器人本身使用两个NVIDIA Jetson嵌入式模块:用于边缘AI处理的NVIDIA Jetson AGX Xavier以及用于传输视频串流数据的NVIDIA Jetson TX2模块。
在软件方面,该团队使用用于边缘AI的NVIDIA JetPack SDK和用于高性能推理的NVIDIA TensorRT SDK。
Telexistence首席机器人自动化官Pavel Savkin表示:“如果没有TensorRT,我们的模型就无法快速运行,也就无法高效地检测店里的商品。”
Telexistence使用半精度浮点格式(FP16)来进一步优化其AI模型,而非单精度浮点格式(FP32)。
您可在9月19日至22日在线举行的NVIDIA GTC大会上了解更多关于AI和机器人技术的最新动态。本次大会的报名不收取任何费用。
好文章,需要你的鼓励
微软近年来频繁出现技术故障和服务中断,从Windows更新删除用户文件到Azure云服务因配置错误而崩溃,质量控制问题愈发突出。2014年公司大幅裁减测试团队后,采用敏捷开发模式替代传统测试方法,但结果并不理想。虽然Windows生态系统庞大复杂,某些问题在所难免,但Azure作为微软核心云服务,反复因配置变更导致客户服务中断,已不仅仅是质量控制问题,更是对公司技术能力的质疑。
Meta研究团队发现仅仅改变AI示例间的分隔符号就能导致模型性能产生高达45%的巨大差异,甚至可以操纵AI排行榜排名。这个看似微不足道的格式选择问题普遍存在于所有主流AI模型中,包括最先进的GPT-4o,揭示了当前AI评测体系的根本性缺陷。研究提出通过明确说明分隔符类型等方法可以部分缓解这一问题。
当团队准备部署大语言模型时,面临开源与闭源的选择。专家讨论显示,美国在开源AI领域相对落后,而中国有更多开源模型。开源系统建立在信任基础上,需要开放数据、模型架构和参数。然而,即使是被称为"开源"的DeepSeek也并非完全开源。企业客户往往倾向于闭源系统,但开源权重模型仍能提供基础设施选择自由。AI主权成为国家安全考量,各国希望控制本地化AI发展命运。
香港中文大学研究团队开发出CALM训练框架和STORM模型,通过轻量化干预方式让40亿参数小模型在优化建模任务上达到6710亿参数大模型的性能。该方法保护模型原生推理能力,仅修改2.6%内容就实现显著提升,为AI优化建模应用大幅降低了技术门槛和成本。