总部位于东京的初创企业Telexistence本周宣布将在日本数百家全家(FamilyMart)便利店部署NVIDIA AI驱动的智能机器人来为货架补货。
全日本共有56000家便利店,密度居全球第三。其中约16000家由全家经营。Telexistence希望为这些商店节省时间,将重复性的工作(如为货架补充饮料)交给机器人,使店员能够处理与顾客互动等更复杂的任务。
这只是Telexistence机器人的功能之一,这些机器人在NVIDIA Jetson边缘AI和机器人平台上运行。该公司还在开发能够使用机器人分拣包裹的AI仓储物流系统。
Telexistence首席执行官Jin Tomioka表示:“我们希望将机器人部署到各个支持人们日常生活的行业,首先就是便利店这个我们在日常生活中离不开,但却面临着劳动力短缺问题的行业,尤其是在便利店星罗密布的日本。”
这家成立于2017年的公司下一步准备扩张到美国的便利店。美国的零售业同样受到劳动力短缺的困扰,该国目前有15万家便利店,超过一半的消费者表示他们每月至少去一次便利店。
请观看视频“Telexistence将为日本300家便利店安装AI补货机器人”:https://youtu.be/8C_OKyh0hq4
Telexistence将在全家便利店部署补货机器人
Telexistence将于8月开始在300家全家便利店部署名为TX SCARA的补货机器人,并计划在未来几年将这种自主机器人部署到更多的全家便利店以及其他主要的连锁便利店。
Tomioka表示:“为了给货架补货,便利店店员在里屋耗费了大量本该在外面与顾客打交道的时间。机器人服务可以让店员有更多的时间与顾客接触。”
TX SCARA一边在轨道上运行,一边通过多个摄像头扫描每个货架并使用AI识别数量过少的饮料,然后规划补货路线。这套AI系统为饮料自动补货的成功率达到98%以上。
即便在极少数情况下,该机器人对饮料的摆放位置判断失误或者饮料翻倒,店员也不需要放下手中的工作来让机器人重新运转。待命的Telexistence远程操作人员会通过使用NVIDIA GPU进行视频流传输的虚拟现实(VR)系统进行手动控制,为便利店迅速解决问题。
Telexistence估计,一家繁忙的便利店每天需要补充1000多份饮料。TX SCARA的云系统会根据机器人在运行过程中的补货名称、日期、时间和数量来维护一个产品销售数据库,使AI能够根据过去的销售数据考虑哪些商品需要优先补货。

使用NVIDIA Jetson进行边缘AI处理
TX SCARA内置多个AI模型。物体检测模型可以识别商店里的饮料类型,确定哪种饮料属于哪个货架,并且与另一个模型一起帮助检测机器人手臂的运动,使机器人可以拿起饮料并准确地将其放在货架上的产品之间。第三个模型负责异常检测,即识别饮料是否掉落或离开货架。还有一个模型负责检测每个货架区域中哪些饮料的数量不足。
Telexistence团队将自定义的预训练神经网络作为基础模型,通过添加合成和注释的真实世界数据来微调应用的神经网络。该团队使用一个模拟环境创建了8万多张合成图像用于增强他们的数据集,使机器人能够学会检测任何颜色、图案、照明环境中的饮料。
该团队依靠NVIDIA DGX Station来训练AI模型。机器人本身使用两个NVIDIA Jetson嵌入式模块:用于边缘AI处理的NVIDIA Jetson AGX Xavier以及用于传输视频串流数据的NVIDIA Jetson TX2模块。
在软件方面,该团队使用用于边缘AI的NVIDIA JetPack SDK和用于高性能推理的NVIDIA TensorRT SDK。
Telexistence首席机器人自动化官Pavel Savkin表示:“如果没有TensorRT,我们的模型就无法快速运行,也就无法高效地检测店里的商品。”
Telexistence使用半精度浮点格式(FP16)来进一步优化其AI模型,而非单精度浮点格式(FP32)。
您可在9月19日至22日在线举行的NVIDIA GTC大会上了解更多关于AI和机器人技术的最新动态。本次大会的报名不收取任何费用。
好文章,需要你的鼓励
英国国家医疗服务(NHS)正将无人机纳入常规医疗物流体系。自今年2月起,无人机每天在雷恩斯公园和圣乔治医院之间运送血液等诊断样本,飞行仅需3分钟,比公路运输快约85%,且碳排放减少高达98%。目前已有逾2000名患者受益。NHS计划将该服务扩展至圣赫利尔、克罗伊登等多家医院,最终惠及约180万名患者。该网络由英国医疗初创公司Apian与谷歌旗下Wing合作运营。
AgentLens是Explyt公司联合俄罗斯学术机构开发的AI编程助手评测基准,通过分析完整人机交互轨迹而非仅看最终结果,从五个维度评估代码智能体的真实表现。
边缘AI计算厂商Aetina宣布,将在其DeviceEdge AIE-KT风冷系列和新款AIE-PT无风扇平台上支持英伟达全新Jetson T3000和T2000模块。T3000基于Blackwell GPU,最高提供865 FP4 TFLOPS算力,功耗70W;T2000则提供400 FP4 TFLOPS,面向视觉AI代理和自主移动机器人等场景。两款模块预计2027年第一季度上市,支持Nemotron、Cosmos 3等英伟达AI软件生态。
韩国梨花女子大学提出Splash框架,通过识别AI模型中的"休眠参数"并只在其中训练触觉能力,让小型多模态AI在学会感知材质触感的同时,完整保留原有视觉语言推理能力。