总部位于东京的初创企业Telexistence本周宣布将在日本数百家全家(FamilyMart)便利店部署NVIDIA AI驱动的智能机器人来为货架补货。
全日本共有56000家便利店,密度居全球第三。其中约16000家由全家经营。Telexistence希望为这些商店节省时间,将重复性的工作(如为货架补充饮料)交给机器人,使店员能够处理与顾客互动等更复杂的任务。
这只是Telexistence机器人的功能之一,这些机器人在NVIDIA Jetson边缘AI和机器人平台上运行。该公司还在开发能够使用机器人分拣包裹的AI仓储物流系统。
Telexistence首席执行官Jin Tomioka表示:“我们希望将机器人部署到各个支持人们日常生活的行业,首先就是便利店这个我们在日常生活中离不开,但却面临着劳动力短缺问题的行业,尤其是在便利店星罗密布的日本。”
这家成立于2017年的公司下一步准备扩张到美国的便利店。美国的零售业同样受到劳动力短缺的困扰,该国目前有15万家便利店,超过一半的消费者表示他们每月至少去一次便利店。
请观看视频“Telexistence将为日本300家便利店安装AI补货机器人”:https://youtu.be/8C_OKyh0hq4
Telexistence将在全家便利店部署补货机器人
Telexistence将于8月开始在300家全家便利店部署名为TX SCARA的补货机器人,并计划在未来几年将这种自主机器人部署到更多的全家便利店以及其他主要的连锁便利店。
Tomioka表示:“为了给货架补货,便利店店员在里屋耗费了大量本该在外面与顾客打交道的时间。机器人服务可以让店员有更多的时间与顾客接触。”
TX SCARA一边在轨道上运行,一边通过多个摄像头扫描每个货架并使用AI识别数量过少的饮料,然后规划补货路线。这套AI系统为饮料自动补货的成功率达到98%以上。
即便在极少数情况下,该机器人对饮料的摆放位置判断失误或者饮料翻倒,店员也不需要放下手中的工作来让机器人重新运转。待命的Telexistence远程操作人员会通过使用NVIDIA GPU进行视频流传输的虚拟现实(VR)系统进行手动控制,为便利店迅速解决问题。
Telexistence估计,一家繁忙的便利店每天需要补充1000多份饮料。TX SCARA的云系统会根据机器人在运行过程中的补货名称、日期、时间和数量来维护一个产品销售数据库,使AI能够根据过去的销售数据考虑哪些商品需要优先补货。
使用NVIDIA Jetson进行边缘AI处理
TX SCARA内置多个AI模型。物体检测模型可以识别商店里的饮料类型,确定哪种饮料属于哪个货架,并且与另一个模型一起帮助检测机器人手臂的运动,使机器人可以拿起饮料并准确地将其放在货架上的产品之间。第三个模型负责异常检测,即识别饮料是否掉落或离开货架。还有一个模型负责检测每个货架区域中哪些饮料的数量不足。
Telexistence团队将自定义的预训练神经网络作为基础模型,通过添加合成和注释的真实世界数据来微调应用的神经网络。该团队使用一个模拟环境创建了8万多张合成图像用于增强他们的数据集,使机器人能够学会检测任何颜色、图案、照明环境中的饮料。
该团队依靠NVIDIA DGX Station来训练AI模型。机器人本身使用两个NVIDIA Jetson嵌入式模块:用于边缘AI处理的NVIDIA Jetson AGX Xavier以及用于传输视频串流数据的NVIDIA Jetson TX2模块。
在软件方面,该团队使用用于边缘AI的NVIDIA JetPack SDK和用于高性能推理的NVIDIA TensorRT SDK。
Telexistence首席机器人自动化官Pavel Savkin表示:“如果没有TensorRT,我们的模型就无法快速运行,也就无法高效地检测店里的商品。”
Telexistence使用半精度浮点格式(FP16)来进一步优化其AI模型,而非单精度浮点格式(FP32)。
您可在9月19日至22日在线举行的NVIDIA GTC大会上了解更多关于AI和机器人技术的最新动态。本次大会的报名不收取任何费用。
好文章,需要你的鼓励
Ceph平台通过单一解决方案提供大规模可扩展的对象、块和文件存储。IBM Storage Ceph自2023年1月起成为IBM存储产品组合和软件定义存储的一部分,可在行业标准x86服务器硬件上运行。它可以从小型工作负载开始,并可扩展到PB级工作负载。
国产算力PoC平台主要聚焦于为国产算力集群提供垂类场景评测、适配与验证服务,促进国产芯片从“可用”到“好用”,同时为互联网、AI 应用开发企业提供多种算力适配试验空间,找到适合不同场景的“芯片+软件”最佳组合。