广告

用此方法从超市拿了东西就走,没人敢拦你

2016-12-12 16:00:00 赵明灿 阅读:
不用排队,无需注册,也不要结账,亚马逊新推出的Amazon Go商店,它里面用到了传感器融合和深度学习算法等多种先进技术。具体来看,这里面物品跟踪是依靠计算机视觉还是RFID标签实现的呢?除此之外,当中还可能用到哪些传感器技术呢?
广告

最近亚马逊推出了一个名为Amazon Go的实体便利店。这个商店的独到之处在于,它不需要排队,无需注册,也不需要结账。用户进入时只需在手机上打开Amazon Go App的二维码,在闸机上刷一下,选好商品就可以径直离开!

这个商店到底用到了哪些高科技呢?从官方的宣传看,技术亮点包括传感器融合和深度学习算法。然而,亚马逊并未公布该系统的详细工作原理,所以我们现在只能是对其进行大致推测。

Amazon Go使用摄像头和计算机视觉代替RFID标签?

为什么Amazon Go使用摄像头和计算机视觉而不是用物品上的RFID标签呢?对于这个问题,Quora上的一名网友Will Thiel表示,最重要的原因是,Amazon Go不是真正的商店,而是一个可转售的服务。也就是说,如果此举成功,亚马逊将试图以转售亚马逊网络服务同样的方式,为用户提供7-11商店内的购物体验。这意味着他们需要为7-11提供服务,而不用其采用新的流程和硬件。

其他原因包括:

1.成本。如果每个商品上都加一个RFID标签,RFID标签会花钱,贴标签的时间会花钱,解决人工错误会花更多的钱。亚马逊不喜欢花钱。

2.设备。为什么亚马逊想用智能手机而不是其他非消费类硬件?成本(见上)、数据(见下)、增强现实。亚马逊可以将有关销售等的信息叠加到用户购物体验上。

3.数据和交互性。如果传感器在购物车里,RFID只会告诉你什么商品进入到车里,什么留在车里。如果传感器在门口,他们只会告诉你什么商品离开了商店。有了手机和计算机的视觉,亚马逊知道每个人在商店里做了什么。

客户无法被RFID标记,摄像头和计算机视觉可以跟踪到他们。现在,任何商店都已经添加了摄像头,可重复利用。

然而,网友Jacob Minz给出了不同观点。他表示,即使是有人坐在视频屏幕后观察,也不能可靠预测客户封闭的购物袋中有什么。其次,任何闭路摄像机电路将具有其盲点,或者会遭受浪涌而产生瞬时盲点。

所以,商品必须贴上RFID标签。

RFID标签非常便宜,零售价仅为0.13美元,亚马逊可以以0.03美元(折合成人民币仅约2毛钱)更便宜的价格购买到。

RFID是无源元件,不需要电池工作。扫描仪可以相隔一定距离获取到其代码。
002amazongo20161208
上图中的人实际上是贴上了RFID标签。但在商店的示例中,所有物品都会被标记,计算机可以创建物品的动态地图。
003amazongo20161208
我们需要有第三个点,即客户(客户标签),这就是计算机视觉(CV)发挥作用之处。其他的事情亚马逊就很容易搞定。

为了不出错,用这么多传感器也是拼了

另外,Quora上的另一名网友表示,Amazon Go里面的这些摄像头能识别人的肤色,通过图像分析精确找到顾客的手。毕竟当购物者较多时,两位顾客很有可能会在一个货架上拿货,通过肤色来识别用户是最有效的方法,可以降低失误率。

亚马逊还有强大的 Alexa 智能助手,遍布杂货店的麦克风采集声音后,系统就能获知到顾客的方位和大致动作。通过各个麦克风接收音频的时间差,系统还能得出顾客在商店中的行动习惯。

此外,通过压力传感器和称重传感器,系统可以判断货架上的商品是否已经被拿走或还回。再配合图像分析,系统就能及时发现用户在还回商品时是否放错了货架。

这两份专利文件,是否和Amazon go相关?

另外,网友Brian Roemmele也透露说亚马逊曾提交过两份专利文件,里面的描述和Amazon Go如出一辙。这两份文件分别为:“检测物品互动与移动”(Detecting item interaction and movement)和“物品从物料处理设施上转移”(Transitioning items from the materials handling facility)。

“检测物品互动与移动”这份专利的大致内容是:用户从货架上拿起或放下物品时,系统可以检测到这个动作,并且更新用户移动设备里的清单。

从专利中我们了解到,系统中包含多个摄像头,它们被分别置于天花板、货架两侧和内部。其中,天花板上的摄像头用来采集用户和货品的位置,货架两侧的摄像头用来捕捉用户的图像和周围的环境,货架内的摄像头则用来确定货品的位置或用户手的移动。

“物品从物料处理设施上转移”这份专利主要是说,物品被识别,并且当用户正在拿起物品时,物品自动与用户发生关联。当用户进入或穿过“转移区”(Transition Area),被拿起的物品将自动转移到用户,而不需要有用户的“确认”输入或带来附加延迟。

另外,专利还表示,这里的摄像头可以是多种类型的,可以是RGB摄像头或深度感知摄像头。除了摄像头之外,也可以有其他输入设备,比如压力传感器、红外传感器、体积位移传感器、光幕等等。压力传感器可以检测物品移出和进入的时间,红外传感器可以用来区分用户的手和物品。

小结:

Amazon Go 现在还处在Beta测试阶段,暂时只对亚马逊员工开放,如果在西雅图试运营顺利的话,明年就会在全美推广。但是这种免结帐最好的方式,是用计算机视觉,还是RFID呢?亦或您有更好的设计想法,欢迎交流。

本文授权转载自EDN China,版权所有,谢绝转载

EETC wechat barcode


欢迎关注“EDN官方微信”。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
赵明灿
电子技术设计(EDN China)资深技术分析师。
  • 一家成立25年的激光雷达企业将“死在黎明前夜”? 2021年是激光雷达“上车”元年。随着智能驾驶技术不断演进,未来几年激光雷达将被各大车企采用。这家具备领先的激光雷达技术优势的德国企业,将要在激光雷达装配率极速上升的“黎明前夜”落幕吗?
  • AI ISP技术及行业分析:特斯拉全摄像头方案或成为现实 在AI算力突破传统成像系统天花板的计算革命下,AI ISP技术也将不断发展,其算力也将越来越强,其产品成本将不可避免的越来越低,拍摄距离也将越来越远,效果也会越来越好。而一直被大众所不理解和诟病的特斯拉的全摄像头视觉技术,或许不久将成为现实。
  • 了解 USB 3.1一代、二代 和 USB 3.2 本文将介绍 USB 3.1 以及第一代与第二代 USB 3.1 之间的差异及两者能给机器视觉开发人员带来的实际益处。 USB Implementers Forum 还针对 USB 3.2 标准发布了相关规范,该标准使 USB 3.1 吞吐量加倍。
  • 阜时科技:SPAD芯片在机器人LiDAR领域的应用 机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业、汽车自动驾驶等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多。 6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,毕业于中山大学和荷兰代尔夫特理工大学,曾是光刻巨头ASML光刻过程控制算法的创始团队成员,现任深圳阜时科技有限公司CTO王李冬子先生分享了SPAD芯片在机器人LiDAR领域的应用。
  • 从Arm Mali-C55三大特性读懂智能视觉未来趋势 瞄准智能摄像头和边缘人工智能(AI)视觉市场,Arm日前宣布推出全新Arm Mali-C55图像信号处理器(ISP),这是Arm迄今为止面积最小且可配置性最高的ISP产品,瑞萨电子成为了首家公开授权许可客户。
  • 一文带你了解摄像头中最重要的涂层--抗反射层(Antireflection) 本文介绍了摄像头中抗反射涂层,有助于摄像头减少炫光和鬼影形成。你能拍出美丽景色和漂亮小姐姐全靠它……
  • “一碰交互,共触未来”ITMA峰会盛大 目前,智能终端NFC功能的使用频率越来越高,面对新场景新需求,ITMA多家成员单位一起联合推动iTAP(智能无感接近式协议)标准化项目,预计25年上半年发布1.0标准,通过功能测试、兼容性测试,确保新技术产业应用。
  • 中科院微电子所在忆阻神经-模糊硬 中科院微电子所集成电路制造技术重点实验室刘明院士团队提出了一种基于记忆交叉阵列的符号知识表示解决方案,首次实验演示并验证了忆阻神经-模糊硬件系统在无监督、有监督和迁移学习任务中的应用……
  • 直角照明轻触开关为复杂电子应用提 C&K Switches EITS系列直角照明轻触开关提供表面贴装 PIP 端子和标准通孔配置,为电信、数据中心和专业音频/视频设备等广泛应用提供创新的多功能解决方案。
  • 投身国产浪潮向上而行,英韧科技再获 投身国产浪潮向上而行,英韧科技再获“中国芯”认可
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了