商店中的导航:通过增强现实到达所需的货架



我们最近启动了一个试点项目:在我们的10家莫斯科商店中,您可以借助小型增强现实应用程序M.Go快速浏览交易大厅,并立即找到包含必要商品组的货架。 据我们所知,这是世界零售实践中的第一个此类项目。 我想告诉您更多有关此应用程序的信息,它的工作方式以及如果客户喜欢它可以将该项目发展成为什么样的项目。

大约8到10年前,各种增强现实项目首次出现在智能手机上。 他们使在图像,静态或视频上找到类似于QR码的特定平面标记成为可能。 该应用程序可以识别其大小和在空间中的位置。 从那时起,这项技术得到了积极的发展。 增强现实产品中最响亮的例子是《 Pokemon GO》游戏,该游戏在几年前刷新了所有排行榜。 当今市场上也有解决方案,可以极大地方便第三方开发人员创建AR产品。

M.Go如何运作


启动后,该应用程序将自动确定您的位置并提供选择您所在的商店的信息。 之后,M.Go将要求您校准标记。 它们被粘贴在今天支持该应用程序的所有10家商店的地板上(每个商店中都有两个标记,除了Sadovaya-Spasskaya上的一个大型两层商店-您已经在其中找到三个标记):


您需要将智能手机的相机对准地板上的此贴纸,应用程序将识别它并“正确”理解您的站立位置。


几秒钟后,该商店中可用商品和服务的类别列表将出现在屏幕上。


单击所需的图标,两个指针将出现在屏幕上。 一个“悬挂”在您要到达的地方的距离上(如果相机指向另一个方向,它可能会从屏幕上消失),而第二个指针始终位于屏幕的底部-这是一个箭头,显示了类似导航器的方向。






为什么在每个商店中粘贴几个标记? 事实是该应用程序处于活动状态时可以正常工作。 一旦将其最小化或另一个应用程序处于活动状态(例如,有人打电话给您),商店内的导航就会中断。 要再次使用M.Go,您需要进行校准。 为了使客户不必每次都回到起点,我们在商店中粘贴了一个附加标记。

M.Go如何运作


当我们开始创建应用程序时,我们依赖于我们的愿景和常识。 毕竟,当时零售行业没有其他类似的决定。 仅存在使用技术堆栈创建增强现实应用程序的好例子。 我们花了几个私人飞行员。 他们测试了AR技术和各种接口选项的操作,这对于此类应用程序尤其重要。

第一种选择是使用箭头显示方向。 在第二个版本中,有一个沿着预定路线移动的飞行机器人。 我们选择了带有箭头的选项,因此您可以前往商店的所需部门,选择其他类别的商品,然后继续。 在带有机器人的版本中,有必要再次返回到校准标记,选择下一类商品,然后再沿着新路线走。 不方便。 此外,我们的商店已经非常简单地安排好了,这不是杂货超市的迷宫,您可以在其中厌倦前往出口。

如今,市场上有两个分别在Apple和Google的肠道中创建的ARKit和ARCore库。 图书馆不仅可以识别标记,还可以识别用户设备所在的空间。 相机的每一帧都以高对比度切换为黑白,因此图像上仅保留轮廓线。 系统找到关键点(图像中轮廓的交点)并将其转变为“点云”。 这些是空间标记。

这项技术构成了我们应用的基础。

在ARCore和ARKit引擎的基础上,我们制作了一种特殊的架构来处理仓库。 它们有自己的特点-产品行相当均一,并且在视觉上并不总是唯一的。 客户在商店中走动的时间越长,定位误差就越累积。 我们以多种方式纠正它。 一种解决方案是使用其他标记,这些标记使您无需重新开始即可重新校准。

顺便说一句,我们首先用公司颜色使校准标记变成红白色。 他们很漂亮,但很快就弄脏了。 我必须选择其他颜色组合,之后标记甚至变得更可靠地被应用程序识别。

在CPU负载方面,M.Go可以与某些Messenger媲美。 能源的主要消耗者是相机。 从Android 7.0和iOS 11开始,M.Go可以在大多数iOS和Android设备上运行。Google和Apple自己对SDK施加了此限制。

为什么我们的AR应用程序“只”知道10家商店? 为每个商店实施支持需要大量工作:

  • 制作数字货架图(商店地图)以指示所有类别的商品的位置,
  • 同意标记的放置位置,
  • 测试应用程序“导航”的准确性。

但是该项目仍处于试验阶段,我们想了解人们是否需要这种功能。

接下来是什么?


如果试点成功,我们将在主要应用程序中嵌入AR功能并添加新功能。 有很多选择。 例如,为简化商店中商品放置的更改。 因此,平板电脑上的管理员只需在商店图上指示这些类别或这些类别现在所在的位置即可。 并且此数据将与用户安装的应用程序同步。

您可以为商店经理创建一个完整的通用系统,以便:

  • 将商品更详细地划分为子类别,
  • 表明货物余额
  • 添加主题促销。

我们计划在客户应用程序中的特定区域添加卖方的呼叫按钮,并引入游戏化元素:获得在房间周围飞来飞去的折扣或在冰箱后面寻找虚拟奖励。 此外,该解决方案将允许您查找未在交易大厅展示的商品,并提供详细说明和3D模型。

Source: https://habr.com/ru/post/zh-CN455582/


All Articles