Стартап Poly автоматизирует любой магазин

Реализация идеи автономного магазина — непростая задача. Даже ИТ-гигант Amazon их-за технических сбоев был вынужден отложить массовую реализацию Amazon Go, намеченную на начало 2017 года. Poly, тем не менее, надеется на успех: в автоматизированных магазинах стартапа будет использоваться ряд оригинальных технологий, которые уже сейчас работают в их крошечном магазине-прототипе. Камера на потолке идентифицирует входящих сюда людей и отдельно следит за каждым. Чтобы узнавать людей, ее ПО использует одежду, цвет волос и движения тела, а также в некоторой степени распознавание лица.

В идеале покупатели должны будут регистрироваться в системе, а ИИ использует фото из их профиля для активации учетной записи, когда человек будет входить в магазин. Другой возможностью идентификации станет использование приложения для смартфона. Оба варианта уже реализованы в некоторых китайских проектах. В компании признают, что для некоторых клиентов такая степень слежения может оказаться неприемлемой и предлагают ряд обходных путей: например, возможность совершать покупки не регистрируясь и платить наличными или кредиткой — в последнем случае можно настроить Poly так, чтобы он не привязывал изображение лица клиента к номеру его карты.

ИИ Poly также необходимо уметь распознавать продукты по их внешнему виду, а не по расположению на определенной полке. Чтобы натренировать ПО, используется особая система сканирования, представляющая собой пластиковую коробку с камерами и источниками света внутри. Для каждого товара, помещенного внутрь системы, создаются тысячи фотографий под разными углами и с разными условиями освещения. Это может быть непростой задачей, особенно в случае свежих продуктов, таких как фрукты и овощи. В случае, если у производителя, например, Coca-Cola, уже есть 3D-модели своих продуктов, процесс значительно облегчается. Ближайшая цель инженеров Poly — начать использовать роботизированную руку, чтобы упростить сканирование товаров.

Видеозапись ведется с помощью недорогих камер от китайского производителя, которые модифицированы датчиками изображения. Разрешение составляет 1080p, а частота — 15 кадров в секунду, чего достаточно для обучения программы и запуска систем распознавания образов. Отправка видео в облако заняла бы слишком много времени, поэтому кадры обрабатываются локально на ПК с помощью одной высококачественной видеокарты Nvidia 1080Ti. Технологии, используемые в Poly, ранее успешно применялись в стартапе Aipoly (это бесплатное приложение до сих пор доступно), специализировавшемся на создании вспомогательных технологий для слепых.

До того, как Poly выйдет на рынок, необходимо решить целый ряд проблем, например, сканирование предметов в руках у человека, стоящего спиной к камере или идентификация нескольких одинаковых предметов у одного покупателя. Справиться с этой задачей могут дополнительные камеры: их планируется разместить не только под потолком, но и на нижних сторонах полок. Другие трудности включают реакцию на «нецивилизованные» ситуации, когда покупатели роняют товары и перемещаются по магазину слишком быстро. Однако эти проблемы решаемы. Система Poly была успешно протестирована на 23 посетителях, одновременно делающих покупки, и в компании полагают, что это число можно довести до 40. Amazon Go столкнулся с трудностями уже при 20 покупателях.

Хотя автоматизированные магазины, по мнению некоторых, могут уничтожить множество рабочих мест, в Poly утверждают, что это коснется лишь однообразной работы кассира. К тому же систему не обязательно использовать исключительно для создания автономных магазинов: технологии Poly могут пригодиться и в традиционных магазинах в качестве системы безопасности и контроля сотрудников. Тепловая карта, генерируемая ИИ, дает представление о перемещении клиентов по залу, а способность ПО собирать данные о поведении покупателей перед полками заинтересует маркетологов. Неудивительно, что к Poly уже проявили интерес: как утверждает соучредитель компании Альберто Риццоли, был подписан контракт на пилотный проект с одной крупной розничной ритейл-сетью. Клиент пожелал оставаться не названным до начала экспериментов через несколько месяцев.

Возможно, в будущем не останется места даже для роботизированных вариантов традиционных магазинов. Заказ товаров пярмо из дома и их доставка к входной двери даже в отсутствие клиента становятся привычным делом. Успехов на этом поле добивается не только Amazon, но и Google.