Вокруг Amazon Go - нового продуктового и мини-маркета Amazon Go, где можно бесплатно оформлять заказ, - много шума. Это действительно выводит идею удобства на новый уровень. Чтобы понять, что происходит за кулисами, важно сначала понять, что это предлагает потребителю. Давайте быстро сравним обычную процедуру совершения покупок с той, которую кто-то может испытать в магазине Amazon Go:

Amazon Go

  1. Быстрый доступ к повседневным товарам, особенно к бакалейным товарам и товарам повседневного спроса.
  2. Вход в поворотном стиле. Потребитель сканирует с помощью приложения Amazon на смартфоне
  3. Потребитель ходит по магазину, берет предметы, складывает в сумку, покупает как обычно
  4. Потребительские выходы

Обычный магазин

  1. Быстрый доступ - те же продукты, продукты, мелочи
  2. Войдите в магазин и начните делать покупки
  3. Подбирайте предметы таким же образом
  4. Ждать в очереди кассира или самопроверки
  5. Достаньте предметы из сумки, отсканируйте их, положите обратно в сумку
  6. Потребительские выходы

Если рассматривать количество шагов как критерий удобства, становится очевидным, что Amazon Go сокращает примерно два шага, что делает его примерно на 33% удобнее. Очереди сведены к минимуму, а процесс оформления заказа (возможно, самая трудоемкая и раздражающая часть покупок) полностью исключен. Поскольку вместимость магазина ограничена, и камеры должны иметь возможность отслеживать людей, возможно, вам придется подождать в очереди ВНЕ магазина.

Вы можете немного скептически относиться к безопасности и точности всего процесса, я знаю, что был. Итак, что происходит за кулисами? Как Amazon может предложить такое удобство? Есть еще сотрудники? Как камеры узнают, что я взял и сколько мне нужно заряжать?

Вы спросили (ээээ, по крайней мере, я), Amazon ответила:

Итак, как это работает? Мы использовали компьютерное зрение, алгоритмы глубокого обучения и объединение датчиков, как в беспилотных автомобилях. Мы называем это технологией Just Walk Out. Когда у вас есть все, что вы хотите, можете просто уходить. Когда вы уходите, наша технология «Just Walk Out» добавляет вашу виртуальную корзину и списывает средства с вашей учетной записи Amazon. Ваша квитанция отправляется прямо в приложение.

Вы сканируете, чтобы включить стили с помощью приложения на вашем смартфоне, а камеры и компьютер делают остальную часть корзины и проверяют за вас. В магазине по-прежнему есть сотрудники, но их основное внимание смещено с проверки и регистрации на помощь клиентам, приготовление свежих продуктов, а также техническое обслуживание и операции магазина.

Но мы все знаем, что ты будешь держаться за кекс

Звучит впечатляюще, правда? По сути, Amazon разработала камеры, которые могут распознавать людей, отслеживать их в магазине, знать, какая учетная запись привязана к каждому покупателю, точно понимать, какой продукт и сколько каждого из них положено в вашу сумку, и подсчитывать все это с высокой степенью уверенности. Однако в приведенном выше заявлении были упомянуты несколько громких слов, что на самом деле происходит?

Компьютерное зрение, искусственный интеллект, машинное обучение

Вкратце, компьютерное зрение - это машина, которая видит как человек. Это означает, что технология должна воспроизводить мозг, глаза и зрительную кору. Требуется нечто большее, чем просто запись изображений и видео, но и распознавание, идентификация и понимание отслеживаемых объектов. Чтобы добраться до машины, чтобы точно и уверенно определять различные элементы изображения, требуется машинное обучение.

Компьютер, вероятно, обучен с помощью многоуровневой сверточной нейронной сети. Здесь так много о чем поговорить, поэтому я оставлю эту тему на другой день. По сути, каждый кадр проходит через несколько слоев нейронов. Каждому нейрону назначается определенный фильтр, и он проверяет наличие на изображении такой особенности, как край или изгиб. Каждый фильтр накладывается на увеличенную часть изображения и дает значение достоверности. Фильтры и веса обучаются по мере того, как передается все больше данных, и они станут умнее и увереннее с все большими и большими наборами данных.

Камеры

После того, как машина может распознавать объекты в кадре, это совершенно новая задача - иметь возможность отслеживать и идентифицировать человека и собирать различные предметы, даже несколько предметов одновременно, в загруженном магазине. В реальном времени машина должна понимать движение от кадра к кадру.

Датчики

В качестве второго шага безопасности и проверки магазин оборудован датчиками. Я предполагаю здесь, но, скорее всего, это какая-то комбинация весов и датчиков давления. Позволяет компьютеру определять, когда и откуда удален элемент. Если каждый предмет имеет установленный вес, весы должны уменьшиться на известную предсказуемую величину, что позволит узнать, взял ли кто-то два одинаковых предмета, и получить вторичное подтверждение того, какие предметы выбраны.

История

Следующий уровень уверенности основан на истории клиентов. Чем больше вы совершаете покупки на Amazon Go, тем больше компьютер будет информировать о ваших покупательских привычках и истории покупок. Он получит дополнительную уверенность в том, что предметы в вашей сумке правильные, поскольку может подтвердить, что у вас была аналогичная транзакция в прошлом. Довольно круто, правда?

Хотя в настоящее время в Нью-Йорке нет Amazon Go, я очень рад проверить это в следующий раз, когда приеду в Сиэтл, при условии, что к тому времени он будет открыт для публики (или если меня наймет Amazon ...)