Новости

Oct 28, 2023

Внутри наблюдения Amazon

Многие уже слышали о самой смелой попытке Amazon встряхнуть розничную торговлю.

К настоящему времени многие слышали о самой смелой попытке Amazon встряхнуть мир розничной торговли — безналичном магазине Go. Заходите, берите то, что хотите, и уходите. Недавно у меня появилась возможность сделать это, а также почерпнуть мозги одного из главных архитекторов. (Магазин в центре Сиэтла теперь открыт для публики.)

Мое намерение состояло в том, чтобы попытаться украсть что-нибудь в магазине и застать этих самодовольных типов Amazon дремлющими. Но когда я вошел, стало ясно, что это не вариант. Я никогда не находился дальше, чем в футе или двух от представителя Amazon по связям с общественностью, и, как убедил меня Дилип Кумар, вице-президент проекта по технологиям, они уже предусмотрели меры против таких грубых атак на свою систему.

Как вы могли видеть в промо-ролике, вы входите в магазин (ранее доступный только для сотрудников Amazon) через ворота, которые открываются при сканировании QR-кода, сгенерированного приложением Amazon Go на вашем телефоне. В этот момент (ну, на самом деле, в тот момент, когда вы вошли или, возможно, даже раньше) ваша учетная запись связана с вашим физическим присутствием, и камеры начинают отслеживать каждое ваше движение.

Много-много камер.

[галерея ids="1589027,1589028,1589038"]

Я задавался вопросом, когда впервые была предложена идея безкассового магазина Amazon, как это будет реализовано. Камеры на потолке, за витринами, на постаментах? Какие? Датчики приближения и веса, распознавание лиц? Где все это будет сопоставляться и обрабатываться?

Подход Amazon оказался не таким сложным, как я ожидал, или, скорее, не таким, как я ожидал. В основном система состоит из десятков и десятков камер, установленных на потолке, которые охватывают и фиксируют каждый квадратный дюйм магазина с разных ракурсов. Я предполагаю, что в магазине, который я посетил, их около сотни, и он был размером с обычный винный погреб или торговый центр на заправочной станции.

Это обычные RGB-камеры, изготовленные по индивидуальному заказу с платами в корпусе для выполнения некоторых базовых задач компьютерного зрения, предположительно таких, как обнаружение движения, базовая идентификация объектов и так далее.

Они дополнены отдельными камерами, определяющими глубину (с использованием метода времени пролета, или, как я понял от Кумара), которые сливаются с фоном, как и все остальные, все матово-черные.

Изображения, полученные с этих камер, отправляются в центральный процессор (из-за отсутствия лучшего термина, я не знаю точно, что это такое), который выполняет реальную работу по быстрой и точной идентификации разных людей в магазине и подбираемых или держал. Когда вы берете что-то, это добавляется в вашу «виртуальную корзину», и вы можете положить это в большую сумку или сумку для покупок так быстро, как захотите. Не нужно держать его так, чтобы система увидела.

[gallery ids="1589031,1589029,1589033,1589035,1589030"]

«В этом и есть секретный соус», — сказал мне Кумар, и я ему верю. Какой бы банальной ни казалась задача определить, какой одинаково одетый человек взял какую-то почти идентичную чашку йогурта, очень сложно добиться того уровня скорости и точности, который необходим для того, чтобы строить на этом весь бизнес.

В конце концов, студент с имеющимися в наши дни ресурсами, вероятно, мог бы за несколько недель разработать версию этого магазина, которая работала бы в 80 процентах случаев. Но сделать это правильно в 99,9 процентах случаев, без проблем и мгновенно, — это задача, требующая огромной работы.

Примечательно, что распознавание лиц не используется (я спрашивал). Amazon, возможно, заранее почувствовал, что это вызовет упреки со стороны покупателей, заботящихся о конфиденциальности, хотя идея о том, что эти люди придут в этот магазин, кажется мне маловероятной. Вместо этого система использует другие визуальные подсказки и следит за непрерывностью между камерами — вы никогда не находитесь вне поля зрения объектива, поэтому системе легко увидеть, как покупатель переходит от одной камеры к другой, и установить связь.

Если с камерой возникнет техническая проблема или каким-то образом попадет соус на объектив, система не выйдет из строя полностью. Он был протестирован с отсутствующими камерами, хотя, естественно, вскоре будет установлена ​​замена и система будет повторно откалибрована.