О том, как будущее приходит незаметно в магазин напротив, а ты этого не замечаешь почти месяц, а оказывается, твои соседи уже берут продукты в магазине и просто уходят.
Если, что внизу статьи видео моего похода.
Обычно, я пишу статьи на чисто технические темы, но сегодня я просто обязан поделиться впечатлением от увиденного.
Еще месяц назад в магазине REWE, у нас в Берлине, промоутили новую функцию и приложение Pick & Go. Я так привык пользоваться кассами самообслуживания, что особо не обратил внимание на рекламу, до определенного момента.
Как-то, я пробежал через турникет с названием Pick & Go вслед за девушкой. Через ~10 секунд ко мне подошел сотрудник магазина и сказал, что мне нужно выйти и зайти снова через обычный турникет, т.к. все продукты которые я возьму в магазине спишутся со счета той девушки за которой я проскочил. Я был слегка в шоке 😀
Окей, подумал я, перезашел и стал вспоминать, что когда-то читал про тестовые запуски магазинов у Amazon, где можно брать товар и уходить.
Но в них в основном были снеки, батончики, газировка — простые товары, а тут, полноценный продуктовый магазин: фрукты, овощи на развес, бакалея.
Сам набирай в пакетик круассан без начинки или с начинкой (цена разная), а по виду одно и то же. Не уже ли это работает? Для меня это казалось, чем-то из будущего.
Как они решили эту техническую проблему? Обвесить магазин камерами не сложно, а вот понимать, кто, что взял и сколько — вот это уже задачка!
Сегодня я решил это протестировать.
Скачал приложение REWE, привязал Apple Pay, в магазине, сотрудник сделал активацию моего аккаунта за 10 секунд — просто показать QR код и все. Еще я спросил, можно ли снимать на телефон в магазине — мне ответили конечно 😊
И так, входишь в турникет Pick & Go через QR код из приложения и берешь любые товары в свою сумку и бежишь 😂 Шутка — можно просто идти.
Овощи и фрукты нужно взвесить на специальных весах, а вот бакалею просто берешь и все! Берешь и все 😱?
В общем набрал не совсем типовую корзину:
- Пару килограмм картофеля,
- 2 печеных круассана,
- 2 обычных круассана,
- 2 запеченные трубочки,
- сок,
- детскую зубную пасту,
- ополаскиватель,
- орехи,
- красную рыбу,
- и еще что-то за 2.69 € 😊
И потом, я просто выхожу из магазина.
Еще я успел сказать Tschüs сотруднику на кассе и на меня даже никто не посмотрел подозрительно, только все улыбались 😊
Сразу захожу в приложение — пусто. Написано, ждите скоро счет придет.
Через 10 минут, приходит чек — ровно те товары которы я взял. Деньги с карты списаны. Что это? Магия?
Не уже ли они решили задачу вот так?
Кстати, эта картинка тоже сгенерирована ИИ.
- Или все таки это комбинация машины и человека?
- Или это только машина?
Кто в теме, раскройте секрет.
Дайте хотя бы примерное описание технической части или алгоритма.
Особенно меня интересует кейс с круасанами с начинкой и без начинки!
- А еще, что если я верну товар на полку и т.д.
- А еще, что если толпа у полки?
У меня недавно выходила статья где Иван Бирюков очень критически и резко высказывался о текущем состоянии ИИ:
ИИ. Какое профанство. Ни о каком ИИ на данной стадии развития человечества говорить не приходится.
Как вы думаете, насколько Иван прав?
Если, кому-то интересна тема развития в IT, я работаю над открытой инициативой создания туториалов по IT навыкам.
Слишком мало полужирного шрифта в тексте, надо больше
Спасибо, учту. Синдром программиста, все выделить, все оформить :-)
Машинное зрение.
Как камеры на Тесле распознают пешехода и дерево, так же камеры в супермаркете распознают товары.
Круассаны зависят от полки, с которой ты её взял.
Точно так же как ты на каптче выбирал все картинки со светофорами, обучая ИИ распознавать светофоры, так же какие-то индусы выбирали все картинки с круассанами, распознавая их.
Теперь ИИ может в точности распознавать, что находится на картинке и куда это движется, это не так уж и сложно.
В таких магазинах ещё обязательно висит предупреждение, что если взял товар и передумал брать - положи туда же, откуда взял. Это не спроста. Ибо это важно для ИИ, с какой полки был взят товар, для распознавания
Я думал, на самом деле, там где система автоматически что-то не смогла определить или не уверена, она просто ставит задачу оператору в очередь, который по-сути решая задачу дообучает модель. В этом и обусловлена задержка минут 10 перед получением чека.
Но все равно, это круто!
Возможно, она не не уверена, а просто нужен апрув до сотрудника, который бегло просматривает фото и подтверждает, что система все товары определила верно
Очень много подходов есть как такое делать.
Вот в этом видео я делаю обзор и сравнение примерно пяти основных
https://youtu.be/xTzvpqlKXvU
Подходы различаются в целом по железу которое ставиться, числу ошибок, и.т.д.
А вот несколько видео/статьей про то что в Москве было (по крайней мере год назад):
https://youtu.be/JZP9z1jc54s
https://youtu.be/gwaZJhyzymU
Интересно. Спасибо.
Комментарий недоступен
Опять скептики :-) Примерно тоже самое было лет 200 назад с паровым двигателем.
Комментарий недоступен
Спасибо за комментарий, а как вы прокомментируете это?
По поводу ИИ и примитивности. Мозг это тоже подмножество разных областей с нейронками для разных задач. Возьмите все лучшие сети, закиньте на один чип, сделайте таких 1000 штук, объедините в сеть, дайте возможность обмениваться и дообучаться вместе и вот вам, уже что-то большее.
И ждали когда их выкинут с работы...
Комментарий недоступен
Здесь это будет выглядеть так, он наберет товаров, пройдет через этот волшебный турнекет. Вспомнит что он айтишник, вернется к кассам и еще раз все пробьет.
Контроль по весу? Вход-выход. :)
На выходе я на весы не вставал :-)
Очень круто! @ВкусВилл , сделаете?
Так у них летом был такой магазин в мцк Деловой Центр. Все работало, логинишься через приложение и дальше все само
Нет, я в Берлине живу и к ретейлу вообще отношение не имею. Хотя принимал участие в ряде проектов с компьютерным зрением и нейронными сетями. По этому я понимаю, всю сложность такой задачи.
Скорее и возможно, машинное зрение + метки.
Вот полочка № 1 с плюшкой без повидла. На ней метка с повидлом.
Вот полочка № 2 с плюшкой с вареньем. На ней метка с вареньем.
Факт взятия с полки, что на полке лежит через метку.
Если возьмешь с полки 1 и 2 - в счете увидишь 2 плюшки, 1 с повидлом и 1 с вареньем.
Поэтому какой-то очень и мега условный ИИ все же есть. Но на уровне 4 клеток после оплодотворения.
IMHO конечно же.
Комментарий недоступен
Плохо оформили текст.
Как вы думаете, насколько Иван прав?За ИИ вам сейчас @Стерлядка Вяленая ответит
По остальному - а как заголовок с текстом сочетается?
Если бы у нас была такая разработка, обязательно бы списывали за товары, которые не взял, или которые взял не ты)) А еще было бы интересно следующее: у нас в магазинах люди обожают взять товар с одной полки, а потом положить его на совсем другую полку. Все камеры бы перепутались))
Да, Иван полностью прав. Никакого ИИ нет и пока не предвидится. Люди часто путают всякие нейросети и прочее с ИИ, стоит понимать, что ИИ - это интеллект, который способен сам принимать и аргументировать решения, самостоятельно обучаться, ставить какие-то цели и следить за их выполнением. А всякие нейросети и вот подобная простенькая системка в магазинах - это просто набор условий "если это - тогда то". Ничего общего с ИИ.
Спасибо за комментарий. А что не так с содержанием? Бери и иди - Pick & Go - как фича и называется. Ну когда-то думали, что кассы самообслуживания в Росиии это миф. А Берлине в метро, даже турникетов нет - вообще нигде.
Комментарий удален модератором
Комментарий недоступен
🤣 да-да, и сразу забирают на кассе в тюрьму
Не знаю, лично я на практике всегда кладу продукты в свою сумку, а потом на кассе их просто выкладываю. А еще я увозил тележку с горой продуктов домой, а потом возвращал обратно, а еще я грилю прямо на балконе. При всей жесткости законов в Германии, я чувствую себя достаточно уверенно и расслабленно.
да ладно. куча народа со своими сумками и корзинками приходят.
Комментарий недоступен
И это прекрасно! Т.е. тебе изначально уже доверяют. Но доверие нужно оправдать и никогда не поеду на транспорте без билета, даже 1-2 остановки.
Можно еще раз написать откуда вы? Из статьи и ваших комментариев не очень понятно..
"У нас в Берлине"
"Как я хожу за продуктами в Германии"
"я в Берлине живу "
"Разработчик из Берлина"
"В Германии, я чувствую себя достаточно уверенно и расслабленно."
"А в Берлине в метро, даже турникетов нет - вообще нигде."
Наверное это сарказм :-)
ИИ здесь нет, машинное зрение, датчики и алгоритмы (но применение в спорных ситуациях и для анализа вполне может найти, но думаю позже, пока эту функцию выполняет охранник у кассы).
На развес специальные весы, как-то запоминает что и в каком весе, в простых товарах микрочипы при выходе сканируются скорее всего, в товарах типа круасан самое сложное, но тут скорее они разложены особым способом, чтобы четко можно было определить что такой-то взял такой-то круасан если на них нет никаких наклеик со штрихкодами (если было бы ыото как разложены круасаны это многое бы объеснило)..
Ждем в Пятерочках у дома, очень нужная технология! Пока у меня в Пятерочке рядом кассы самообслуживания завезли, что уже неплохо!
Но скорее всеже какой-нибудь Вкусвилл внедрит подобное в первых рядах.