Видео: прототип интерфейса для «копирования» реальных объектов и переноса в Photoshop Статьи редакции
Технология позволяет «сфотографировать» объект со смартфона и перенести на экран компьютера без фона.
Французский разработчик и дизайнер Сириль Дианье (Cyril Diagne) показал прототип приложения AR Cut & Paste. Оно позволяет «копировать» реальные объекты и «вставлять» в Adobe Photoshop с помощью технологий дополненной реальности и искусственного интеллекта.
Технология позволяет «сфотографировать» отдельный объект с помощью смартфона, а затем перенести его без фона на экран компьютера с открытым графическим редактором. При этом ракурс объекта сохранится.
Для распознавания объекта и удаления фона используется библиотека машинного обучения BASNet (Qin et al, CVPR 2019).
Алгоритм OpenCV SIFT позволяет для вставки объекта определить точки на экране компьютера, на которые направлена камера.
Как демонстрация технологии круто, но если подумать реальна ли ситуация, то ответ нет.
А теперь представьте как изменится мир геймедева, когда эта технология будет распознавать глубину изображения и определять степени свободы анализируемого объекта. Чтобы создать мир для игры, достаточно будет взять панорамные снимки улиц с google map и всё :)
Надеюсь так все и будет
Взять панорамные снимки с гугл карт можно и сейчас. Только получится огромный скучный мир не пригодный для игр.