Видео: прототип интерфейса для «копирования» реальных объектов и переноса в Photoshop Статьи редакции
Технология позволяет «сфотографировать» объект со смартфона и перенести на экран компьютера без фона.
Французский разработчик и дизайнер Сириль Дианье (Cyril Diagne) показал прототип приложения AR Cut & Paste. Оно позволяет «копировать» реальные объекты и «вставлять» в Adobe Photoshop с помощью технологий дополненной реальности и искусственного интеллекта.
Технология позволяет «сфотографировать» отдельный объект с помощью смартфона, а затем перенести его без фона на экран компьютера с открытым графическим редактором. При этом ракурс объекта сохранится.
Для распознавания объекта и удаления фона используется библиотека машинного обучения BASNet (Qin et al, CVPR 2019).
The accuracy and range of this model are stunning and there are many nice use cases so I packaged it as a micro-service / docker image: https://github.com/cyrildiagne/basnet-http https://t.co/DGe9IffPtS
Алгоритм OpenCV SIFT позволяет для вставки объекта определить точки на экране компьютера, на которые направлена камера.
I also packaged it as a small python library: https://github.com/cyrildiagne/screenpoint
Send a camera image + a screenshot and you get accurate x, y screen coordinates! https://t.co/OOCFrrZseZ
Вот вроде человек не ракету в космос запустил, но из таких не очень больших изменений меняется весь мир! Будущее не рядом, мы каждый день живем в будущем))
Как демонстрация технологии круто, но если подумать реальна ли ситуация, то ответ нет.
А теперь представьте как изменится мир геймедева, когда эта технология будет распознавать глубину изображения и определять степени свободы анализируемого объекта. Чтобы создать мир для игры, достаточно будет взять панорамные снимки улиц с google map и всё :)
Надеюсь так все и будет
Ну... фоны-то у него светлые и чистые. А что будет на неоднородном фоне? 🤔
Если не будет выделенного лидара/сканера глубины с помощью которого можно помогать, то да, результат будет хуже, так как для распознавание границ (чаще всего алгоритм Кэнни) чем контрастней тем лучше (для ускорение они обрабатываются в чб)
никто тип не заметил как кадры меняются на телефоне :)
И правда, пересмотрел видос. Фейк жеж
И какой смысл в этой подмене?
Что Вы имеете ввиду? Пересмотрел несколько раз и не заметил чего-то подозрительного
Сколько подобных фенечек для виртуальной реальности я уже видел. Помыться лет 15 назад 3D сканеры должны были пойти в массы и сделать ть примерку той же одежды в режиме онлайн простой. Где все они?
То ли технология пока ещё не позволяет, то ли общество не готово, то ли что-то ещё.
Технологии не готовы , пока получается говно кривое
Осталось придумать как переносить объекты из фотошопа в реальный мир.
3д принтер ?
AR очочки надеваете, рукой в VR-перчатке хватаете картинку из фотошопа и вытаскиваете на стол. Всё
Это нереально круто!
Нужная вещь)
Вау-эффектно и бесполезно
Не буду утверждать, но подозреваю, что это - обыкновенная шляпа. Основной признак - абсолютно бесполезный функционал. Похоже, что дизайнер тупо смонтировал эффектный ролик, а затем скопирайтил описание этого якобы приложения для ловли на живца инвесторов.
Качество "автовырезания" даже на контрастном белом фоне оставляет желать лучше. Сколько умных слов про дополненные реальности и машин лёнинг не пиши- а без слёз не взглянешь на этот "заборчик". Применимость нулевая.
Надеюсь такое и для других программ сделают.
А почему слово "сфотографировать" закавычили?
Комментарий недоступен
Классное приложение! Облегчит многим дизайнерам работу!
Это будущее
Это было бы полезно и без переноса на пк или ноут , прикольно , буду следить
С точки зрения интерфейса неудобно. Если бы это было мгновенно, то прокатило бы.
В реальности будет удобнее нафотать объектов, а потом списком отослать на комп и там уже с ними работать. А не таскать туда сюда, рассмаривая бесячую анимацию загрузки по 20 секунд.
У таких технологий есть будущее, но в виде вспомогательных инструментов в арте\разработке, в виде тулзы прикрученной к фотошопу. Как самостоятельный инструмент это не зайдет. Типа нафотал объектов, импортнул в фотшоп, а потом доработал огрехи напильником.
Часть прилы которая вырезает фон - нужная, а вот часть прилы которая с вауэффектом в фш вырезанное вставляет - безполезна. Лучше бы сделали безшовный копипаст между телефном\компом, хотя вроде такое уже есть.
Для безшовный копипаста подойдет любой мессенджер, установленный на телефоне и компе. Там во время отправки сообщения можно делать фотку.
Особенно удобно в тех мессенджерах, где можно слать сообщение самому себе.
Плюсом можно кучу фильтров к многим мессенджерам установить, от увелечения глаз до обрезания фона.
Хорошая комбинация новых технологий. Есть куча новых умных вырезалок объектов. Они её скомбинировали с технологией работы коллаборативной работы над документом.
Не уверен что будет полезно в работе, но для всяких аппов точно польза будет.
А вот у нас в Канаде такие стартапы уже давно данность
Комментарий недоступен
Процент положительных ответов на вопрос заказчика : «А вот можете эту х...ню вставить сюда?» увеличивается.
Охуенно...
В планирующемся iPhone 12 у нас будет лидар, так? Ну а что будет в iPhone, то через год будет у всех. Значит в 21-22 году имеем шанс увидеть эту технологию в iOS/Android
12
Но ведь это фото, почему же оно не должно сохраняться?
Убийца фотошопа!