Лого vc.ru

Нейросеть дня: 3D-маска лица на основе фотографии

Нейросеть дня: 3D-маска лица на основе фотографии

Университет Ноттингема опубликовал нейронную сеть, которая позволяет формировать 3D-изображение по одной фотографии.

3D-реконструкция лица — фундаментальная проблема необычайной сложности для компьютерного зрения. Часто такие алгоритмы требуют дополнительных меток на лицах для повышенной точности.

Но в этом примере на основе датасета 2D- и 3D-данных получается точность не ниже, чем от алгоритмов с дополнительными метками.

Проверить, как работает технология, можно на сайте проекта. На выходе помимо 3D-модели формируется OBJ-файл, готовый для импорта в любой 3D-редактор.

Исходный код открыт и доступен по ссылке на Github.

Несколько примеров:

Сергей Есенин
Алан Тьюринг
Константин Циолковский

«Нейросеть дня» – постоянная рубрика менеджера по продукту издательского дома «Комитет» Дениса Ширяева.

Теперь в играх, где можно создать лицо персонажа можно было бы просто загружать фото и перс уже с твоим (или тем, кого загрузил) будет лицом

Это можно было делать еще в мультиплеере Rainbow Six Vegas

...когда это ещё не стало мейнстримом

Очень круто, такими темпами скоро можно будет делать самому 3D видео из старых фото как в клипе Трубецкого Огоньки.

Мне кажется там это делалось стандартными мешами — тут 3D модель формируется под черты лица.

Ну, это странная логика — в мире вообще мало нового, просто каждое новое решение на процент или несколько лучше предыдущего ;)

Блин, а я все думал, кого я забыл

Теперь можно будет сфоткать владельца iPhone X сделать с помощью этой нейросети 3D лицо по фотке и разблокировать face id . Вот лол , только вчера apple хвастался , что по фотке не разблокировать . Этот прогресс

Они вроде говорили, что просили людей из кино делать маски и пытаться обойти систему, вроде не выйдет так, но понятно будет только в октябре

Проще уж старым добрым терморектальным криптоанализом :)

Ты пропустил самый интересный этап, между "сделать 3D лицо по фотке и разблокировать face id" :)

А где это можно заюзать? Каковы сферы применения?

Мы стали забывать, как выглядят 3D лица "нормального человека"

несколько лет назад пользовался чем-то похожим.
Relievos приложение, правда там не автоматически, пальчиками надо было тыкать.
youtu.be/f07Ao_ueC1c

Я надеюсь я на самом деле сбоку не так выгляжу ))

Прямой эфир
Голосовой помощник выкупил
компанию-создателя
Подписаться на push-уведомления