Нейросеть дня: алгоритм, который рисует объекты вместе с пользователем

Умеет схематично дорисовывать животных, кактусы, вертолёты и «Мону Лизу».

Новая нейронная сеть Sketch-rnn, натренированная на данных, полученных от проекта Google Quick Draw, позволяет заняться рисованием совместно с алгоритмом. Описание проекта, а также несколько демонстраций Sketch-rnn доступны в блоге проекта по исследованию машинного обучения Magenta от Google. А вообще всё это работает на библиотеке TensorFlow.

Алгоритм и описание Sketch-rnn опубликованы Дэвидом Ха, Йонасом Джонгеяном и Айаном Джонсоном.

Интерактивная демонстрация доступна на сайте Magenta. После того, как вы начнете рисовать объект, алгоритм попытается его дополнить. Работает довольно впечатляюще.

Работа алгоритма на примере Моны Лизы
Работа алгоритма на примере Моны Лизы

В шапке сайта можно выбрать, какой именно объект вы рисуете с нейросетью.

Стоит с осторожностью открывать демонстрационную страницу с телефона —один датасет-рисунок весит около 5 МБ.

«Нейросеть дня» – постоянная рубрика менеджера по продукту издательского дома «Комитет» Дениса Ширяева.

77
4 комментария

Кто-нибудь уже просил нейросеть выкрутится из ситуации с кошкой?
https://youtu.be/gEBEq7mg4Ms?t=35

1

Мне нравится. Котиков рисует ;) Результат достигнут.

1

Слабовато. IMHO, подобного качества можно было бы достичь и более простыми алгоритмами. Нейросеть в данном случае это как из пушки по воробьям, но тренд интересный.

Можно это было бы и проще конечно, но задача была поковырять Magenta и TensorFlow и посмотреть, что можно сделать с датасетом quick draw, так что все отлично мне кажется получилось, в стиле "потому что можем"

1