Цифровой пинг-понг: как мы научили нейросеть рисовать вместе с художником

И с ее помощью сделали иллюстрации для figital-пледов, которые подарили клиентам.

Лейсан Зигангирова
CMO платформы Yandex Cloud

В art science с нейросетями экспериментируют давно. В основном это выглядит так: художник делает запрос, и алгоритм ему что-то выдает. Нейросеть генерирует изображение по текстовому запросу или по другой картинке. Похожим образом работают и генеративная система искусственного интеллекта DALL-E, и Stable Diffusion, и Midjourney.

При этом такие работы искусственного интеллекта уже официально признаны в арт-мире. В октябре 2018 года впервые в истории аукционный дом продал картину, принадлежащую кисти нейросети. Это был «Портрет Эдмонд Беллами» от арт-группы Obvious, работающей под лозунгом «Творчество не только для людей».

Пьер Фотрел (Pierre Fautrel), соучредитель художественного коллектива Obvious, рядом с картиной «Портрет Эдмона де Белани» («Portrait of Edmond de Belamy»), <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Fthewallmagazine.ru%2Fii-sozdaet-proizvedeniya-iskusstva%2F&postId=562788" rel="nofollow noreferrer noopener" target="_blank">источник</a>
Пьер Фотрел (Pierre Fautrel), соучредитель художественного коллектива Obvious, рядом с картиной «Портрет Эдмона де Белани» («Portrait of Edmond de Belamy»), источник

Мы запустили маркетинговую коллаборацию, которая доказывает, что искусственный интеллект может не только соревноваться с реальными художниками, но и выступать в роли их соавтора, помощника. В этой статье расскажу, что из этого получилось.

Любимая предновогодняя головоломка маркетинга

Вопрос, с которым наша команда сталкивается каждый год где-то в начале осени — а что мы будем дарить клиентам в декабре? К таким задачам мы пробуем всегда подходить креативно.

В этом году мы вышли на реально новый уровень для себя и разработали полноценную маркетинговую предновогоднюю кампанию. Одна из ее задач — побороть стереотип о технологиях, ИИ, которые ассоциируются с чем-то бездушным, «металлическим», непонятным. Для этого, с одной стороны, мы выбрали теплый физический носитель для подарков - плед. С другой, разработали креативную концепцию, в которой нейросеть нарисует для этого пледа иллюстрацию в коллаборации с реальным мультимедиа-художником. Так сказать, ИИ станет живым участником творческого процесса.

Концепцию нам помогла разработать команда ARKA — одно из крупнейших агентств, которое работает с digital-художниками в России. Совместно с ними мы уже нашли художника. Андрей Бергер работает и с цифровым искусством, и с офлайновым, в том числе с искусственным интеллектом, AR- и VR-технологии, eye tracker. Он провёл несколько персональных выставок в России и США, а также участвовал в десятках групповых галерейных выставок по всему миру.

Андрей Бергер
Андрей Бергер

«Я начал крутить мысль о некой коллаборации с облаком и его функциями. У меня уже был опыт работы с машинным обучением и были идеи и наработки, для которых нужно было найти технические мощности и экспертизу в области программирования. Этот проект оказался идеальным приложением для моих еще не осуществленных идей. Потому что для создания такого проекта нужна команда и нужен доступ к большим вычислительным мощностям. Здесь как раз сошлись все звёзды: есть команда, есть интерес, есть сам Yandex Cloud, который в это во всё включился.

Андрей Бергер

Суть концепции или почему «принцип пинг-понга»

Нашу концепцию с соавторством нейросети и художника мы назвали «принципом пинг-понга». Идея была в том, что сначала ML-модель обучается на существующих работах художника, а затем Андрей загружает в нейросеть свой новый эскиз, который он подготовил для пледа. Затем иллюстрацию снова «дорисовывает» алгоритм — и такой последовательный обмен повторяется несколько раз. Получается, что словно по принципу игры в пинг-понг, картина десятки раз отскакивает от рук художника и возвращается обратно в нейросеть, проходя сквозь миллионы строк кода.

В качестве «примесей» в алгоритм сгружали самые разные изображения. Помимо эскизов художника, в процессе «смешивали» QR-коды, логотип Yandex Cloud, «Чёрный квадрат» Малевича, изображения пузырчатых, слоистых и других природных структур.

Интересно было, когда мы дошли уже до середины пути и нашли, как можно давать задачу так, чтобы машина начала выдавать действительно интересные результаты. Мы как будто бы нашли правильные параметры для того, чтобы получать результат максимально близкий к тому, что я делаю обычно.

Андрей Бергер

Для создания эскиза провели более 15 «раундов» пинг-понга, которые заняли две-три недели.

Цифровой пинг-понг: как мы научили нейросеть рисовать вместе с художником

Что под капотом

Для коллаборации мы использовали уже предобученную сверточную нейронную сеть VGG-19. Несмотря на то, что алгоритм был в определенном смысле «творчески свободен», нужно было задать ему ряд ограничений еще на этапе обучения. С учетом того результата, который хотелось получить, мы сформулировали их так:

  • монохромная работа без полутонов,
  • графичность,
  • одна толщина линий,
  • узнаваемость авторского стиля графики Андрея.

Предобученный алгоритм развернули в среде для ML-разработки Yandex DataSphere и обработали с ее помощью черновой эскиз художника. В сервисе был и дальнейший обмен версиями иллюстраций.

Из цифрового — в физическое

Получившееся изображение нейросети и художника нам было важно не просто перенести рисунок на ткань, а попробовать буквально «вплести» его в физический мир. Мы рассмотрели огромное количество вариантов плетения и нитей, совместно с дизайнерами и художником определили, какой формат пледа подходит лучше всего. Две нити давали монохромность и читабильность макета со всех сторон, а детализация жаккардового плетения — необходимые параметры. Найти фабрику, которая готова была изготовить для нас такие пледы было непросто, но в итоге мы нашли нужные станки в Москве. Вот что получилось:

Цифровой пинг-понг: как мы научили нейросеть рисовать вместе с художником
Цифровой пинг-понг: как мы научили нейросеть рисовать вместе с художником

Пледы мы подарили 1000 самых крупных клиентов по размеру потребления сервисов Yandex Cloud. Также мы организовали специальное новогоднее мероприятие с визуальными инсталляциями и работами Андрея Бергера.

Помимо этого, мы запустим выставку, где можно будет увидеть сам арт-объект. Мероприятие откроется в Музее Яндекса уже 28 января.

Цифровой пинг-понг: как мы научили нейросеть рисовать вместе с художником

Команда Yandex Cloud

Максим Барановский — продюсер проекта

Алексей Трофимов — арт-директор

Ольга Молокова — дизайнер

Екатерина Золотухина — дизайнер

Мария Рычкова — продюсер

Екатерина Иванова — продюсер

Юлия Овечкина — разработчик интерфейсов

Команда ARKA

Максим Дырман — линейный продюсер

Егор Билялов — креативный продюсер

Данияр Мазитов — старший специалист по ИИ

Георгий Василиади — главный дизайнер

Команда художника

Андрей Бергер — художник

Ася Фрейя — исполнительный продюсер

Кириллов Антон — технический директор

Агентство Кошта — продакшен видеоролика

Анастасия Королькова, Юлия Смаль — фото

Подписывайтесь на блог Yandex Cloud, чтобы узнавать еще больше новостей и историй об IT и бизнесе.

Другие истории наших партнеров и клиентов, которые активно читают наши подписчики:

1111
6 комментариев

переживаю за художников больше чем за себя

1

после такого мотивация рисовать падает, к сожалению..

не, ну получилось очень даже симпатично

1

Будущее уже тут

Интересно наблюдать за такими новостями , красивые рисунки

Меня пугает ИИ, что он превосходит возможности человека и механистичен. Ужас.

Сдавал букет из 101 розы в аренду на 14 февраля и вот что заработал…
Сфотографировал, чтобы посоветоваться с мамой. Она лучше понимает, норм или не норм цветок. Для меня любая роза красивая.
8484
3636
1818
33
11
Не пережили бы живые розы столько переездов и фотосессий , ну
реклама
разместить
ЕС утвердил 16 пакет санкций против России — под них попали 13 банков и восемь СМИ

А также поставки PlayStation и Xbox в страну.

Фото «РИА Новости» 
3939
3333
1111
44
11
11
Когда на Санлайт наложат санкции?
Бинариум – ваш путь к финансовой свободе с бинарными опционами в 2025 году
Бинариум – ваш путь к финансовой свободе с бинарными опционами в 2025 году
День 1097: Путин поручил предусмотреть преимущества для российского бизнеса на случай возвращения иностранного

Собираем новости, события и мнения о рынках, банках и реакциях компаний.

Владимир Путин. Источник фото: «Ведомости»
3232
1919
33
Трамп, приди! Порядок наведи! Бренды западные верни! Мастеркард и визу подключи! В подъездах, как Обама, не сри! Прямые рейсы в Ньй-Йорк верни!
Apple инвестирует $500 млрд в производство в США и создаст 20 тысяч рабочих мест в течение следующих четырёх лет

До этого Трамп пригрозил ввести 10%-е пошлины на импорт из Китая, где компания производит большинство своих продуктов.

Глава Apple Тим Кук на инаугурации Дональда Трампа. Фото Bloomberg
1010
11
11
11
На моем производстве сотрудников чипируют, держат в холоде, ну и доят, конечно

У меня было 4 машины, двухкомнатная квартира и дом в центре города. Я был не последним человеком на заводе и привык не смотреть на цены в магазинах.

В остальном стараемся действовать традиционно. Это я с ивой — в будущем хочу давать её козам как средство от гельминтов
6464
66
11
11
Очень неоднозначное ощущение оставил матерал. Во1, я всё таки рекомендую воспользоваться господдержкой, если это возможно. Она для этого и придумана. Люди не будут против. Не пользоваться льготой, когда она очень сильно нужна - не благородство, а... Вобщем, берите поддержку и не выносите себе мозг. 2. Кажется, вы не в нуле только потому, что продали имущество. Начинайте прямо сейчас считать доходы и расходы, а то пойдете по миру. Это сначала кажется страшно, а потом окажется полезным. Я готова совершенно безвозмездно проконсультировать вас или жену как это сделать, если всё таки решитесь.
Anthropic запускает новую ИИ модель, которая «думает» столько, сколько вы хотите

Anthropic выпускает новую ИИ модель под названием Claude 3.7 Sonnet. Расскажу об особенностях модели.

Выбор того, как долго может рассуждать модель. <a href="https://api.vc.ru/v2.8/redirect?to=https%3A%2F%2Ftechcrunch.com%2F2025%2F02%2F24%2Fanthropic-launches-a-new-ai-model-that-thinks-as-long-as-you-want%2F&postId=1831635" rel="nofollow noreferrer noopener" target="_blank">Источник</a>.
Apple отключила российским разработчикам доступ к платформе Apple Developer Enterprise Program — на ней создавали iOS-приложения для корпоративного использования без публикации в App Store

Причины Apple не назвала.

Источник фото: AppleInsider
1313
77
66
55
22
Apple в очередной раз подтвердил - iPhone это для тех кто любит боль
[]