Убийца Photoshop? Обзор на нашумевшую нейросеть DragGAN

Сегодня мы погрузимся с вами в мир DragGAN. Нейросеть была запущенна только вчера и сегодня мы уже можем установить ее и сделать первые выводы. Нейросеть позиционирует себя как новый ИИ инструмент, созданный учеными для упрощения работы с изображениями. Главная ее особенность в простоте и том, что при перетаскивании определенных точек на фотографии она меняет положения частей, лица, объектов и дорисовывает их в зависимости от расположения.

Ладно, с убийцей я немного переборщил, так для эффекта, конечно же Photoshop он не заменит, но может быть приятным дополнением для дизайнеров и фотографов, уж очень он удобный и интересный. А начнём мы с небольшой теории.

DragGAN AI — это мощный инструмент для редактирования ИИ, который позволяет пользователям легко изменять фотографии с помощью уникального интерфейса перетаскивания. Этот новый инструмент является результатом сотрудничества между Google, Институтом информатики Макса Планка и исследователями MIT CSAIL.

Инструмент редактирования DragGAN AI прост в использовании. Пользователи могут быстро загрузить изображение, а затем отредактировать его в интерактивном режиме, используя простые возможности перетаскивания. DragGAN создает новую версию, которая плавно включает желаемые пользователем изменения, просто перетаскивая точки на изображении.

DragGAN имеет широкий спектр инструментов, которые позволяют пользователям редактировать фотографии различными способами. Некоторые наиболее важные возможности:

Убийца Photoshop? Обзор на нашумевшую нейросеть DragGAN
  • Изменение размера и формы объектов на изображении.
  • Объекты могут быть добавлены или удалены из изображения.
  • Изменение цвета объектов, присутствующих на изображении.
  • Текст внутри изображения может быть включен или удален.

Установка

Что касается установки, она действительно не проста и расписывать я ее тут не буду, так как это обзор на нейросеть, а не гайд по установке, поэтому оставлю вам пару ссылок, благодаря которым вы сможете, если очень захотите, сами установить себе. Возможно позже сделаю гайд по установке.

https://github.com/XingangPan/DragGAN - сама нейросеть на Гитхабе

https://www.cloudbooklet.com/draggan-ai-editing-tool/ - текстовая версия установки, в середине статьи

https://youtu.be/IizVcTP_-aM - видео версия установки

Особенности фоторедактора DragGAN

DragGAN — это передовая технология, обеспечивающая интерактивное точечное изменение изображения. Это расширенное приложение имеет ряд возможностей, которые выводят редактирование изображений на совершенно новый уровень.

Отличный контроль: пользователи могут точно контролировать искажение изображения. Вместо широких и неточных корректировок эта технология позволяет пользователям редактировать пиксели с высочайшей точностью, обеспечивая желаемый эффект.

Универсальность: Это позволяет пользователям изменять фотографии различными способами, включая изменение поз, форм, эмоций и макетов. Благодаря своей гибкости это отличный инструмент для широкого спектра работ по редактированию изображений.

Эффективность: Он работает быстро, часто требуется всего несколько секунд, чтобы изменить изображение. Эта эффективность гарантирует, что работа пользователей по редактированию будет выполнена эффективно и результативно.

Высокая точность: Такая высокая степень точности делает его надежным инструментом для приложений, требующих точных и реалистичных визуальных изменений.

Цена

Бесплатно.

DragGAN для редактирование одежды или товарного бизнеса.

По словам разработчиков, DragGAN должна работать как на видеокартах с CUDA-ядрами, так и на чипах без поддержки этой технологии. Процессоры M1 и M2, созданные Apple, тоже поддерживаются.

Создатели проекта не уточнили, насколько производительное железо понадобится для использования DragGAN. Использовать нейросеть можно как под Linux и Mac OS, так и под Windows.

Возможности DragGAN:

Обзор на разные темы редактирования:

Вот более пристальный взгляд на манипулирование ландшафтом:

Манипуляция со львом:

Редактирование лица:

Заключение:

Интересная и прорывная технология, которая несомненно упростит много работы дизайнерам, фотографам, а возможно и обычным людям.

Очень много в ней плюсов, вы сами все видите. Но есть и минус, как по мне, пока она чуть тяжеловата в установке для простых обывателей, но давайте учтем, что она вышла в полный доступ только вчера, а это значит, что нужно дать людям немного времени ее по тестировать, подправить баги и думаю через пол годика, мы можем даже ожидать ее в виде программы или приложения как и Photoshop. А может и сделают какаю-то несложную веб версию в браузере, хотя тогда ее придется очень сильно урезать.

Надеюсь данный обзор будет вам полезен, как минимум вы узнали новую нейросеть, как максимум если найдете немного времени, сможете установить ее себе и пользоваться =)

А если вам еще больше интересна тема ИИ, вы хотите знать больше и не пропускать новинки и обзоры, подпишитесь на канал в тг, мне будет приятно -

5858
26 комментариев

Примеры все старые, описание очень общее. Автор, вы сами не устанавливали, угадал?

Я вчера запустил у себя на 4090 после трех часов танцев с бубнами. Работает только с предварительно сгенерированными фотками, с новыми нельзя. Точность местами тоже под вопросом: очень часто точки бесконечно колеблются не в силах сойтись. Пейзажи вообще плохо работают. Самое эффектное на мой взгляд у автомобилей. И, конечно же, разрешение везде говно.

27
Ответить

"Работает только с предварительно сгенерированными фотками, с новыми нельзя" - ну вот как я и думал

2
Ответить

Пока не устанавливал, хотел в ближайшее время поставить + написать процесс установки по ходу.

Ответить

Комментарий недоступен

Ответить

всю магию разрушили, как обычно получается "ожидание- реальность", эх...

Ответить

Есть ощущение что кроме этой собаки, бабы и байдена из примеров она пока нихуя не умеет, где хоть одна "работа" из неё?

2
Ответить

Очень много примеров в инете и фото и видео. Все гифки по сути сняты с нее, не мной, обманывать не буду.

Ответить