Что нужно знать об искусственном интеллекте, чтобы быть «в теме»? часть 2

Продолжим нашу серию статей об искусственном интеллекте в креативной индустрии, уже немного погрузившись в материал, и разберёмся с основными понятиями в ИИ.

Чтобы ближе познакомиться с миром нейросетей, необходимо разобраться в основных терминах, чтобы чувствовать себя уверенно и понимать, о чём идёт речь. Давайте вкратце разберём несколько ключевых понятий, чтобы сделать первые шаги в этой увлекательной области более уверенными.

«Промт» – это команда, которую мы отправляем нейросети. С помощью определённых указаний мы говорим ей, что именно нам нужно. Промт представляет собой запрос, на который нейросеть формирует ответ в виде графического представления.

«Бленд» – это функция, объединяющая два изображения с целью создания чего-то нового, находящегося посередине между ними. Это может быть смешивание изображения с промтом.

«Морф» – это функция изменения конкретного объекта на изображении или в анимации. Например, можно выделить определённую область на изображении и запросить замену этой области на другой объект, таким образом получить от нейросети модифицированное изображение.

Теперь, имея ясное представление о базовых терминах, вы можете более уверенно общаться с представителями сообщества, посвящённого нейросетям. Это первый шаг к пониманию этого захватывающего мира.

Существует множество нейронных сетей разного уровня сложности. Сосредоточимся на каждой, имеющей значение для продакшена. Будем двигаться от простой к сложной.

MidJourney — платная нейросеть для конвертации текста в изображение и изображения в изображение. Используется через Discord, что вызывает вопросы у пользователей, но разработчики обещают улучшенный интерфейс.

Плюсы:

- легко пишет промты —достаточно одного предложения для красивого изображения;

- позволяет воплощать любые фантазии в изображениях, с ловкостью соединяя несовместимые объекты и свойства.

Недостатки:

- требует выполнять большое количество попыток для точного результата, что может занять много времени;

- не всегда генерирует результат, соответствующий задаче, требует коррекций.

Итоги после 50-70 часов использования:

- приятно генерировать изображения, особенно для качественного контента в социальных сетях;

- нейросеть привлекает активное комьюнити с многочисленными блогами и внутренней галереей проекта, что полезно для поиска интересных стилей.

Stable Diffusion (SD) ранее считался универсальным идеальным инструментом для коммерческих проектов. Однако из-за увеличившегося числа конкурирующих алгоритмов он утратил свою универсальность. Проще доверить некоторые генерации другим искусственным интеллектам, чем заниматься их настройкой в SD.

SD обладает гибкостью, невозможной для большинства AI-генераторов. Он делает то же, что и другие, но с учётом всех нюансов задачи. В нём множество тонких настроек генерации. Особенно примечательна возможность добавления кастомных моделей, это позволяет обучать нейросеть под проекты с различным визуальным стилем. И, что замечательно, он полностью бесплатный.

Однако SD может быть весьма сложным и враждебным для новичков. Установка требует знания командной строки и времени на выполнение нескольких попыток из-за возможных ошибок. Это инструмент для тех, кто готов потратить много ресурса на изучение. Однако это бескомпромиссный козырь у художников, овладевших им.

Функционал SD обширен: txt2img, гибкий img2img, возможность inpaint'а и множество плагинов, включая популярный ControlNet и сложный Absynth для стилизации готового футажа.

Использование SD требует времени на изучение. Неизбежно возникают проблемы, которые нужно быстро решать. Работа с SD — это искусство компромисса между желаемым и тем, что может предложить нейросеть. Чёткая идея и хорошо описанная концепция играют ключевую роль. ControlNet и Absynth являются значительными плюсами SD, так как обеспечивают ещё больший контроль над генерацией.

ControlNet использует алгоритм Open Pose для анализа позы на изображении и преобразования её в упрощённый скелет, что позволяет стилизовать генерации, сохраняя внешний вид объекта. Он начал работать в 3D-пространстве, упрощая взаимодействие с трёхмерными моделями.

Absynth совместно с ControlNet применяется для стилизации видеофутажей, он сохраняет позу объекта и его внешний облик.

Stable Diffusion позволяет подключать разнообразные модели, натренированные на различные стили, что обогащает его функционал. Умение использовать эти модели открывает огромные возможности для креативной генерации.

Модели вносят огромный вклад в генеративные нейросети, определяя их стиль. Они обеспечивают разнообразие и уникальность в генерации и могут быть обучены на различных стилях, включая NSFW-контент.

Итак, Stable Diffusion включает в себя ControlNet для работы с позами, абсорбирует модели, позволяет использовать широкий спектр генераций от аниме до гиперреализма, что делает его мощным инструментом для различных творческих проектов.

Таким образом, ControlNet, Absynth и разнообразные модели в Stable Diffusion формируют мощный арсенал инструментов для творчества и генерации. Они открывают бесконечные возможности для художников, дизайнеров и создателей контента, позволяя оживлять идеи и трансформировать изображения. Это инновационные решения, которые продолжают эволюционировать и, несомненно, будут вдохновлять многих в будущем.

Мы приглашаем всех желающих принять участие в конференции, посвящённой этой захватывающей области. Она состоится 5 октября. Будем рады видеть вас на этом увлекательном событии!

Регистрируйтесь по ссылке: https://aisberg2023.ru/

55
Начать дискуссию