«Сбер» представил обновлённую версию нейросети Kandinsky для генерации изображений по текстовому запросу Статьи редакции

Она умеет также смешивать несколько картинок или создавать изображение на основе другого.

  • Kandinsky 2.1 — улучшенная версия одноимённой нейросети, которую «Сбер» представил в июне 2022 года. Это уже не первое обновление, версию Kandinsky 2.0 показали в ноябре 2022-го.
  • Воспользоваться ею можно на сайте, при помощи команды «Запусти художника» на «умных» устройствах Sber, в приложении «Салют», на платформах ML Space и Fusion Brain, а также в Telegram-боте.
  • Модель дополнительно обучили на 170 млн пар «текст — изображение», а затем дообучали на отдельно собранном датасете из 2 млн пар изображений. В Kandinsky 2.0 было 2 млрд параметров, в Kandinsky 2.1 — 3,3 млрд.
  • Нейросеть также усовершенствовали за счёт новой обученной модели автоэнкодера (автокодировщик; нейросеть, которая сначала кодирует входные данные, а потом декодирует их в другом виде — прим. vc.ru), которая используется в том числе в качестве декодера векторных представлений изображений. Это улучшило генерацию изображений в высоком разрешении — лиц и других сложных объектов.
  • Kandinsky 2.1 может создавать изображения по текстовому описанию. Также она умеет изменять их по текстовому запросу, смешивать несколько рисунков, дорисовывать недостающие части, генерировать изображения, похожие на заданное и другое. Кроме этого, она использует для генерации специальное представление картинки от CLIP — классификатора изображений от OpenAI.
  • Нейросеть понимает запросы на 101 языке — включая русский и английский. Обучали модель исследователи Sber AI и учёные из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices.
По запросу «Парусник в бушующем океане, стиль Ивана Айвазовского, масло»
По запросу «Пользователь vc.ru читает новости, аниме»
0
180 комментариев
Написать комментарий...
Дмитрий

3 раза пытался создать "Крепкие и нежные объятия", все 3 раза минут 5 ждал и оставался без картинки:(

Сбер не умеет романтику рисовать. Или там перегруз сайта...

Ответить
Развернуть ветку
Алена

Сберу не прилично романтику рисовать)

Ответить
Развернуть ветку
Дмитрий

Как так? Как можно жить без романтики? :( Не пойду тогда к ним.

Ответить
Развернуть ветку
Алена

Без нее жить плохо) но ток не сберу) ему нужна холодная голова, и отсутсвие сердца)

Ответить
Развернуть ветку
Дмитрий

А вот и нет. Вечером минут 10 думал, но изобразил наконец.
С объятиями в сбере всё хорошо. Вот с носом и щекой явный глюк.

Ответить
Развернуть ветку
Дмитрий

Подумал, что на картинки слишком... крепыши. И заказал просто нежные объятия. Лучше бы я этого не делал:( Не пойду всё же к ним.

Ответить
Развернуть ветку
Алена

И тут экзема на лице и косоглазие) про руки молчу вообще.скока человеков и скока руков)

Ответить
Развернуть ветку
Алена

Ой не вы че) а уши ,а руки.сюрреализм какой то)

Ответить
Развернуть ветку
Дмитрий

В общем я нашёл слабое место. Если всё тянет на твёрдую четвёрку (даже с плюсом), то с конечностями беда. Даже без всяких объятий.

Ответить
Развернуть ветку
Алена

Вот обьятий валом) потому что руконог многа)

Ответить
Развернуть ветку
Алена

И еще одна беда) рот то где?😶

Ответить
Развернуть ветку
Дмитрий

В аниме он, как и нос, как и глаза может пропасть в любой момент)) К этому тяжело придраться.

Без людей всё почти шикарно вышло. Парусников даже в 2 раза больше, чем я заказывал.

Ответить
Развернуть ветку
Алена

А по моему тучи получились с целлюлитом🤣

Ответить
Развернуть ветку
Дмитрий

Вот ещё на твёрдую четвёрку. Крылья самолёта приравняем к конечностям, а с ними, как уже выяснили, проблемы))

Ответить
Развернуть ветку
177 комментариев
Раскрывать всегда