Как мы с Алиса АI оживили картины современного российского пейзажиста Андрея Жилова.

Работа моя ну никак не связана с ИИ и здесь, в бложике, я, можно сказать, случайно: я кандидат технических наук, репетитор по математике. Но у меня есть хобби - коллекционирование картин, я их покупаю довольно много. Ну люблю я современное искусство и считаю это поводом для инвестиций (школу прогуливала в Третьяковской галерее)! А ещё больше я люблю обработку изображений и создание интересного контента, потому что я этим немного занималась, когда училась в аспирантуре.

Сегодня мой пост посвящён исключительно двум вещам - современному российскому пейзажисту Андрею Жилову и тому, что с его картинами сделала российская разработка Алиса AI и немного не российская - inshot, которая позволила сделать видосы атмосферными - озвучить их. Я пробовала другие генераторы видео из фото (например, gptunel), они дали неудовлетворительный с точки зрения искусства результат - их нельзя настроить под себя: то лошадь с повозкой ехала не в ту сторону, то на фоне красот Нижегородской области появлялся ковбой в шляпе.

Гибкость Алиса AI позволила мне писать в сценарии определённые фразы, которые ну никак не воспринимали иностранные аналоги. Да и импрессионизм это не яркая контрастная фоточка, тут полутона и недосказанность. Алису явно тренировали на работах Моне и Мане.

Но у Алиса АI есть недостатки. При попытке усложнить запрос, например, указывая, что облака должны двигаться, мы получаем полную фигню - либо она их просто не распознаёт, либо тут зашит неполный алгоритм и разработчики специально от нас эту возможность убрали.

Ещё одним недостатком я считаю невозможность купить платную версию программы с доступом к более сложным алгоритмам, способным генерировать видео хотя бы до 5 секунд.

А теперь почему я выбрала картины именно этого художника. Он изумительно рисует пейзажи своего родного города Арзамаса и его окрестностей, но добавляет в картины стаффаж - то, чего в реальности не было, но его фантазия достраивает это, потому что так лучше для сюжета. А моя фантазия достроила звуки к анимации, которых тоже наверняка не было, когда Андрей писал картину, но мне хотелось, чтобы они были, потому что "я так вижу".

Буду рада, если вы ознакомитесь с нашим творчеством или купите какую-нибудь работу художника. Ознакомиться со всем работами художника можно по ссылке https://m.vk.com/andreyjilov. А ещё лучше оттестите картины на других алгоритмах.

Алгоритм несовершенен, и с туристом я намучилась: Алиса AI упорно снимала с него шапку или делала её другого цвета.

Я добавила лёгкий музон помимо пения птиц. Мне кажется он здесь в тему.

Вот здесь полный рандом. Лошадь начинает ехать в другую сторону (на зрителя) или появляется другая лошадь. Алиса AI понимает фразу, что другой лошади нет и что ехать надо на задний план. С западными алгоритмами появлялись ковбои.

Сложность анимации в этом случае заключалась в птицах (в одной из версий на переднем плане начинали летать чайки или жирные каплуны). Но ещё берёзы - они должны едва колыхать. Вот в этой генерации мне удалось получить приемлемый вариант.

А вот здесь максимум, что получается - синички дрожат на веточках, но не летают. Летают другие птички, которые художником были не предусмотрены. Я пробовала изменять запрос, без результатно.

Вот эта работа получилась у меня лучше всего. Но есть одно но - облака. Они двигаются слишком мало (так распознаёт алгоритм).

Вот такие вот результаты использования ИИ в анимации современной живописи в стиле импрессионизм с лёгким налётом реализма.