Шедеврам нужны спецэффекты?

Как технологии меняют наши отношения с искусством

Нестареющую классику кинематографа реставрируют в 4K, превращают из черно-белой в цветную. Одни радуются возможности увидеть любимое кино с нового ракурса, другие спорят, не теряется ли вместе с несовершенствами часть авторского замысла. Похожий вопрос сегодня возникает и в других видах искусства. Театр все активнее работает с мультимедийными декорациями, скульптуру оцифровывают так, чтобы рассмотреть ее можно было со всех сторон, а живопись превращают в полноценные иммерсивные пространства, где зритель оказывается буквально внутри картины.

Сегодня постараемся разобраться в том, зачем искусству вообще нужны технологии и где проходит граница между новым способом увидеть знакомые произведения и спецэффектами ради спецэффектов. А сделаем мы это на примере мультимедийного выставочного проекта «Великолепный Эрмитаж», официальным партнером которого выступает Т2. Одно из самых ярких культурных событий этого лета проходит в московском креативном пространстве «Новый Манеж». Успеть на выставку можно до 29 августа.

P. S. В конце статьи расскажем, как получить на нее билеты бесплатно :)

Самое очевидное преимущество цифровых технологий – они позволяют показать то, что при обычной встрече с произведением увидеть трудно или вовсе невозможно. Хороший пример – легендарные часы Эрмитажа «Павлин», уникальный автоматон (заводной механизм, заключенный в куклу) XVIII века, дошедший до наших дней в действующем состоянии.

На выставке в «Новом Манеже» представлена их цифровая копия. С помощью технологии motion capture удалось точно воспроизвести механику оригинала. Для этого специалисты записывали каждое движение фигур, трекинговали его, а затем восстанавливали в 3D. Отдельно записали и звук работающего механизма, чтобы добиться максимального сходства.

Как вы уже поняли оцифровка музейных объектов – процесс достаточно кропотливый. На работу с одной скульптурой может уйти до двух недель непосредственно в музее, а затем еще как минимум столько же время в студии, где создают трехмерную модель и добиваются 100% совпадения. С движущимися объектами вроде «Павлина» задача еще сложнее. Неудивительно, что подготовка московской выставки заняла больше года.

Конечно, увидеть настоящего «Павлина» в движении куда интереснее. Но сделать это не так просто: во-первых, необходимо прибыть в Петербург, во-вторых, попасть в Эрмитаж в пятницу к 19:00 и, наконец, пробраться через толпу желающих посмотреть на чудо-птицу вблизи. И этот опыт, бесспорно, бесценен. Однако если такой возможности в ближайшее время не предвидится, цифровая копия дает шанс рассмотреть механизм во всех деталях и хотя бы отчасти приблизиться к впечатлению от встречи с оригиналом.

Причем исследования показывают, что цифровая версия действительно может давать схожий по силе эмоциональный отклик. В одном из экспериментов 60 участникам в музейном пространстве показывали оригинальные произведения и их высококачественные цифровые копии, одновременно отслеживая частоту и вариабельность сердечного ритма. По физиологическим показателям реакция на них оказалась сопоставимой. При этом сами зрители все же выше оценивали встречу с оригиналом.

Получается, цифровая копия вполне способна впечатлить и даже приблизить нас к опыту встречи с произведением. Но заменить чувство «я стою перед той самой вещью» ей все-таки сложнее. И, пожалуй, в этом как раз и заключается ее задача: не соревноваться с оригиналом, а предложить еще один способ его увидеть.

У иммерсивной выставки есть свой способ уединиться с искусством: надеть наушники и на время исчезнуть из общего пространства. И звук – безусловно, важная часть погружения в мир интерактивной экспозиции.

Специально для «Великолепного Эрмитажа» разработали целый аудиоспектакль. Все как в театре: с нуля написали сценарий, пригласили профессиональных актеров для озвучки и создали оригинальное музыкальное сопровождение.

Самое приятное, что выставку можно смотреть в любом порядке и не подстраиваться под повествование цифрового экскурсовода. Здесь отказались от привычных акустических систем: каждому посетителю на входе выдают наушники, которые автоматически синхронизируются с контентом в том зале, где находится зритель. Поэтому можно задержаться у понравившихся работ – рассказ подстроится сам. А если вдруг вы полиглот, можно выбрать английскую, китайскую или корейскую версию аудиогида.

Для иммерсивных выставок это не просто удобный способ провести экскурсию. Звук здесь работает наравне с изображением: помогает связать рассказ с тем, что человек видит перед собой, и сильнее погрузиться в происходящее. Согласно исследованиям, звук, привязанный к конкретному объекту или пространству, помогает лучше запоминать информацию.

С увеличением деталей все более-менее понятно: художник действительно их написал, просто зрителю не всегда удается рассмотреть их в музейном зале. Но что происходит, когда технологии начинают добавлять произведению то, чего в оригинале никогда не было, – например движение?

«Великолепный Эрмитаж» этот прием тоже использует. На выставке можно увидеть «ожившие» полотна – результат совместной работы видеохудожников и искусственного интеллекта.

И здесь технологии точно нельзя назвать нейтральным посредником. Наше внимание устроено так, что движение практически автоматически его перехватывает. Поэтому «ожившая» деталь картины почти наверняка будет замечена – и с одной стороны, такой эффект действительно может быть полезен. Это помогает обратить внимание на жест героя, направление взгляда или небольшой элемент сюжета, которые хотел донести до нас автор произведения.

Но есть и обратная сторона. Исследования с айтрекингом показывают, что даже сравнительно небольшие изменения изображения способны заметно перенаправлять наш взгляд. В одном из экспериментов исследователи меняли отдельные элементы произведений и наблюдали, как вслед за этим перераспределялось внимание зрителей. А значит, анимация тоже неизбежно предлагает нам свой сценарий просмотра: буквально подсказывает, куда смотреть в первую очередь.

Тут граница становится куда менее очевидной. Если движение помогает заметить важную деталь и после этого хочется вернуться к картине целиком – технология работает как проводник. Но если зритель запоминает только эффектно взмахнувшую руку или оживший фон, а само произведение остается где-то за ними, спецэффект начинает перетягивать одеяло на себя.

Мы решили оставить этот вопрос открытым. Предлагаем вам поделиться мнением в комментариях. А если цифровые выставки вам уже близки или, наоборот, вы пока смотрите на них с осторожностью, до 29 августа можно заглянуть в «Новый Манеж» и дать мультимедийному формату собственную оценку.

P. S. Как и обещали – рассказываем, как попасть на выставку бесплатно

Абоненты Т2 могут обменять накопленные минуты и гигабайты на билет на «Великолепный Эрмитаж». Как это сделать: