Преодоление детектора ошибок: как нейросети помогают расширить границы творчества

Творчество не знает границ, и современные технологии помогают нам расширять эти границы еще больше. В этой статье я хочу поделиться опытом создания интерактивно-звуковой постановки для детей от 5 до 9 лет. Команда проекта успешно объединила искусственный интеллект, тактильные интерфейсы и многоканальный звук, чтобы преодолеть ограничения нашего восприятия, стимулировать креативность и создать уникальный художественный опыт. Меня зовут Юрий Дидевич, я медиахудожник, автор и вдохновитель проекта «Добрая сказка».

Проект «Добрая сказка» родился на пересечении работы двух лабораторий в 2021 году:

Объединив экспертизу обеих команд, мы создали интерактивную звуковую сказку с использованием нейросети и тактильного интерфейса. Проект стал экспериментом в области симбиотического творчества в театре, где искусственный интеллект выступает в роли соавтора, а зрители влияют на развитие сюжета. Состав нашей команды:

В 1968 году нейрофизиолог Наталья Бехтерева открыла феномендетектора ошибок— механизма в мозге, реагирующего на несоответствие событий привычным моделям. Он оптимизирует деятельность мозга, создавая стереотипы поведения и защищая нас от ошибок.Однако этот механизм может ограничивать творчество, сковывая возможности генерировать новые идеи. Бехтерева предполагала, что у творческих людей детектор ошибок функционирует иначе, позволяя им выходить за рамки стереотипов.Как же преодолеть эти ограничения и стимулировать креативность без вреда для здоровья?

Мы обратились к искусственному интеллекту и нейросетям, способным генерировать оригинальные идеи, выходящие за рамки привычного мышления. НейросетьGPT-2стала нашим соавтором, создавая массив микроповествований — фрагментов текста, из которых складывается сюжет сказки.

Сбор данных: Я собрал обширный корпус классических сказок русских и зарубежных авторов, включая произведения Пушкина, Перро, братьев Гримм и других. Это обеспечило разнообразие стилей и сюжетов для обучения модели.Подготовка данных: Тексты были очищены от лишних символов и ошибок, а также отформатированы для корректной подачи в модель. Для автоматизации этого процесса использовались скрипты наPython.Настройка модели:

Обучение:

Проверка и корректировка:

Однако модель получилась не самой удачной, и в ее работе было много галлюцинаций — несоответствий и нелогичностей в сгенерированном тексте. Это придало определённый неповторимый стиль созданным текстам, добавив элемент сюрреализма и неожиданности. В контексте сказочного жанра это оказалось даже преимуществом, придавая истории особую атмосферу загадочности и волшебства. Используемые программные средства и особенности:

В результате мы получили модель, способную генерировать уникальные микроповествования с особым стилем, которые стали основой нашего проекта.

В 2018 году ученые из Гарварда под руководством Роджера Бити изучили нейронные основы креативности, выявив взаимодействие трёх нейронных сетей:

Взаимодействие с нейросетью GPT-2, особенно с её неожиданными и нестандартными генерациями, стимулирует эти процессы, помогая преодолеть ограничения детектора ошибок.Симбиотическое творчествообъединяет интуицию человека с нестандартным “мышлением” ИИ.

Я разработал тактильно-кинестетический интерфейс«Нейротафл»(от «нейро» и древнескандинавского «тафл» — «стол»). Этот интерактивный стол регистрирует действия пользователя в реальном времени.Технические детали:

Зритель, взаимодействуя с «Нейротафлом», влияет на выбор фрагментов текста, не создавая его напрямую. Это подобно«брошенному в пруд камню», меняющему направление сюжета.

Многоканальный звук — ключевое художественное средство «Доброй сказки». Он создаёт иммерсивную атмосферу, важную для всех зрителей, особенно для слепых и слабовидящих детей.Технические аспекты:

Звук не просто иллюстрирует текст, а создаёт самостоятельный эмоциональный слой, стимулируя когнитивные способности и воображение.

Комбинация «Нейротафла», уникальных текстов GPT-2 с её галлюцинациями и многоканального звука создаёт неповторимый интерактивный опыт. Зритель становится соавтором, а технология помогает преодолеть внутренние ограничения, стимулируя творчество.

Проект «Добрая сказка» демонстрирует, как нейросети и современные технологии расширяют границы творчества, преодолевая ограничения нашего восприятия. Несмотря на технические сложности и несовершенства модели, неожиданные результаты работы нейросети придали особый шарм и оригинальность нашему проекту.Творчество не знает границ, и технологии помогают нам расширять эти границы ещё больше. Давайте использовать потенциал нейросетей и инновационных интерфейсов, чтобы создавать новые формы искусства, вдохновлять друг друга и делать мир более открытым и инклюзивным для всех.

Я приглашаю всех, заинтересованных в развитии творчества и инноваций, исследовать возможности симбиотического творчества. Вместе мы можем создавать проекты, вдохновляющие и объединяющие людей по всему миру.

Юрий Дидевич, медиа-художник, исполнитель, режиссер 2024 (с)