Редактор vs нейросеть: как с одной и той же задачей справилась я и Notion AI. Пора искать другую работу?

Привет, это Ирина Солощенко, редактор Атвинты.

Недавно мы опубликовали на VC 20 советов по подготовке к конференциям, а потом я шутки ради попросила Notion AI написать статью на ту же тему. Я была в шоке, потому что нейронка повторила половину моих рекомендаций и неплохо показала себя в технических тестах. Результаты эксперимента описала в статье.

Речь идет об этом материале:

Статья написана в популярном формате: «Х советов, как сделать Y». К каждому пункту я добавила пояснения, примеры из практики и тру стори с форума, на котором выступала Атвинта. Публикация получилась удачная: почти 3700 просмотров, 88 лайков, обсуждение на 66 комментариев.

Тем же вечером я открыла Notion, чтобы написать задачи на следующий день, и тут приходит спонтанная идея — посмотреть, как бы с моей статьей справилась нейросеть...

К хайповому инструменту я сразу относилась холодно. Его удобно использовать для сбора информации и быстрого ресерча, но в интересных для меня задачах по контенту приладить не получалось.

Например, было бы здорово автоматизировать написание кейсов по проектам. С таким нейросеть не справится, потому что это уникальный опыт — в сети нет фактуры, которую мог бы переработать ИИ.

Еще мы ведем блог на VC. Можно потестить инструмент для статей, но я убеждена, что на UGC-площадки приходят за авторским контентом. Сгенерированный текст легко считывается, и ценности в том, что написал робот, именно в этом контексте для читателя нет. Здесь интересен личный опыт и живые кейсы от первого лица.

Максимум, чего мне удалось добиться — это базовый контент-план и заголовки для уже написанных материалов.

Некоторые коллеги с помощью нейросетей пишут пресс-релизы и посты в соцсети. Еще мы пытались выбить с ChatGPT смешной анекдот про дизайнеров, но никто вокруг не смеялся. Его уже найти нельзя, но вот нечто похожее от Notion AI.

Дизайнеры, вам смешно?

Кстати, о дизайне. Нейрокартинки для редакторских задач тоже показали не лучшим решением. Это равноценно «пустым» изображениям со стоков, которые не помогают раскрыть материал.

На VC видела статью — предприниматель рассказывал об открытии школы и добавил в текст сгенерированные картинки.

Ниже скриншот, где пишут об арендованном офисе. Абзац дополнен визуалом от ИИ, хотя речь идёт о личной истории. Читатель бы проникся сильнее, увидев настоящее фото помещения, так что изображение не делает повествование более насыщенным.

Удачно такие картинки выглядят в контексте тестирования возможностей нейросетей. Например, было интересно принять участие во флешмобе от Апреля — коллеги предложили оживить бренд и представить его в виде персонажа с помощью Midjourney или других AI-инструментов.

Вот такая Атвинта у нас получилась:

Вся такая яркая и розовая, потому что это наш фирменный цвет )

Я подумала, что в этот раз нейросетка может сработать хорошо — про конференции и выступления написано тысячи текстов, и наверняка у робота получится собрать приличные тезисы.

В моей статье перечислено 20 советов по подготовке к конференции, такой же список я попросила сделать ИИ. Недолго думая, Notion выдал рекомендации, и, внимание, ровно половина из них повторяли мои советы! Попадание 10 из 20, причем остальные пункты тоже оказались дельными.

Разберем несколько идентичных советов. В кавычках текст от Notion AI, и дальше, как схожую рекомендацию преподнесла я. Полный текст тут.

1. «Выберите тему, которая вам близка и которую вы хорошо знаете». Я написала, что выбирая тему, надо опираться на экспертизу компании, а также материал должен откликаться спикеру, чтобы выступление получилось живым и динамичным.

2. «Подготовьте речь заранее и обязательно проверьте ее на наличие ошибок и неточностей». У меня целый блок рекомендаций посвящен прогону, а про запинки отдельный совет — их надо выкинуть из плана, так как проблема скорее всего повторится и на выступлении.
   

3. «Используйте яркие примеры и истории из своей практики, чтобы проиллюстрировать свои идеи». Я пишу, что экспертиза и опыт — самое ценное, что можно дать аудитории и привожу пример, как это помогло Атвинте привлечь внимание аудитории на конференции. Мы рассказали, как попали на допрос, работая с госзаказчиком.
   

4. «Не забывайте о слушателях: попытайтесь узнать, кто они, каковы их интересы и потребности, и адаптируйте свою презентацию под них». Та же мысль изложена и у меня — говорите на языке аудитории и подбирайте примеры под их уровень подкованности.
5. «Не забудьте произнести введение, в котором вы представите себя и свою компанию, а также произнесите основные тезисы своей презентации». Я давала более точную рекомендацию — на слайде с представлением компании должна быть не только общая информация, но и «доказательства», что она разбирается в теме своего доклада.
6. «Будьте уверены в себе и не нервничайте: перед выступлением можно выполнить ряд упражнений для расслабления». При волнении я рекомендую поделиться с чувствами публикой — это поможет снять напряжение и вызовет эмпатию у аудитории.

«Надеюсь, эти рекомендации помогут вам успешно подготовиться и выступить на конференции! Удачи!» — ободряюще заканчивает список нейросеть. Черт возьми, и тут попало — я тоже закончила статью душевным: «И помните — вы умнички, у вас все получится!»

Я уже была готова признать верховенство технологий над человеком, но решила продолжить эксперимент.

В статье к каждому совету есть пояснение или примеры из практики. Здесь нейросеть показала себя немного хуже. Я попросила ее расшить несколько пунктов с помощью таких запросов: «Объясни подробнее», «Приведи пример».

В ряде случаев получилась одна вода — основной тезис растянулся на несколько предложений:

Были и удачные запросы. Notion AI смог дать понятный пример.

А здесь получилась инструкция с парой ценных замечаний.

Обычно я не прогоняю свои тексты через сервисы, но раз мы сравниваем человека и нейросеть, будет интересно провести оценку по измеримым показателям. Я отправила на проверку куски текстов: 6 рекомендаций от меня и 6 от Notion AI.

За уникальность сгенерированного материала бояться не стоит — на Text.ru Notion AI выдал 90%.

В плане изложения тоже получились достойные показатели. Главред дал статье зеленый свет, присвоив 7,6 баллов за чистоту текста и 9 баллов за читаемость.

У меня результаты более высокие:

• 8,2 балла за чистоту текста
• 9,2 балла за читаемость

Уникальность проверить не смогла, потому что на момент эксперимента материал уже был опубликован. Думаю, там было не менее 95%, потому все тексты пишу с нуля.

Судя по этим цифрам, человек пока что более совершенен, но и робот справляется неплохо.

Сравним мою работу и работу Notion AI по критериям.

Основное отличие моего текста и текста Notion AI — глубина проработки и экспертизы. Нейросеть выдает информацию по верхам — это общие советы, которые все же актуальны и применимы в жизни. Такую статью будет полезно прочитать новичку в качестве инструкции.

Мой текст выигрывает за счет подробных объяснений и конкретных примеров — эти рекомендации родились после реальных выступлений и подготовки спикеров, поэтому я смогла подчеркнуть более тонкие нюансы. Хотя теперь и эту статью проанализируют нейросети, и кто-то другой сгенерирует более интересные инсайты на ту же тему.

Еще один плюс в пользу «человеческого» текста — это живая история от первого лица. Людям интересно читать других людей, тут у меня тоже есть преимущество.

На статью я потратила полтора рабочих дня, но чтобы этот текст вообще появился, сначала нужно было набраться опыта на практике.

На создание сырого текста в Notion AI достаточно 1 часа и не нужна подготовка. В первозданном виде его выпускать нельзя, так как попадаются неудачные куски, которые нужно доработать вручную. Если не упарываться, то можно потратить на доделки 1-2 часа.

Также я бы дополнила текст кейсами компании, нашла бы подходящие фотографии и скриншоты. Еще 1-2 часа плюсом.

Итого 3-5 часов против полутора рабочих дней и редакторского опыта.

Стиль изложения от нейросеток уже можно использовать для общих статей, официальных и научных текстов. Говорить на 100% человеческим языком AI пока не научился. Да, можно попросить написать дружелюбным тоном, но читатели все равно понимают, что текст создан роботом. Поэтому для статей от лица эксперта, блогера или компании с живым открытым TOV требуется много редактуры.

Автор же сразу пишет органично под свои задачи.

Когда я увидела, что Notion AI частично выдает те же мысли, что и я, мой изначальный скепсис уменьшился. Этот кейс изменил мое отношение к нейросетям — теперь я вижу больше возможностей для использования инструмента в своей работе.

Выпускать полностью сгенерированный текст я бы не стала, а вот создать структуру, накидать тезисы или собрать информацию для вдохновения и старта работы над текстом — вполне себе.

Даже если ИИ станет еще более совершенным, диджитал-специалисты могут не бояться за свою работу. Миру будут нужны операторы нейросетей, которые умеют грамотно управлять этим инструментом.

Зафиналить хотела ссылкой на свой телеграм-канал, но вспомнила, что статья про нейросетки, и сделала подводку через Notion AI.